酷代码 AI
菜单
服务商
DeepSeek字节豆包讯飞星火
更多选项

Python 代码实现静态网页轻松爬取,附使用提示!

以下是一个简单的 Python 爬虫代码示例,用于爬取静态网页的内容: ```python import requests def crawl_website(url): try: response = requests.get(url) response.raise_for_status() # 如果请求不成功(状态码不是 200),抛出异常 return response.text except requests.exceptions.RequestException as e: print(f"请求出错: {e}") # 要爬取的网页 URL url = "https://example.com" # 请将这里替换为你想要爬取的实际 URL # 调用函数进行爬取 web_content = crawl_website(url) print(web_content) ``` 在上述代码中,我们定义了一个名为 `crawl_website` 的函数,它使用 `requests` 库发送 `GET` 请求获取指定 URL 的内容。如果请求过程中出现错误,会打印错误信息。 在爬取网页时,请确保您的行为符合网站的使用条款和法律法规。某些网站可能禁止爬虫或有特定的访问限制。 ######[AI写代码神器 | 237点数解答 | 2024-09-29 08:22:54]

相关提问
本站限时免费提问中
实用工具查看更多
Linux在线手册 [开发类]
Jquery在线手册 [开发类]
今日油价 [生活类]
图片互转base64 [开发类]
时间转换器 [开发类]