Python 实现网站数据爬取并存储到 CSV：示例代码及 3 点改进建议

以下是一个使用 Python 爬取网站数据并存储到 CSV 文件的简单示例代码： ```python import requests import csv from bs4 import BeautifulSoup def scrape_and_store(url): response = requests.get(url) soup = BeautifulSoup(response.text, 'html.parser') # 这里假设要提取网站中的所有段落文本 paragraphs = soup.find_all('p') with open('data.csv', 'w', newline='') as csvfile: writer = csv.writer(csvfile) for p in paragraphs: writer.writerow([p.text]) # 请将下面的 URL 替换为您要爬取的实际网址 scrape_and_store('https://example.com') ``` 以下是三个改进建议： 1. 增加错误处理机制，例如处理网络请求失败或无法找到所需元素的情况。 2. 可以添加更多的提取逻辑，以满足更复杂的数据提取需求。 3. 考虑对提取到的数据进行清洗和预处理，例如去除特殊字符或转换数据格式。 ######[AI写代码神器 | 237点数解答 | 2024-12-28 14:26:13]