巧用 grequests.map 控制并发数量，实现异步 HTTP 请求高效处理

grequests库是基于gevent对requests库的封装，提供了异步HTTP请求的功能。在使用grequests.map并发发送请求时，可以通过参数size来控制并发数量。 示例代码如下： ```python import grequests # 创建请求列表 urls = ['http://www.example1.com', 'http://www.example2.com', 'http://www.example3.com', 'http://www.example4.com', 'http://www.example5.com'] # 设置并发数量为3 rs = (grequests.get(u) for u in urls) results = grequests.map(rs, size=3) for result in results: print(result.text) ``` 在上述代码中，`size=3`表示最大并发数为3，grequests.map会一次性发起3个请求，当任意一个请求完成时，才会发起下一个请求，直到所有请求都完成。 ######[AI写代码神器 | 185点数解答 | 2024-01-22 14:49:48]