个人简介
宁为玉碎，不为瓦全
文章存档
我的朋友
发布时间：2023-03-21 16:23:58
如何使用python使用aiohttp 通过设置代理ip，多线程并发采集......
阅读(281) | 评论(0) | 转发(0)
发布时间：2023-03-14 16:46:53
如何解决爬虫程序添加了代理依然无法访问的问题......
阅读(286) | 评论(0) | 转发(0)
发布时间：2023-03-02 17:32:36
讨论了如何爬取药监局数据的难点，以及应对这些难点的方法。主要难点是网站设置的反爬虫机制（如ip屏蔽、频率限制）、安全协议（如验证码）和数据质量问题。为了应对这些难点，可以使用scrapy和python3等技术工具，实现ip自动切换、数据清洗和处理等功能，以确保数据的完整性和准确性。......
阅读(171) | 评论(0) | 转发(0)