网友 Uscnc 说:
火车头虽然简单,但好累啊
数据处理好烦 没耐性
还有300多个网站要采集
网友 g9rt.com 说:
采集什么啊,采集这么多站
网友 委员 说:
还是python 好使,300多个目标站,开10个线程爬虫放出去,全爬完
网友 kubest 说:
委员 发表于 2022-6-3 23:02
还是python 好使,300多个目标站,开10个线程爬虫放出去,全爬完
网友 hanweizhe 说:
还是python 好使,300多个目标站,开10个线程爬虫放出去,全爬完
网友 hanweizhe 说:
计划任务
网友 minota 说:
python协程爬可能更快,再快那就协程发送请求 多进程做正则匹配之类,好像称为分布式爬虫
网友 Uscnc 说: