代理库更新很慢,程序老是提示no proxy,如何设置参数爬抓更新间隔短一点?
vql8enpb1#
在调度里面,
proxy_pool/Schedule/ProxyRefreshSchedule.py
Line 100 in ac05bcb
| | scheduler.add_job(fetchAll, 'interval', minutes=10, id="fetch_proxy") |
目前默认是10分钟
1条答案
按热度按时间vql8enpb1#
代理库更新很慢,程序老是提示no proxy,如何设置参数爬抓更新间隔短一点?
在调度里面,
proxy_pool/Schedule/ProxyRefreshSchedule.py
Line 100 in ac05bcb
| | scheduler.add_job(fetchAll, 'interval', minutes=10, id="fetch_proxy") |
目前默认是10分钟