tkitScrapyMiddleware
tkitScrapyMiddleware
安装
pip install tkitScrapyMiddleware使用
设置自动获取代理，使用
在settings设置
DOWNLOADER_MIDDLEWARES = {
#默认方法
'tkitScrapyMiddleware.proxy.RandomProxyMiddleware': 610,
}
POOL_PROXY = "http://192.168.1.18:5010"tkitScrapyMiddleware
tkitScrapyMiddleware
pip install tkitScrapyMiddleware设置自动获取代理，使用
在settings设置
DOWNLOADER_MIDDLEWARES = {
#默认方法
'tkitScrapyMiddleware.proxy.RandomProxyMiddleware': 610,
}
POOL_PROXY = "http://192.168.1.18:5010"tkitScrapyMiddleware
GNU General Public License v3.0