rongxin5635179 / spider_news_finance

Scrapy Spider for SinaFinance, FTChinese, CFI.

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

##README


  • 当前的settings.py经过调试相对比较稳定,不要轻易修改!!!
  • FTChinese由于网站本身不太稳定,当Parse News ERROR比较多时,可以开VPN,效果比较好
  • 当前,所有爬虫增量抓取的开关已经打开,如果需要,可以手动关闭,/spiders/NewsFinance***.py文件的FLAG_INTERRUPT = True常量
  • 如果有问题,可以QQ留言或者发邮件沟通hailong0707@gmail.com

About

Scrapy Spider for SinaFinance, FTChinese, CFI.


Languages

Language:Python 100.0%