armysheng / tech163newsSpider

爬取网易新闻,存储到本地的mongodb

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

#tech163newsSpiders

爬取网易新闻,存储到本地的mongodb

##依赖服务

1.MongoDB

##依赖包

  1. pip install scrapy
  2. pip install pybloom
  3. pip install pymongo

##运行

进入tech163目录 执行scrapy crawl news

##详细分析

参见博文

About

爬取网易新闻,存储到本地的mongodb


Languages

Language:Python 100.0%