xiaosimao / weibo_spider

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

**新浪微博爬虫 **

基础环境:

mongodb
scrapy

操作系统:

ubuntu 16

可爬取信息:

微博博文信息
微博评论信息
微博博主也是可以,只是我没有写

注意点: 一般本机测试的时候,可以跑那么一会会,但是后面会被封ip,所以最好还是搞个代理比较好, 不知道哪家代理靠谱,为什么不自己搞个呢? 见: http://cuiqingcai.com/4596.html

更多代码解释, 请移步: http://cuiqingcai.com/4465.html

同时欢迎加我QQ:549411552 交流拍砖.

About


Languages

Language:Python 100.0%