leo007008 / DbMeiziScrapy

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

爬虫使用方法

1.确定你安装了scrapy这个python库并且能正确运行。

2.运行爬虫之前请先打开mongodb,并且确定mongodb的端口是27017

3.进入爬虫目录,运行scrapy crawl dbmeiziSpider

4.需要爬取两千多个网页,所以可能需要二十分钟左右。

About


Languages

Language:Python 100.0%