metanoia1989 / scrapyStudy

学习 scrapy 爬虫框架

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

Scrapy 框架学习

想抓取一些色情网站的图片和信息,存放在本地,好学习探讨性。

{
    "_id":{"$oid":"5d4bc1b231b979ea3616f6c4"},
    "title":"听警察侃大山",
    "introduction":"\n一个已经众所周知的事实是,社会矛盾的症结之一是超级地租,是靠不断推高的房价维持高增长的机制。这制造了一批受益者。",
    "content":"",
    "author":"李北方 主笔",
    "source":"南风窗",
    "date":"2016-02-28",
    "period":"2016年5期",
    "category_id":{"$oid":"5d4a32be394b0d8f3fd05816"}
}

About

学习 scrapy 爬虫框架


Languages

Language:Python 100.0%