ppwillbe's starred repositories
Douban-Explorer
豆瓣探索者这个作品是依托豆瓣这个平台制作的一个数据分析系统。本作品使用Python的BeautifulSoup库爬取了电影、图书、音乐这三个方向的数据存入MongoDB的NoSQL数据库，使用Pyecharts库得到了诸如单部电影评分分布的一维数据图、评分与评论数关系的二维数据图甚至于多维数据图，并结合Django框架、前后端分离技术进行展示。 本系统还有搜索功能，可以具体查询某一部电影、音乐或图书的数据分析，同时当搜索到一个数据库中不存在的数据时，后台将自动进行在线爬取存入数据库，即我们将数据搜集的过程也加入到了网站上，从而实现了数据收集、预处理、存储、处理与分析、可视化的集成系统。
recommenderSystemBasedOnSpark
基于spark的推荐系统的实现（电影推荐系统）
BiSheServer
本系统是我的毕业设计项目，题目为“基于用户画像的电影推荐系统的设计与实现”。主要是以Django作为基础框架，采用MTV模式，数据库使用MongoDB、MySQL和Redis，以从豆瓣平台爬取的电影数据作为基础数据源，主要基于用户的基本信息和使用操作记录等行为信息来开发用户标签，并使用Hadoop、Spark大数据组件进行分析和处理的推荐系统。管理系统使用的是Django自带的管理系统，并使用simpleui进行了美化。