H-tao / Python-

记录Python学习

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

Python-


LagouSpider-master

项目说明:

爬取某招聘网站的200+种岗位 全网 招聘数据

技术:

selenium+多进程+多线程+增量式+随机定时+logging

运行(需要安装Chrome+selenium环境):

  1. 配置settings.py文件:配置MySQL数据库和Redis数据库+selenium路径
  2. 运行项目:python all.py

JobRecruit_website

仿线上信息招聘网站,数据源来源于线上招聘网站(项目仍在完善~

项目说明:

招聘信息网站,后台包括200+种岗位200K+条招聘数据,数据量达**300M+ **

  • 前端:JavaScript实现导航栏与分页栏、使用JavaScript和Ajax动态获取更新岗位数据和图表
  • 后端:分页查询MySQL数据、使用logging记录访问日志、使用Pandas分析岗位数据、Matplotlib生成岗位图表、使用Django的验证系统实现登录/注册/注销功能、使用Celery处理发送激活邮件等延时操作

以上项目仅供个人学习使用,如有侵权请告知删除。

About

记录Python学习


Languages

Language:Jupyter Notebook 89.0%Language:JavaScript 4.3%Language:HTML 3.9%Language:TeX 1.7%Language:Python 0.8%Language:CSS 0.3%