hujian92 / openData

基于python对国内政府开放数据平台数据质量分析

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

  • 重构...

基于python爬虫对政府开放数据平台数据质量分析



begin

  • 利用爬虫快速的获取数据
  • 对数据进行整理
    • 对其中的空值标记并填充null值,对不规格的日期数据进行格式化并一通统计
  • 对数据进行质量分析
    • 统计分析脏数据的占比
  • 将分析结果展示
    • 利用echart.js将分析结果自动化展示

初始界面  . 展示抓取过程
 抓取数据  . 展示数据集
展示数据集  展示数据集 展示数据集  . 展示分析结果
展示可视化 .....开发中


 待更新...

About

基于python对国内政府开放数据平台数据质量分析


Languages

Language:HTML 62.2%Language:JavaScript 32.5%Language:Python 3.3%Language:CSS 1.8%Language:Shell 0.2%