zhaoguolee / News_Spark

基于Spark2.x新闻网大数据实时分析可视化系统项目

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

基于Spark2.x新闻网大数据实时分析可视化系统项目

一、业务需求分析

  • 捕获用户浏览日志信息
  • 实时分析前20名流量最高的新闻话题
  • 实时统计当前线上已曝光的新闻话题
  • 统计哪个时段用户浏览量最高

二、系统架构图设计

image

三、系统数据流程设计

image

四、集群资源规划设计

image

五、步骤详解

具体请参考博客

About

基于Spark2.x新闻网大数据实时分析可视化系统项目


Languages

Language:Scala 45.2%Language:Java 33.8%Language:HTML 21.0%