cicadasmile / big-data-parent

大数据体系，存储，计算，相关组件，分析引擎等

big-data

1、仓库说明

Hadoop框架，大数据组件，数据服务

2、分类文档

• Hadoop框架

  • 单服务下伪分布式集群搭建
  • 集群模式下分布式环境搭建
  • HDFS简介与Shell管理命令
  • HDFS读写机制与API详解
  • NameNode工作机制详解
  • DataNode工作机制详解
  • HDFS高可用环境配置
  • MapReduce基本原理和入门案例
  • Yarn基本结构和运行原理

• 常用组件

  • Hive环境搭建和基础用法
  • HBase集群环境搭建和应用案例
  • Flume基础用法和Kafka集成
  • Sqoop管理数据导入和导出
  • DataX同步数据和源码分析
  • Azkaban协调时序任务执行
  • ClickHouse集群，高性能查询
  • Cassandra集群，分布式NoSQL系统
  • Druid组件，数据统计分析
  • Presto组件，跨数据源分析

• 实时计算

  • Spark集群搭建与入门案例
  • Flink集群搭建与运行机制

• 数据服务

  • 数据管理流程，基础入门简介
  • 业务场景下数据采集机制和策略
  • 数据全景洞察业务概念简介
  • 数据应用场景之标签管理体系
  • 标签管理体系之业务应用
  • 用户画像分析与场景应用
  • 基于业务和平台理解数字营销概念
  • 业务数据清洗，落地实现方案
  • 数据服务基础能力之元数据管理
  • CDP客户数据管理平台体系化搭建

3、关于作者

有问题加：微信号↓	支持关注：公众号↓

4、仓库整合

仓库	描述
butte-java	Java编程文档整理，基础、架构，大数据
butte-frame	微服务组件，中间件，常用功能二次封装
butte-flyer	butte-frame二次浅封装，实践案例
butte-auto	Jenkins+Docker+K8S实现自动化持续集成
java-base	Jvm、Java基础、Web编程，JDK源码分析
model-struct	设计模式、数据结构、算法
data-manage	架构设计，实践，数据管理、工具
spring-mvc	Spring+Mvc框架基础总结
spring-boot	SpringBoot2基础，应用、配置等
middle-ware	SpringBoot2进阶，整合常用中间件
spring-cloud	Spring+Ali微服务基础组件用法
cloud-shard	SpringCloud实现分库分表实时扩容
husky-cloud	SpringCloud综合入门案例
big-data	Hadoop框架，大数据组件，数据服务
mysql-base	MySQL数据库基础、进阶总结
linux-system	Linux系统基础，环境搭建、配置