bailuWX / big-data-etl

etl日志收集分析工具

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

bigdata-file-collect

大数据文本文件分析收集工具

可用于文本文件信息的收集,典型的应用场景是日志文件分析收集。

  1. 多线程下载服务器集群内的文本(如日志),保存到服务器缓存空间
  2. nio逐行读取文件,根据关键字表的定义来归档入库到新的表
  3. 配置文件修改定时任务参数

About

etl日志收集分析工具


Languages

Language:Java 99.7%Language:Shell 0.3%