TianLangStudio / AirDataX

基于淘宝早期开源DataX二次开发 添加DataX On Yarn 功能

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

AirDataX

基于淘宝早期开源的DataX二次开发

  • 根据实际需要增加PostgreSql读写插件、Hadoop2.0支持等
  • 通过添加Thrift方便 Python客户端调用
  • 抽取公共配置到模板 方便任务配置
  • 增加DataX On Yarn 提高资源利用率、并行任务执行速度 DataX On Yarn DataX Local And Yarn

About

基于淘宝早期开源DataX二次开发 添加DataX On Yarn 功能


Languages

Language:HTML 55.0%Language:C 16.4%Language:C++ 14.0%Language:Java 13.0%Language:Scala 0.9%Language:Python 0.6%Language:CSS 0.0%Language:Thrift 0.0%Language:Makefile 0.0%