shoumu / x-deeplearning

An industrial deep learning framework for high-dimension sparse data

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

概述

X-DeepLearning(简称XDL)是面向高维稀疏数据场景(如广告/推荐/搜索等)深度优化的一整套解决方案。XDL1.2版本已于近期发布,主要特性包括:

  • 针对大batch/低并发场景的性能优化:在此类场景下性能提升50-100%
  • 存储及通信优化:参数无需人工干预自动全局分配,请求合并,彻底消除ps的计算/存储/通信热点
  • 完整的流式训练特性:包括特征准入,特征淘汰,模型增量导出,特征counting统计等
  • Fix了若干1.0中的小bugs

完整介绍请参考XDL1.2 release note

1. XDL训练引擎

2. XDL算法解决方案

3. Blaze预估引擎

4. 深度树匹配模型 TDM 匹配召回引擎

联系我们

FAQ

常见问题

License

XDL使用Apache-2.0许可

致谢

XDL项目由阿里妈妈事业部荣誉出品,核心贡献团队包括阿里妈妈工程平台、算法平台、定向广告技术团队、搜索广告技术团队等,同时XDL项目也得到了阿里巴巴计算平台事业部(特别是PAI团队)的帮助。

About

An industrial deep learning framework for high-dimension sparse data

License:Apache License 2.0


Languages

Language:PureBasic 53.1%Language:C++ 31.6%Language:Python 9.8%Language:Cuda 1.2%Language:Shell 1.0%Language:Java 0.9%Language:CMake 0.8%Language:Batchfile 0.5%Language:JavaScript 0.4%Language:HTML 0.3%Language:C 0.3%Language:CSS 0.1%Language:TeX 0.1%Language:Dockerfile 0.0%Language:XSLT 0.0%