wx-chevalier / ms-data-fabric

Data Fabric, OLAP Browser & BI tools, building APIs visually. APIs for cross-database querying, flow-based business process management etc.

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

Data Fabric

Data Fabric 是多层次的可视化接口生成与业务逻辑编排系统,旨在加快简单重复开发的效率;其构建理念类似于 Legoable,都是希望将部分代码层的工作外化给可视化配置,让更多的业务人员参与进来,让业务语言与代码相统一。

Features | 特征

跨数据库查询接口

提供基于配置的、半自动化的、可供非技术人员使用的、交互友好的、支持权限与密钥配置的跨异构数据存储的动态接口生成服务。其逻辑很类似于 ETL 的过程,包括了数据的输入、抽取、转换、合并、输出等等操作,不过 Data Fabric 同时需要考虑到提供可供访问的接口、对于 JSON/XML 格式的支持、对于接口权限控制的支持等等。

我们面临的最终提交给消费者使用的 API 往往是由多个表、多个库,乃至于多个异构存储数据合并转换而来,借鉴自然语言处理或者编译原理的概念,我们可以选择自顶向下的来递归划分处理 API,也可以自底向上的进行合并处理。本文中笔者介绍的过程会以自底向上的合并为主,即

简单的接口 FaaS 编排

构建 SOP 处理流

构建决策流程

构建算法模型

About

<<<<<<< HEAD

Motivation & Credits

Copyright

License: CC BY-NC-SA 4.0

笔者所有文章遵循知识共享 署名-非商业性使用-禁止演绎 4.0 国际许可协议,欢迎转载,尊重版权。

default

Home & More | 延伸阅读

技术视野

您可以通过以下导航来在 Gitbook 中阅读笔者的系列文章,涵盖了技术资料归纳、编程语言与理论、Web 与大前端、服务端开发与基础架构、云计算与大数据、数据科学与人工智能、产品设计等多个领域:

此外,你还可前往 xCompass 交互式地检索、查找需要的文章/链接/书籍/课程;或者在 MATRIX 文章与代码索引矩阵中查看文章与项目源代码等更详细的目录导航信息。最后,你也可以关注微信公众号:『某熊的技术之路』以获取最新资讯。

Motivation & Credits

  • OpenWhisk #Project#: Apache OpenWhisk Runtime NodeJS supports Apache OpenWhisk functions written in JavaScript for NodeJS

  • Cube.js: A complete open source analytics solution: visualization agnostic frontend SDKs and API backed by analytical server infrastructure.

925be2fcf5cc42416a9717711b8d80fd5aa28559

About

Data Fabric, OLAP Browser & BI tools, building APIs visually. APIs for cross-database querying, flow-based business process management etc.


Languages

Language:Java 42.5%Language:JavaScript 41.8%Language:TypeScript 12.6%Language:SCSS 1.4%Language:Shell 0.7%Language:Mustache 0.6%Language:HTML 0.2%Language:PLpgSQL 0.2%Language:Dockerfile 0.1%