Tencent / Firestorm

Firestorm is a Remote Shuffle Service, and provides the capability for Apache Spark and Apache Hadoop MapReduce applications to store shuffle data on remote servers

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

[QUESTION] 依赖Hadoop环境?

fuhaiq opened this issue · comments

我看到需要配置一个HADOOP_HOME环境变量,Firestorm只能在hadoop环境下部署么?有没有配置可以关掉?

目前是依赖HADOOP环境,没有一个配置开关可以关掉。

commented

@fuhaiq 理论上使用 Memory_Local模式的话, 可以不需要Hadoop环境,但这块目前有待优化并剥离

谢谢大家的回答