Firestorm is a Remote Shuffle Service, and provides the capability for Apache Spark and Apache Hadoop MapReduce applications to store shuffle data on remote servers
Geek Repo:Geek Repo
Github PK Tool:Github PK Tool
fuhaiq opened this issue 2 years ago · comments
我看到需要配置一个HADOOP_HOME环境变量,Firestorm只能在hadoop环境下部署么?有没有配置可以关掉?
目前是依赖HADOOP环境,没有一个配置开关可以关掉。
@fuhaiq 理论上使用 Memory_Local模式的话, 可以不需要Hadoop环境,但这块目前有待优化并剥离
谢谢大家的回答