Hadoop Submarine
时间: 2023-12-15 11:06:31 浏览: 27
Hadoop Submarine是一个能够在Apache Hadoop 3.1+版本上运行的工具。它可以通过安装Apache Hadoop 3.1的YARN来使用完整的Submarine功能和服务。经过实际使用,我们发现Apache Hadoop 3.1的YARN可以完全支持Hadoop 2.7+以上版本的HDFS系统。同时,Hadoop Submarine还可以与Zeppelin结合使用,解决数据和算法问题,并解决Azkaban的作业调度问题。通过使用Zeppelin、Hadoop Submarine和Azkaban这三个工具集,您可以获得一个零软件成本、开放源码的深度学习开发平台。\[1\]\[2\]如果您需要在多台机器上同步配置文件,可以使用命令"cd /home/commons/hadoop/etc/hadoop"进入配置文件目录,然后使用"scp *"命令将配置文件拷贝到其他两台机器上。启动和停止Hadoop的具体操作可以参考相关文档。\[3\]
#### 引用[.reference_title]
- *1* *2* [Submarine:在 Apache Hadoop 中运行深度学习框架](https://blog.csdn.net/cpongo2/article/details/89017275)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item]
- *3* [一文理解Hadoop分布式存储和计算框架入门基础](https://blog.csdn.net/qq_20949471/article/details/126392680)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item]
[ .reference_list ]