Hadoop的运行模式
Hadoop有三种可以运行的模式:当地运行模式、伪分布式运行模式和完全分布式运行模式1、当地运行模式
当地运行模式无需任何守护历程,单机运行,全部的程序都运行在同一个JVM上执行
Hadoop安装后默认为当地模式,数据存储在Linux当地。在当地模式下调试MapReduce程序非常高效方便,一般该模式重要是在学习大概开发阶段调试使用,例如,演示一下官方案例
2、伪分布式运行模式
Hadoop守护历程运行在当地机器上,模仿一个小规模的集群,数据存储在HDFS集群上;换句话说,可以配置一台机器的Hadoop集群,伪分布式是完全分布式的一个特例
3、完全分布式运行模式
Hadoop守护历程运行在一个集群上,即多台机器上分别启动Hadoop集群,数据存在HDFS集群上,这种运行模式也就是我们常见的各种云,重要用于大规模的生产情况中
4、区别与总结
三种运行模式的区别比较如下:
项目当地模式伪分布式模式完全分布式模式fs.defaultFsfile:///hdfs://namenode/hdfs://namenode/机器数目11N守护历程/start-dfs.sh、start-yarn.sh等start-dfs.sh、start-yarn.sh等数据存储与输出Linux当地HDFS集群HDFS集群 分布式模式需要启动一些守护历程 ,即在使用分布式Hadoop时,要先启动一些准备程序(HDFS和YARN守护历程),然后才能使用;而在当地模式下,不需要启动这些守护历程,将使用当地文件体系和当地MapReduce运行器
更多内容参考:https://blog.csdn.net/m0_51111980/article/details/125733227
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页:
[1]