Hadoop的运行模式

打印 上一主题 下一主题

主题 1019|帖子 1019|积分 3057

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?立即注册

x
Hadoop有三种可以运行的模式:当地运行模式、伪分布式运行模式和完全分布式运行模式
1、当地运行模式


当地运行模式无需任何守护历程,单机运行,全部的程序都运行在同一个JVM上执行
Hadoop安装后默认为当地模式,数据存储在Linux当地。在当地模式下调试MapReduce程序非常高效方便,一般该模式重要是在学习大概开发阶段调试使用,例如,演示一下官方案例
2、伪分布式运行模式


Hadoop守护历程运行在当地机器上,模仿一个小规模的集群,数据存储在HDFS集群上;换句话说,可以配置一台机器的Hadoop集群,伪分布式是完全分布式的一个特例
3、完全分布式运行模式


Hadoop守护历程运行在一个集群上,即多台机器上分别启动Hadoop集群,数据存在HDFS集群上,这种运行模式也就是我们常见的各种云,重要用于大规模的生产情况中
4、区别与总结


三种运行模式的区别比较如下:
项目当地模式伪分布式模式完全分布式模式fs.defaultFsfile:///hdfs://namenode/hdfs://namenode/机器数目11N守护历程/start-dfs.sh、start-yarn.sh等start-dfs.sh、start-yarn.sh等数据存储与输出Linux当地HDFS集群HDFS集群 分布式模式需要启动一些守护历程 ,即在使用分布式Hadoop时,要先启动一些准备程序(HDFS和YARN守护历程),然后才能使用;而在当地模式下,不需要启动这些守护历程,将使用当地文件体系和当地MapReduce运行器
更多内容参考:https://blog.csdn.net/m0_51111980/article/details/125733227


免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

科技颠覆者

论坛元老
这个人很懒什么都没写!
快速回复 返回顶部 返回列表