首页技术文章正文

Hadoop三种运行模式的适用场景【大数据面试】

更新时间:2022年12月22日 15时31分51秒 来源:黑马程序员

1577370495235_学IT就到黑马程序员.gif


Hadoop作为分布式计算平台,能够处理海量数据,并对数据进行分析。它有运行模式:独立(本地)运行模式,伪分布式模式,和完全分布式模式,这三种模式的适用场景如下:

(1)独立(本地)运行模式:安装简单,几乎不用做任何配置,但仅限于调试用途。无需任何守护进程,所有的程序都运行在同一个JVM上执行。在独立模式下调试MR程序非常高效方便。所以一般该模式主要是在学习或者开发阶段调试使用 。

(2)伪分布式模式:在单节点上同时启动namenode、datanode、jobtracker、tasktracker、secondarynamenode等5个进程,模拟分布式运行的各个节点。Hadoop守护进程运行在本地机器上,模拟一个小规模的集群,换句话说,可以配置一台机器的Hadoop集群,伪分布式是完全分布式的一个特例。

(3)完全分布式模式:正常的Hadoop集群,由多个各司其职的节点构成。Hadoop守护进程运行在一个集群上。

注意:开发环境,使用独立模式;测试环境,可以使用伪分布式模式;线上生产环境,使用完全分布式模式。

大数据hadoop面经.gif



猜你喜欢:

hadoop yarn中常见问题以及解决方案

Hadoop集群如何通过UI界面实现管理和查看

怎样在hadoop虚拟机上安装和配置JDK?

黑马程序员大数据开发培训

分享到:
在线咨询 我要报名
和我们在线交谈!