文本描述
1.Hadoop集群可以运行的3个模式分别是什么, 都有哪些注意点?
单机(本地)模式:这种模式在一台单机上运行,没有分布式文件系统,而是直接读写本地操作系统的文件系统。在单机模式(standalone)中不会存在守护进程,所有东西都运行在一个JVM上。这里同样没有DFS,使用的是本地文件系统。单机模式适用于开发过程中运行MapReduce程序,这也是最少使用的一个模式。
伪分布式模式:也是在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode),伪分布式(Pseudo)适用于开发和测试环境,在这个模式中,所有守护进程都在同一台机器上运行。
全分布式模式:全分布模式通常被用于生产环境,使用N台主机组成一个Hadoop集群,Hadoop守护进程运行在每台主机之上。这里会存在Namenode运行的主机,Datanode运行的主机,以及task?tracker运行的主机。在分布式环境下,主节点和从节点会分开。
2.??VM是否可以称为Pseudo?
不是,两个事物,同时Pseudo只针对Hadoop。
3.??当Job?Tracker宕掉时,Namenode会发生什么?
当Job?Tracker失败时,集群仍然可以正常工作,只要Namenode没问题。
4.??是客户端还是Namenode决定输入的分片?
这并不是客户端决定的,在配置文件中以及决定分片细则。
5.??是否可以在Windows上运行Hadoop?
可以,但是最好不要这么做,Red?Hat?Linux或者是Ubuntu才是Hadoop的最佳操作系统。
6.??Hadoop是否遵循UNIX模式?
是的,在UNIX用例下,Hadoop还拥有“conf”目录。
7.??Hadoop安装在什么目录下?
Cloudera和Apache使用相同的目录结构,Hadoop被安装在cd/usr/lib/hadoop-0.20/。
8.??Namenode、Job?tracker和task?tracker的端口号是?
Namenode,70;Job?tracker,30;Task?tracker,60。
9.??Hadoop的核心配置是什么?
Hadoop的核心配置通过两个xml文件来完成:1,hadoop-default.xml;2,hadoop-site.xml。这些文件都使用xml格式,因此每个xml中都有一些属性,包括名称和值,但是当下这些文件都已不复存在。
10.??那当下又该如何配置?
Hadoop现在拥有3个配置文件:1,core-site.xml;2,hdfs-site.xml;3,mapred-site.xml。这些文件都保存在conf/子目录下。
11.??RAM的溢出因子