1.自定义安装JDK,并配置环境变量。
2.在安装Cloudera Manager时,必须有指定的JDK,一般版本是在http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.10.1/RPMS/x86_64/目录下。
3.在图形化界面安装CDH时,不选择安装JDK。
4.安装成功之后,修改所有主机配置中的Java Home Directory。【可以修改Cloudera Manager之外的所有节点JDK版本】
5.Cloudera Manager节点JDK,修改/etc/default/cloudera-scm-agent /etc/default/cloudera-scm-server 文件,添加Java Home Directory,。
export JAVA_HOME=/opt/jdk1.8.0_111。
Cloudera Hadoop是Cloudera发行的Hadoop版本,由于Hadoop深受客户欢迎,许多公司都推出了各自版本的Hadoop,也有一些公司则围绕Hadoop开发产品。在Hadoop生态系统中,规模最大、知名度最高的公司则是Cloudera。
截至目前为止,CDH共有5个版本,其中,前两个已经不再更新,最近的两个,分别是CDH4在Apache Hadoop 2.0.0版本基础上演化而来的),CDH5,它们每隔一段时间便会更新一次。
扩展资料:
Cloudera Hadoop版本介绍:
hadoop是一个开源项目,所以很多公司在这个基础进行商业化,Cloudera对hadoop做了相应的改变。Cloudera公司的发行版,我们将该版本称为CDH(Cloudera Distribution Hadoop)。
截至目前为止,CDH共有5个版本,其中,前两个已经不再更新,最近的两个,分别是CDH4在Apache Hadoop 2.0.0版本基础上演化而来的),CDH5,它们每隔一段时间便会更新一次。
Cloudera以patch level划分小版本,比如patch level为923.142表示在原生态Apache Hadoop 0.20.2基础上添加了1065个patch(这些patch是各个公司或者个人贡献的,在Hadoop jira上均有记录),其中923个是最后一个beta版本添加的patch,而142个是稳定版发行后新添加的patch。
由此可见,patch level越高,功能越完备且解决的bug越多。Cloudera版本层次更加清晰,且它提供了适用于各种操作系统的Hadoop安装包,可直接使用apt-get或者yum命令进行安装,更加省事。
参考资料来源:百度百科-Cloudera。
cdh kerberos使用root用户提交任务。
采用root用户操作前置条件 。
1.CDH集群运行正常
2.集群已启用Kerberos且正常使用。