一、预先需要下载的安装包

CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel
这是Centos下的CDH软件安装包。
CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1
这里面存的是与上述CDH版本相对应的hash code。
manifest.json
以上三个包都可在该链接（https://archive.cloudera.com/cdh5/parcels/5.16.1/ ）下载，如下图中红色方框标注所示。
cloudera-manager-centos7-cm5.16.1_x86_64.tar.gz
这是cloudera-manager的安装包，可在此处（https://archive.cloudera.com/cm5/cm/5/ ）下载。
jdk-8u201-linux-x64.tar.gz
这是Java 8在linux下的了离线安装包，可在此处（https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html ）下载。虽然目前Java 10已经出来了，但还是建议大家都使用Java 8，因为它更稳定，运用也更加广泛。
mysql-connector-java-8.0.15.jar
这是MySQL的Java驱动程序包，可在此处（https://dev.mysql.com/downloads/connector/j/ ）下载，如下图所示选择tar.gz格式下载。这里下载最新的驱动包没有任何问题，因为MySQL的驱动包是向下兼容的，也就是说支持旧版本的。

以上的软件安装包下载好之后，请自行放到Centos用户目录的Downloads文件夹中，即放到 ~/Downloads 中。

二、关闭防火墙和SELINUX

在终端执行下面两条命令，首先停止防火墙服务，然后禁用防火墙。

1 2	sudo service firewalld stop sudo systemctl disable firewalld.service

其次是禁用SELINUX，执行下面的命令进行修改，修改后的结果如下图所示。

1	sudo vim /etc/selinux/config .config/

三、配置本地SSH免密钥登录

由于配置CDH至少需要三台主机，而笔者使用的是Centos虚拟机，所以只需先配置好一台主机后，直接克隆即可。那么这里就以主节点为例，详细介绍配置的过程。
1.首先是修改本主机的hostname，在终端执行下面的命令，并将hostname改为master。

1	sudo vim /etc/hostname

2.其次修改hosts，首先在终端 ip addr 查看IP地址，然后执行后面的命令修改hosts，在hosts中添加主节点和从节点的IP信息，如下图所示。图中的 branch1 和 branch2 就是从节点的hostname。

1 2	ip addr # 查看IP地址 sudo vim /etc/hosts

3.重启主机，重启是为了使修改后的hostname生效，这样才能保证生成的的SSH公钥不会出错。接着在终端依次执行下面的命令，首先是生成密钥（可使用 ls ~/.ssh/ 命令查看生成的密钥文件），然后拷贝公钥id_rsa.pub到authorized_keys，最后一定要修改authorized_keys的权限，否则在测试免密钥登录时依然要输入密码。如果执行 ssh localhost 不需要输入密码，则说明配置成功。

ssh-keygen -t rsa -P ''     # 生成密钥
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys     # 拷贝公钥
sudo chmod 600 ~/.ssh/authorized_keys       # 修改权限
ssh localhost       # 测试，或用 ssh master

四、安装JDK

1.首先要卸载系统的OpenJDK，在终端输入 java -version ，如果出现了OpenJDK的信息，说明本机上安装了OpenJDK，那么执行下面的命令进行卸载。第一条命令是卸载 java 相关的所有程序，第二条命令是卸载OpenJDK相关的依赖包。

1 2	sudo yum remove java* sudo yum autoremove

2.安装预先下载好的Java 8软件包，第一步创建Java的安装路径 /usr/java，然后解压tar.gz安装包到该目录下，最后更改文件名，便于配置环境变量。

sudo mkdir /usr/java        # Java必须要安装在这个新建的目录，否则后面cloudera-manager找不到Java
cd /usr/java
sudo tar -zxvf ~/Downloads/jdk-8u201-linux-x64.tar.gz .     # 解压到当前目录，注意别漏掉末尾的点
sudo mv jdk1.8.0_201 jdk1.8     # 改个名，便于配置环境变量

3.配置Java的环境变量，主要是这三个变量：JAVA_HOME，CLASSPATH，PATH。第一步在终端中执行 sudo vim /etc/profile 命令（这是为所有用户配置Java，如果只对当前用户配置则修改 ~/.bashrc 文件），第二步在文件的末尾添加如下的内容

# java configuration
export JAVA_HOME=/usr/java/jdk1.8
export CLASSPATH=.:$JAVA_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin

4.最后在终端中执行 java -version 命令，如果出来了如下图所示的Java版本信息，那么说明Java安装成功。

5.把Java连接MySQL所需的依赖包放到 /usr/share/java/ 目录下。如果没有该目录，则依次执行下面的命令，先创建该目录，然后把预先下载好的依赖包移动到该目录下，最后重命名即可（重命名是因为cloudera-manager启动的时候会默认加载不含有版本号的mysql-connector-java.jar依赖包）。

sudo mkdir /usr/share/java
cd /usr/share/java
mv ~/Downloads/mysql-connector-java-8.0.15.jar .
sudo mv mysql-connector-java-8.0.15.jar mysql-connector-java.jar        # 重命名

至此，如果你也是使用虚拟机来配置CDH，那么便可以进行虚拟机克隆了。将master虚拟机分别克隆为branch1和branch2，然后修改hostname对应为branch1和branch2，重启之后根据第三章介绍中的第3节重新生成密钥即可。最后，记得验证master是否能够通过SSH免密钥登录branch1和branch2，而反过来需要输入密码才能登录。

五、安装MySQL

1.MySQL只需要安装到==主节点master==上就行了，但是在安装之前需要卸载Centos自带的MariaDB数据库（MariaDB数据库是MySQL的一个分支，完全支持MySQL的所有命令和API，但是在Centos中二者不能共存）。打开终端依次执行下面的命令，首先是卸载mariadb所有相关的软件，然后清除mariadb相关的依赖。

1 2	sudo yum remove mariadb* # 卸载mariadb sudo yum auto remove # 卸载相关依赖

2.下载MySQL 5.7的源到本地，然后启用本地源，最后进行MySQL服务的安装。具体的命令如下所示，只需依次执行即可。

wget http://repo.mysql.com/mysql57-community-release-el7-9.noarch.rpm       # 下载MySQL 5.7的源
sudo yum localinstall mysql57-community-release-el7-9.noarch.rpm    # 启用本地源
yum repolist enabled | grep "mysql.*-community.*"           # 查看MySQL源是否添加成功
sudo yum install mysql-community-server         # 安装MySQL服务

3.安装好MySQL服务后，需要修改账号密码。依次执行下面的命令，首先要启动MySQL服务，然后获取生成的临时登录密码，接着登入MySQL修改root账号的密码，最后刷新权限并退出。

sudo service mysqld start       # 启动MySQL
sudo grep 'temporary password' /var/log/mysqld.log      # 获取临时登录密码
mysql -u root -p        # 登录MySQL
mysql> alter user 'root'@'localhost' identified by 'root_password';     # 修改root的密码
mysql> flush privileges;        # 刷新权限

4.再次登录MySQL，然后创建scm数据库以及scm用户，并赋予scm用户数据库的所有权限（这里的scm是Server of Cloudera Manager的缩写）。

1
2
3

mysql -u root -p
mysql> create database scm;
mysql> grant all on *.* to 'scm'@'localhost' identified by 'scm_password’ with grant option;

六、安装cloudera-manager

1.cloudera-manager是==所有节点==都需要安装的，这里建议安装在 /opt/cloudera-manager 目录下，因为 /opt 就是它启动后的默认工作目录。在终端依次执行下面的命令，首先是创建该安装目录，其次是解压预先下载好的离线安装包，解压完成后会看到如下图所示的两个子文件夹。

1
2
3

sudo mkdir /opt/cloudera-manager
cd /opt/cloudera-manager
sudo tar -zxvf ~/Downloads/cloudera-manager-centos7-cm5.16.1_x86_64.tar.gz .

2.第2步只在==主节点master==上进行配置，创建Cloudera Manager服务本地数据存储目录，在终端依次执行下面的命令即可。

1 2	sudo mkdir /var/lib/cloudera-scm-server sudo chown cloudera-scm:cloudera-scm /var/lib/cloudera-scm-server

3.在==所有节点上==进行配置，首先是创建用户cloudera-scm，由于Cloudera Manager和Managed Services默认使用cloudera-scm，所以需要创建此用户。其次是修改Agent，即修改/opt/cloudera-manager/cm-5.16.1/etc/cloudera-scm-agent/config.ini文件，将文件中的server_host修改成主节点的主机名master，修改后的结果如下图所示。

1
2

sudo useradd --system --home=/opt/cloudera-manager/cm-5.16.1/run/cloudera-scm-server --no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
sudo vim /opt/cloudera-manager/cm-5.16.1/etc/cloudera-scm-agent/config.ini

4.在==主节点master==上初始化cloudera manager，依次执行下面的命令，如果出现了如下图所示的结果，那么说明cloudera manager已经安装成功。

1 2	cd /opt/cloudera-manager/cm-5.16.1/share/cmf/schema/ sudo ./scm_prepare_database.sh mysql scm scm scm_password # 第一个scm指的是MySQL用户，第二个scm指的是数据库名

5.移动CDH安装包到相应目录，首先在==主节点master==上，将CDH安装包移至 /opt/cloudera/parcel-repo 目录下，待移动完成后，修改该目录所属的用户组和用户都是之前创建的cloudera-scm用户。

sudo mkdir /opt/cloudera/parcel-repo
cd /opt/cloudera/parcel-repo/
sudo mv ~/Downloads/CDH* .
sudo mv ~/Downloads/manifest.json .
# 下面的改名是必须的，否则配置集群的时候会重新下载CDH安装包
sudo mv CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1 CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha
sudo chown cloudera-scm:cloudera-scm /opt/cloudera/parcel-repo      # 修改权限

6.在==从节点branch1、branch2==上，移动CDH安装包到 /opt/cloudera/parcels 目录下，执行的操作与上一步完全相同，在终端执行下面的命令即可。

sudo mkdir /opt/cloudera/parcels
cd /opt/cloudera/parcels
sudo mv ~/Downloads/CDH* .
sudo mv ~/Downloads/manifest.json .
# 下面的改名是必须的，否则配置集群的时候会重新下载CDH安装包
sudo mv CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1 CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha
sudo chown cloudera-scm:cloudera-scm /opt/cloudera/parcels      # 修改权限

7.启动cloudera-manger，在==主节点master==上，必须启动cloudera-scm-server和cloudera-scm-agent，而在==从节点branch1、branch2==上，只需要启动cloudera-scm-agent即可，执行的命令如下所示。

1
2
3

cd /opt/cloudera-manager/cm-5.16.1/etc/init.d/
sudo ./cloudera-scm-server start    # 仅master启动
sudo ./cloudera-scm-agent start     # master, branch 1-2 均启动

七、CDH集群的配置

1.cloudera-manager的启动需要花3-6分钟的时间，启动完成后在浏览器中打开 http://localhost:7180/ 网址（如果是Centos服务器，则访问 http://公网IP:7180/ 即可，不过服务器注意要开放7180端口），之后会出现cloudera-manager的登录界面，初始的用户名和密码都是admin，登录成功后如下图所示，选择要安装的版本。