- Hadoop大数据技术开发实战
- 张伟洋
- 882字
- 2025-02-23 10:46:09
3.4.2 无密钥登录操作步骤
Hadoop集群需要确保在每一个节点上都能无密钥登录到其他节点。
本例在第2章的基础上继续使用hadoop用户进行操作,使用三个节点(centos01、centos02和centos03)配置无密钥登录,无密钥登录架构如图3-7所示。

图3-7 无密钥登录架构
具体配置方式有两种:手动复制和命令复制,下面分别进行讲解。
1. 手动复制方式
(1)将各节点的公钥加入到同一个授权文件中。
1)在centos01节点中,生成密钥文件,并将公钥信息加入到授权文件中,所需命令如下:

其中.ssh文件夹为系统隐藏文件夹,若无此目录,可以执行一次ssh localhost命令,则会生成该目录。或者直接手动创建该目录。
2)在centos02节点中,生成密钥文件,并将公钥文件远程复制到centos01节点的相同目录,且重命名为id_rsa.pub.centos02,相关命令如下:

3)在centos03节点中,执行与centos02相同的操作(生成密钥文件,并将公钥文件远程复制到centos01节点的相同目录,且重命名为id_rsa.pub.centos03),相关命令如下:

4)回到centos01节点,将centos02和centos03节点的密钥文件信息都加入到授权文件中,相关命令如下:

(2)复制授权文件到各个节点。
将centos01节点中的授权文件远程复制到其他节点的相同目录,命令如下:

(3)测试无密钥登录。
接下来可以使用ssh命令测试从一个节点无密钥登录到另一个节点。例如,从centos01节点无密钥登录到centos02节点,命令如下:

成功登录后,记得执行exit命令退出登录。
如果登录失败,可能的原因是授权文件authorized_keys权限分配问题,分别在每个节点上执行以下命令,更改文件权限:

到此,各节点的SSH无密钥登录就配置完成了。
2. 命令复制方式
ssh-copy-id命令可以把本地主机的公钥复制并追加到远程主机的authorized_keys文件中,该命令也会给远程主机的用户主目录(home)、~/.ssh目录和~/.ssh/authorized_keys设置合适的权限。
(1)分别在三个节点中执行以下命令,生成密钥文件:

(2)分别在三个节点中执行以下命令,将公钥信息复制并追加到对方节点的授权文件authorized_keys中:

命令执行过程中需要输入当前用户的密码。
(3)测试SSH无密钥登录。
仍然使用ssh命令进行测试登录即可。具体见本节手动复制方式的步骤(3)。
注意
如果不配置无密钥登录,Hadoop集群也是可以正常运行的,只是每次启动Hadoop都要输入密码以登录到每台计算机的DataNode(存储数据的节点)上,而一般的Hadoop集群动辄数百甚至上千台计算机,因此配置SSH无密钥登录是必要的。