大数据运维技术第3章 平台的基础环境配置课件.pptxVIP

集群网络连接;3.1.1 实验环境下大数据Hadoop平台集群网络;对于实验环境下Hadoop集群网络需考虑地址规划、连通性。由于实验环境下数据负载较小、可靠性要求不高，链路一般采用单链路连接。IP地址规划在同一网络中，一般设定地址为（192.168.1.0/24）网段。具体IP地址在Centos7中配置。集群网络配置中会详细介绍IP地址配置。;;3.2 SSH无密码登录;3.2.1 SSH简介;3.2.2 SSH特点介绍;3.2.2 SSH特点介绍;3.2.3 非对称加密机制;;虽然理论上非对称加密支持以上4种场景，但在SSH的身份验证阶段，SSH只支持服务端保留公钥，客户端保留私钥的方式，所以SSH的实现方式只有两种：客户端生成密钥对，将公钥分发给服务端；服务端生成密钥对，将私钥分发给客户端。只不过出于安全性和便利性，一般都是客户端生成密钥对，并分发公钥。;3.2.4 SSH安全机制;;使用密码登录，每次都必须输入密码，操作过程比较麻烦。SSH还提供公钥登录的方式，可以省去输入密码的步骤。 所谓公钥登录就是用户将自己的公钥储存在远程主机上。登录时，远程主机会向用户发送一段随机字符串，用户用自己的私钥加密后再返回。远程主机用事先储存的公钥进行解密，如果成功，就证明用户是可信的，直接允许登录shell，不再要求密码。 这种方法要求用户必须提供自己的公钥。如果没有公钥，可以直接用ssh-keygen命令生成： $ ssh-keygen;运行上面的命令以后，系统会出现一系列提示问题，可以一直回车确认，使用默认的配置。其中有一个提示问题是，要不要对私钥设置口令（passphrase），如果担心私钥的安全，这里可以设置口令。 运行结束以后，在$HOME/.ssh/目录下，会新生成两个文件：id_rsa.pub和id_rsa。前者是当前用户的公钥，后者是私钥。 这时再输入下面的命令，将公钥传送到远程主机host上面： $ ssh-copy-id user@host 以后再登录远程主机，就不需要输入密码可以直接登录。;3.3 集群网络配置;根据实验环境下集群网络IP地址规划，为主机master设置IP地址是“192.168.1.6”，掩码是“255.255.255.0”； slave1设置IP地址是“192.168.1.7”，掩码是“255.255.255.0”；slave2设置IP地址是“192.168.1.8”，掩码是“255.255.255.0”。 根据我们为Hadoop设置的主机名为“master、slave1、slave2”，映射地址是“192.168.1.6、192.168.1.7、192.168.1.8”，分别修改主机配置文件“/etc/hosts”，在命令终端输入如下命令： ＃vi /etc/hosts “/etc/hosts”文件给出主机到IP的映射关系，修改“/etc/hosts”文件，在文件末尾添加以下配置。 192.168.1.6 master 192.168.1.7 slave1 192.168.1.8 slave2 配置完毕，执行“reboot”命令重新启动系统。;3.4 SSH无密码验证配置;3.4.1 生成SSH密钥;;1.安装和启动SSH协议 实现SSH登录需要openssh和rsync两个服务，一般情况下默认已经安装，可以通过下面命令查看结果。 [root@master ~]# rpm -qa | grep openssh openssh-server-7.4p1-11.el7.x86_64 openssh-7.4p1-11.el7.x86_64 openssh-clients-7.4p1-11.el7.x86_64 [root@master ~]# rpm -qa | grep rsync rsync-3.1.2-6.el7_6.1.x86_64 如果没有安装openssh和rsync，可以通过下面命令进行安装。 [root@master ~]# yum install openssh* -y [root@master ~]# yum install rsync -y 2.切换到hadoop用户 [root@master ~]# su - hadoop;3.每个节点生成秘钥对 [hadoop@master ~]$ ssh-keygen -t rsa -P Generating public/private rsa key pair. Enter file in which to save the key (/home/hadoop/.ssh/id_rsa): Your identification has been saved in /home/hadoop/.ssh/id_rsa.