Hadoop-集群搭建前的准备工作
·
搭建集群前的准备–SSH免密登录和集群时间同步
1.修改主机名
2.修改mac地址
3.修改IP地址
4.修改HOST主机名映射(放在reboot命令前)vim /etc/hosts 格式: IP地址 主机名
注意要重启,配置才能生效
5.安装hadoop 和java
6.实现不同机器之间数据的安全拷贝
rsync -rvlt /opt/module root@hadoop103:/opt/
7.配置ssh方式下JAVA_HOME
在 .bashrc 中加入
source /etc/profile
----------补充:使用xshell 连接虚拟机,无法ping 通时
将子网IP修改为对应的网段。
SSH 免密登录
使用rsa算法生成公钥和私钥
将公钥拷贝到要免密登录的目标机器上(注:要拷贝给自己)
ssh-copy-id hadoop102
nologin-shell 下的环境变量
需要在 用户家目录下,在.bashrc 文件加入一行代码
source /etc/profile
集群时间同步
时间同步的方式:找一个机器,作为时间服务器,所有的机器与这台集群时间进行定时的同步,比如,每隔十分钟,同步一次时间。
1.时间服务器配置(必须root用户)
1).检查ntp是否安装
rpm -qa|grep ntp
2).修改ntp配置文件
修改1 (授权192.168.1.0-192.168.1.255网段上的所有机器可以从这台机器上查询和同步时间)
#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap 为
restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap
修改2(集群在局域网中,不使用其他互联网上的时间)
#server 0.centos.pool.ntp.org iburst
#server 1.centos.pool.ntp.org iburst
#server 2.centos.pool.ntp.org iburst
#server 3.centos.pool.ntp.org iburst
添加 (当该节点丢失网络连接,依然可以采用本地时间作为时间服务器为集群中的其他节点提供时间同步)
server 127.127.1.0
fudge 127.127.1.0 stratum 10
修改/etc/sysconfig/ntpd文件
3). 增加内容如下(让硬件时间与系统时间一起同步)
SYNC_HWCLOCK=yes
4).重新启动ntpd服务
service ntpd status
5).设置ntpd服务开机自启
chkconfig ntpd on
2.其他服务器配置(必须root用户)
crontab -e
编写定时任务如下:
*/10 * * * * /usr/sbin/ntpdate hadoop102
测试 :
修改机器时间
date -s "2017-9-11 11:11:11"
十分钟后查看是否与时间服务器同步
date
更多推荐



所有评论(0)