最近抛弃非ssh连接的Hadoop集群部署方式了，还是回到了用ssh key 验证的方式上了。这里面就有些麻烦，每台机器都要上传公钥。恰恰我又是个很懒的人，所以写几个小脚本完成，只要在一台机器上面就可以做公钥的分发了。

首先是生成ssh key脚本：

ssh-keygen一般来说需要输入passphrase，但是一般都是三个回车过去了，我懒的输入，加上-P ''就不用了。

然后是添加公钥到从节点的脚本：

然后是第三个脚本读取主机列表然后把/etc/hosts复制到所有主机上：

MapReduce连接：重分区连接

MapReduce的连接操作可以用于以下场景：用户的人口统计信息的聚合操作（例如：青少年和中年人的习惯差异）。当用户超过一定时间没有使用网站后，发邮件提醒他们。（这个一定时间的阈值是用户自己预定义的）分析用户的浏览习惯。让系统可以基于这个分析提示用

Hadoop安装,MapReduce