Hadoop部署常用的小腳本有哪些

本篇內容介紹了“Hadoop部署常用的小腳本有哪些”的有關知識，在實際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領大家學習一下如何處理這些情況吧！希望大家仔細閱讀，能夠學有所成！

最近拋棄非ssh連接的Hadoop集群部署方式了，還是回到了用ssh key 驗證的方式上了。這里面就有些麻煩，每臺機器都要上傳公鑰。恰恰我又是個很懶的人，所以寫幾個小腳本完成，只要在一臺機器上面就可以做公鑰的分發了。

首先是生成ssh key腳本：

#!/bin/sh ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys

ssh-keygen一般來說需要輸入passphrase，但是一般都是三個回車過去了，我懶的輸入，加上-P ''就不用了。

然后是添加公鑰到從節點的腳本：

#!/bin/sh read -p "輸入遠端服務器IP: " ip ssh-copy-id -o StrictHostKeyChecking=no -i ~/.ssh/id_rsa.pub root@$ip ssh root@$ip 'sed -i "s/^#RSAAuthentication\ yes/RSAAuthentication\ yes/g" /etc/ssh/sshd_config' ssh root@$ip 'sed -i "s/^#PubkeyAuthentication\ yes/PubkeyAuthentication yes/g" /etc/ssh/sshd_config' ssh root@$ip 'sed -i "s/^#PermitRootLogin\ yes/PermitRootLogin\ yes/g" /etc/ssh/sshd_config' ssh root@$ip 'service sshd restart' hostname=`ssh root@${ip} 'hostname'` echo "添加主機名和IP到本地/etc/hosts文件中" echo "$ip    $hostname" >> /etc/hosts echo "遠端主機主機名稱為$hostname, 請查看 /etc/hosts 確保該主機名和IP添加到主機列表文件中" echo "主機公鑰復制完成"

然后是第三個腳本讀取主機列表然后把/etc/hosts復制到所有主機上：

#!/bin/sh cat /etc/hosts | while read LINE do     ip=`echo $LINE | awk '{print $1}' | grep -v "::" | grep -v "127.0.0.1"`     echo "Copying /etc/hosts to ${ip}"     scp -o StrictHostKeyChecking=no /etc/hosts root@${ip}:/etc/ done

“Hadoop部署常用的小腳本有哪些”的內容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業相關的知識可以關注億速云網站，小編將為大家輸出更多高質量的實用文章！