É fortemente recomendado que configure o nome das máquinas as fornecendo um apelido de acordo com a função do PC no cluster. Em nosso cluster definimos o IP 192.168.2.10 para hadoop-master(namenode), IP 192.168.2.11 para o slave-1(datanode) e IP 192.168.2.12 para o slave-2(datanode).

Passo 1 - Edite o arquivo /etc/hosts/ no pc escolhido para ser o namenode (Hadoop-master).


Passo 2 - A seguir execute o comando no hadoop-master

# hostname -f

O resultado esperado deve ser:

hadoop-master

Passo 3 - Caso contrário execute:

# hostname -b hadoop-master

Obs.: este passo deve ser refeito se a máquina for desligada.

Repita o passo 2 e confirme se o resultado coincide com o apelido adotado (ex: hadoop-master).

Passo 4 - Edite o arquivo /etc/hosts/ no pc escolhido para ser o datanode (slave-1):


Execute o comando:

# hostname -b slave-1

Verifique se o resultado é "slave-1" com o comando abaixo:

# hostname -f

Passo 5 - Edite o arquivo /etc/hosts/ no pc escolhido para ser o datanode (slave-2):


Execute o comando:

# hostname -b slave-2

Verifique se o resultado é "slave-2" com o comando abaixo:

# hostname -f

O namenode configura e envia os blocos do metadado para os datanodes usando o serviço ssh. Sendo necessário preparar que as máquinas possam conectar entre si sem a necessidade de solicitar senha. Considero que o serviço ssh server esteja instalado nas máquinas.

Obs.: as configurações abaixo podem não funcionar se o firewall estiver bloqueando o acesso a porta 22.

Passo 6 - Replique os comandos abaixo em todos os computadores do cluster com o login do usuário que irá iniciar os serviços hadoop descritos nas próximas paginas.

Ex.: no pc hadoop-master:

# ssh-keygen -t rsa
# ssh-copy-id -i ~/.ssh/id_rsa.pub [USUARIO_HADOOP]@hadoop-master
# ssh-copy-id -i ~/.ssh/id_rsa.pub [USUARIO_HADOOP]@slave-1
# ssh-copy-id -i ~/.ssh/id_rsa.pub [USUARIO_HADOOP]@slave-2

Checando se a configuração está correta. Execute o comando abaixo e deverá logar nas maquinas no cluster sem que a senha seja solicitada.

# ssh hadoop-master
# exit ( fazendo logout)
# ssh slave-1
# exit ( fazendo logout)
# ssh slave-2
# exit ( fazendo logout)

Passo 7 - repita os comandos do passo 6, no pc slave-1 e slave-2.

Na próxima página iremos baixar o hadoop e editar os seus arquivos e configuração.