Implantação #536

Implantação #524: US: Elaborar as Etapas Necessárias para o Deployment do Hadoop

Ler documentaçãoo de instalação.

Added by Marco Gomes over 14 years ago. Updated over 14 years ago.

Status:ResolvidaStart date:13 Apr 2012
Priority:NormalDue date:18 Apr 2012
Assignee:Marco Gomes% Done:

100%

Category:-Estimated time:8.00 hours
Target version:Ciclo 2Spent time:4.00 hours

Description

Quais passos/etapas necessários(as) fazer o deployment da tecnologia ?
Ler e se possível testar eventuais modos de instalação.

History

#1 Updated by Marco Gomes over 14 years ago

  • Subject changed from Prova de Conceito to Ler documentaçãoo de instalação.
  • Description updated (diff)
  • Estimated time changed from 16.00 to 8.00

#2 Updated by Marco Gomes over 14 years ago

  • Status changed from Nova to Execução
  • % Done changed from 0 to 60

Os pré-requisitos para instalação são os seguintes:

  • Java 1.6 ou posterior;
  • ssh;
  • rsync

Para um modo de operação single node:

Satisfeitos os requisitos acima, é necessário fazer o download e descompactar o conteúdo.

Dentro do diretório descompactado, alterar o arquivo: conf/hadoop-env.sh para setar a variável de ambiente JAVA_HOME de acordo com o java instalado na máquina.

Após isso, basta seguir os seguintes passos:

  • criar um diretório;
  • copiar os arquivos xml dentro da pasta conf para o diretório criado;
  • Executar o seguinte comando:
  • bin/hadoop jar hadoop-examples-*.jar grep input output 'dfs[a-z.]+'

Para um modo de operação cluster, além dos passos acima, é necessário executar os seguintes passos:

#3 Updated by Marco Gomes over 14 years ago

  • Status changed from Execução to Resolvida
  • % Done changed from 60 to 100

Definir o seguinte grupo de máquinas:

NameNode - 1 máquina - Master
JobTracker - 1 máquina - Master
DataNode & TaskTracker - Demais máquinas - Slaves

Todas devem conter o mesmo HADOOP_HOME (path para instalação do hadoop nas máquinas)

A configuração de cada grupo de máquinas deve ser feito, de acordo com o seguinte link: http://hadoop.apache.org/common/docs/stable/cluster_setup.html

Also available in: Atom PDF