IDE por escrever e gerir trabalhos de hadoop? [fechado]

comecei recentemente a aprender o básico da programação de redução de mapas do Hadoop em Java. Até agora, a única maneira que encontrei foi escrevendo o código em um arquivo usando vi ou emacs que parece horrível, primitivo e muito doloroso.

Existe alguma IDE para escrever, compilar e executar programas Hadoop?

Author: DanGar, 2013-03-11
Source

4 answers

Você também deve verificar a ideia do Intelij, uma vez que as páginas do Apache Hadoop wiki têm instruções sobre como configurar o seu ambiente de desenvolvimento usando-o.

Referências:

Http://www.jetbrains.com/idea/

Http://wiki.apache.org/hadoop/HadoopUnderIDEA

 2
Author: DanGar, 2013-12-29 00:58:06

Usar Eclipse . Cloudera tem um grande screencast aqui para configurar o eclipse para o desenvolvimento do hadoop. Também depurar uma tarefa hadoop localmente é muito legal usando eclipse (embora não trivial). Para saber mais sobre isso, veja aqui .

 4
Author: Amar, 2013-03-11 19:01:10

Aqui é um blog para depuração/desenvolvimento de Tarefas Hadoop no Eclipse/Linux. Além disso, verifique o Karmasphere Studio.

 1
Author: Praveen Sripati, 2013-03-18 14:24:53
Sim, é possível executar os trabalhos de MapReduce no Eclipse. Há muita diferença executando programas MapReduce em um cluster e no Eclipse. Abaixo estão os poucos pontos que vale a pena notar:
  • no Eclipse, ele roda em um modo especial chamado: Modo LocalJobRunner, ou seja, todos os daemons Hadoop são executados em um único JVM.
  • no Eclipse, todas as localizações referem-se às localizações de ficheiros locais e não à localização do HDFS.
 0
Author: vmorusu, 2016-10-31 14:52:20