Onde estão os ficheiros do hadoop jar no hadoop 2? [fechado]

Estou a tentar implementar um programa de contagem de palavras com o Hadoop. Eu baixei e instalei Hadoop 2.0.0. Eu quero fazer este programa de exemplo usando Eclipse porque eu acho que mais tarde no meu projeto real eu tenho que usar apenas Eclipse.

não consigo encontrar ficheiros jar relacionados com o Hadoop como hadoop-core.jar e outros ficheiros jar necessários. Procurei em todas as pastas do 2.0 hadoop mas não encontrei esses arquivos. Esses mesmos arquivos estão disponíveis na versão 1.0 do Hadoop, mas não na versão 2.0. I gostaria de saber onde posso obter esses arquivos?

não consigo encontrar muita informação sobre a versão 2.0.

Por favor ajuda

Author: Shekhar, 2013-03-03
Source

8 answers

Na verdade, enfrentei uma questão semelhante no início. Aparentemente, não há nenhuma versão 2. Você terá que baixar o Hadoop Comum e MapReduce Client Core jarros e usá-los ambos. Tenho a certeza que resolverá os teus problemas. Espero que isto ajude!

Edit: acabei de actualizar as ligações de modo a que as pessoas possam escolher a versão apropriada do repositório, uma vez que agora passamos da versão inicial 2.

 34
Author: aa8y, 2015-02-03 18:24:56

Incluir frascos nas pastas abaixo indicadas funcionou para mim: 

share\hadoop\common       
share\hadoop\common\lib   
share\hadoop\mapreduce    
share\hadoop\mapreduce\lib
share\hadoop\yarn         
share\hadoop\yarn\lib
 8
Author: Anonymous, 2017-02-17 21:36:57
Hadoop-core - ${HADOOP_VERSION}.jar está em 
${HADOOP_HOME}/share/hadoop/common

Pasta, não a pasta ${HADOOP_ Home}.

 4
Author: Chong Tang, 2015-10-24 14:42:10
Isto funciona comigo no Mac no Hadoop 2.6.0: 
hadoop/2.6.0/libexec/share/hadoop/common/hadoop-common-2.6.0.jar

Ou apenas procurar ".jar " no diretório hadoop, você pode ver tudo .ficheiros jar.

 2
Author: Yimihua, 2015-03-18 05:14:29

hadoop-core-{version}.jar tornou-se hadoop-common-{version}.jar a começar com Hadoop 2+

 1
Author: Venkatt Guhesan, 2017-04-19 07:38:23
Podemos ir buscar os ficheiros do jar. https://mvnrepository.com Site.

Exemplo - https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-core/1.2.1

 1
Author: Satyajit Mishra, 2017-09-13 18:21:37

No hadoop 2.7.2, eu tive que ajustá-lo para o mesmo que HADOOP_COMMON_HOME.

 0
Author: Henry, 2017-07-20 06:27:26

Em baixo da localização, poderá encontrar a pasta com o nome da distribuição que instalou, dentro da qual existe uma pasta jar. /opt/cloudera/parcels/[cloudera distribution]/jars /

Exemplo: / opt/cloudera / pacotes / CDH-5.4.10 / frascos

 -1
Author: Ankush, 2016-05-18 14:39:22