Onde estão os ficheiros do hadoop jar no hadoop 2? [fechado]
Hadoop 2.0.0
. Eu quero fazer este programa de exemplo usando Eclipse porque eu acho que mais tarde no meu projeto real eu tenho que usar apenas Eclipse.
não consigo encontrar ficheiros jar relacionados com o Hadoop como hadoop-core.jar
e outros ficheiros jar necessários. Procurei em todas as pastas do 2.0 hadoop mas não encontrei esses arquivos. Esses mesmos arquivos estão disponíveis na versão 1.0 do Hadoop, mas não na versão 2.0. I gostaria de saber onde posso obter esses arquivos?
não consigo encontrar muita informação sobre a versão 2.0.
Por favor ajuda
8 answers
Edit: acabei de actualizar as ligações de modo a que as pessoas possam escolher a versão apropriada do repositório, uma vez que agora passamos da versão inicial 2.
Incluir frascos nas pastas abaixo indicadas funcionou para mim:
share\hadoop\common
share\hadoop\common\lib
share\hadoop\mapreduce
share\hadoop\mapreduce\lib
share\hadoop\yarn
share\hadoop\yarn\lib
${HADOOP_HOME}/share/hadoop/common
Pasta, não a pasta ${HADOOP_ Home}.
hadoop/2.6.0/libexec/share/hadoop/common/hadoop-common-2.6.0.jar
Ou apenas procurar ".jar " no diretório hadoop, você pode ver tudo .ficheiros jar.
hadoop-core-{version}.jar
tornou-se hadoop-common-{version}.jar
a começar com Hadoop 2+
Exemplo - https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-core/1.2.1
No hadoop 2.7.2, eu tive que ajustá-lo para o mesmo que HADOOP_COMMON_HOME.
Em baixo da localização, poderá encontrar a pasta com o nome da distribuição que instalou, dentro da qual existe uma pasta jar. /opt/cloudera/parcels/[cloudera distribution]/jars /
Exemplo: / opt/cloudera / pacotes / CDH-5.4.10 / frascos