hadoop

O meu passado tinha 4 semanas no mundo Hadoop. Um pouco na colmeia, porco e Hadoop usando o Hadoop VM de Cloudera. Li o ... do um (digamos porco) pode servir o propósito. É só porque o porco é evangelizado pelo Yahoo! e a colmeia pelo Facebook?

root# bin/hadoop fs -mkdir t mkdir: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /u ... eu fiz root# bin/hadoop fs -safemode leave mas mostrando safemode: Unknown command Qual é o problema? Solução

Como copiar o ficheiro de HDFS para o sistema de ficheiros local . Não há nenhuma localização física de um arquivo SOB ... vo, nem mesmo diretório . Como posso transferi-los para o meu local para mais validações?fui julgado através do winscp .

Como posso descobrir qual a versão da colmeia que estou a usar a partir do comando prompt. Abaixo estão os detalhes - ... alguma maneira do comando que eu possa encontrar Qual é a versão da colmeia que eu sou? usando e Hadoop versão também?

Preciso de copiar uma pasta do sistema de ficheiros local para HDFS. Eu poderia encontrar qualquer exemplo de mover uma pasta, incluindo a sua sub-pasta, para HDFS :~$hadopp fs -copyFromLocal /home/ubuntu/Source-Folder-To-Copy HDFS-URI

EU carreguei um diretório para o grupo hadoop que está tendo", " em seu nome como "MyDir, Name" quando estou a tentar ap ... comando seja. hadoop dfs -rmr hdfs://host:port/dir_path quaisquer soluções para eliminar este tipo de Directórios.

Quero ver a versão spark em cdh 5.7.0. Procurei na internet, mas não consegui entender. Ajudar. Obrigado.

Quando configurei o cluster hadoop, li que o namenode funciona em 50070 e configurei-o em conformidade e está a funciona ... /localhost:9000/ ou hdfs://localhost:8020 Qual é exactamente o número adequado para definir a porta do namenode?

Porque é que o Hadoop precisa de introduzir estas novas classes? Eles apenas parecem complicar a interface

O que é um recipiente em fios? É o mesmo que a JVM infantil em que as tarefas no nodemanager funcionam ou é diferente?

A definição diz: A RDD é uma colecção distribuída imutável de objectos Não percebo bem o que significa. É como o ... or Estou realmente confuso por entender o RDD em geral e em relação à faísca e à hadoop. Alguém me ajude, por favor.

Olá, sou um novato de dados. Procurei por toda a internet para descobrir o que é exactamente o modo uber. Quanto mais pr ... tas? O que faz o modo uber? funciona de forma diferente no mapred 1.X e 2.x? E Onde posso encontrar o cenário para isso?

Eu queria mudar de Hadoop 1.2.1 para Hadoop 2.2. No meu projecto estou a usar o Maven e ele consegue lidar com <d ... sponível no repositório central maven. qualquer ideia de Como posso incluir o Hadoop 2.2. no meu projecto mavenizado?

Sou novo no Hadoop / Zoo. Não consigo entender o propósito de usar o guarda do zoo com o Hadoop, Será Que O Guarda do Zoo está a escrever dados em Hadoop? Se não, porque usamos o tratador com o Hadoop?

Estou a tentar implementar um programa de contagem de palavras com o Hadoop. Eu baixei e instalei Hadoop 2.0.0. Eu quero ... e saber onde posso obter esses arquivos? não consigo encontrar muita informação sobre a versão 2.0. Por favor ajuda

Comecei agora a explorar a colmeia. Tem todas as estruturas semelhantes a um RDBMS como tabelas, juntas, partições.. o q ... em cima de HDFS. Eu não acho que é simplesmente uma linguagem de consulta porque ele tem tabelas, junções e partições..

o SparkSQL CLI utiliza internamente o HiveQL e, no caso do Hive on spark(Colmeia-7292) , o hive usa o spark como motor d ... lançar um pouco mais de luz, como exatamente estes dois cenários são diferentes e prós e contras de ambas as abordagens?

construí um ambiente Hadoop com um único nó em CentOS usando o repositório Cloudera CDH. Quando quero copiar um ficheir ... yHadoop/file1.txt': No such file or directory Tenho a certeza que este ficheiro existe. Por favor,ajuda-me, obrigado!

existe uma API HDFS que possa copiar um directório local inteiro para as HDFS? Eu encontrei uma API para copiar arquivos, mas existe uma para diretórios?

Qual é a diferença entre org.apache.hadoop.io.Text e java.lang.String no quadro Hadoop? Porque é que eles não podiam u ... ato de codificação; no entanto, ainda não a entendo. alguém pode explicar as diferenças (com exemplos, se aplicável)?