Existe um comando hdfs para listar os ficheiros no directório HDFS de acordo com a data-limite

Existe um comando hdfs para listar os ficheiros no directório HDFS por hora, ascendente ou descendente? Por omissão, o ... curei por respostas, o que consegui foi uma solução. Mas há alguma maneira melhor, inbuilt na linha de comando hdfs dfs?

Diferença entre o Hadoop e o Nosql [fechado]

Gostaria de saber a diferença básica entre o hadoop e o nosql. Qual é a necessidade do Hadoop? Qual é a necessidade de NoSQL? Os dois são iguais?

Como praticar a programação Hadoop? [fechado]

Comecei a ver vídeos de introdução do Hadoop. Como praticá-lo sozinho? Existe uma maneira recomendada de instalar no local para praticar?

Por que o serviço sshd não é reconhecido?

estou a tentar instalar o hadoop, e preciso de reiniciar o serviço sshd para configurar a ligação entre os nós... No en ... erro de mensagem será exibido dizendo-me que este serviço não é reconhecido. alguma ajuda para instalar este sistema?

O que fará o comando "hadoop namenode-format"

Estou tentando aprender Hadoop seguindo um tutorial e tentando fazer Modo pseudo-distribuído na minha máquina. o meu c ... ver as diferenças antes e depois de executar o comando? Sou novo no Hadoop, por isso esta pode ser uma pergunta trivial.

Gerente Independente Vs Fios Vs. Mesos

em 3 nós Spark/Hadoop cluster que scheduler(Gestor) irá funcionar de forma eficiente? Atualmente Eu estou usando Gerenc ... á correndo 10X mais lento do que Gerente autônomo. Posso ajudar? Detalhes Do Agregado: Faísca 1.2.1 e Hadoop 2.7.1

Como executar um arquivo jar em hadoop?

criei um ficheiro jar usando o ficheiro java a partir de este blog usando as seguintes declarações javac -classpath ... .java:149) Como posso correr o frasco em hadoop? Tenho os locais certos do DFS, conforme necessário pelo meu programa.

Mover os dados para hdfs usando o comutador copyFromLocal

não sei o que se passa aqui, mas estou a tentar copiar um ficheiro simples de uma pasta no meu sistema de ficheiros loc ... /ml-100k / U. dados. Por isso, ele não copiaria automaticamente o arquivo a partir de um determinado local para hdfs ?

Não foi possível detectar uma pasta pessoal hadoop válida

Montei o nó único Hadoop 2.2.0 e iniciei-o. Eu sou capaz de navegar o FS em http://localhost:50070/ Então eu tentei escr ... t;localhost:9001</value> </property> </configuration> Aguardando ansiosamente as suas respostas.

Aglomerado livre de Hadoop para experiências

Gostaria de executar o programa hadoop num cluster hadoop para testar os tempos. Existe algum Cluster Hadoop gratuito disponível para experiências com grandes dados para uso Acadêmico?

hadoop vs teradata Qual é a diferença

Toquei numa Teradata. Nunca toquei no hadoop, mas desde ontem, estou a fazer uma pesquisa sobre isso. Por descrição de a ... ar eles para o DWH. Então faça alguns recursos análise cara sobre eles. Porquê usar TD? Porquê O Hadoop? ou porque não?

hdfs dfs-mkdir, nenhum ficheiro ou directório deste tipo

Olá, sou novo no hadoop e estou a tentar criar um directório em hdfs chamado twitter_data. Configurei o meu vm no softla ... ecialistas em hdfs. Tenho passado demasiado tempo naquilo que parece ser um assunto simples. Obrigado antecipadamente.

Onde estão os jarros hadoop-examples * e hadoop-test * em Cloudera CDH?

Estou à procura dos ficheiros jar para poder executar as tarefas hadoop associadas com os exemplos e frascos de teste. N ... Nota : esta questão foi originalmente para CDH4. 2. Mas algumas respostas incluem informações para versões posteriores

Quantos tipos de InputFormat existem em Hadoop?

sou novo em Hadoop e pergunto-me quantos tipos de InputFormat existem em Hadoop como TextInputFormat? Existe algum InputFormat que eu possa usar para ler ficheiros através de pedidos http para servidores de dados remotos? Obrigado.

O que é o contexto de palavra-chave no mundo de programação Hadoop?

o que é exactamente esta palavra-chave Contexto em Hadoop MapReduce world em novos termos API? seu extensivamente usado ... m seguida, ir em detalhes. Não consigo entender muito das documentações da API Hadoop. Obrigado pelo seu tempo e ajuda.

Como posso copiar dados de um HDFS para outro HDFS?

Tenho duas configurações de HDFS e quero copiar (não migrar ou mover) algumas tabelas de HDFS1 para HDFS2. Como posso copiar dados de um HDFS para outro HDFS? É possível através do Sqoop ou de outra linha de comando?

Como executar Hadoop em um aglomerado de Mesos?

Estou a tentar montar um grupo de Apache Mesos e executar um assalto. A documentação Aqui não está ao meu nível, de mod ... um grupo de Mesos? para onde aponto os escravos? no ficheiro Hadoop-slaves ou nos Mesos registados só devem ser usados?

Rails with Hadoop

Terei enormes dados para armazenar como corers para currículos e gostaria de considerar o hadoop como back end . É possí ... erar os redis ou mongodb. Qualquer indicador para usar Carris com o hadoop seria útil. Ou uma jóia que facilita a vida.

IDE por escrever e gerir trabalhos de hadoop? [fechado]

comecei recentemente a aprender o básico da programação de redução de mapas do Hadoop em Java. Até agora, a única manei ... que parece horrível, primitivo e muito doloroso. Existe alguma IDE para escrever, compilar e executar programas Hadoop?

O Apache spark pode fugir sem o hadoop?

existem dependências entre Faísca e Hadoop? Se não, vou sentir falta de alguma coisa quando correr. faísca Sem Hadoop?