mapreduce

Eu não conseguia pensar em nenhum bom exemplo a não ser a tarefa de" como contar palavras em um texto longo com MapReduc ... essão de quão poderosa esta ferramenta pode ser. Não estou à procura de excertos de código, apenas exemplos "textuais".

root# bin/hadoop fs -mkdir t mkdir: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /u ... eu fiz root# bin/hadoop fs -safemode leave mas mostrando safemode: Unknown command Qual é o problema? Solução

Tenho um grande ficheiro CSV que contém uma lista de lojas, em que um dos Campos é o ZipCode. Eu tenho um banco de dado ... ardar isso também. Não estou muito familiarizado com o conceito de Map/Reduce, mas isso seria relevante aqui? Obrigada!

O que é um recipiente em fios? É o mesmo que a JVM infantil em que as tarefas no nodemanager funcionam ou é diferente?

Olá, sou um novato de dados. Procurei por toda a internet para descobrir o que é exactamente o modo uber. Quanto mais pr ... tas? O que faz o modo uber? funciona de forma diferente no mapred 1.X e 2.x? E Onde posso encontrar o cenário para isso?

Estou à procura dos ficheiros jar para poder executar as tarefas hadoop associadas com os exemplos e frascos de teste. N ... Nota : esta questão foi originalmente para CDH4. 2. Mas algumas respostas incluem informações para versões posteriores

o que é exactamente esta palavra-chave Contexto em Hadoop MapReduce world em novos termos API? seu extensivamente usado ... m seguida, ir em detalhes. Não consigo entender muito das documentações da API Hadoop. Obrigado pelo seu tempo e ajuda.

relacionado com a minha perguntaCouchDB . Alguém pode explicar o MapReduce em termos que um idiota pode entender?

existem dependências entre Faísca e Hadoop? Se não, vou sentir falta de alguma coisa quando correr. faísca Sem Hadoop?

A maioria dos programas Hadoop MapReduce são assim: public class MyApp extends Configured Implements Tool { @Overri ... é o uso de Configured? Como Tool e Configured ambos têm getConf() e setConf() em comum. O que fornece à nossa aplicação?

Estou um pouco confuso sobre os Termos "agendamento de tarefas" e "agendamento de tarefas" em Hadoop quando estava a ler ... buídos a cada máquina? Como as tarefas são programadas para um único trabalho? Qual é a base para "agendamento de Tarefas"?

sou novo no hadoop e vou desenvolver uma aplicação que processa várias imagens usando o hadoop e mostra aos utilizadores ... lização? Como posso alimentar o executável com imagens? Não encontro outros exemplos a não ser alimentá-lo com stdin.

Onde está o fecho para o conjunto hadoop? Quando eu comando o comando abaixo dá-me O fecho. Onde está o conjunto de claspath? bin/hadoop classpath estou a usar o hadoop 2. 6. 0

sou novo para mapear-reduce e quero entender o que é sequência de dados de entrada? Estudei no Livro de Hadoop, mas foi difícil para mim entender.

Tenho um problema em usar a colmeia com faísca. Instalei um único nó HDP 2.1 (Hadoop 2.4) via Ambari no meu CentOS 6.5. ... meia use faísca em vez de MapReduce? Há outras formas de o mudar? (Eu já tentei mudá-lo via ambari e no hive-site.xml)

Estou a aprender hadoop a usar um nó vm da cloudera e passei por esta linha. hadoop job -list tenho um aviso (a util ... sk-id>] | [-set-priority <job-id> <priority>] Então por que é depreciada? Está a escapar-me alguma coisa?

Eu quero usar o CombineFileInputFormat de Hadoop 0.20.0 / 0.20.2 de modo que ele processa 1 arquivo por registro e també ... riável processada num leitor de discos. Qualquer exemplo de código seria de grande ajuda. Obrigado antecipadamente..

estou a executar o Hadoop 2.7.0 no ubuntu 14.0.2 O. S., e crio wordcount.java with nano text editor which the source cod ... tFormat location: class WordCount2 56 errors Pergunto - me como é que isso aconteceu. A minha versão JDK é 1.8.0_45

estou a seguir este tutorial hadoop mapreduce dado pelo Apache. O código Java dado lá usa estas classes Apache-hadoo ... ository.com/artifact/org.apache.hadoop/hadoop-core/1.2.1 para baixar o frasco. isto parece um repositório autêntico.

eu quero construir um Hadoop-Job que basicamente toma o wikipedia pagecount-statistic como entrada e cria uma lista co ... Cluster, por isso alterar a tarefa ainda está bem Editar: Aqui está uma discussão semelhante que acabei de encontrar..