Bons exemplos de MapReduce [fechados]
Eu não conseguia pensar em nenhum bom exemplo a não ser a tarefa de" como contar palavras em um texto longo com MapReduc ... essão de quão poderosa esta ferramenta pode ser.
Não estou à procura de excertos de código, apenas exemplos "textuais".
O nó do nome está em modo seguro. Incapaz de sair
root# bin/hadoop fs -mkdir t
mkdir: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /u ... eu fiz
root# bin/hadoop fs -safemode leave
mas mostrando
safemode: Unknown command
Qual é o problema?
Solução
Equivalente Ao Procedimento Armazenado MongoDB
Tenho um grande ficheiro CSV que contém uma lista de lojas, em que um dos Campos é o ZipCode.
Eu tenho um banco de dado ... ardar isso também.
Não estou muito familiarizado com o conceito de Map/Reduce, mas isso seria relevante aqui?
Obrigada!
O que é um recipiente em fios?
O que é um recipiente em fios? É o mesmo que a JVM infantil em que as tarefas no nodemanager funcionam ou é diferente?
Qual é o propósito do "modo uber" em hadoop?
Olá, sou um novato de dados. Procurei por toda a internet para descobrir o que é exactamente o modo uber. Quanto mais pr ... tas?
O que faz o modo uber?
funciona de forma diferente no mapred 1.X e 2.x?
E Onde posso encontrar o cenário para isso?
Onde estão os jarros hadoop-examples * e hadoop-test * em Cloudera CDH?
Estou à procura dos ficheiros jar para poder executar as tarefas hadoop associadas com os exemplos e frascos de teste. N ...
Nota : esta questão foi originalmente para CDH4. 2. Mas algumas respostas incluem informações para versões posteriores
O que é o contexto de palavra-chave no mundo de programação Hadoop?
o que é exactamente esta palavra-chave Contexto em Hadoop MapReduce world em novos termos API?
seu extensivamente usado ... m seguida, ir em detalhes. Não consigo entender muito das documentações da API Hadoop.
Obrigado pelo seu tempo e ajuda.
Uma explicação simples do MapReduce?
relacionado com a minha perguntaCouchDB .
Alguém pode explicar o MapReduce em termos que um idiota pode entender?
O Apache spark pode fugir sem o hadoop?
existem dependências entre Faísca e Hadoop?
Se não, vou sentir falta de alguma coisa quando correr. faísca Sem Hadoop?
Qual é a utilização da classe configurada nos programas Hadoop
A maioria dos programas Hadoop MapReduce são assim:
public class MyApp extends Configured Implements Tool {
@Overri ... é o uso de Configured? Como Tool e Configured ambos têm getConf() e setConf() em comum. O que fornece à nossa aplicação?
Escalonamento de tarefas e tarefas no Hadoop
Estou um pouco confuso sobre os Termos "agendamento de tarefas" e "agendamento de tarefas" em Hadoop quando estava a ler ... buídos a cada máquina? Como as tarefas são programadas para um único trabalho? Qual é a base para "agendamento de Tarefas"?
Processar imagens com o hadoop
sou novo no hadoop e vou desenvolver uma aplicação que processa várias imagens usando o hadoop e mostra aos utilizadores ... lização?
Como posso alimentar o executável com imagens? Não encontro outros exemplos a não ser alimentá-lo com stdin.
Onde está o classpath definido para hadoop
Onde está o fecho para o conjunto hadoop?
Quando eu comando o comando abaixo dá-me O fecho. Onde está o conjunto de claspath?
bin/hadoop classpath
estou a usar o hadoop 2. 6. 0
O que é o arquivo de sequência em hadoop?
sou novo para mapear-reduce e quero entender o que é sequência de dados de entrada? Estudei no Livro de Hadoop, mas foi difícil para mim entender.
Como configurar o Hive para usar o Spark?
Tenho um problema em usar a colmeia com faísca. Instalei um único nó HDP 2.1 (Hadoop 2.4) via Ambari no meu CentOS 6.5. ... meia use faísca em vez de MapReduce? Há outras formas de o mudar? (Eu já tentei mudá-lo via ambari e no hive-site.xml)
lista de tarefas do hadoop desactualizada
Estou a aprender hadoop a usar um nó vm da cloudera e passei por esta linha.
hadoop job -list
tenho um aviso (a util ... sk-id>] | [-set-priority <job-id> <priority>] Então por que é depreciada? Está a escapar-me alguma coisa?
Como utilizar CombineFileInputFormat em Hadoop?
Eu quero usar o CombineFileInputFormat de Hadoop 0.20.0 / 0.20.2 de modo que ele processa 1 arquivo por registro e també ... riável processada num leitor de discos.
Qualquer exemplo de código seria de grande ajuda.
Obrigado antecipadamente..
Como compilar o código-fonte do MapReduce no Hadoop 2.7.0?
estou a executar o Hadoop 2.7.0 no ubuntu 14.0.2 O. S., e crio wordcount.java with nano text editor which the source cod ... tFormat
location: class WordCount2
56 errors
Pergunto - me como é que isso aconteceu. A minha versão JDK é 1.8.0_45
Frascos para hadoop mapreduce
estou a seguir este tutorial hadoop mapreduce dado pelo Apache.
O código Java dado lá usa estas classes Apache-hadoo ... ository.com/artifact/org.apache.hadoop/hadoop-core/1.2.1 para baixar o frasco.
isto parece um repositório autêntico.
Hadoop para o conjunto de dados de números de páginas do Wikipedia
eu quero construir um Hadoop-Job que basicamente toma o wikipedia pagecount-statistic como entrada e cria uma lista co ... Cluster, por isso alterar a tarefa ainda está bem
Editar:
Aqui está uma discussão semelhante que acabei de encontrar..
- 1
- 2