null
US
Entrar
Registre-se gratuitamente
Registre-se
Detectamos que o JavaScript não está habilitado no teu navegador. Habilite o Javascript para o funcionamento correto do nosso site. Por favor, leia os
Termos e Condições
para mais informações.
Próximo
Copiar e Editar
Você deve estar logado para concluir esta ação!
Inscreva-se gratuitamente
37481899
Apache Hadoop
Descrição
Noveno Cloud Computing Mapa Mental sobre Apache Hadoop, criado por JAMESON SLEYDER TIERRADENTRO GARZON em 31-08-2022.
Sem etiquetas
apache
cloud
hadoop
datos
cloud computing
noveno
Mapa Mental por
JAMESON SLEYDER TIERRADENTRO GARZON
, atualizado more than 1 year ago
Mais
Menos
Criado por
JAMESON SLEYDER TIERRADENTRO GARZON
mais de 2 anos atrás
31
0
0
Resumo de Recurso
Apache Hadoop
Framework de código abierto
Procesa gran volumen de datos distribuidos
Arquitectura
NameNode (master)
Controla el acceso de clientes a la información
Secundary NameNode
Copia el namespace, en caso de reinicio de sistema a causa de fallos en el NameNode
DataNodes
Almacenamiento de bloques de datos
Entregar información
Reporte de metadatos
HDFS
Utiliza múltiples computadoras genéricas en clústers
JobTracker
Crea tareas MapReduce
Comprobar tareas fallidas
Puede re-programar en caso de fallos
TraskTracker
Corre MapReduce
Paralelizar procesos en dos fases
Mapeo: Escaner de datos y generar listas clave-valor
Reduce: Procesa y genera resultados
Modos de funcionamiento
Local pseudo-distribuido
Nodo único en un solo proceso Java
Local
Nodo único pero en procesos Java diferente
Distribuido
Múltiples nodos distribuidos
Entorno
Únicamente en entorno Linux y tener instalado Java
Instalación
Descargar desde la Web Oficial
Crear usuario para administrar Hadoop
Logeo y agragar variables de entorno
Ejecutar 'source.bashrd'
Configurar SSH
Configurar el protocolo
$ sudo apt-get install ssh | $ ssh-keygen -t rsa -f ~/.ssh/id_rsa | $ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
Otorgar permisos
Comprobar conexión
$ ssh localhost
Desactivar protocolo IPv6
$ net.ipv6.conf.all.disable_ipv6 = 1 $ net.ipv6.conf.default.disable_ipv6 = 1 $ net.ipv6.conf.lo.disable_ipv6 = 1
$ sudo chmod go-w $HOME $HOME/.ssh $ sudo chmod 600 $HOME/.ssh/authorized_keys $ sudo chown `whoami` $HOME/.ssh/authorized_keys
Configurar HDFS
‘/usr/local/hadoop/etc/hadoop’
core-site.xml
Configurar el directorio HDFS por defecto en el localhost
hdfs-site.xml
Informa como Hadoop almacenará la información
mapred-site.xml
Especifica quien realiza el MapReduce y donde se lleva a cabo
yarn-site.xml
Configurar el YARN
Anexos de mídia
Hadoop (binary/octet-stream)
Quer criar seus próprios
Mapas Mentais
gratuitos
com a GoConqr?
Saiba mais
.
Semelhante
CLOUD COMPUTING
carolinesca86
CLOUD COMPUTING
Cynthia Eduarte
Cloud Computing
proyectoFinla 43GRU
Aprendizaje y enseñanza de los contenidos escolares 1: Datos y Conceptos
maya velasquez
TECNICAS DE RECOLECCION DE DATOS
Francisco Gómez
DIAPOSITIVAS DEFINITIVAS
galle1221j
Grafos
hor_dan
Características y Perspectivas de la Web 3.0
Paúl Baldeón
IDENTIFICACIÓN DE PROCESOS PARA EL MANEJO DE DATOS
sephirothblackfi
Periodismo de datos
luisguet
Bases de Datos
marcos100299
Explore a Biblioteca