Estás aquí: start » centro » servizos » hadoop

Pequeno cluster de experimentación

Esta é unha revisión antiga do documento!


FIXME Esta página no está completamente traducida, aún. Por favor, contribuye a su traducción.
(Elimina este párrafo una vez la traducción esté completa)

Cluster Hadoop

O clúster de Hadoop é un pequeno clúster de 5 servidores útil para a experimentación e investigación en temas relativos a Hadoop.

Está formado por 5 nodos computacionais HP Proliant DL 370 G6. Cada un conta con:

  • 2 procesadores Intel Xeon E5506 @ 2.13GHz
  • 12 GB de memoria RAM ECC repartidos en 6 módulos DDR3 @ 800MHz.
  • 2 discos duros de 2 TB montados en dous RAID0
  • 4 portos Gigabit Ethernet
  • Instalación CentOS 6.5 mínima (kernel 2.6.32-431.17.1.el6.x86_64)

Nodos

Los nodos tienen una instalación mínima de CentOS 7.2, con una versión de kernel 3.10.0-327.36.2.el7.x86_64.

Cada nodo del clúster posee dos discos duros de 2 TB.

Redes

Los nodos están conectados entre si a traves de una red interna, y acceden a internet a traves del master (ctserv07).

Conexión

Hay que solicitar el acceso mediante el formulario de incidencias.

Al master se tiene acceso por ssh (172.16.242.73:22). Para acceder a los otros nodos se debe acceder previamente al master. Desde este se puede hacer ssh (puerto 22) a los nodos mediante IP o mediante nombre. En ctserv07, en /usr/local/bin/ está disponible un script (activar_internet.sh) que permite activar y desactivar el acceso a internet desde los nodos a través del master. Es recomendable que ese acceso permanezca activo sólo cuando sea necesario.

Red externa

Nome Modelo IP
ctserv07 HP Proliant DL 370 G6 172.16.242.73

Red interna

Nome Modelo IP
ctserv07 HP Proliant DL 370 G6 192.168.0.1
hadoop2 HP Proliant DL 370 G6 192.168.0.2
hadoop3 HP Proliant DL 370 G6 192.168.0.3
hadoop4 HP Proliant DL 370 G6 192.168.0.4
hadoop5 HP Proliant DL 370 G6 192.168.0.5