Benutzer-Werkzeuge

Webseiten-Werkzeuge


nosql:hadoop_first_setup

Unterschiede

Hier werden die Unterschiede zwischen zwei Versionen angezeigt.

Link zu dieser Vergleichsansicht

Beide Seiten der vorigen Revision Vorhergehende Überarbeitung
nosql:hadoop_first_setup [2014/08/23 16:18]
gpipperr [Quellen]
nosql:hadoop_first_setup [2014/08/23 17:28] (aktuell)
gpipperr
Zeile 1: Zeile 1:
 ===== Eine Hadoop 2.4 Test Umgebung installieren und konfigurieren ===== ===== Eine Hadoop 2.4 Test Umgebung installieren und konfigurieren =====
 +
 Ziel: Hadoop Cluster für den Einstieg in das Thema Hadoop als 3 Knoten Cluster aufsetzen. Ziel: Hadoop Cluster für den Einstieg in das Thema Hadoop als 3 Knoten Cluster aufsetzen.
  
Zeile 10: Zeile 11:
  
 <note tip>Erweiterung auf 3 Knoten in  Arbeit</note> <note tip>Erweiterung auf 3 Knoten in  Arbeit</note>
- 
-=== Grundarchitektur === 
- 
-Hadoop 2.0: 
- 
-{{ :hadoop:hadoop_architecture_v01.png?300 | Übersicht über die Schichten von Hadoop}} 
- 
- 
- 
- 
-Hadoop HDFS: 
- 
-{{ :hadoop:hadoop_architecture_hdfs_v02.png?500 | HDFS Übersicht}} 
- 
- 
-Hadoop Services: 
  
  
-  * **ResourceManager**: Ein Scheduler der die verfügbaren Resourcen im cluster zwischen den Applications verteilt 
-  * **NodeManager**: läuft auf jeden Knoten im Cluster und nimmt Anfragen vom ResourceManager an. Verwaltet die Resourcen auf diesen einzelnen Knoten 
-  * **ApplicationMaster**: Eine Instance einer Instance von einer framework-specific library, führt YARN job aus und ist verantwortlich das Anfragen von Resources vom ResourceManager und arbeitet mit dem NodeManager zusammen, monitored Containers. 
 ==== Standard Linux Installation mit Java 8==== ==== Standard Linux Installation mit Java 8====
  
"Autor: Gunther Pipperr"
nosql/hadoop_first_setup.txt · Zuletzt geändert: 2014/08/23 17:28 von gpipperr