Schulungsübersicht
Modul 1: Datenverwaltung in HDFS
- Verschiedene Datenformate (JSON / Avro / Parquet)
- Komprimierungsverfahren
- Datenmaskierung
- Praktische Übungen: Analyse verschiedener Datenformate; Aktivieren der Kompression
Modul 2: Fortgeschrittenes Pig
- Benutzerdefinierte Funktionen (UDFs)
- Einführung in Pig-Bibliotheken (ElephantBird / Data-Fu)
- Laden komplexer strukturierter Daten mit Pig
- Pig-Optimierung
- Praktische Übungen: fortgeschrittenes Pig-Skripting, Parsen komplexer Datentypen
Modul 3: Fortgeschrittenes Hive
- Benutzerdefinierte Funktionen (UDFs)
- Komprimierte Tabellen
- Hive-Leistungsoptimierung
- Praktische Übungen: Erstellen kompakter Tabellen, Evaluieren von Tabellenformaten und Konfiguration
Modul 4: Fortgeschrittenes HBase
- Fortgeschrittene Schemamodellierung
- Kompression
- Masseingabe von Daten
- Vergleich breiter und langer Tabellen
- HBase und Pig
- HBase und Hive
- HBase-Leistungsoptimierung
- Praktische Übungen: Optimieren von HBase; Zugriff auf HBase-Daten mit Pig & Hive; Datenmodellierung mit Phoenix
Voraussetzungen
- sicheren Umgang mit der Java-Programmiersprache (die meisten Programmierübungen sind in Java)
- sicheren Umgang in einer Linux-Umgebung (Linux-Befehlszeile navigieren, Dateien mit vi / nano bearbeiten können)
- grundlegendes Wissen über Hadoop.
Laborumgebung
Zero Install: Es ist keine Installation von Hadoop-Software auf den Rechnern der Teilnehmer erforderlich! Ein funktionsfähiger Hadoop-Cluster wird für die Teilnehmer bereitgestellt.
Die Teilnehmer benötigen Folgendes
Erfahrungsberichte (5)
Die Live-Beispiele
Ahmet Bolat - Accenture Industrial SS
Kurs - Python, Spark, and Hadoop for Big Data
Maschinelle Übersetzung
Während der Übungen erklärte James mir jeden Schritt detailliert, an dem ich stecken blieb. Ich war völlig neu bei NIFI. Er erklärte den eigentlichen Zweck von NIFI, sogar die Grundlagen wie Open Source. Er deckte alle Konzepte von Nifi ab, vom Anfänger- bis zum Entwickler-Level.
Firdous Hashim Ali - MOD A BLOCK
Kurs - Apache NiFi for Administrators
Maschinelle Übersetzung
Dass ich es überhaupt hatte.
Peter Scales - CACI Ltd
Kurs - Apache NiFi for Developers
Maschinelle Übersetzung
praktische Dinge der Tätigkeit, auch die Theorie wurde von Ajay gut vermittelt
Dominik Mazur - Capgemini Polska Sp. z o.o.
Kurs - Hadoop Administration on MapR
Maschinelle Übersetzung
Die VM hat mir sehr gefallen. Der Lehrer war sehr wissbegierig sowohl zum Thema als auch zu anderen Themen, und er war sehr nett und freundlich. Mir hat die Einrichtung in Dubai gefallen.
Safar Alqahtani - Elm Information Security
Kurs - Big Data Analytics in Health
Maschinelle Übersetzung