Big Data - Data Engineering Grundlagen54010SASAPSA-540101.0<p>Neben generellen IT Kenntnissen in SQL und Programmierung sind keine besonderen Vorkenntnisse erforderlich. Der vorherige Besuch unseres Grundlagenseminars Big Data – Definitionen, Technologien und Produkte im Überblick erleichtert das Verständnis.</p><p>Das Seminar richtet sich an Datenbank Experten, BigData Experten, Sicherheitsexperten, Systemadministratoren, Netzwerkadministratoren, Data Science Mitarbeiter, Entwickler sowie alle Interessierten, die dem Thema BigData tiefer unter die Haube schauen möchten.</p><h5>Data Engineering</h5><h5>Einführung Big Data:</h5><ul>
<li>Was ist Big Data?</li><li>Die drei Vs</li><li>Abgrenzung zu relationalen Datenbanken</li><li>Data Lake und hybride Architektur Konzept</li></ul><h5>IT Grundlagen:</h5><ul>
<li>Basiswissen Netzwerke</li><li>Basiswissen verteilte Systeme</li></ul><h5>Ökosystem Hadoop:</h5><ul>
<li>Hadoop Cluster Architektur</li><li>Überblick über die Hadoop Distributionen</li><li>HBase</li><li>HDFS</li><li>Hive</li><li>Kafka</li><li>NiFi</li><li>Pig</li><li>Spark / Spark Streaming</li><li>Sqoop</li><li>Ambari</li><li>Zookeeper</li><li>Überblick weiterer Komponenten</li></ul><h5>Security in Hadoop:</h5><ul>
<li>Ranger</li><li>Kerberos</li></ul><h5>Hands on Hadoop – Praxisteil:</h5><ul>
<li>HDFS Puzzle</li><li>Administration Grundlagen</li><li>Ambari Monitoring M/R</li><li>HDFS Strukturen anlegen</li><li>Zookeeper Nodes</li><li>HBase</li><li>HDFS</li><li>Hive</li><li>Kafka</li><li>NiFi</li><li>Pig</li><li>Spark / Spark Streaming</li><li>Sqoop</li></ul><h5>Vertiefung der Hadoop Komponenten - Praxisteil:</h5><ul>
<li>Streaming</li><li>Buffering</li><li>Archivierung</li><li>Transformation</li><li>Analyse</li></ul>Neben generellen IT Kenntnissen in SQL und Programmierung sind keine besonderen Vorkenntnisse erforderlich. Der vorherige Besuch unseres Grundlagenseminars Big Data – Definitionen, Technologien und Produkte im Überblick erleichtert das Verständnis.Das Seminar richtet sich an Datenbank Experten, BigData Experten, Sicherheitsexperten, Systemadministratoren, Netzwerkadministratoren, Data Science Mitarbeiter, Entwickler sowie alle Interessierten, die dem Thema BigData tiefer unter die Haube schauen möchten.Data Engineering
Einführung Big Data:
- Was ist Big Data?
- Die drei Vs
- Abgrenzung zu relationalen Datenbanken
- Data Lake und hybride Architektur Konzept
IT Grundlagen:
- Basiswissen Netzwerke
- Basiswissen verteilte Systeme
Ökosystem Hadoop:
- Hadoop Cluster Architektur
- Überblick über die Hadoop Distributionen
- HBase
- HDFS
- Hive
- Kafka
- NiFi
- Pig
- Spark / Spark Streaming
- Sqoop
- Ambari
- Zookeeper
- Überblick weiterer Komponenten
Security in Hadoop:
- Ranger
- Kerberos
Hands on Hadoop – Praxisteil:
- HDFS Puzzle
- Administration Grundlagen
- Ambari Monitoring M/R
- HDFS Strukturen anlegen
- Zookeeper Nodes
- HBase
- HDFS
- Hive
- Kafka
- NiFi
- Pig
- Spark / Spark Streaming
- Sqoop
Vertiefung der Hadoop Komponenten - Praxisteil:
- Streaming
- Buffering
- Archivierung
- Transformation
- Analyse3 days2990.00