Data Intelligence Architect (m/w/d)

Frankfurt

Kurzbeschreibung

Bei der Migration von einer klassischen DWH Anwendung hin zu einem Data-Lake Ansatz werden Beratung- und Entwicklungsleistungen zum Aufbau eines Data Lakes benötigt.

Big-Data, DWH, Hadoop, spark
Homeoffice möglich
Freiberuflich

Details

Aufgabenbeschreibung
Entwicklung im Bereich Hadoop (Amazon EMR)
Entwicklung im SPARK-Framework, insbesondere mit Scala, Phyton und SQL.
Einrichtung und Konfiguration von Big-Data-Infrastrukturen in der AWS-Cloud auf Basis von Hadoop (Amazon EMR), SPARK, Apache Nifi, Apache Airflow.
Einrichtung, Konfiguration und Entwicklung im Bereich relationaler Datenbanken inkl. ANSI-SQL.
Know-how-Transfer zu den internen Entwicklern insbesondere im Bereich Hadoop (Amazon EMR) und SPARK.
Anleitung und Coaching der internen Entwickler bei der Nutzung von Hadoop (Amazon EMR) und SPARK.
Erstellung von Konzepten unter Berücksichtigung von Best-Practices und bestehender Industriestandards
Datenintegration mit Hadoop (Amazon EMR), SPARK, Apache Nifi, Apache Airflow.
Konzeption und Umsetzung von Datenmodellen
Muss-Anforderungen
Benötigte Skills - Software Entwicklung und Architektur: Hadoop (Amazon EMR), SPARK (Scala, Phyton, SQL), Apache Nifi, Apache Airflow, relationale Datenbanken (inkl. ANSI-SQL)
Hervorragende und mehrfach nachweislich praxiserprobte aktuelle Kenntnisse in Big-Data-Projekten, Hadoop (Amazon EMR) und SPARK (Scala, Phyton, SQL)
Problemlösungs-/ Arbeitsorganisations-Know-how
Kommunikations- und Moderations-Know-how und Know-how zu Teamverhalten (agiles Mindset)
Soll-Anforderungen
Erfahrung mit relationalen Datenbanken (inkl. ANSI-SQL)
Apache Nifi, Apache Airflow
AWS Cloud
  Registriere Dich bei uns - dauert keine 2 Minuten!
Du erhältst dieses und vergleichbare Jobangebote per E-Mail und kannst Dich über unser System bewerben.