Big Data Engineer (m/w/d) gesucht | Nürnberg | 12 Monate
Projektbewertung
Die Ausschreibung bietet einen sehr detaillierten Einblick in Projektanforderungen, Technologiestack und Einsatzbedingungen mit klarer Struktur für einen Big Data Engineer in einem spannenden technischen Umfeld.
Rahmendaten:
Start: ab dem 03.11.2025
Laufzeit: 12 Monate
Einsatzort: Nürnberg (ca. 2 Tage/Woche onsite) & Remote
Auslastung: Vollzeit
Vertragsart: Freiberuflich
Projektsprache: Deutsch
Aufgaben:
Architektur und Entwicklung von Datenpipelines
Arbeit mit Apache Iceberg, Apache NiFi, Trino und Apache Spark
Implementierung von CI/CD-Prozessen mit GitHub Actions
Monitoring & Logging mit Prometheus, Grafana, Splunk
Erstellung komplexer NiFi-Flows inkl. Fehlerbehandlung und Security
Performance-Tuning und Integration von Datenquellen mit Trino
Ihr Profil:
Sehr gute Deutschkenntnisse
Erfahrung mit Apache NiFi, Kafka, GitHub, GitHub Actions
Gute Kenntnisse in SQL, Java (Pflicht), Python, Kotlin
Kenntnisse in Containerisierung (Docker, Kubernetes)
Erfahrung mit ETL/ELT-Prozessen, API-Integration und großen Datenmengen
Vertraut mit Monitoring-Tools wie Prometheus und Grafana
Erfahrung mit Cloud-Plattformen (Azure wünschenswert)