Werkstudent im Bereich Datenpipeline-Entwicklung und Cloud-Automatisierung (w/m/d)
HENSOLDT · Ulm, Baden-Wurttemberg, DE
Über den Bereich Die Stelle umfasst die Implementierung skalierbarer ETL-Pipelines unter Verwendung eines geeigneten Frameworks (z. B. Apache Airflow) sowie...
Job description
Über den Bereich Die Stelle umfasst die Implementierung skalierbarer ETL-Pipelines unter Verwendung eines geeigneten Frameworks (z. B. Apache Airflow) sowie die Integration von bestehendem Python-Code in Docker-Container. Sie erstellen umfassende Unit-Tests und entwickeln eine benutzerfreundliche Web-UI zur Verwaltung der in S3-Speichern abgelegten Daten. Darüber hinaus sind Erfahrungen mit Docker, Git und grundlegenden ETL-Prozessen sowie Kenntnisse in der Bereitstellung und Verwaltung von Docker-Containern in einer Kubernetes-Umgebung erforderlich. Diese Stelle ist ideal für Studierende im Bachelor- oder Masterstudiengang der Informatik oder eines verwandten Fachgebiets. Ihre Aufgaben: - Implementierung von ETL-Pipelines: Entwurf, Entwicklung und Verwaltung skalierbarer ETL-Pipelines. Abwicklung von Workflows zur Datenextraktion, -transformation und -ladung, um einen effizienten Datenfluss und eine effiziente Datenverarbeitung sicherzustellen - Erstellung von Unit-Tests in Python: Erstellung umfassender Unit-Tests in Python, um sicherzustellen, dass die Datenverarbeitungsschritte korrekt und effizient funktionieren. Zudem die Konsistenz und Zuverlässigkeit der ETL-Prozesse gewähr...