Senior Data Engineer / Senior Data Scientist

1/2023 – 12/2023

Ausgeführte Aufgaben:
- Consulting on the application of analytics and BI tools and services in Microsoft Azure stack (e.g. Synapse workspaces and dedicated SQL pools, SQL Database, PostgreSQL, Snowflake, Databricks, Data Factory, SSIS, Analysis Services, Function Apps, Power BI, ML ...).
- Independent design of analysis solutions using Python, SQL, etc.
- Design and creation of ETL/ELT traces
- Creation and maintenance of APIs
- Independent application of CI/CD, testing and version control
- Data modeling
Eingesetzte Technologien: Azure Synapse Analytics, Data Factory, Data Lake, Databricks, Spark, Python, CI/CD, SQL Database

Predictive Analytics, Apache Spark, Azure Synapse Analytics, Data Science, Data Warehousing

6/2021 – 12/2022

Herr Z. verantwortet in diesem Projekt die Konzeption, Aufbau und die Migration der aktuellen Projekte auf dem Cloudera Plattform und dessen Implementierung, Test und Betriebsüberwachung.

Eingesetzte Technologien: Cloudera, AWS, Spark, Kafka, Nifi, Ranger, Atlas, Python

Amazon Web Services (AWS), Apache Spark

8/2020 – 5/2021

Koordination des Projekts, Entwicklung Cloudbasierte Data Engineering & IoT Lösungen

Eingesetzte Technologien: AWS, S3, Greengrass, IoT Core, Spark, Python

Amazon Web Services (AWS), Apache Spark, Internet of Things (IoT), Python