Data Engineer, KI und Machine Learning
- Verfügbarkeit einsehen
- 0 Referenzen
- auf Anfrage
- 51109 Köln
- DACH-Region
- de | vi | en
- 19.06.2024
Kurzvorstellung
Qualifikationen
Projekt‐ & Berufserfahrung
12/2023 – offen
Tätigkeitsbeschreibung
Aufgaben / Technologien:
Erfolgreiche Migration von Datentransformationsprozessen von PowerBI auf die Databricks-Plattform zur Steigerung der Effizienz und Skalierbarkeit der Datenverarbeitung. Entwicklung und Implementierung robuster ETL-Pipelines in Databricks unter Verwendung von Apache Spark und Python, um Datenflüsse zu automatisieren und zu orchestrieren. Aufbau eines strukturierten Delta Lake nach dem Kimball-Modell, um eine zuverlässige Datenbasis für analytische Zwecke zu schaffen. Integration aufbereiteter Daten in PowerBI zur Entwicklung aussagekräftiger Dashboards, die entscheidende Geschäftseinblicke bieten und datengetriebene Entscheidungen unterstützen.
- Databricks
- SQL
- Python
- Spark
- CLI/Bash
- strukturierte und semi-strukturierte Daten
- REST-APIs
- PowerBI
- DAX
- PowerQuery M
- Azure DevOps
- OOP
Kundenerfolg:
Verbesserung der Effizienz, Skalierbarkeit der Dateninfrastruktur, sowie Entscheidungsfindung durch Self-Service BI.
Apache Spark, Databricks, SQL
Ausbildung
Hochschule für Technik und Wirtschaft Berlin
Berlin
Hochschule für Wirtschaft und Recht Berlin
Berlin
Über mich
Betriebssysteme: Unix, Linux, Ubuntu, Windows, Android
Datenbanken: Oracle DB, PostgreSQL, Data Lake/Delta Lake, Google Firebase
Hochsprachen: Python, SQL, Bash, Java, Ruby, Javascript, Ruby, HTML/CSS, VBA
Plattformen: Spark, Databricks, Git, Airflow, Azure Cloud, Google Cloud, Docker, MS Office
Visualisierungstools: Tableau, PowerBI, Matplotlib, Plotly
Fachliche Kernkompetenzen (Überblick)
Key Skills:
BI
Data Engineer (Spark, Databricks, Airflow)
Data Science (Tensorflow, Scikit-Learn, Pytorch, Pandas)
Azure
Tableau
PowerBI
Zertifizierungen:
- Databricks Accredited Lakehouse Fundamentals
Branchen:
Behörde, IT Dienstleitung (BI Beratung), Finanzbranche, Transport- und Verkehrswesens, Versicherungen, Medizin und Gesundheitsdienstleitungen
Sonstige Kenntnisse:
- Machine Learning
- Deep Learning
- NLP
- Computer Vision
- Infrastructure as Code
Weitere Kenntnisse
Betriebssysteme: Unix, Linux, Ubuntu, Windows, Android
Datenbanken: Oracle DB, PostgreSQL, Data Lake/Delta Lake, Google Firebase
Hochsprachen: Python, SQL, Bash, Java, Ruby, Javascript, Ruby, HTML/CSS, VBA
Plattformen: Spark, Databricks, Git, Airflow, Azure Cloud, Google Cloud, Docker, MS Office
Visualisierungstools: Tableau, PowerBI, Matplotlib, Plotly
Fachliche Kernkompetenzen (Überblick)
Key Skills:
BI
Data Engineer (Spark, Databricks, Airflow)
Data Science (Tensorflow, Scikit-Learn, Pytorch, Pandas)
Azure
Tableau
PowerBI
Zertifizierungen:
- Databricks Accredited Lakehouse Fundamentals
Branchen:
Behörde, IT Dienstleitung (BI Beratung), Finanzbranche, Transport- und Verkehrswesens, Versicherungen, Medizin und Gesundheitsdienstleitungen
Sonstige Kenntnisse:
- Machine Learning
- Deep Learning
- NLP
- Computer Vision
- Infrastructure as Code
Persönliche Daten
- Deutsch (Muttersprache)
- Vietnamesisch (Muttersprache)
- Englisch (Fließend)
- Europäische Union
Kontaktdaten
Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.
Jetzt Mitglied werden