Freelancer » Informations- und Kommunikationstechnologie » Softwareentwicklung / -programmierung
freiberufler Data Engineer auf freelance.de

Data Engineer

offline
  • 40€/Stunde
  • 21035 Bergedorf
  • Weltweit
  • fa  |  de  |  en
  • 22.05.2023
Jetzt registrieren & Kontakt aufnehmen

Kurzvorstellung

Ich entwickle technische Verfahren und Big-Data-Architekturen. Als Spezialisten für Datenanalyse und Datenmanagement finde ich Lösungen, um auch unstrukturierte Daten auswerten und zusammenführen zu können.

Qualifikationen

  • Apache Hadoop
  • Big Data3 J.
  • Business Intelligence (BI)
  • Data Science
  • ETL
  • Java (allg.)
  • Power Bi
  • Python3 J.
  • Scala
  • SQL3 J.

Projekt‐ & Berufserfahrung

Softwareentwickler Python
PNPT Company – Iran, Teheran
7/2018 – 5/2023 (4 Jahre, 11 Monate)
IT & Entwicklung
Tätigkeitszeitraum

7/2018 – 5/2023

Tätigkeitsbeschreibung

- Mitarbeit bei der Python-Entwicklung von Software-Services in Linux-Umgebungen
- Unterstützung bei der technischen Konzeption von Software-Services
- Konzeption und Implementierung von CI/CD
- Betrieb von Cloud Services
- Entwickeln von neuen Systemfunktionen: Design und Implementierung der Software, Programmierung in C, C++ oder C#
- Schreiben von effektivem, skalierbarem Code
- Integration von benutzerseitigen Elementen in die Anwendungen
- Testen und Debuggen von Programmen
- Design und Umsetzung der Softwarearchitekturen mit .NET CORE und Blazor unter Verwendung von C#, TypeScript / JavaScript, HTML, SCSS/CSS und Visual Studio

Eingesetzte Qualifikationen

.Net, C, C#, C++, JavaScript

Data Engineer
Parsdata Company Iran, Teheran
4/2015 – 5/2018 (3 Jahre, 2 Monate)
IT & Entwicklung
Tätigkeitszeitraum

4/2015 – 5/2018

Tätigkeitsbeschreibung

- Entwickeln und Implementieren von Datenpipelines und -architekturen in der Cloud-basierten Umgebung von Azure
- Verwalten und Optimieren von Datenbanken mit SQL, einschließlich der Optimierung von Abfragen und der Verbesserung der Datenqualität
- Analysieren von Quellsystemen für das Data Warehouse und Datamarts
- Sicherstellen des Betriebs im Team unter Einhaltung der SLA's (DevOps)
- Analysieren, Konzipieren, Entwickeln, Testen und Betreiben von modernen Datenintegrationslösungen
- Entwicklung von Data Warehousing oder Datenmodellierung und PL/SQL gepaart mit Hintergrund in der Entwicklung von Datenpipelines

Eingesetzte Qualifikationen

Big Data, Python, SQL

Über mich

Ich überwache den Aufbau der Hardware- und Software-Infrastruktur. Dabei erstelle ich ein Konzept, das alle Bestandteile vereint, kümmere mich um den Einkauf sowie die Einrichtung der nötigen Komponenten. Außerdem bestimme ich über die Software und welche Services eingesetzt werden. Dazu muss ich eine Datenbank aufbauen und pflegen können.

Weitere Kenntnisse

- Design von Data Pipelines
- Selbstständige Implementierung und Betrieb der Data Pipelines in Cloud Infrastruktur
- Cross-funktionale Zusammenarbeit mit Software Entwicklern, Analysten und Data Scientists zur Bereitstellung von Datensätzen für Self-Service Analytics und Data Science
- Entwicklung von Tools und Services zur Sicherstellung einer hohen Datenqualität und eines unterbrechungsfreien Betriebs der Data Pipelines

Meine Projektliste:

Big Data project with Hortonworks:
Install of Hortonworks POC cluster HDP 2.5
Development of Nifi flows , HOFS , Bash scripting
Installation of Talend ( ETL, MDM, ESB, DataMapper, Stewardship ... etc) Support and monitoring of production
Installation of HOF
Python development for text extraction


BI Project with Talend and MSBI:
Review and design of the DWH (Populate via SAP (ldoc files), SalesForce Uava custom fonctions webservice)
Evaluation of data issues and implementation of solutions
Analysis of business processes and recommendations for improvements
Project management : managers and technical team -Team Leader and mentoring of junior members
Data Modelling and Data Warehousing Design
Experience with Big Data
Design and development of Relational Databases
Design and implementation of Data Loading Processes, using different technologies: Talend,BODS, MySQL, Microsoft SQL Server, Unix, Bash Scripting, PostgreSQL,
Definition of Unit Tests and Validation of Data
Experience working with AGILE
Definition of standards and guidelines for Data Integration Processes and Datawarehouses
Definition of a deployment process between the different environments (Development, Testing and Production) Master Data Management Modeling and development using Talend MDM and IBM MDM CS
Experience working with Jira
Data Quality and Data Profiling
Performance tuning of Data Integration Processes
Experience with Data Governance framework
Experience working with version control systems: Git and Subversin

Persönliche Daten

Sprache
  • Persisch (Muttersprache)
  • Deutsch (Fließend)
  • Englisch (Gut)
Reisebereitschaft
Weltweit
Arbeitserlaubnis
  • Europäische Union
Home-Office
bevorzugt
Profilaufrufe
277
Alter
33
Berufserfahrung
16 Jahre und 10 Monate (seit 01/2008)
Projektleitung
5 Jahre

Kontaktdaten

Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.

Jetzt Mitglied werden