Ali E.

Data Engineer

Ali Erdem ist ein talentierter Data Engineer mit sieben Jahren Berufserfahrung. Er war in verschiedenen Bereichen tätig, u. a. in der Versicherungsbranche, in kommunalen Projekten und in Cloud-Systemen.

Er verfügt über umfangreiche Erfahrungen in SQL, ETL, Apache Spark, Python und Airflow. Da Ali Erdem sowohl mit internationalen Teams als auch kommunalen Projekten zusammengearbeitet hat, hat er vielseitige Kenntnisse aus beiden Welten zu bieten.

Hauptkompetenz

  • Apache Spark
    Apache Spark 4 Jahre
  • Data Analytics 7 Jahre
  • Data Engineering 7 Jahre

Andere Fähigkeiten

  • Python
    Python 3 Jahre
  • Apache Airflow
    Apache Airflow 3 Jahre
  • Google Cloud
    Google Cloud 3 Jahre
Ali

Ali E.

Turkey

Erste Schritte

Ausgewählte Erfahrung

Beschäftigung

  • Data Engineer

    GfK(UK) - 3 jahre 11 monate

    • Verwendung von Airflow, SQL, Python, Bigquery, Cloud Storage und CloudRun
    • Arbeit an Datensätzen Dritter unter Verwendung von GCP
    • Erstellung und Wartung von DAG in Airflow 2.3.0 und Erstellung kundschaftsspezifischer Operatoren
    • Datenerhebung aus Drittanbieter-API in den Bereichen Wetter, Covid-19, OECD usw.
    • Erstellung vom Dashboards mit Streamlit
    • Erstellung einer Selbstbedienungs-Pipeline mit Gitlab CI/CD zur Planung von Jupyter NOTEBOOKS auf GCP

    Technologien:

    • Technologien:
    • BigQuery BigQuery
    • Streamlit Streamlit

  • Data Engineer

    Coca Cola CCI - 1 jahr 7 monate

    • Unterstützung von Lieferkettenprojekten
    • Import von Rohdaten aus Altsystemen und Dateien in BigQuery
    • Erstellung von Daten-Pipelines mit Composer (Airflow)
    • Erstellung von API zur Vorlegung von Daten mit Flask und Bereitstellung an GCP
    • Export oder Auszug von Daten in Bucket oder Cloud SQL
    • Training von KI-Modellen mit Vertex AI (kundschaftsspezifisches Training)

    Technologien:

    • Technologien:
    • BigQuery BigQuery
    • Data Analytics

  • Data Engineer

    Tarentum AI - 5 monate

    ● Hepsiburada is one of the biggest e-commerce companies in Turkey

    ● Create Reports to Hepsiburada’s CFO and Finance Team

    ● Import Raw Data from RDBMS to Hadoop with Sqoop Scripts

    ● Create ETL scripts with Hive Query Language

    ● Read Raw Data from External API(OMS) and Write to Hive Table with Python3

    ● Export Final Tables to MySql with Sqoop

    ● Schedule all jobs with Oozie, Hue

    ● Borusan Predictive Maintenance Project

    ● Restore Sensor Data from .bak files to Azure SQL Server

    ● Clean, Transform, and Combine data for Data Scientists with T-SQL

    ● Store Final Data in Blob Storage(Gen2)

    ● Mount Gen2 to Databricks File System

    ● Get quick insights Using Pyspark (Databricks Notebooks)

    Technologien:

    • Technologien:
    • Hadoop Hadoop

  • Big Data Engineer

    TFKB - Turkish Finance Participation Bank - 1 jahr 6 monate

    • Einrichtung von Hadoop-Ökosystemen (HDP 3.1.0)
    • Installation von HDF(3.3)-Clustern auf bestehende HDP
    • Cluster-Management (Aktivierung von HA, Kerberos)
    • Datenübertragung nach Hadoop
    • Entwicklung und Optimierung von Hive-Tabellen
    • Datenverschlüsselung und -maskierung (Ranger-Richtlinien)
    • Kontrolle von Datenbankskripten von über 40 agilen Entwicklungsteams
    • Definierung und Aufrechterhaltung von Namenskonventionen von Datenbankobjekten

    Technologien:

    • Technologien:
    • Apache NiFi Apache NiFi
    • Hadoop Hadoop

  • Data Engineer

    Insurance Information and Monitoring Centre - 7 monate

    • Datenübertragung von RDBMS nach HDFS
    • Entwicklung neuer ETL-Aufgaben
    • Entwicklung und Optimierung von Hive-Tabellen
    • Daten- und Cluster-Sicherheit mit Ranger

    Technologien:

    • Technologien:
    • Hadoop Hadoop

  • DWH and BI Specialist

    Insurance Information and Monitoring Centre - 9 monate

    ● Setup Hadoop Ecosystems HDP 2.6.3 ● Maintain additional Services like Solr, Banana ● Cluster Management

    Technologien:

    • Technologien:
    • Hadoop Hadoop

  • DWH and BI Specialist

    Insurance Information and Monitoring Centre - 2 jahre 3 monate

    ● Design, Develop, and Maintenance DWH Architecture

    ● Create and improve ETL Processes with ODI 11g, ODI 12c

    ● Develop Business Intelligence Reports with Cognos, Qlikview

    ● Ad-hoc Reports

    Technologien:

    • Technologien:
    • Qlik View Qlik View
    • Oracle Oracle
    • ELT
    • Data Analytics
    • PL/SQL PL/SQL
    • Cognos

Ausbildung

  • FortbildungWirtschaftsingenieurwesen

    Mondragón Unibertsitatea · 2013 - 2014

  • BSc.Wirtschaftsingenieurwesen

    Gaziantep-Universität · 2009 - 2014

Finden Sie Ihren nächsten Entwickler innerhalb von Tagen, nicht Monaten

In einem kurzen 25-minütigen Gespräch würden wir gerne:

  • Auf Ihren Bedarf bezüglich des Recruitments von Software-Entwicklern eingehen
  • Unseren Prozess vorstellen und somit wie wir Sie mit talentierten und geprüften Kandidaten aus unserem Netzwerk zusammenbringen können
  • Die nächsten Schritte besprechen, um den richtigen Kandidaten zu finden - oft in weniger als einer Woche

Unterhalten wir uns

Jetzt Entwickler:innen finden, die innerhalb von wenigen Tagen starten können. Ohne Risiko.