Mehmet Ş.

Data Engineer

Turkey

Luotettava jäsen vuodesta 2023

5 vuoden kokemus

Hän on jatkuvasti osoittanut kykynsä suunnitella ja toteuttaa tehokkaita tietojenkäsittelyjärjestelmiä, jotka käsittelevät suuria tietomääriä tehokkaasti.

Yksi Mehmetin merkittävimmistä saavutuksista on Java-pohjaisen sovelluksen luominen, joka tunnistaa tilaustuotteet, jotka ovat oikeutettuja maksuttomaan toimitukseen. Tämä järjestelmä käsittelee Kafkasta tulevia tilaustapahtumia, on vuorovaikutuksessa Rise Simulate Apply -palvelun kanssa API-kutsujen kautta ja antaa API-vastaukset erilliseen Kafka-aiheeseen, mikä takaa tarkan ja virtaviivaistetun tietojenkäsittelyn.

Teknisten saavutustensa lisäksi Mehmet suhtautuu intohimoisesti pelialaan. Hän on innokas laajentamaan tietämystään pelimittaristosta ja analytiikasta, jotta hän voisi parantaa pelaajakokemuksia.

Hän on jatkuvasti osoittanut kykynsä suunnitella ja toteuttaa tehokkaita tietojenkäsittelyjärjestelmiä, jotka käsittelevät suuria tietomääriä tehokkaasti.

Tärkein asiantuntemus

Apache Kafka4 vuotta

BigQuery4 vuotta

CSV4 vuotta

Data Engineering5 vuotta

Kokemus3

Data Engineer

Doping Hafıza•

Education

Jan 2025 · 1y 2m

Created and maintained ETL pipelines using PySpark and AWS Glue.
Worked with Apache Iceberg tables in the data lakehouse.
Deployed and scheduled workflows with AWS Managed Airflow (MWAA).
Loaded fact and dimension tables from the data lakehouse into Amazon Redshift.
Assisted in documenting new tables, columns, and data transformations.
Integrated AWS Glue Docker development environment to enable efficient local development and testing of Spark jobs.

Python

SQL

ETL

AWS Glue

PySpark

DWH Developer

Trendyol Group•

E-commerce

Nov 2018 - Oct 2024 · 5y 11m

Otetut tiedot eri tietolähteistä (PostgreSQL, MSSQL Server, Couchbase DB, SAP Hana, Kafka, API:t, Web-sivut) käyttämällä sisäisesti kehitettyjä tietojen sisäänottotyökaluja, cdc-työkaluja, Kafka Connectia ja Python-skriptejä;
Kehitetty ELT-prosessit Verticassa;
Kehitetyt ELT-prosessit BigQueryn avulla;
Siirrettiin Vertica ELT -prosessit BigQueryyn;
Kehitit Python-skriptejä sisäisten prosessien automatisointia varten;
Kehitetty Java-ohjelmia tietojen siirtämiseksi Kafkaan ja sieltä pois (kehitetty SMT-ohjelmia Kafka Connectille, kehitetty Kafka Streams -ohjelmia);
Ylläpidetään Kafka Connect -klustereita;
Tukenut muita tiimejä kyselyiden suorituskyvyn virittämisessä, tietojen käytössä jne;
Tehnyt pieniä proof of concepts -konsepteja avoimen lähdekoodin työkaluille, kuten Apache Airflow, Azkaban, Prefect;
Osallistunut sisäisen datainfrastruktuurin koodipohjaan.