Mehmet Ş.

Data Engineer

Turkey

Luotettava jäsen vuodesta 2023

5 vuoden kokemus

Hän on jatkuvasti osoittanut kykynsä suunnitella ja toteuttaa tehokkaita tietojenkäsittelyjärjestelmiä, jotka käsittelevät suuria tietomääriä tehokkaasti.

Yksi Mehmetin merkittävimmistä saavutuksista on Java-pohjaisen sovelluksen luominen, joka tunnistaa tilaustuotteet, jotka ovat oikeutettuja maksuttomaan toimitukseen. Tämä järjestelmä käsittelee Kafkasta tulevia tilaustapahtumia, on vuorovaikutuksessa Rise Simulate Apply -palvelun kanssa API-kutsujen kautta ja antaa API-vastaukset erilliseen Kafka-aiheeseen, mikä takaa tarkan ja virtaviivaistetun tietojenkäsittelyn.

Teknisten saavutustensa lisäksi Mehmet suhtautuu intohimoisesti pelialaan. Hän on innokas laajentamaan tietämystään pelimittaristosta ja analytiikasta, jotta hän voisi parantaa pelaajakokemuksia.

Hän on jatkuvasti osoittanut kykynsä suunnitella ja toteuttaa tehokkaita tietojenkäsittelyjärjestelmiä, jotka käsittelevät suuria tietomääriä tehokkaasti.

Tärkein asiantuntemus

Apache Kafka4 vuotta

BigQuery4 vuotta

CSV4 vuotta

Data Engineering5 vuotta

Kokemus3

Data Engineer

Doping Hafıza•

Education

Jan 2025 · 1v 9k

Created and maintained ETL pipelines using PySpark and AWS Glue.
Worked with Apache Iceberg tables in the data lakehouse.
Deployed and scheduled workflows with AWS Managed Airflow (MWAA).
Loaded fact and dimension tables from the data lakehouse into Amazon Redshift.
Assisted in documenting new tables, columns, and data transformations.
Integrated AWS Glue Docker development environment to enable efficient local development and testing of Spark jobs.

Python

SQL

ETL

AWS Glue

PySpark

DWH Developer

Trendyol Group•

E-commerce

Nov 2018 - Oct 2024 · 5v 11k

Otetut tiedot eri tietolähteistä (PostgreSQL, MSSQL Server, Couchbase DB, SAP Hana, Kafka, API:t, Web-sivut) käyttämällä sisäisesti kehitettyjä tietojen sisäänottotyökaluja, cdc-työkaluja, Kafka Connectia ja Python-skriptejä;
Kehitetty ELT-prosessit Verticassa;
Kehitetyt ELT-prosessit BigQueryn avulla;
Siirrettiin Vertica ELT -prosessit BigQueryyn;
Kehitit Python-skriptejä sisäisten prosessien automatisointia varten;
Kehitetty Java-ohjelmia tietojen siirtämiseksi Kafkaan ja sieltä pois (kehitetty SMT-ohjelmia Kafka Connectille, kehitetty Kafka Streams -ohjelmia);
Ylläpidetään Kafka Connect -klustereita;
Tukenut muita tiimejä kyselyiden suorituskyvyn virittämisessä, tietojen käytössä jne;
Tehnyt pieniä proof of concepts -konsepteja avoimen lähdekoodin työkaluille, kuten Apache Airflow, Azkaban, Prefect;
Osallistunut sisäisen datainfrastruktuurin koodipohjaan.

ELT

BI Consultant

I2I Systems•

Information Technology (IT) and Services

Aug 2017 - Nov 2018 · 1v 3k

Kehittänyt ETL-prosesseja Ab Inition kautta (Acquire>It, MDW);
Kehitetyt Bash-skriptit;
Kehitetyt PL/SQL-proseduurit;
Kehitetty Excel VBA -ohjelmia UC4-virtojen luomisprosessien automatisoimiseksi;
Tuetut testaus- ja täsmäytysprosessit Volkswagen Doğuş Finans DWH -hanke;
Luonut SSIS-paketteja ETL-prosesseja varten;
Kehitetty SQL:n tallennettuja proseduureja.

SQL

SSIS

AB Initio

ETL

Tekniikan huippuosaaminen

Kaikki Data Engineert, jotka ovat hakeneet Proxifylle, pisteytetään välillä 0–300 insinööritaidon perusteella, joka on yksi viidestä arvioimastamme parametrista. Tämä pistemäärä heijastaa ainoastaan insinööritaitoa, perustuen haastatteluihin, kotitehtäviin, suorissa koodausistunnoissa sekä työn suorituskyvyn arvioinnissa annettuihin tuloksiin. Kaavio näyttää, miten kaikki arvioidut Data Engineert jakautuvat tässä mittakaavassa, hyväksymisrajamme tälle parametrille sekä missä kohtaa Mehmet sijaitsee.