Mehmet Ş.

Data Engineer

Turkey

Betrodd medlem siden 2023

5 år erfaring

Han har konsekvent vist sin evne til å designe og implementere høytytende databehandlingssystemer som håndterer store mengder data effektivt.

En av Mehmet sine mest bemerkelsesverdige prestasjoner er opprettelsen av en Java-basert applikasjon som identifiserer bestillingsartikler kvalifisert for gratis frakt kampanjer. Dette systemet behandler ordrehendelser fra Kafka, samhandler med Rise Simulate Apply-tjenesten via API-kall, og sender API-responsene til et separat Kafka-emne, og sikrer nøyaktig og strømlinjeformet datahåndtering.

I tillegg til hans tekniske prestasjoner er Mehmet dypt engasjert i spillindustrien. Han er ivrig etter å utvide sin kunnskap om spillmetrics og analyse for å bidra til å forbedre spilleropplevelser.

Han har konsekvent vist sin evne til å designe og implementere høytytende databehandlingssystemer som håndterer store mengder data effektivt.

Hovedekspertise

Apache Kafka4 år

BigQuery4 år

CSV4 år

Data Engineering5 år

Erfaring3

Data Engineer

Doping Hafıza•

Education

Jan 2025 · 1y 2m

Created and maintained ETL pipelines using PySpark and AWS Glue.
Worked with Apache Iceberg tables in the data lakehouse.
Deployed and scheduled workflows with AWS Managed Airflow (MWAA).
Loaded fact and dimension tables from the data lakehouse into Amazon Redshift.
Assisted in documenting new tables, columns, and data transformations.
Integrated AWS Glue Docker development environment to enable efficient local development and testing of Spark jobs.

Python

SQL

ETL

AWS Glue

PySpark

DWH Developer

Trendyol Group•

E-commerce

Nov 2018 - Oct 2024 · 5y 11m

Hentet data fra forskjellige datakilder (PostgreSQL, MSSQL Server, Couchbase DB, SAP Hana, Kafka, API-er, nettsider) ved hjelp av internt utviklede datainntaksverktøy, cdc-verktøy, Kafka Connect og Python-skript;
Utviklet ELT-prosesser på Vertica;
Utviklet ELT-prosesser på BigQuery;
Migrerte Vertica ELT-prosesser til BigQuery;
Utviklet Python-skript for å automatisere interne prosesser;
Utviklet Java-programmer for å flytte data inn og ut av Kafka (utviklet SMT-er for Kafka Connect, utviklet Kafka Streams-programmer);
Vedlikehold av Kafka Connect-klynger;
Støttet andre team for innstilling av spørringsytelse, datatilgang osv;
Laget små bevis på konsepter for open source-verktøy som Apache Airflow, Azkaban, Prefect;
Bidratt til den interne kodebasen for datainfrastruktur.

ELT

BI Consultant

I2I Systems•

Information Technology (IT) and Services

Aug 2017 - Nov 2018 · 1y 3m

Utviklet ETL-prosesser via Ab Initio (Acquire>It, MDW);
Utviklet Bash-skript;
Utviklet PL/SQL-prosedyrer;
Utviklet Excel VBA-programmer for å automatisere UC4-prosesser for oppretting av flyt;
Støttede test- og avstemmingsprosesser Volkswagen Doğuş Finans DWH-prosjekt;
Laget SSIS-pakker for ETL-prosesser;
Utviklet SQL-lagrede prosedyrer.

SQL