Mehmet Ş.

Data Engineer

Turkey

Betroet medlem siden 2023

5 års erfaring

Han har konsekvent demonstreret sin evne til at designe og implementere højtydende databehandlingssystemer, der effektivt håndterer data i stor skala.

Et af Mehmets mest bemærkelsesværdige resultater er oprettelsen af en Java-baseret applikation, der identificerer bestillingsvarer, der er berettiget til gratis fragtkampagner. Dette system behandler ordrehændelser fra Kafka, interagerer med Rise Simulate Apply-tjenesten via API-kald og udsender API-svarene til et separat Kafka-emne, hvilket sikrer nøjagtig og strømlinet datahåndtering.

Ud over sine tekniske præstationer er Mehmet dybt passioneret omkring spilindustrien. Han er ivrig efter at udvide sin viden om spilmålinger og -analyser for at bidrage til at forbedre spillernes oplevelser.

Han har konsekvent demonstreret sin evne til at designe og implementere højtydende databehandlingssystemer, der effektivt håndterer data i stor skala.

Hovedekspertise

Apache Kafka4 år

BigQuery4 år

CSV4 år

Data Engineering5 år

Erfaring3

Data Engineer

Doping Hafıza•

Education

Jan 2025 · 1y 2m

Created and maintained ETL pipelines using PySpark and AWS Glue.
Worked with Apache Iceberg tables in the data lakehouse.
Deployed and scheduled workflows with AWS Managed Airflow (MWAA).
Loaded fact and dimension tables from the data lakehouse into Amazon Redshift.
Assisted in documenting new tables, columns, and data transformations.
Integrated AWS Glue Docker development environment to enable efficient local development and testing of Spark jobs.

Python

SQL

ETL

AWS Glue

PySpark

DWH Developer

Trendyol Group•

E-commerce

Nov 2018 - Oct 2024 · 5y 11m

Udtræk af data fra forskellige datakilder (PostgreSQL, MSSQL Server, Couchbase DB, SAP Hana, Kafka, API'er, websider) ved hjælp af internt udviklede dataindtagelsesværktøjer, cdc-værktøjer, Kafka Connect og Python-scripts;
Udviklet ELT-processer på Vertica;
Udviklet ELT-processer på BigQuery;
Migrerede Vertica ELT-processer til BigQuery;
Udviklet Python-scripts til automatisering af interne processer;
Udviklet Java-programmer til at flytte data ind og ud af Kafka (udviklet SMT'er til Kafka Connect, udviklet Kafka Streams-programmer);
Vedligeholdelse af Kafka Connect-klynger;
Støttet andre teams i forbindelse med tuning af forespørgsler, dataadgang osv;
Lavet små proof of concepts for open source-værktøjer som Apache Airflow, Azkaban, Prefect;
Bidraget til den interne kodebase for datainfrastruktur.

ELT

BI-konsulent

I2I Systems•

Information Technology (IT) and Services

Aug 2017 - Nov 2018 · 1y 3m

Udviklet ETL-processer via Ab Initio (Acquire>It, MDW);
Udviklet Bash-scripts;
Udviklet PL/SQL-procedurer;
Udviklet Excel VBA-programmer til automatisering af UC4-flowoprettelsesprocesser;
Understøttede test- og afstemningsprocesser Volkswagen Doğuş Finans DWH-projekt;
Oprettet SSIS-pakker til ETL-processer;
Udviklet SQL-lagrede procedurer.

SQL