Mehmet Ş.

Data Engineer

Turkey

Betrodd medlem sedan 2023

5 års erfarenhet

Han har konsekvent visat sin förmåga att utforma och implementera högpresterande databehandlingssystem som hanterar storskaliga data på ett effektivt sätt.

En av Mehmets mest anmärkningsvärda prestationer är skapandet av en Java-baserad applikation som identifierar orderartiklar som är berättigade till kampanjer med fri frakt. Detta system bearbetar orderhändelser från Kafka, interagerar med Rise Simulate Apply-tjänsten via API-anrop och skickar API-svaren till ett separat Kafka-ämne, vilket säkerställer korrekt och strömlinjeformad datahantering.

Utöver sina tekniska prestationer har Mehmet en djup passion för spelindustrin. Han är angelägen om att utöka sin kunskap om spelmätning och analys för att bidra till att förbättra spelarnas upplevelser.

Han har konsekvent visat sin förmåga att utforma och implementera högpresterande databehandlingssystem som hanterar storskaliga data på ett effektivt sätt.

Huvudsaklig expertis

Apache Kafka4 år

BigQuery4 år

CSV4 år

Data Engineering5 år

Erfarenhet3

Data Engineer

Doping Hafıza•

Education

Jan 2025 · 1y 2m

Created and maintained ETL pipelines using PySpark and AWS Glue.
Worked with Apache Iceberg tables in the data lakehouse.
Deployed and scheduled workflows with AWS Managed Airflow (MWAA).
Loaded fact and dimension tables from the data lakehouse into Amazon Redshift.
Assisted in documenting new tables, columns, and data transformations.
Integrated AWS Glue Docker development environment to enable efficient local development and testing of Spark jobs.

Python

SQL

ETL

AWS Glue

PySpark

DWH Developer

Trendyol Group•

E-commerce

Nov 2018 - Oct 2024 · 5y 11m

Extraherade data från olika datakällor (PostgreSQL, MSSQL Server, Couchbase DB, SAP Hana, Kafka, API: er, webbsidor) genom att använda internt utvecklade datainmatningsverktyg, cdc-verktyg, Kafka Connect och Python-skript;
Utvecklade ELT-processer på Vertica;
Utvecklade ELT-processer på BigQuery;
Migrerade Vertica ELT-processer till BigQuery;
Utvecklade Python-skript för att automatisera interna processer;
Utvecklade Java-program för att flytta data in och ut ur Kafka (utvecklade SMT för Kafka Connect, utvecklade Kafka Streams-program);
Underhåll av Kafka Connect-kluster;
Stödde andra team för inställning av frågeprestanda, dataåtkomst etc;
Gjorde små bevis på koncept för verktyg med öppen källkod som Apache Airflow, Azkaban, Prefect;
Bidrog till den interna kodbasen för datainfrastruktur.