Ivan P.

Data Engineer

Ivan är en erfaren Data Engineer med över 10 års kommersiell erfarenhet av mjukvaruutveckling och datadrivna lösningar. Han har djup expertis inom AWS molntjänster, Kafka, Snowflake och Airflow, i kombination med starka programmeringskunskaper i Java, Scala och Python.

En av hans viktigaste prestationer var att utforma och implementera en helt serverlös datapipeline för webbanalys och kundspårning - ett projekt som han anser var avgörande för att forma hans karriär som dataingenjör. Genom detta uppdrag fick Ivan omfattande erfarenhet av Python, AWS datatjänster, dataströmning, datasjöar och infrastrukturförsörjning med hjälp av mallbaserad kod.

Ivan är erkänd för sin anpassningsförmåga, sitt engagemang för kontinuerligt lärande och sin förmåga att leverera skalbara, effektiva och högpresterande datalösningar som ger verklig affärspåverkan.

Huvudsaklig expertis

Snowflake 3 år
Apache Airflow 5 år
Python 5 år

Andra kompetenser

Ivan P.

North Macedonia

Hitta en utvecklare

Utvald erfarenhet

Anställningar

Data Engineer

JW Player (InPlayer) - 3 år
- Bidrog till datateknikteamet på JW Player genom att utveckla datapipelines och inbäddade analyser för domänen Payments and Subscriptions.
- Implementerade CDC-pipelines med AWS DMS och integrerade data från PostgreSQL, MariaDB, Kinesis och Kafka till S3.
- Bearbetade och orkestrerade data i Snowflake med hjälp av Airflow och Snowflake Tasks och hanterade schemautveckling med Sqitch.
- Aktiverad datavisualisering genom ThoughtSpot och Looker, vilket förbättrar datatillgängligheten och insiktsleveransen.
- Övervakade systemets prestanda med DataDog och effektiviserade infrastrukturhanteringen med GitLab, GitHub, CloudFormation och Docker.
Teknologier:
- Teknologier:
- PostgreSQL
- AWS
- Apache Kafka
- SQL
- AWS Kinesis
- DataDog
- Apache Airflow
- Snowflake
- Dimensional modeling
- Fact Data Modeling
- ThoughtSpot
- AWS RDS
- AWS CloudFormation
Data Engineer

Slice - 1 år 10 månader
- Bidrog till datateknikteamet på Slice, en snabbt växande B2B2C-plattform som stöder över 20 000 amerikanska företag. pizzerior.
- Utforma och underhålla live-datapipelines, integrera CDC-data för användare och order till Databricks Delta Lake, DynamoDB (via OData) och S3.
- Använde Confluent Kafka-plattformen med Schema Registry för strömschemautveckling (AVRO).
- Tillämpade KsqlDB och Kafka Streams (Scala) för realtidsströmbehandling.
- Implementerade Kafka Connect för systemintegrationer och insamling av ändringsdata.
- Utnyttjade Databricks Notebooks för Spark batchbehandling i SQL, Scala och Python.
- Orkestrerade Databricks-jobb med Airflow för automatisering av arbetsflöden.
- Använde GitLab CI / CD, Docker och Terraform för distribution och infrastrukturhantering.
Teknologier:
- Teknologier:
- AWS
- Databricks
- Apache Spark
- Java
- Python
- Apache Kafka
- SQL
- Scala
- Apache Airflow
- Confluent
Data Engineer

Global Savings Group (for intertec.io) - 2 år 3 månader
- Fungerade som huvudarkitekt och utvecklare i Web Analytics and Tracking-teamet på Global Saving Group, en plattform som kopplar samman online-shoppare med detaljhandlare och betjänar 100+ digitala kunder över hela världen.
- Design, utveckling och underhåll av interna produkter för kundspårning, webbanalys och konvertering och transaktionsspårning över domäner.
- Byggde helt serverlösa IaC-implementeringar på AWS, vilket möjliggör skalbar och kostnadseffektiv infrastruktur.
- Utvecklade och orkestrerade datapipelines för händelsebaserat och batchdataintag med hjälp av en datasjöstrategi.
- Bearbetade stora volymer av ostrukturerade rådata, utförde transformationer, aggregeringar och datalagring.
- Levererade realtidsanalys av aktiva användare, sessioner och kanaler för att stödja affärsinsikter.
Teknologier:
- Teknologier:
- MySQL
- AWS
- Java
- Python
- SQL
- DynamoDB
- AWS Kinesis
- AWS Athena
- Redshift
- Apache Flink
- AWS CloudFormation
- AWS Data Catalog
Mulesoft-utvecklare

Admios - 1 år 10 månader
- Ledde Java-utveckling på flera dataintegrationsprojekt med hjälp av Anypoint Mulesoft ESB-plattformen och utvecklade certifierade anpassade anslutningar som publicerades på Mulesoft Marketplace, med stöd för företagssystem som Salesforce, Anaplan, Coupa och CallidusCloud.
- Definierade och samlade in affärskrav direkt med kundens produktägare, arkitekter och chefer.
- Förberedde dokumentation av arkitekturdesign och lösningsförslag för att vägleda projektgenomförandet.
- Implementerade end-to-end integrationslösningar som säkerställde skalbarhet och underhåll.
- Utvecklat och utfört funktions- och integrationstester för att validera systemets prestanda och tillförlitlighet.
Teknologier:
- Teknologier:
- Java
- MuleSoft Anypoint Platform
- MuleSoft