Ivan P.

Data Engineer

Ivan is een ervaren Data Engineer met meer dan 10 jaar commerciële ervaring in softwareontwikkeling en datagestuurde oplossingen. Hij heeft diepgaande expertise in AWS cloud services, Kafka, Snowflake en Airflow, gecombineerd met sterke programmeervaardigheden in Java, Scala en Python.

Een van zijn belangrijkste prestaties was het ontwerpen en implementeren van een volledig serverloze datapijplijn voor webanalyse en het volgen van klanten - een project dat hij als cruciaal beschouwt voor het vormen van zijn carrière als Data Engineer. Door deze opdracht heeft Ivan uitgebreide ervaring opgedaan in Python, AWS-dataservices, datastreaming, data lakes en infrastructuurvoorziening met behulp van template-gebaseerde code.

Ivan wordt erkend voor zijn aanpassingsvermogen, inzet om voortdurend te leren en zijn vermogen om schaalbare, efficiënte en goed presterende dataoplossingen te leveren die een echte zakelijke impact hebben.

Hoofd expertise

  • Snowflake
    Snowflake 3 jaar
  • Apache Airflow
    Apache Airflow 5 jaar
  • Python
    Python 5 jaar

Andere vaardigheden

    Ivan

    Ivan P.

    North Macedonia

    Aan de slag

    Geselecteerde ervaring

    Dienstverband

    • Data Engineer

      JW Player (InPlayer) - 3 jaar

      • Bijgedragen aan het data engineering team van JW Player, ontwikkeling van data pipelines en embedded analytics voor het Payments and Subscriptions domein.
      • CDC-pijplijnen geïmplementeerd met AWS DMS, waarbij gegevens van PostgreSQL, MariaDB, Kinesis en Kafka zijn geïntegreerd in S3.
      • Verwerkte en orkestreerde gegevens in Snowflake met behulp van Airflow en Snowflake-taken en beheerde schema-evolutie met Sqitch.
      • Datavisualisatie mogelijk gemaakt via ThoughtSpot en Looker, waardoor gegevens beter toegankelijk zijn en inzichten beter worden weergegeven.
      • Bewaakte de systeemprestaties met DataDog en stroomlijnde het infrastructuurbeheer met GitLab, GitHub, CloudFormation en Docker.

      Technologieën:

      • Technologieën:
      • PostgreSQL PostgreSQL
      • AWS AWS
      • Apache Kafka Apache Kafka
      • SQL SQL
      • AWS Kinesis AWS Kinesis
      • DataDog DataDog
      • Apache Airflow Apache Airflow
      • Snowflake Snowflake
      • Dimensional modeling
      • Fact Data Modeling
      • ThoughtSpot
      • AWS RDS AWS RDS
      • AWS CloudFormation AWS CloudFormation

    • Data Engineer

      Slice - 1 jaar 10 maanden

      • Bijgedragen aan het data engineering team van Slice, een snelgroeiend B2B2C platform dat meer dan 20.000 Amerikaanse klanten ondersteunt. pizzeria's.
      • Ontwierp en onderhield live data pipelines, waarbij CDC-gegevens voor gebruikers en orders werden geïntegreerd in Databricks Delta Lake, DynamoDB (via OData) en S3.
      • Gebruik gemaakt van het Confluent Kafka platform met Schema Registry voor stream schema evolutie (AVRO).
      • Toegepaste KsqlDB en Kafka Streams (Scala) voor real-time stream processing.
      • Kafka Connect geïmplementeerd voor systeemintegraties en het vastleggen van wijzigingsgegevens.
      • Gebruikt Databricks Notebooks voor Spark batchverwerking in SQL, Scala en Python.
      • Georkestreerde Databricks jobs met Airflow voor workflow automatisering.
      • Gebruikt GitLab CI/CD, Docker en Terraform voor implementatie en infrastructuurbeheer.

      Technologieën:

      • Technologieën:
      • AWS AWS
      • Databricks Databricks
      • Apache Spark Apache Spark
      • Java Java
      • Python Python
      • Apache Kafka Apache Kafka
      • SQL SQL
      • Scala Scala
      • Apache Airflow Apache Airflow
      • Confluent Confluent

    • Data Engineer

      Global Savings Group (for intertec.io) - 2 jaar 3 maanden

      • Werkte als hoofdarchitect en ontwikkelaar in het Web Analytics and Tracking team bij Global Saving Group, een platform dat online shoppers verbindt met retailers en 100+ digitale klanten wereldwijd bedient.
      • Ontwierp, ontwikkelde en onderhield interne producten voor het bijhouden van klanten, web analytics en cross-domain conversie en transactie tracking.
      • Volledig serverloze IaC-implementaties gebouwd op AWS, voor een schaalbare en kostenefficiënte infrastructuur.
      • Ontwikkelde en orkestreerde data pipelines voor event-based en batch data ingestion met behulp van een data lake benadering.
      • Verwerkte grote hoeveelheden ruwe, ongestructureerde gegevens, voerde transformaties, aggregaties en datawarehousing uit.
      • Realtime analyses leveren over actieve gebruikers, sessies en kanalen om bedrijfsinzichten te ondersteunen.

      Technologieën:

      • Technologieën:
      • MySQL MySQL
      • AWS AWS
      • Java Java
      • Python Python
      • SQL SQL
      • DynamoDB DynamoDB
      • AWS Kinesis AWS Kinesis
      • AWS Athena AWS Athena
      • Redshift Redshift
      • Apache Flink Apache Flink
      • AWS CloudFormation AWS CloudFormation
      • AWS Data Catalog AWS Data Catalog

    • Mulesoft Developer

      Admios - 1 jaar 10 maanden

      • Leidde de Java-ontwikkeling van meerdere data-integratieprojecten met behulp van het Anypoint Mulesoft ESB-platform en ontwikkelde gecertificeerde aangepaste connectoren die gepubliceerd zijn op de Mulesoft Marketplace, ter ondersteuning van bedrijfssystemen zoals Salesforce, Anaplan, Coupa en CallidusCloud.
      • Het definiëren en verzamelen van business requirements direct met producteigenaren, architecten en managers van de klant.
      • Opstellen van documentatie voor architectuurontwerp en voorstellen voor oplossingen om de implementatie van projecten te begeleiden.
      • Implementeerde end-to-end integratieoplossingen die schaalbaarheid en onderhoudbaarheid garanderen.
      • Ontwikkelde en voerde functionele en integratietests uit om de prestaties en betrouwbaarheid van het systeem te valideren.

      Technologieën:

      • Technologieën:
      • Java Java
      • MuleSoft Anypoint Platform
      • MuleSoft MuleSoft

    Educatie

    • BSc.Software Engineering

      European University - Faculty of informatics · 2005 - 2011

    Vind jouw volgende ontwikkelaar binnen enkele dagen, niet maanden

    In een kort gesprek van 25 minuten:

    • gaan we in op wat je nodig hebt om je product te ontwikkelen;
    • Ons proces uitleggen om u te matchen met gekwalificeerde, doorgelichte ontwikkelaars uit ons netwerk
    • delen we de stappen met je om de juiste match te vinden, vaak al binnen een week.

    Maak een afspraak

    Eerste ontwikkelaar begint binnen enkele dagen. Geen agressieve verkooppitch.