Ivan P.

Data Engineer

Ivan er en erfaren dataingeniør med over 10 års kommerciel erfaring inden for softwareudvikling og datadrevne løsninger. Han har dyb ekspertise inden for AWS cloud services, Kafka, Snowflake og Airflow kombineret med stærke programmeringsevner i Java, Scala og Python.

En af hans mest betydningsfulde præstationer var at designe og implementere en fuldt serverløs datapipeline til webanalyse og kundesporing - et projekt, som han anser for at være afgørende for hans karriere som dataingeniør. Gennem dette engagement fik Ivan omfattende erfaring med Python, AWS-datatjenester, datastreaming, datasøer og infrastrukturtilvejebringelse ved hjælp af skabelonbaseret kode.

Ivan er anerkendt for sin tilpasningsevne, sit engagement i løbende læring og sin evne til at levere skalerbare, effektive og højtydende dataløsninger, der skaber reel forretningseffekt.

Hovedekspertise

  • Snowflake
    Snowflake 3 år
  • Apache Airflow
    Apache Airflow 5 år
  • Python
    Python 5 år

Andre færdigheder

    Ivan

    Ivan P.

    North Macedonia

    Match med udvikler her

    Udvalgt oplevelse

    Beskæftigelse

    • Data Engineer

      JW Player (InPlayer) - 3 flere år

      • Bidrog til data engineering-teamet hos JW Player med udvikling af data pipelines og indlejrede analyser til Payments and Subscriptions-domænet.
      • Implementeret CDC-pipelines med AWS DMS, der integrerer data fra PostgreSQL, MariaDB, Kinesis og Kafka i S3.
      • Behandlet og orkestreret data i Snowflake ved hjælp af Airflow og Snowflake Tasks og administreret skemaudvikling med Sqitch.
      • Aktiveret datavisualisering gennem ThoughtSpot og Looker, hvilket forbedrer datatilgængeligheden og leveringen af indsigt.
      • Overvåget systemets ydeevne med DataDog og strømlinet infrastrukturstyring ved hjælp af GitLab, GitHub, CloudFormation og Docker.

      Teknologier:

      • Teknologier:
      • PostgreSQL PostgreSQL
      • AWS AWS
      • Apache Kafka Apache Kafka
      • SQL SQL
      • AWS Kinesis AWS Kinesis
      • DataDog DataDog
      • Apache Airflow Apache Airflow
      • Snowflake Snowflake
      • Dimensional modeling
      • Fact Data Modeling
      • ThoughtSpot
      • AWS RDS AWS RDS
      • AWS CloudFormation AWS CloudFormation

    • Data Engineer

      Slice - 1 år 10 måneder

      • Bidrag til data engineering-teamet hos Slice, en hurtigt voksende B2B2C-platform, der understøtter over 20.000 amerikanske virksomheder. pizzeriaer.
      • Designet og vedligeholdt live-datapipelines, der integrerede CDC-data for brugere og ordrer i Databricks Delta Lake, DynamoDB (via OData) og S3.
      • Brugte Confluent Kafka-platformen med Schema Registry til stream schema evolution (AVRO).
      • Anvendt KsqlDB og Kafka Streams (Scala) til strømbehandling i realtid.
      • Implementeret Kafka Connect til systemintegrationer og registrering af ændringsdata.
      • Udnyttede Databricks Notebooks til Spark-batchbehandling i SQL, Scala og Python.
      • Orkestrerede Databricks-jobs med Airflow til automatisering af arbejdsgange.
      • Anvendte GitLab CI/CD, Docker og Terraform til udrulning og infrastrukturstyring.

      Teknologier:

      • Teknologier:
      • AWS AWS
      • Databricks Databricks
      • Apache Spark Apache Spark
      • Java Java
      • Python Python
      • Apache Kafka Apache Kafka
      • SQL SQL
      • Scala Scala
      • Apache Airflow Apache Airflow
      • Confluent Confluent

    • Data Engineer

      Global Savings Group (for intertec.io) - 2 flere år 3 måneder

      • Fungerede som ledende arkitekt og udvikler i webanalyse- og sporingsteamet hos Global Saving Group, en platform, der forbinder onlineshoppere med detailhandlere og betjener 100+ digitale kunder over hele verden.
      • Design, udvikling og vedligeholdelse af interne produkter til kundesporing, webanalyse og konverterings- og transaktionssporing på tværs af domæner.
      • Bygget fuldt serverløse IaC-implementeringer på AWS, hvilket muliggør skalerbar og omkostningseffektiv infrastruktur.
      • Udviklet og orkestreret datapipelines til hændelsesbaseret og batch-dataindlæsning ved hjælp af en data lake-tilgang.
      • Behandlet store mængder rå, ustrukturerede data, udført transformationer, aggregeringer og data warehousing.
      • Leverede analyser i realtid af aktive brugere, sessioner og kanaler for at understøtte forretningsindsigt.

      Teknologier:

      • Teknologier:
      • MySQL MySQL
      • AWS AWS
      • Java Java
      • Python Python
      • SQL SQL
      • DynamoDB DynamoDB
      • AWS Kinesis AWS Kinesis
      • AWS Athena AWS Athena
      • Redshift Redshift
      • Apache Flink Apache Flink
      • AWS CloudFormation AWS CloudFormation
      • AWS Data Catalog AWS Data Catalog

    • Mulesoft-udvikler

      Admios - 1 år 10 måneder

      • Ledte Java-udvikling på flere dataintegrationsprojekter ved hjælp af Anypoint Mulesoft ESB-platformen og udviklede certificerede brugerdefinerede connectorer, der blev offentliggjort på Mulesoft Marketplace, og som understøttede virksomhedssystemer som Salesforce, Anaplan, Coupa og CallidusCloud.
      • Definere og indsamle forretningskrav direkte med kundens produktejere, arkitekter og ledere.
      • Forberedt arkitekturdesigndokumentation og løsningsforslag til at guide projektimplementering.
      • Implementeret end-to-end integrationsløsninger, der sikrer skalerbarhed og vedligehold.
      • Udviklet og udført funktions- og integrationstest for at validere systemets ydeevne og pålidelighed.

      Teknologier:

      • Teknologier:
      • Java Java
      • MuleSoft Anypoint Platform
      • MuleSoft MuleSoft

    Uddannelse

    • BSc.Software Engineering

      European University - Faculty of informatics · 2005 - 2011

    Find din næste udvikler inden for få dage, ikke måneder

    Book en 25-minutters samtale, hvor vi:

    • udfører behovsafdækning med fokus på udviklingsopgaver
    • Forklar vores proces, hvor vi matcher dig med kvalificerede, godkendte udviklere fra vores netværk
    • beskriver de næste trin for at finde det perfekte match på få dage

    Lad os snakke om det

    I kan starte samarbejdet inden for få dage.