Ivan P.

Data Engineer

Ivan er en erfaren dataingeniør med over 10 års kommersiell erfaring innen programvareutvikling og datadrevne løsninger. Han har dyp ekspertise innen AWS skytjenester, Kafka, Snowflake og Airflow, kombinert med sterke programmeringsferdigheter i Java, Scala og Python.

En av hans viktigste prestasjoner var å utforme og implementere en fullstendig serverløs datapipeline for nettanalyse og kundesporing - et prosjekt han mener har vært avgjørende for hans karriere som dataingeniør. Gjennom dette oppdraget har Ivan fått omfattende erfaring med Python, AWS-datatjenester, datastrømming, datasjøer og infrastrukturoppbygging ved hjelp av malbasert kode.

Ivan er anerkjent for sin tilpasningsevne, sitt engasjement for kontinuerlig læring og sin evne til å levere skalerbare, effektive og høytytende dataløsninger som gir reell forretningseffekt.

Hovedekspertise

  • Snowflake
    Snowflake 3 år
  • Apache Airflow
    Apache Airflow 5 år
  • Python
    Python 5 år

Andre kunnskaper

    Ivan

    Ivan P.

    North Macedonia

    Kom i gang

    Utvalgt opplevelse

    Arbeidserfaring

    • Data Engineer

      JW Player (InPlayer) - 3 years

      • Bidratt til datateknologiteamet hos JW Player med å utvikle datapipelines og innebygde analyser for Payments and Subscriptions-domenet.
      • Implementerte CDC-pipelines med AWS DMS, og integrerte data fra PostgreSQL, MariaDB, Kinesis og Kafka i S3.
      • Behandlet og orkestrert data i Snowflake ved hjelp av Airflow og Snowflake Tasks, og administrert skjemautvikling med Sqitch.
      • Aktivert datavisualisering gjennom ThoughtSpot og Looker, noe som forbedrer datatilgjengelighet og innsiktslevering.
      • Overvåket systemytelse med DataDog og strømlinjeformet infrastrukturadministrasjon ved hjelp av GitLab, GitHub, CloudFormation og Docker.

      Teknologier:

      • Teknologier:
      • PostgreSQL PostgreSQL
      • AWS AWS
      • Apache Kafka Apache Kafka
      • SQL SQL
      • AWS Kinesis AWS Kinesis
      • DataDog DataDog
      • Apache Airflow Apache Airflow
      • Snowflake Snowflake
      • Dimensional modeling
      • Fact Data Modeling
      • ThoughtSpot
      • AWS RDS AWS RDS
      • AWS CloudFormation AWS CloudFormation
    • Data Engineer

      Slice - 1 year 10 months

      • Bidratt til datateknologiteamet hos Slice, en raskt voksende B2B2C-plattform som støtter over 20 000 amerikanske kunder. pizzeriaer.
      • Designet og vedlikeholdt live datapipelines, og integrerte CDC-data for brukere og bestillinger i Databricks Delta Lake, DynamoDB (via OData) og S3.
      • Brukt Confluent Kafka-plattformen med Schema Registry for strømskjemautvikling (AVRO).
      • Anvendt KsqlDB og Kafka Streams (Scala) for sanntids strømbehandling.
      • Implementert Kafka Connect for systemintegrasjoner og innsamling av endringsdata.
      • Utnyttet Databricks Notebooks for Spark-batchbehandling i SQL, Scala og Python.
      • Orkestrerte Databricks-jobber med Airflow for automatisering av arbeidsflyten.
      • Brukt GitLab CI/CD, Docker og Terraform for distribusjon og infrastrukturadministrasjon.

      Teknologier:

      • Teknologier:
      • AWS AWS
      • Databricks Databricks
      • Apache Spark Apache Spark
      • Java Java
      • Python Python
      • Apache Kafka Apache Kafka
      • SQL SQL
      • Scala Scala
      • Apache Airflow Apache Airflow
      • Confluent Confluent
    • Data Engineer

      Global Savings Group (for intertec.io) - 2 years 3 months

      • Jobbet som hovedarkitekt og utvikler i webanalyse- og sporingsteamet hos Global Saving Group, en plattform som kobler nettkunder med forhandlere og betjener over 100 digitale kunder over hele verden.
      • Designet, utviklet og vedlikeholdt interne produkter for kundesporing, webanalyse og konverterings- og transaksjonssporing på tvers av domener.
      • Bygget helt serverløse IaC-implementeringer på AWS, noe som muliggjør skalerbar og kostnadseffektiv infrastruktur.
      • Utviklet og orkestrert datapipelines for hendelsesbasert og batch-datainntak ved hjelp av en datasjø-tilnærming.
      • Behandlet store mengder ustrukturerte rådata, utført transformasjoner, aggregeringer og datalagring.
      • Leverte sanntidsanalyser av aktive brukere, økter og kanaler for å støtte forretningsinnsikt.

      Teknologier:

      • Teknologier:
      • MySQL MySQL
      • AWS AWS
      • Java Java
      • Python Python
      • SQL SQL
      • DynamoDB DynamoDB
      • AWS Kinesis AWS Kinesis
      • AWS Athena AWS Athena
      • Redshift Redshift
      • Apache Flink Apache Flink
      • AWS CloudFormation AWS CloudFormation
      • AWS Data Catalog AWS Data Catalog
    • Mulesoft-utvikler

      Admios - 1 year 10 months

      • Ledet Java-utvikling på flere dataintegrasjonsprosjekter ved hjelp av Anypoint Mulesoft ESB-plattformen, og utviklet sertifiserte, tilpassede konnektorer som ble publisert på Mulesoft Marketplace, med støtte for bedriftssystemer som Salesforce, Anaplan, Coupa og CallidusCloud.
      • Definert og samlet inn forretningskrav direkte med kundens produkteiere, arkitekter og ledere.
      • Utarbeidet dokumentasjon av arkitekturdesign og løsningsforslag for å veilede prosjektgjennomføringen.
      • Implementert helhetlige integrasjonsløsninger som sikrer skalerbarhet og vedlikehold.
      • Utviklet og utført funksjons- og integrasjonstester for å validere systemets ytelse og pålitelighet.

      Teknologier:

      • Teknologier:
      • Java Java
      • MuleSoft Anypoint Platform
      • MuleSoft MuleSoft

    Utdannelse

    • BSc.Software Engineering

      European University - Faculty of informatics · 2005 - 2011

    Finn din neste utvikler innen dager, ikke måneder

    I løpet av en kort 25-minutters samtale ønsker vi å:

    • Forstå dine utviklingsbehov
    • Forklare prosessen vår der vi matcher deg med kvalifiserte, evaluerte utviklere fra vårt nettverk
    • Dele de neste stegene for å finne riktig match, ofte på mindre enn en uke

    La oss ta en prat