Ivan P.
Data Engineer
Yksi hänen merkittävimmistä saavutuksistaan oli täysin palvelimetön dataputken suunnittelu ja toteutus web-analytiikkaa ja asiakasseurantaa varten - projekti, jota hän pitää ratkaisevana hänen uransa muotoutumisessa data-insinööriksi. Tämän toimeksiannon kautta Ivan sai laajaa kokemusta Pythonista, AWS:n datapalveluista, datan suoratoistosta, datajärvistä ja infrastruktuurin käyttöönotosta mallipohjaisen koodin avulla.
Ivan tunnetaan sopeutumiskyvystään, sitoutumisestaan jatkuvaan oppimiseen ja kyvystään toimittaa skaalautuvia, tehokkaita ja suorituskykyisiä dataratkaisuja, joilla on todellista vaikutusta liiketoimintaan.
Tärkein asiantuntemus
Snowflake3 vuotta
Apache Airflow5 vuotta
Python5 vuotta
Java5 vuottaKokemus4
Data Engineer
- Osallistui JW Playerin datasuunnittelutiimiin kehittämällä dataputkistoja ja sulautettuja analytiikkaa maksujen ja tilausten toimialueelle.
- Toteutti CDC-putkistoja AWS DMS:n avulla integroimalla tietoja PostgreSQL:stä, MariaDB:stä, Kinesisistä ja Kafkasta S3:een.
- Käsitteli ja orkestroi tietoja Snowflakessa Airflow'n ja Snowflake Tasksin avulla ja hallitsi skeeman kehitystä Sqitchin avulla.
- Otettiin käyttöön tietojen visualisointi ThoughtSpotin ja Lookerin avulla, mikä parantaa tietojen saatavuutta ja oivallusten toimittamista.
- Seurasi järjestelmän suorituskykyä DataDogin avulla ja virtaviivaisti infrastruktuurin hallintaa GitLabin, GitHubin, CloudFormationin ja Dockerin avulla.
PostgreSQL
AWS
Apache Kafka
SQL
AWS Kinesis
Data Engineer
- Osallistui Slicen datasuunnittelutiimiin, joka on nopeasti kasvava B2B2C-alusta, joka tukee yli 20 000 yhdysvaltalaista asiakasta. pizzeriat.
- Suunnittelit ja ylläpidit live-dataputkia, integroit CDC-tietoja käyttäjille ja tilauksille Databricks Delta Lakeen, DynamoDB:hen (ODatan kautta) ja S3:een.
- Hyödynnetään Confluent Kafka -alustaa Schema Registryn kanssa stream-skeemakehitystä (AVRO) varten.
- Sovelletaan KsqlDB:tä ja Kafka Streamsia (Scala) reaaliaikaiseen stream-käsittelyyn.
- Toteutti Kafka Connectin järjestelmäintegraatioita ja muutostietojen tallentamista varten.
- Hyödynnetään Databricks Notebooks Spark-eräkäsittelyä varten SQL:ssä, Scalassa ja Pythonissa.
- Orkestroidut Databricks-työt Airflow'n kanssa työnkulun automatisointia varten.
- Käytössä GitLab CI/CD, Docker ja Terraform käyttöönotossa ja infrastruktuurin hallinnassa.
AWS
Databricks
Apache SparkJavaPythonData Engineer
- Toiminut johtavana arkkitehtina ja kehittäjänä Global Saving Groupin web-analytiikka- ja seurantatiimissä, joka on alusta, joka yhdistää verkko-ostajat ja vähittäiskauppiaat ja palvelee yli 100 digitaalista asiakasta maailmanlaajuisesti.
- Suunnitteli, kehitti ja ylläpiti sisäisiä tuotteita asiakkaiden seurantaa, web-analytiikkaa sekä verkkotunnusten välistä konversio- ja tapahtumaseurantaa varten.
- Rakentanut täysin palvelimetöntä IaC-toteutusta AWS:ssä, mikä mahdollistaa skaalautuvan ja kustannustehokkaan infrastruktuurin.
- Kehittänyt ja orkestroinut dataputkistoja tapahtumapohjaista ja eräkohtaista tietojen syöttöä varten käyttäen data lake -lähestymistapaa.
- Käsitellyt suuria määriä raakadataa, jäsentymätöntä dataa, suorittanut muunnoksia, aggregointeja ja tietovarastointia.
- Toimittanut reaaliaikaista analytiikkaa aktiivisista käyttäjistä, istunnoista ja kanavista liiketoiminnan näkemysten tukemiseksi.
MySQLAWSJavaPythonSQL
Mulesoft-kehittäjä
- Johti Java-kehitystä useissa tietojen integrointihankkeissa Anypoint Mulesoft ESB -alustan avulla ja kehitti Mulesoft Marketplace -markkinapaikalla julkaistuja sertifioituja mukautettuja liittimiä, jotka tukevat sellaisia yritysjärjestelmiä kuin Salesforce, Anaplan, Coupa ja CallidusCloud.
- Määritellyt ja kerännyt liiketoimintavaatimuksia suoraan asiakkaan tuoteomistajien, arkkitehtien ja johtajien kanssa.
- Valmistellut arkkitehtuurisuunnitteludokumentaatiota ja ratkaisuehdotuksia projektin toteutuksen ohjaamiseksi.
- Toteutti päästä päähän -integraatioratkaisuja, joilla varmistettiin skaalautuvuus ja ylläpidettävyys.
- Kehitti ja toteutti toiminnallisia ja integrointitestejä järjestelmän suorituskyvyn ja luotettavuuden validoimiseksi.
Java
MuleSoftArviointi
Tekniikan huippuosaaminen
Ivan yleinen suorituskyky 90 minuutin suorassa teknisessä arvioinnissa on top 5 % Proxifyn tarkastetuista Data Engineer.
Sertifikaatit 1
Issued Jan 2022 - Expires Jan 2025
Issued Jan 2022 - Expires Jan 2025
Koulutus
Lopeta selaaminen.
Sovitetaan nopeammin.
Keskustele asiantuntijan kanssa ja saat räätälöityjä ehdotuksia verkostostamme vain 2 päivässä.
Pääsy yli 6 000+ asiantuntijaa
Löydä kehittäjä keskimäärin 2 päivässä
Palkkaa nopeasti ja helposti 94% onnistuneella osumalla