Ivan P.
Data Engineer
Yksi hänen merkittävimmistä saavutuksistaan oli täysin palvelimetön dataputken suunnittelu ja toteutus web-analytiikkaa ja asiakasseurantaa varten - projekti, jota hän pitää ratkaisevana hänen uransa muotoutumisessa data-insinööriksi. Tämän toimeksiannon kautta Ivan sai laajaa kokemusta Pythonista, AWS:n datapalveluista, datan suoratoistosta, datajärvistä ja infrastruktuurin käyttöönotosta mallipohjaisen koodin avulla.
Ivan tunnetaan sopeutumiskyvystään, sitoutumisestaan jatkuvaan oppimiseen ja kyvystään toimittaa skaalautuvia, tehokkaita ja suorituskykyisiä dataratkaisuja, joilla on todellista vaikutusta liiketoimintaan.
Tärkein asiantuntemus
Snowflake3 vuotta
Apache Airflow5 vuotta
Python5 vuotta
Java5 vuottaKokemus6
Data Engineer
- Osallistui JW Playerin datasuunnittelutiimiin kehittämällä dataputkistoja ja sulautettuja analytiikkaa maksujen ja tilausten toimialueelle.
- Toteutti CDC-putkistoja AWS DMS:n avulla integroimalla tietoja PostgreSQL:stä, MariaDB:stä, Kinesisistä ja Kafkasta S3:een.
- Käsitteli ja orkestroi tietoja Snowflakessa Airflow'n ja Snowflake Tasksin avulla ja hallitsi skeeman kehitystä Sqitchin avulla.
- Otettiin käyttöön tietojen visualisointi ThoughtSpotin ja Lookerin avulla, mikä parantaa tietojen saatavuutta ja oivallusten toimittamista.
- Seurasi järjestelmän suorituskykyä DataDogin avulla ja virtaviivaisti infrastruktuurin hallintaa GitLabin, GitHubin, CloudFormationin ja Dockerin avulla.
PostgreSQL
AWS
Apache Kafka
SQL
AWS Kinesis
Data Engineer
- Osallistui Slicen datasuunnittelutiimiin, joka on nopeasti kasvava B2B2C-alusta, joka tukee yli 20 000 yhdysvaltalaista asiakasta. pizzeriat.
- Suunnittelit ja ylläpidit live-dataputkia, integroit CDC-tietoja käyttäjille ja tilauksille Databricks Delta Lakeen, DynamoDB:hen (ODatan kautta) ja S3:een.
- Hyödynnetään Confluent Kafka -alustaa Schema Registryn kanssa stream-skeemakehitystä (AVRO) varten.
- Sovelletaan KsqlDB:tä ja Kafka Streamsia (Scala) reaaliaikaiseen stream-käsittelyyn.
- Toteutti Kafka Connectin järjestelmäintegraatioita ja muutostietojen tallentamista varten.
- Hyödynnetään Databricks Notebooks Spark-eräkäsittelyä varten SQL:ssä, Scalassa ja Pythonissa.
- Orkestroidut Databricks-työt Airflow'n kanssa työnkulun automatisointia varten.
- Käytössä GitLab CI/CD, Docker ja Terraform käyttöönotossa ja infrastruktuurin hallinnassa.
AWS
Databricks
Apache SparkJavaPythonData Engineer
- Toiminut johtavana arkkitehtina ja kehittäjänä Global Saving Groupin web-analytiikka- ja seurantatiimissä, joka on alusta, joka yhdistää verkko-ostajat ja vähittäiskauppiaat ja palvelee yli 100 digitaalista asiakasta maailmanlaajuisesti.
- Suunnitteli, kehitti ja ylläpiti sisäisiä tuotteita asiakkaiden seurantaa, web-analytiikkaa sekä verkkotunnusten välistä konversio- ja tapahtumaseurantaa varten.
- Rakentanut täysin palvelimetöntä IaC-toteutusta AWS:ssä, mikä mahdollistaa skaalautuvan ja kustannustehokkaan infrastruktuurin.
- Kehittänyt ja orkestroinut dataputkistoja tapahtumapohjaista ja eräkohtaista tietojen syöttöä varten käyttäen data lake -lähestymistapaa.
- Käsitellyt suuria määriä raakadataa, jäsentymätöntä dataa, suorittanut muunnoksia, aggregointeja ja tietovarastointia.
- Toimittanut reaaliaikaista analytiikkaa aktiivisista käyttäjistä, istunnoista ja kanavista liiketoiminnan näkemysten tukemiseksi.
MySQLAWSJavaPythonSQL
Mulesoft-kehittäjä
- Johti Java-kehitystä useissa tietojen integrointihankkeissa Anypoint Mulesoft ESB -alustan avulla ja kehitti Mulesoft Marketplace -markkinapaikalla julkaistuja sertifioituja mukautettuja liittimiä, jotka tukevat sellaisia yritysjärjestelmiä kuin Salesforce, Anaplan, Coupa ja CallidusCloud.
- Määritellyt ja kerännyt liiketoimintavaatimuksia suoraan asiakkaan tuoteomistajien, arkkitehtien ja johtajien kanssa.
- Valmistellut arkkitehtuurisuunnitteludokumentaatiota ja ratkaisuehdotuksia projektin toteutuksen ohjaamiseksi.
- Toteutti päästä päähän -integraatioratkaisuja, joilla varmistettiin skaalautuvuus ja ylläpidettävyys.
- Kehitti ja toteutti toiminnallisia ja integrointitestejä järjestelmän suorituskyvyn ja luotettavuuden validoimiseksi.
Java
MuleSoft
Java BI Developer
-
Developed a BI platform involving data integration, ETL, and warehousing for a top 10 mobile game publisher with over 1 billion downloads and 45 million monthly active users;
-
Developed the automated BI system;
-
Collected daily reports from more than 15 ad provider sources;
-
Transformed, enriched, and loaded data into the data warehouse;
-
Ensured data consistency and integrity;
-
Injected missing data and corrected invalid data;
-
Developed and maintained data pipelines;
-
Built an orchestration system for workflow management.
PostgreSQLAWSJava
Spring BootSQL
Java Back-End Developer
-
Developed a BI platform involving data integration, ETL, and warehousing for a top 10 mobile game publisher with over 1 billion downloads and 45 million monthly active users;
-
Developed the automated BI system;
-
Collected daily reports from more than 15 ad provider sources;
-
Transformed, enriched, and loaded data into the data warehouse;
-
Ensured data consistency and integrity;
-
Injected missing data and corrected invalid data;
-
Developed and edited data pipelines;
-
Built an orchestration system for workflow management.
NGINX
CassandraJava
TomcatTekniikan huippuosaaminen
Kaikki Data Engineert, jotka ovat hakeneet Proxifylle, pisteytetään välillä 0–300 insinööritaidon perusteella, joka on yksi viidestä arvioimastamme parametrista. Tämä pistemäärä heijastaa ainoastaan insinööritaitoa, perustuen haastatteluihin, kotitehtäviin, suorissa koodausistunnoissa sekä työn suorituskyvyn arvioinnissa annettuihin tuloksiin. Kaavio näyttää, miten kaikki arvioidut Data Engineert jakautuvat tässä mittakaavassa, hyväksymisrajamme tälle parametrille sekä missä kohtaa Ivan sijaitsee.
Score 234 · Top 2% of engineers
Sertifikaatit 1
Issued Jan 2022 - Expires Jan 2025
Issued Jan 2022 - Expires Jan 2025
Koulutus
Lopeta selaaminen.
Sovitetaan nopeammin.
Keskustele asiantuntijan kanssa ja saat räätälöityjä ehdotuksia verkostostamme vain 2 päivässä.
Pääsy yli 6 000+ asiantuntijaa
Löydä kehittäjä keskimäärin 2 päivässä
Palkkaa nopeasti ja helposti 94% onnistuneella osumalla