Goran B.

Data Engineer

Goran är en skicklig Data/DevOps-ingenjör med 14 års kommersiell erfarenhet, specialiserad på Databricks, Big Data, molnteknik och Infrastructure as Code. Hans expertis spänner över både utveckling och drift, vilket gör att han sömlöst kan integrera dessa områden för att öka effektiviteten och skalbarheten.

Gorans omfattande kompetens omfattar djupa kunskaper om programmeringsspråk och big data-teknik, vilket gör det möjligt för honom att hantera komplexa tekniska utmaningar med precision och effektivitet. Hans bakgrund inom både strategiskt tänkande på hög nivå och praktiskt tekniskt arbete gör honom till en värdefull tillgång för alla datadrivna organisationer.

Huvudsaklig expertis

Python 6 år
SQL 17 år
Scala 7 år

Andra kompetenser

Cloudera 3 år
Rust 2 år
C 2 år

Goran B.

Netherlands

Hitta en utvecklare

Utvald erfarenhet

Anställningar

Senior Data Engineer

Milence B.V. - 9 månader
- Inläsning av data från flera källor för att stödja den nya dataplattformen;
- Byggde datapipelines och utvecklade Databricks-anteckningsböcker och Apache Spark-jobb med Python för att effektivt omvandla data;
- Orkestrerade Databricks-jobb med ett lättviktigt alternativ till Apache Airflow, vilket optimerar resursanvändningen;
- Implementerade Apache Spark-streamingjobb i realtid för kontinuerlig databehandling;
- Tillhandahöll coachning och mentorskap till teammedlemmar, vilket förbättrade den övergripande teamkapaciteten och projektframgången;
- Lyckades framgångsrikt driftsätta en ny dataplattform, som för närvarande tar in och omvandlar miljontals poster för att stödja kritiska affärsfunktioner som debiteringssessioner och fakturering.
Teknologier:
- Teknologier:
- Python
Lead Data / Software Engineer

Hakoona B.V. - 3 år 1 månad
- Ledde mjukvaruteknikteamet i utvecklingen av en ny lösning baserad på masterreferensdata, vilket säkerställde teamets anpassning och projektets framgång;
- Designat och konstruerat ett backend-system från grunden med Rust för att effektivt bearbeta data från alla trippelbutiker;
- Integrerade maskininlärningsmodeller i backend, vilket möjliggör avancerad databehandling och analysfunktioner;
- Levererat ett toppmodernt system som ger användarna möjlighet att utforska och interagera med sitt datauniversum på ett säkert, kompatibelt och etiskt sätt.
Data Engineer

Shell B.V. - 1 år 3 månader
- Bygga pipelines för att samla in och manipulera data från olika källor, vilket säkerställer smidigt dataflöde och integration;
- Utvecklat och hanterat Python-skript för att förbehandla data från specifika källor för optimal bearbetning och lagring;
- Utvecklat och underhållit Apache Spark-applikationer med hjälp av Scala för storskalig databehandling;
- Orkestrerade Spark-applikationer med Apache Airflow, automatiserade arbetsflöden för effektiv datahantering;
- Arkitekterade och byggde en backend-motor i Golang för att integrera med DataSingularity, för att förena, skilja, länka och ta in data i en RDF-datalager.
Teknologier:
- Teknologier:
- Python
- Scala
DevOps / Senior Data Engineer

Politie Nederland - 2 år 4 månader
- Prioriterade krav och förfrågningar för att säkerställa anpassning till behoven hos brottsutredningar;
- Installerade och hanterade Elasticsearch-, Cassandra-, Hadoop- och OpenNebula-kluster i ett privat datacenter;
- Hanterade distribution och underhåll av utredningsprogramvara på dessa kluster, vilket säkerställde smidig drift;
- Implementerade övervakningssystem med hjälp av Prometheus, Alert Manager och Grafana för att säkerställa plattformens tillförlitlighet;
- Utvecklat Grafana dashboards för realtidsinsikter och systemhälsoövervakning;
- Skapade Terraform-kod och Ansible-lekböcker för att automatisera kluster- och programvarudistributioner.
- Levererat en högpresterande dataplattform som effektivt bearbetar och undersöker beslagtagna data som e-post, chattmeddelanden och foton, vilket möjliggör snabb analys under brottsutredningar, inklusive bedrägerier och mord.
Teknologier:
- Teknologier:
- ElasticSearch
- Cassandra
- Hadoop
- Keycloak
Senior Data Engineer

Annual Insight - 11 månader
- Designat och utvecklat ett skalbart system för att automatiskt extrahera nyckeltal från finansiella rapporter, inklusive från skannade PDF-sidor;
- Arkitekterade både de tekniska och applikationsmässiga aspekterna av systemet för att säkerställa flexibilitet och skalbarhet;
- Utvecklat crawlers för att ladda ner och bearbeta marknadssiffror från olika källor;
- Skapat API:er för integration med andra interna system, vilket möjliggör smidigt datautbyte;
- Utvecklat och optimerat REST-tjänster för att förbättra systemets prestanda och responsivitet;
- Testade programvaran för att säkerställa noggrannhet och tillförlitlighet vid bearbetning av finansiella data;
- Implementerade mikrotjänstarkitektur för att förbättra modularitet och skalbarhet;
- Distribuerade programvaran på Azure med hjälp av Docker-containrar för effektiv molnbaserad drift.
Senior Data Engineer

Landal Greenparks - 1 år 1 månad
- Designed and developed a big data solution using Scala, Spark, Kafka, and Cassandra to calculate availability, multi-currency rates, and inventory for Landal Greenparks;
- Architected both the technical and application aspects of the system to ensure scalability and performance;
- Developed a real-time streaming solution to continuously track availability throughout the day;
- Built and optimized the data model to handle large-scale processing efficiently;
- Developed and fine-tuned REST services for seamless communication with other systems;
- Thoroughly tested the software to ensure reliability and performance;
- Deployed the software into production, ensuring smooth integration with existing systems.
- Successfully launched the software in December 2017, within time and budget, replacing a legacy system and reducing processing time from 15 hours to 15 minutes. This improvement enabled Landal Greenparks to offer additional Christmas promotions, contributing to increased revenue.
Teknologier:
- Teknologier:
- Cassandra
- Scala
- Akka
Software / Data Engineer

OCLC - 4 år 4 månader
- Designed and developed Spark and MapReduce jobs to efficiently process millions of bibliographic records;
- Created scripts to control and manage data pipelines for seamless data ingestion and processing;
- Developed a web service capable of ingesting bibliographic records in various formats, ensuring compatibility and scalability;
- Collaborated closely with international colleagues to coordinate development and deployment efforts across multiple regions;
- Successfully launched several big data systems during my time at OCLC, enabling the processing of terabytes of bibliographic data.
Teknologier:
- Teknologier:
- ElasticSearch
- Spring
- Hadoop
Lead Software Developer

Hakim Enterprises - 1 år 11 månader
- Designed and developed a point-of-sale (POS) system to streamline sales transactions and improve customer experience;
- Architected and developed an invoice administration system to manage billing and payment processes efficiently;
- Designed and implemented an inventory tracking system to monitor stock levels and optimize inventory management;
- Created a comprehensive data model to support all systems, ensuring data consistency and scalability;
- Developed and optimized REST services for seamless communication between various components of the system;
- Conducted integration testing to ensure smooth functionality across the POS, invoice administration, and inventory management systems;
- Designed the technical and application architecture for the entire solution to ensure robustness and scalability;
- Successfully launched the POS, invoice administration, and inventory management systems during my time at Hakim, delivering a fully integrated solution that improved operational efficiency.
Teknologier:
- Teknologier:
- HTML
- Spring