Arthur J.

Data Engineer

Data engineer met meer dan 6 jaar ervaring in Python, Apache Spark, Data Engineering, Apache Hive en ETL.

Arthur is een gepassioneerde en resultaatgerichte Data engineer met tien jaar ervaring in de ontwikkeling van robuuste en betrouwbare data pipelines en BI dashboards en in het oplossen van problemen via data voor internationale bedrijven. Hij heeft voornamelijk gewerkt met Big data en Machine learning.

Hij heeft een strategische mindset, toegespitst op het begrijpen van de context, testen van hypotheses, conclusies trekken op basis van de feiten en een datagestuurde cultuur vast te leggen met de teamleden. Arthur is analytisch en goed georganiseerd, met een stevige theoretisch technische en wiskundige achtergrond waardoor hij nieuwe technologieën snel onder de knie krijgt.

Hij kan een essentiële rol vervullen tijdens de volledige ontwikkeling van de opdracht/ondersteuning van de levenscyclus om hoogwaardige oplossingen te garanderen.

Hoofd expertise
  • Python
    Python 8 jaar
  • Data Engineering 6 jaar
  • Apache Spark
    Apache Spark 6 jaar
Andere vaardigheden
  • Git
    Git 6 jaar
  • Scrum
    Scrum 5 jaar
  • Java
    Java 5 jaar
Arthur
Arthur J.

Brazil

Aan de slag

Geselecteerde ervaring

Dienstverband

  • Gegevens ingenieur

    Thoughtworks - 1 jaar 9 maanden

    • Datamigratie met behulp van Azure Data Factory. Dataverwerking met behulp van Apache Spark bij Databricks. Automatisering verwerken met behulp van Python.

    Technologieën:

    • Technologieën:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • Databricks Databricks
    • Scrum Scrum
    • Azure Data Factory Azure Data Factory
  • HET. Analist/data-engineer

    Grupo Pão de Açúcar - 1 jaar 5 maanden

    • Data ETL van Teradata DW met behulp van Sqoop op Hive, Impala en Apache Kudu. Dataverwerking met Apache Spark 2 in een Hadoop omgeving. Onderhoud van verouderde systemen met behulp van Python, Shell Script (Bash) en Java.

    Technologieën:

    • Technologieën:
    • Apache Spark Apache Spark
    • ETL ETL
    • Bash Bash
    • Apache Hive Apache Hive
    • Java Java
  • HET. Analist/data-engineer

    Nextel (Stefanini IT Solutions contractor) - 3 maanden

    • Gegevens laden van PostgreSQL met behulp van Sqoop, Apache Spark 2 en Python 3. Versioning data op een “momentopname” tabel met Apache Spark 2.

    Technologieën:

    • Technologieën:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • PostgreSQL PostgreSQL
  • HET. Analist/data-engineer

    Semantix - 1 jaar 1 maand

    • Data-analyse met behulp van Hive en Impala (Cloudera distribution). Dataverwerking in de Hadoop omgeving. Ontwikkeling van automatisering scripts met behulp van Python en Shell script. Resultaat van IoT-opdrachten. Realtime batch verwerking met behulp van Apache Spark, Kafka en Elasticsearch.

    Technologieën:

    • Technologieën:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • Shell Shell
    • Apache Hive Apache Hive
    • Apache Kafka Apache Kafka
    • ElasticSearch ElasticSearch

Educatie

  • BSc.Computer- en informatiewetenschappen (uitval)

    Universidade Federal do ABC · 2015 - 2019

Vind jouw volgende ontwikkelaar binnen enkele dagen, niet maanden

In een kort gesprek van 25 minuten:

  • gaan we in op wat je nodig hebt om je product te ontwikkelen;
  • Ons proces uitleggen om u te matchen met gekwalificeerde, doorgelichte ontwikkelaars uit ons netwerk
  • delen we de stappen met je om de juiste match te vinden, vaak al binnen een week.

Maak een afspraak