Arthur J.

Data Engineer

Data engineer met meer dan 6 jaar ervaring in Python, Apache Spark, Data Engineering, Apache Hive en ETL.

Arthur is een gepassioneerde en resultaatgerichte Data engineer met tien jaar ervaring in de ontwikkeling van robuuste en betrouwbare data pipelines en BI dashboards en in het oplossen van problemen via data voor internationale bedrijven. Hij heeft voornamelijk gewerkt met Big data en Machine learning.

Hij heeft een strategische mindset, toegespitst op het begrijpen van de context, testen van hypotheses, conclusies trekken op basis van de feiten en een datagestuurde cultuur vast te leggen met de teamleden. Arthur is analytisch en goed georganiseerd, met een stevige theoretisch technische en wiskundige achtergrond waardoor hij nieuwe technologieën snel onder de knie krijgt.

Hij kan een essentiële rol vervullen tijdens de volledige ontwikkeling van de opdracht/ondersteuning van de levenscyclus om hoogwaardige oplossingen te garanderen.

Hoofd expertise

  • Python
    Python 8 jaar
  • Data Engineering 6 jaar
  • Apache Spark
    Apache Spark 6 jaar

Andere vaardigheden

  • Git
    Git 6 jaar
  • Scrum
    Scrum 5 jaar
  • Java
    Java 5 jaar
Arthur

Arthur J.

Brazil

Aan de slag

Geselecteerde ervaring

Dienstverband

  • Python developer/Data Engineer

    US-based clinical research company - 1 jaar

    Arthur's team was developing a POC to gather medical data from multiple partners and transform it into a research standard to make it available to their clients. In this project, Arthur built some tools to transform and ingest data using Python and Rust. They used an SQL Server as the database and started to develop scripts to run in Azure.

  • Gegevens ingenieur

    Thoughtworks - 1 jaar 9 maanden

    • Datamigratie met behulp van Azure Data Factory. Dataverwerking met behulp van Apache Spark bij Databricks. Automatisering verwerken met behulp van Python.

    Technologieën:

    • Technologieën:
    • Azure Data Factory Azure Data Factory

  • HET. Analist/data-engineer

    Grupo Pão de Açúcar - 1 jaar 5 maanden

    • Data ETL van Teradata DW met behulp van Sqoop op Hive, Impala en Apache Kudu. Dataverwerking met Apache Spark 2 in een Hadoop omgeving. Onderhoud van verouderde systemen met behulp van Python, Shell Script (Bash) en Java.

  • Data Engineer

    Grupo Pão de Açúcar - 1 jaar 5 maanden

    • Data ETL from Teradata DW using Sqoop on Hive, Impala, and Apache Kudu. Data processing with Apache Spark 2 in a Hadoop environment. Maintenance of legacy systems using Python, Shell Script (Bash), and Java.

  • HET. Analist/data-engineer

    Nextel (Stefanini IT Solutions contractor) - 3 maanden

    • Gegevens laden van PostgreSQL met behulp van Sqoop, Apache Spark 2 en Python 3. Versioning data op een “momentopname” tabel met Apache Spark 2.

  • Data Engineer

    Nextel (Stefanini IT Solutions contractor) - 3 maanden

    • Load data from PostgreSQL using Sqoop, Apache Spark 2, and Python 3. Versioning data on a “snapshot” table with Apache Spark 2.

  • Data Engineer

    Banco Santander (everis & BRQ contractor) - 9 maanden

    • ETL and data processing in the Hadoop environment using Apache Spark to fill business reports

  • HET. Analist/data-engineer

    Semantix - 1 jaar 1 maand

    • Data-analyse met behulp van Hive en Impala (Cloudera distribution). Dataverwerking in de Hadoop omgeving. Ontwikkeling van automatisering scripts met behulp van Python en Shell script. Resultaat van IoT-opdrachten. Realtime batch verwerking met behulp van Apache Spark, Kafka en Elasticsearch.

  • Data Engineer

    Semantix - 1 jaar 1 maand

    • Data analysis using Hive and Impala (Cloudera distribution). Data processing in the Hadoop environment. automation scripts development using Python and Shell script. Result of IoT engagements. Real-time batch processing using Apache Spark, Kafka, and Elasticsearch.

  • Java Developer

    Stefanini IT Solutions - 6 maanden

    • Maintenance and development using Hibernate, Git, Maven, Tomcat 7, Oracle 10g, and JSP.

    Technologieën:

    • Technologieën:
    • Maven Maven
    • Hibernate Hibernate
    • Oracle Oracle
    • Tomcat Tomcat

  • IT Analyst

    CVC Viagens - 8 maanden

    • Project migration from SVN to Git. Processes Standardization to engagement versioning with automatization using Python and Jenkins. Creation and maintenance of automated tests with Selenium, Python, and Testlink. Automatic monitoring with Python, Selenium, and Zabbix

  • Java Developer

    MAPS Soluções e Serviços - 2 jaar 10 maanden

    • Development of mission-critical Java web systems to financial institutions, e.g. Caixa Econômica Federal, with JBoss, Wicket, Hibernate, JUnit, Selenium, continuous integration with Jenkins and Scrum as agile philosophy.

    Technologieën:

    • Technologieën:
    • Hibernate Hibernate

Educatie

  • Standalone courseAnalysis & Systems Development

    Faculdade de Tecnologia de São Paulo · 2022 - 2022

  • BSc.Computer- en informatiewetenschappen (uitval)

    Universidade Federal do ABC · 2015 - 2019

Vind jouw volgende ontwikkelaar binnen enkele dagen, niet maanden

In een kort gesprek van 25 minuten:

  • gaan we in op wat je nodig hebt om je product te ontwikkelen;
  • Ons proces uitleggen om u te matchen met gekwalificeerde, doorgelichte ontwikkelaars uit ons netwerk
  • delen we de stappen met je om de juiste match te vinden, vaak al binnen een week.

Maak een afspraak

Eerste ontwikkelaar begint binnen enkele dagen. Geen agressieve verkooppitch.