Arthur J.

Data Engineer

Datainsinööri, jolla on yli 6 vuoden kokemus Pythonista, Apache Sparkista, Data Engineeringistä, Apache Hivesta ja ETL:stä.

Arthur on intohimoinen ja tuloskeskeinen datainsinööri, jolla on kymmenen vuoden kokemus vankkojen ja luotettavien tietoputkien ja BI-liittymien kehittämisestä sekä ongelmien ratkaisemisesta datan avulla kansainvälisille yrityksille. Hän on työskennellyt pääasiassa big datan ja koneoppimisen parissa.

Hänellä on strateginen ajattelutapa, joka keskittyy kontekstin ymmärtämiseen, hypoteesien testaamiseen, tosiasioihin perustuvien johtopäätösten tekemiseen ja datapohjaisen kulttuurin luomiseen tiimin sisällä. Analyyttinen ja hyvin organisoitunut, vahva teoreettisen suunnittelun ja matemaattinen tausta, Arthur oppii nopeasti uusia teknologioita.

Hän voi olla tärkeässä roolissa toimeksiannon kaikissa kehitys-/tukitoiminnoissa koko elinkaaren ajan laadukkaiden ratkaisujen varmistamiseksi.

Tärkein asiantuntemus

  • Python
    Python 8 vuotta
  • Data Engineering 6 vuotta
  • Apache Spark
    Apache Spark 6 vuotta

Muut taidot

  • Git
    Git 6 vuotta
  • Scrum
    Scrum 5 vuotta
  • Java
    Java 5 vuotta
Arthur

Arthur J.

Brazil

Aloita tästä

Valittu kokemus

Työllisyys

  • Python developer/Data Engineer

    US-based clinical research company - 1 year

    Arthur's team was developing a POC to gather medical data from multiple partners and transform it into a research standard to make it available to their clients. In this project, Arthur built some tools to transform and ingest data using Python and Rust. They used an SQL Server as the database and started to develop scripts to run in Azure.

  • Tietojen insinööri

    Thoughtworks - 1 year 9 months

    • Tietojen siirto Azure Data Factoryllä. Tietojen käsittely Apache Sparkilla Databricksissä. Käsittelyautomaatio Pythonilla.

    Tekniikat:

    • Tekniikat:
    • Azure Data Factory Azure Data Factory

  • SE. Analyytikko/tietosuunnittelija

    Grupo Pão de Açúcar - 1 year 5 months

    • Tietojen purkaminen, muunnos ja lataus Teradata DW:stä käyttämällä Sqoopia Hivessa, Impalassa ja Apache Kudussa. Tietojen käsittely Apache Spark 2:lla Hadoop-ympäristössä. Vanhojen järjestelmien ylläpito Pythonilla, Shell Scriptillä (Bash) ja Javalla.

  • Data Engineer

    Grupo Pão de Açúcar - 1 year 5 months

    • Data ETL from Teradata DW using Sqoop on Hive, Impala, and Apache Kudu. Data processing with Apache Spark 2 in a Hadoop environment. Maintenance of legacy systems using Python, Shell Script (Bash), and Java.

  • SE. Analyytikko/tietosuunnittelija

    Nextel (Stefanini IT Solutions contractor) - 3 months

    • Tietojen lataus PostgreSQL:stä Sqoopilla, Apache Spark 2:lla ja Python 3:lla. Eri tietoversioiden luominen “snapshot”-taulukossa Apache Spark 2:lla.

  • Data Engineer

    Nextel (Stefanini IT Solutions contractor) - 3 months

    • Load data from PostgreSQL using Sqoop, Apache Spark 2, and Python 3. Versioning data on a “snapshot” table with Apache Spark 2.

  • Data Engineer

    Banco Santander (everis & BRQ contractor) - 9 months

    • ETL and data processing in the Hadoop environment using Apache Spark to fill business reports

  • SE. Analyytikko/tietosuunnittelija

    Semantix - 1 year 1 month

    • Tietojen analysointi Hivellä ja Impalalla (Cloudera-jakelu). Tietojen käsittely Hadoop-ympäristössä. Automaatioskriptien kehitys Python- ja Shell-skriptien avulla. IoT-välitysten tulos. Reaaliaikainen eräkäsittely käyttämällä Apache Sparkia, Kafkaa ja Elasticsearchia.

  • Data Engineer

    Semantix - 1 year 1 month

    • Data analysis using Hive and Impala (Cloudera distribution). Data processing in the Hadoop environment. automation scripts development using Python and Shell script. Result of IoT engagements. Real-time batch processing using Apache Spark, Kafka, and Elasticsearch.

  • Java Developer

    Stefanini IT Solutions - 6 months

    • Maintenance and development using Hibernate, Git, Maven, Tomcat 7, Oracle 10g, and JSP.

    Tekniikat:

    • Tekniikat:
    • Maven Maven
    • Hibernate Hibernate
    • Oracle Oracle
    • Tomcat Tomcat

  • IT Analyst

    CVC Viagens - 8 months

    • Project migration from SVN to Git. Processes Standardization to engagement versioning with automatization using Python and Jenkins. Creation and maintenance of automated tests with Selenium, Python, and Testlink. Automatic monitoring with Python, Selenium, and Zabbix

  • Java Developer

    MAPS Soluções e Serviços - 2 years 10 months

    • Development of mission-critical Java web systems to financial institutions, e.g. Caixa Econômica Federal, with JBoss, Wicket, Hibernate, JUnit, Selenium, continuous integration with Jenkins and Scrum as agile philosophy.

    Tekniikat:

    • Tekniikat:
    • Hibernate Hibernate

Koulutus

  • Standalone courseAnalysis & Systems Development

    Faculdade de Tecnologia de São Paulo · 2022 - 2022

  • BSc.Tietojenkäsittely- ja informaatiotieteet (poistettu)

    Universidade Federal do ABC · 2015 - 2019

Löydä seuraava kehittäjäsi päivien, ei kuukausien sisällä

Kun otat yhteyttä, järjestämme lyhyen 25 minuuttia kestävän tapaamisen, jonka aikana:

  • Kartoitamme yrityksenne kehitystarvetta
  • Kertoa prosessimme, jolla löydämme teille pätevän, ennakkotarkastetun kehittäjän verkostostamme
  • Käymme läpi askeleet, joilla oikea ehdokas pääsee aloittamaan – useimmiten viikon sisällä

Keskustele kanssamme

Ensimmäinen kehittäjä pääsee yleensä aloittamaan muutaman päivän sisällä yhteydenotosta.