Arthur J.

Data Engineer

Data Engineer mit über 6 Jahren Erfahrung bei Python, Apache Spark, Data Engineering, Apache Hive und ETL.

Arthur ist ein leidenschaftlicher und ergebnisorientierter Data Engineer mit zehn Jahren Erfahrung bei der Entwicklung von soliden und zuverlässigen Data Pipelines und BI-Dashboards sowie bei der Lösung von Problemen durch Daten für internationale Unternehmen. Er hat sich hauptsächlich mit Big Data und maschinellem Lernen beschäftigt.

Er hat eine strategische Denkweise, die sich auf Kontextverständnis, das Überprüfen von Hypothesen und Schlussfolgerungen auf der Basis von Fakten sowie die Errichtung einer datengestützten Kultur mit den Teammitgliedern konzentriert. Arthur ist analytisch und gut organisiert mit einem starken theoretischen und mathematischen Background und erlernt rasch neue Technologien.

Während des gesamten Auftragsablaufs und Entwicklungs-/Supportlifecycles kann er eine zentrale Rolle spielen, um hochwertige Lösungen zu gewährleisten.

Hauptkompetenz
  • Python
    Python 8 Jahre
  • Data Engineering 6 Jahre
  • Apache Spark
    Apache Spark 6 Jahre
Andere Fähigkeiten
  • Git
    Git 6 Jahre
  • Scrum
    Scrum 5 Jahre
  • Java
    Java 5 Jahre
Arthur
Arthur J.

Brazil

Erste Schritte

Ausgewählte Erfahrung

Beschäftigung

  • Dateningenieur

    Thoughtworks - 1 jahr 9 monate

    • Datenmigration mit Azure Data Factory. Datenverarbeitung mit Apache Spark auf Databricks. Verarbeitung von Automation mit Python.

    Technologien:

    • Technologien:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • Databricks Databricks
    • Scrum Scrum
    • Azure Data Factory Azure Data Factory
  • ES. Analytiker/Dateningenieur

    Grupo Pão de Açúcar - 1 jahr 5 monate

    • Data ETL von Teradata DW mit Sqoop auf Hive, Impala und Apache Kudu. Datenverarbeitung mit Apache Spark 2 in einer Hadoop-Umgebung. Wartung von alten Systemen mit Python, Shell Script (Bash) und Java.

    Technologien:

    • Technologien:
    • Apache Spark Apache Spark
    • ETL ETL
    • Bash Bash
    • Apache Hive Apache Hive
    • Java Java
  • ES. Analytiker/Dateningenieur

    Nextel (Stefanini IT Solutions contractor) - 3 monate

    • Laden von Daten von PostgreSQL mit Sqoop, Apache Spark 2 und Python 3. Versionierung von Daten auf einer „Snapshot“-Tabelle mit Apache Spark 2.

    Technologien:

    • Technologien:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • PostgreSQL PostgreSQL
  • ES. Analytiker/Dateningenieur

    Semantix - 1 jahr 1 monat

    • Datenanalyse mit Hive und Impala (Cloudera-Distribution). Datenverarbeitung in der Hadoop-Umgebung. Automatisierung der Script-Entwicklung mit Python und Shell-Skript. Ergebnisse von IoT-Aufträgen. Echtzeit-Batch-Verarbeitung mit Apache Spark, Kafka und Elasticsearch.

    Technologien:

    • Technologien:
    • Python Python
    • Apache Spark Apache Spark
    • ETL ETL
    • Shell Shell
    • Apache Hive Apache Hive
    • Apache Kafka Apache Kafka
    • ElasticSearch ElasticSearch

Ausbildung

  • BSc.Informatik und Informationswissenschaften (Dropout)

    Universidade Federal do ABC · 2015 - 2019

Finden Sie Ihren nächsten Entwickler innerhalb von Tagen, nicht Monaten

In einem kurzen 25-minütigen Gespräch würden wir gerne:

  • Auf Ihren Bedarf bezüglich des Recruitments von Software-Entwicklern eingehen
  • Unseren Prozess vorstellen und somit wie wir Sie mit talentierten und geprüften Kandidaten aus unserem Netzwerk zusammenbringen können
  • Die nächsten Schritte besprechen, um den richtigen Kandidaten zu finden - oft in weniger als einer Woche

Unterhalten wir uns