Arthur J.
Data Engineer
Data Engineer mit über 6 Jahren Erfahrung bei Python, Apache Spark, Data Engineering, Apache Hive und ETL.
Arthur ist ein leidenschaftlicher und ergebnisorientierter Data Engineer mit zehn Jahren Erfahrung bei der Entwicklung von soliden und zuverlässigen Data Pipelines und BI-Dashboards sowie bei der Lösung von Problemen durch Daten für internationale Unternehmen. Er hat sich hauptsächlich mit Big Data und maschinellem Lernen beschäftigt.
Er hat eine strategische Denkweise, die sich auf Kontextverständnis, das Überprüfen von Hypothesen und Schlussfolgerungen auf der Basis von Fakten sowie die Errichtung einer datengestützten Kultur mit den Teammitgliedern konzentriert. Arthur ist analytisch und gut organisiert mit einem starken theoretischen und mathematischen Background und erlernt rasch neue Technologien.
Während des gesamten Auftragsablaufs und Entwicklungs-/Supportlifecycles kann er eine zentrale Rolle spielen, um hochwertige Lösungen zu gewährleisten.
Hauptkompetenz
- Python 8 Jahre
- Data Engineering 6 Jahre
- Apache Spark 6 Jahre
Andere Fähigkeiten
- Git 6 Jahre
- Scrum 5 Jahre
- Java 5 Jahre
Ausgewählte Erfahrung
Beschäftigung
Dateningenieur
Thoughtworks - 1 jahr 9 monate
- Datenmigration mit Azure Data Factory. Datenverarbeitung mit Apache Spark auf Databricks. Verarbeitung von Automation mit Python.
Technologien:
- Technologien:
- Python
- Apache Spark
- ETL
- Databricks
- Scrum
- Azure Data Factory
ES. Analytiker/Dateningenieur
Grupo Pão de Açúcar - 1 jahr 5 monate
- Data ETL von Teradata DW mit Sqoop auf Hive, Impala und Apache Kudu. Datenverarbeitung mit Apache Spark 2 in einer Hadoop-Umgebung. Wartung von alten Systemen mit Python, Shell Script (Bash) und Java.
Technologien:
- Technologien:
- Apache Spark
- ETL
- Bash
- Apache Hive
- Java
ES. Analytiker/Dateningenieur
Nextel (Stefanini IT Solutions contractor) - 3 monate
- Laden von Daten von PostgreSQL mit Sqoop, Apache Spark 2 und Python 3. Versionierung von Daten auf einer „Snapshot“-Tabelle mit Apache Spark 2.
Technologien:
- Technologien:
- Python
- Apache Spark
- ETL
- PostgreSQL
ES. Analytiker/Dateningenieur
Semantix - 1 jahr 1 monat
- Datenanalyse mit Hive und Impala (Cloudera-Distribution). Datenverarbeitung in der Hadoop-Umgebung. Automatisierung der Script-Entwicklung mit Python und Shell-Skript. Ergebnisse von IoT-Aufträgen. Echtzeit-Batch-Verarbeitung mit Apache Spark, Kafka und Elasticsearch.
Technologien:
- Technologien:
- Python
- Apache Spark
- ETL
- Shell
- Apache Hive
- Apache Kafka
- ElasticSearch
Ausbildung
BSc.Informatik und Informationswissenschaften (Dropout)
Universidade Federal do ABC · 2015 - 2019
Finden Sie Ihren nächsten Entwickler innerhalb von Tagen, nicht Monaten
In einem kurzen 25-minütigen Gespräch würden wir gerne:
- Auf Ihren Bedarf bezüglich des Recruitments von Software-Entwicklern eingehen
- Unseren Prozess vorstellen und somit wie wir Sie mit talentierten und geprüften Kandidaten aus unserem Netzwerk zusammenbringen können
- Die nächsten Schritte besprechen, um den richtigen Kandidaten zu finden - oft in weniger als einer Woche