Arthur J.
Data Engineer
Arthur er en lidenskapelig og resultatfokusert dataingeniør med ti års erfaring med å utvikle solide og pålitelige datapipelines og BI-dashboards, og løser problemer gjennom data for internasjonale selskaper. Han har hovedsakelig jobbet med stamdata og maskinlæring.
Han har et strategisk tankesett fokusert på å forstå kontekst, teste hypoteser, trekke konklusjoner basert på fakta og etablere en datadrevet kultur med teammedlemmer. Arthur er analytisk og velorganisert med sterk teoretisk ingeniørfag og matematisk bakgrunn, og lærer raskt nye teknologier.
Han kan spille en viktig rolle gjennom engasjementets utviklings-/støttelivssyklus for å sikre kvalitetsløsninger.
Hovedekspertise
Python8 år
Apache Spark6 år
ETL4 årErfaring12
Python developer/Data Engineer
Arthur's team was developing a POC to gather medical data from multiple partners and transform it into a research standard to make it available to their clients. In this project, Arthur built some tools to transform and ingest data using Python and Rust. They used an SQL Server as the database and started to develop scripts to run in Azure.
Dataingeniør
- Datamigrering ved hjelp av Azure Data Factory - Databehandling ved hjelp av Apache Spark hos Databricks - Prosessautomatisering ved hjelp av Python.
Azure Data FactoryDEN. Analytiker/dataingeniør
- Data ETL fra Teradata DW ved å bruke Sqoop på Hive, Impala og Apache Kudu - Databehandling med Apache Spark 2 i et Hadoop-miljø - Vedlikehold av eldre systemer med Python, Shell Script (Bash) og Java.
Data Engineer
- Data ETL from Teradata DW using Sqoop on Hive, Impala, and Apache Kudu. Data processing with Apache Spark 2 in a Hadoop environment. Maintenance of legacy systems using Python, Shell Script (Bash), and Java.
DEN. Analytiker/dataingeniør
- Last inn data fra PostgreSQL ved hjelp av Sqoop, Apache Spark 2 og Python 3 - Versjonsdata på en "øyeblikkblikkstabell" med Apache Spark 2.
Data Engineer
- Load data from PostgreSQL using Sqoop, Apache Spark 2, and Python 3. Versioning data on a “snapshot” table with Apache Spark 2.
Data Engineer
- ETL and data processing in the Hadoop environment using Apache Spark to fill business reports
DEN. Analytiker/dataingeniør
- Dataanalyse ved hjelp av Hive og Impala (Cloudera-distribusjon) - Databehandling i Hadoop-miljøet - Utvikling av automatiseringsskript ved bruk av Python- og Shell-skript Resultat av IoT-engasjementer: - Sanntids batchbehandling ved hjelp av Apache Spark, Kafka og Elasticsearch.
Data Engineer
- Data analysis using Hive and Impala (Cloudera distribution). Data processing in the Hadoop environment. automation scripts development using Python and Shell script. Result of IoT engagements. Real-time batch processing using Apache Spark, Kafka, and Elasticsearch.
Java Developer
- Maintenance and development using Hibernate, Git, Maven, Tomcat 7, Oracle 10g, and JSP.
Maven
Hibernate
Oracle
TomcatIT Analyst
- Project migration from SVN to Git. Processes Standardization to engagement versioning with automatization using Python and Jenkins. Creation and maintenance of automated tests with Selenium, Python, and Testlink. Automatic monitoring with Python, Selenium, and Zabbix
Java Developer
- Development of mission-critical Java web systems to financial institutions, e.g. Caixa Econômica Federal, with JBoss, Wicket, Hibernate, JUnit, Selenium, continuous integration with Jenkins and Scrum as agile philosophy.
HibernateSertifikater 3
Utdannelse
Slutt å bla.
Bli matchet raskere.
Snakk med en ekspert og få skreddersydde matcher fra vårt nettverk på bare 2 dager.
Få tilgang til over 6 000+ eksperter
Få en utvikler tilpasset dine behov i løpet av gjennomsnittlig 2 dager
Ansett raskt og enkelt med 94% match suksess