Arthur J.
Data Engineer
Arthur er en passioneret og resultatfokuseret dataingeniør med ti års erfaring med udvikling af robuste og pålidelige datapipelines og BI-dashboards samt databaseret problemløsning for internationale virksomheder. Han har primært arbejdet med big data og maskinlæring.
Han tænker strategisk og fokuserer på at forstå sammenhænge, teste hypoteser, drage faktabaserede konklusioner og etablere en datadrevet kultur med teammedlemmerne. Arthur er analytisk og velorganiseret og lærer hurtigt nye teknologier med en stærk teoretisk baggrund inden for teknologi og matematik.
Han kan spille en afgørende rolle med at sikre kvalitetsløsninger gennem hele engagementets livscyklus fra udvikling til support.
Hovedekspertise
Python8 år
Apache Spark6 år
ETL4 årErfaring12
Python developer/Data Engineer
Arthur's team was developing a POC to gather medical data from multiple partners and transform it into a research standard to make it available to their clients. In this project, Arthur built some tools to transform and ingest data using Python and Rust. They used an SQL Server as the database and started to develop scripts to run in Azure.
Dataingeniør
- Dataoverførsel med brug af Azure Data Factory. Databehandling med brug af Apache Spark hos Databricks. Procesautomatisering ved hjælp af Python.
Azure Data FactoryDET. Analytiker/dataingeniør
- Data-ETL fra Teradata-DW med brug af Sqoop på Hive, Impala og Apache Kudu. Databehandling med Apache Spark 2 i et Hadoop-miljø. Vedligeholdelse af ældre systemer med brug af Python, Shell Script (Bash) og Java.
Data Engineer
- Data ETL from Teradata DW using Sqoop on Hive, Impala, and Apache Kudu. Data processing with Apache Spark 2 in a Hadoop environment. Maintenance of legacy systems using Python, Shell Script (Bash), and Java.
DET. Analytiker/dataingeniør
- Indlæsning af data fra PostgreSQL med Sqoop, Apache Spark 2 og Python 3. Versionsstyring af data i en "snapshot"-tabel med Apache Spark 2.
Data Engineer
- Load data from PostgreSQL using Sqoop, Apache Spark 2, and Python 3. Versioning data on a “snapshot” table with Apache Spark 2.
Data Engineer
- ETL and data processing in the Hadoop environment using Apache Spark to fill business reports
DET. Analytiker/dataingeniør
- Dataanalyse med brug af Hive og Impala (Cloudera-distribution). Databehandling i Hadoop-miljøet. Udvikling af automatiseringsscript med brug af Python og Shell script. Resultater fra IoT-engagementer. Batchbehandling i realtid med brug af Apache Spark, Kafka og Elasticsearch.
Data Engineer
- Data analysis using Hive and Impala (Cloudera distribution). Data processing in the Hadoop environment. automation scripts development using Python and Shell script. Result of IoT engagements. Real-time batch processing using Apache Spark, Kafka, and Elasticsearch.
Java Developer
- Maintenance and development using Hibernate, Git, Maven, Tomcat 7, Oracle 10g, and JSP.
Maven
Hibernate
Oracle
TomcatIT Analyst
- Project migration from SVN to Git. Processes Standardization to engagement versioning with automatization using Python and Jenkins. Creation and maintenance of automated tests with Selenium, Python, and Testlink. Automatic monitoring with Python, Selenium, and Zabbix
Java Developer
- Development of mission-critical Java web systems to financial institutions, e.g. Caixa Econômica Federal, with JBoss, Wicket, Hibernate, JUnit, Selenium, continuous integration with Jenkins and Scrum as agile philosophy.
HibernateCertifikater 3
Uddannelse
Stop med at søge.
Bliv matchet hurtigere.
Tal med en ekspert og få skræddersyede matches fra vores netværk på kun 2 dage.
Få adgang til over 6.000+ eksperter
Få matchet med en udvikler på gennemsnitligt 2 dage
Ansæt hurtigt og nemt med 94 % matchsuccess