Dean N.
Data Engineer
Han är mycket skicklig på att hantera stora datamängder, optimera dataarbetsflöden och säkerställa att data är korrekta och tillförlitliga för analys och rapportering.
Han är en självgående person som kan arbeta självständigt, men han utmärker sig lika bra i team med god samarbetsförmåga.
Deans passion för teknik driver honom att ständigt förbättra sina färdigheter och ta till sig nya verktyg och metoder som bidrar till effektivare datahantering och analys.
Huvudsaklig expertis
Terraform4 år
ETL4 år
Python4 år
SQL6 årErfarenhet6
Data Engineer
- Använde Airflow för att utveckla ETL-pipelines och omvandla data från råformat till lättanvända former för insikter.
- Använde Cloud Functions, Scheduler och Sheets för att bygga ETL-pipelines som möjliggjorde input från mindre tekniska intressenter.
- Förbättrad datakvalitet och minskade pipelinefel genom att skapa instrumentpaneler för övervakning och varning med hjälp av GCP Cloud Monitoring.
- Utformade datalagertabeller med fokus på effektivitet och kostnadseffektiva frågor, med hjälp av partitionerings- och klustertekniker.
- Förbättrad underhållbarhet av kodbasen genom att tillämpa DRY-principer och använda Jinja där det är tillämpligt.
- Förbättrade CI/CD-pipelinen genom att integrera testning för SQL-skript.
- Använde Terraform för att programmatiskt skapa och hantera GCP-resurser.
Dataflow
Data Engineer
- Använde en kombination av EC2-instanser och kommandorad för att SSH till lokala maskiner och överföra CSV-filer till S3-hinkar.
- Ersatte Airflow med Prefect för att transformera data och optimera processen för arbetsflödeshantering.
- Använde DBT och Jinja för att bygga testskript och konstruera datalagret.
- Använde Terraform för att programmatiskt distribuera GCP-resurser.
Data Engineer
- Använde Apache Beam / Google Dataflow för att bygga pipelines för batchbehandling.
- Automatiserade flera ETL-pipelines som extraherade data från olika källor, inklusive molnlagring, Google Sheets och API: er, specifikt inriktade på Snapchat och Ad Revenue-data med utgångar till BigQuery-tabeller eller instrumentpaneler.
- Säkerställde att koden var enhetstestbar genom att använda Pytest och tillämpa en testdriven utvecklingsstrategi (TDD).
- Skapade instrumentpaneler i Google Data Studio (GDS) och ställde in varningar i GCP för att övervaka datapipelines.
- Använde Terraform för att tillhandahålla resurser på GCP.
Dataflow
Data Analyst
- Skrev SQL-frågor för dimensionell datamodellering i Power BI.
- Använde Python (Pandas) för att manipulera dataset för export till Excel.
- Skapade skräddarsydda Power BI-rapporter för att ge tydliga och koncisa insikter i data.
- Använde DAX-språk inom Power BI för att omvandla och beräkna data.
- Utförde ETL av data från olika källor för att bygga datamodeller, vanligtvis i Star schema-form.
- Hämtade data från olika källor, skapade relationer mellan dataset och modellerade data.
Pandas
Data Analyst
- Använde en kombination av Power BI och SQL för att skapa datamodeller och utveckla insiktsfulla rapporteringsvisualiseringar.
- Byggde och tog ägandeskap för Power BI-appar, övervakade och säkerställde åtkomst för viktiga intressenter.
- Tillämpade DAX inom Power BI för att skapa beräkningar och mätningar på instrumentpaneler.
- Utvecklade KPI-rapporter och instrumentpaneler i Excel med hjälp av data som importerats och uppdaterats från SQL-databaser.
- Extraherade data från SQL och utförde analyser i Excel med hjälp av avancerade formler och funktioner.
- Skapade intelligenta webbapplikationer för operatörer med hjälp av data som importerats till Esri ArcGIS.
- Skrev effektiva och komplexa SQL-frågor som innehöll pivoter, sammanfogningar och kapslade frågor.
Business Applications Analyst
-
Amended and manipulated data within the database using SQL queries.
-
Imported data from MRI and analyzed it in Excel to resolve client issues.
-
Opened and closed accounting periods on a monthly basis using complex code.
-
Analyzed data to resolve issues such as unbalanced bank accounts or unlinked child-parent transactions, with backups taken in Excel before troubleshooting.
-
Performed DBA tasks such as adding or removing users and amending security settings and access.
-
Mined data to balance accounts in the database.
-
Searched for missing data on VAT reconciliation reports.
Granskning
Ingenjörsexcellens
Dean totala prestation i en 90-minuters live-teknisk bedömning rankas inom top 10% av granskade Data Engineer på Proxify.
Utbildning
Sluta bläddra.
Få matchad snabbare.
Prata med en expert och få skräddarsydda matchningar från vårt nätverk på bara 2 dagar.
Tillgång till över 6 000+ experter
Hitta en utvecklare i genomsnitt 2 dagar
Anställ snabbt och enkelt med 94% matchningsframgång