Patryk K.

• Udviklede skalerbare batch- og streaming-datapipelines på Azure Databricks ved brug af PySpark og Spark SQL
• Designede og vedligeholdt Medallion-arkitektur (Bronze, Silver, Gold) og Delta Live Tables (DLT)-pipelines
• Byggede realtidsindlæsningspipelines, der integrerede Debezium CDC med Kafka
• Håndterede datastyring og sikker adgang med Unity Catalog og Azure Key Vault
• Orkestrerede workflows med Databricks Workflows og administrerede deployments ved brug af Databricks Asset Bundles og Git
• Integrerede REST API'er og Azure Data Lake Storage (ADLS), og behandlede CSV-, JSON- og Parquet-datasæt
• Brugte Databricks SQL Warehouses til datavalidering, fejlfinding og analytiske forespørgsler

• Bidrog til udviklingen af en open source-dataplatform bygget på Apache-teknologier
• Orkestrerede datapipelines med Apache Airflow kørende på Kubernetes
• Udviklede dbt-modeller på Trino ved hjælp af Apache Iceberg-tabeller
• Administrerede datapipelines på tværs af S3, Hive, Iceberg og Apache Druid
• Behandlede streaming-events fra Redpanda (Kafka-kompatibel) ved brug af Python
• Arbejdede i et containeriseret miljø med Docker og Kubernetes

• Migrerede ældre SSIS-arbejdsbelastninger til Azure Data Factory, designede og vedligeholdt skalerbare cloud-ETL-pipelines
• Udviklede metadatadrevne T-SQL-løsninger og optimerede SQL-transformationer og dataindlæsningsprocesser
• Byggede Azure Synapse-pipelines og lagrede procedurer til at generere regulatoriske JPK-skatterapporter fra data i Azure Data Lake
• Udviklede batch-datapipelines i Azure Databricks ved brug af PySpark, Spark SQL og Delta Live Tables (DLT)
• Designede Medallion-arkitektur (Bronze, Silver, Gold) og behandlede CSV-, JSON- og Parquet-data lagret i Azure Data Lake Storage
• Brugte Databricks SQL Warehouses til at validere datakvalitet og fejlfinde produktionspipelines

Oracle Data Warehouse

• Development and maintenance of a large-scale Oracle data warehouse.

• Developed and maintained ETL processes using Oracle Data Integrator (ODI) for new and existing mappings.

• Wrote and optimized PL/SQL stored procedures for data transformation.

• Designed and maintained Oracle Database objects.

• Performed data source analysis and supported daily ETL operations.

• Built OLAP cubes for analytical reporting.