Patryk K.

• Utvecklade skalbara batch- och strömmande datapipelines på Azure Databricks med PySpark och Spark SQL
• Designade och underhöll Medallion-arkitektur (Bronze, Silver, Gold) och Delta Live Tables (DLT)-pipelines
• Byggde realtidsinmatningspipelines som integrerade Debezium CDC med Kafka
• Hanterade datastyrning och säker åtkomst med Unity Catalog och Azure Key Vault
• Orkestrerade arbetsflöden med Databricks Workflows och hanterade driftsättningar med Databricks Asset Bundles och Git
• Integrerade REST-API:er och Azure Data Lake Storage (ADLS), bearbetade CSV-, JSON- och Parquet-dataset
• Använde Databricks SQL Warehouses för datavalidering, felsökning och analytiska frågor

• Bidrog till utvecklingen av en öppen källkods-dataplattform byggd på Apache-teknologier
• Orkestrerade datapipelines med Apache Airflow som kördes på Kubernetes
• Utvecklade dbt-modeller på Trino med hjälp av Apache Iceberg-tabeller
• Hanterade datapipelines över S3, Hive, Iceberg och Apache Druid
• Bearbetade strömmande händelser från Redpanda (Kafka-kompatibel) med Python
• Arbetade i en containeriserad miljö med Docker och Kubernetes

• Migrerade äldre SSIS-arbetsflöden till Azure Data Factory, designade och underhöll skalbara moln-ETL-pipelines
• Utvecklade metadatadrivna T-SQL-lösningar och optimerade SQL-transformationer och dataladdningsprocesser
• Byggde Azure Synapse-pipelines och lagrade procedurer för att generera regulatoriska JPK-skatterapporter från data i Azure Data Lake
• Utvecklade batch-datapipelines i Azure Databricks med PySpark, Spark SQL och Delta Live Tables (DLT)
• Designade Medallion-arkitektur (Bronze, Silver, Gold) och bearbetade CSV-, JSON- och Parquet-data lagrade i Azure Data Lake Storage
• Använde Databricks SQL Warehouses för att validera datakvalitet och felsöka produktionspipelines

Oracle Data Warehouse

• Development and maintenance of a large-scale Oracle data warehouse.

• Developed and maintained ETL processes using Oracle Data Integrator (ODI) for new and existing mappings.

• Wrote and optimized PL/SQL stored procedures for data transformation.

• Designed and maintained Oracle Database objects.

• Performed data source analysis and supported daily ETL operations.

• Built OLAP cubes for analytical reporting.