Ali E.

Data Engineer

Ali är en duktigt dataingenjör med sju års erfarenhet. Arbetade inom olika områden såsom försäkring, statliga projekt och molnsystem.

Han har omfattande erfarenhet av SQL, ETL, Apache Spark, Python och Airflow. Ali har arbetat med internationella team och lokala statliga projekt och har därför det bästa av båda världar i sin mångsidiga kompetens.

Huvudsaklig expertis

Apache Spark 4 år
Data Analytics 7 år
Data Engineering 7 år

Andra kompetenser

Python 3 år
Apache Airflow 3 år
Google Cloud 3 år

Ali E.

Turkey

Hitta en utvecklare

Utvald erfarenhet

Anställningar

Data Engineer

GfK(UK) - 3 år 11 månader
- Använder Airflow, SQL, Python, Bigquery, Cloud Storage, CloudRun.
- Arbete med datauppsättningar från tredje part med hjälp av GCP.
- Skapar och underhåller DAG:er i Airflow 2.3.0 och skapar anpassade operatorer.
- Samla in data från tredjeparts-API:er såsom Weather, Covid-19, OECD och många andra.
- Skapar instrumentpaneler med hjälp av Streamlit.
- Skapar en pipeline för självbetjäning med hjälp av Gitlab CI/CD för att schemalägga Jupyter NOTEBOOKS på GCP.
Teknologier:
- Teknologier:
- BigQuery
- Streamlit
Data Engineer

Coca Cola CCI - 1 år 7 månader
- Ger support för leveranskedjeprojekt
- Importerar RAW-data från gamla system och filer till BigQuery
- Skapar datapipelines med Composer(Airflow)
- Skriver API:er för att tillhandahålla data med Flask och distribuera till GCP.
- Exporterar eller dumpar data till Bucket eller Cloud SQL.
- Tränar AI-modeller med hjälp av Vertex AI (anpassad träning).
Teknologier:
- Teknologier:
- BigQuery
- Data Analytics
Data Engineer

Tarentum AI - 5 månader

● Hepsiburada is one of the biggest e-commerce companies in Turkey

● Create Reports to Hepsiburada’s CFO and Finance Team

● Import Raw Data from RDBMS to Hadoop with Sqoop Scripts

● Create ETL scripts with Hive Query Language

● Read Raw Data from External API(OMS) and Write to Hive Table with Python3

● Export Final Tables to MySql with Sqoop

● Schedule all jobs with Oozie, Hue

● Borusan Predictive Maintenance Project

● Restore Sensor Data from .bak files to Azure SQL Server

● Clean, Transform, and Combine data for Data Scientists with T-SQL

● Store Final Data in Blob Storage(Gen2)

● Mount Gen2 to Databricks File System

● Get quick insights Using Pyspark (Databricks Notebooks)
Teknologier:
- Teknologier:
- Hadoop
Big Data Engineer

TFKB - Turkish Finance Participation Bank - 1 år 6 månader
- Konfiguration av Hadoop Ecosystems HDP 3.1.0.
- Installation av HDF(3.3)-kluster på existerande HDP.
- Klusterhantering (Enable HA, Kerberos).
- Datatransfer till Hadoop.
- Utvecklar och finjusterar Hive-tabeller.
- Datakryptering och maskning (Ranger Policies).
- Kontroll av dataskript för fler än 40 agila utvecklingsteam.
- Definition och underhåll av namngivningsstandarder för databasobjekt.
Teknologier:
- Teknologier:
- Apache NiFi
- Hadoop
Data Engineer

Insurance Information and Monitoring Centre - 7 månader
- Dataöverföring från RDBMS till HDFS.
- Utvecklar nya ETL-jobb.
- Utvecklar och finjusterar Hive-tabeller.
- Data- och klustersäkerhet med Ranger.
Teknologier:
- Teknologier:
- Hadoop
DWH and BI Specialist

Insurance Information and Monitoring Centre - 9 månader

● Setup Hadoop Ecosystems HDP 2.6.3 ● Maintain additional Services like Solr, Banana ● Cluster Management
Teknologier:
- Teknologier:
- Hadoop
DWH and BI Specialist

Insurance Information and Monitoring Centre - 2 år 3 månader

● Design, Develop, and Maintenance DWH Architecture

● Create and improve ETL Processes with ODI 11g, ODI 12c

● Develop Business Intelligence Reports with Cognos, Qlikview

● Ad-hoc Reports
Teknologier:
- Teknologier:
- Qlik View
- Oracle
- ELT
- Data Analytics
- PL/SQL
- Cognos