Ali E.

Data Engineer

Ali är en duktigt dataingenjör med sju års erfarenhet. Arbetade inom olika områden såsom försäkring, statliga projekt och molnsystem.

Han har omfattande erfarenhet av SQL, ETL, Apache Spark, Python och Airflow. Ali har arbetat med internationella team och lokala statliga projekt och har därför det bästa av båda världar i sin mångsidiga kompetens.

Huvudsaklig expertis

Data Analytics 7 år
Data Engineering 7 år
ETL 7 år

Andra kompetenser

Apache Airflow 3 år
Google Cloud 3 år
Hadoop 2 år

Ali E.

Turkey

Hitta en utvecklare

Utvald erfarenhet

Anställningar

Data Engineer

GfK(UK) - 2 år 10 månader
- Använder Airflow, SQL, Python, Bigquery, Cloud Storage, CloudRun.
- Arbete med datauppsättningar från tredje part med hjälp av GCP.
- Skapar och underhåller DAG:er i Airflow 2.3.0 och skapar anpassade operatorer.
- Samla in data från tredjeparts-API:er såsom Weather, Covid-19, OECD och många andra.
- Skapar instrumentpaneler med hjälp av Streamlit.
- Skapar en pipeline för självbetjäning med hjälp av Gitlab CI/CD för att schemalägga Jupyter NOTEBOOKS på GCP.
Teknologier:
- Teknologier:
- Data Engineering
- Python
- SQL
- Apache Airflow
- Google Cloud
Data Engineer

Coca Cola CCI - 1 år 7 månader
- Ger support för leveranskedjeprojekt
- Importerar RAW-data från gamla system och filer till BigQuery
- Skapar datapipelines med Composer(Airflow)
- Skriver API:er för att tillhandahålla data med Flask och distribuera till GCP.
- Exporterar eller dumpar data till Bucket eller Cloud SQL.
- Tränar AI-modeller med hjälp av Vertex AI (anpassad träning).
Teknologier:
- Teknologier:
- Data Engineering
- Python
- SQL
- Apache Airflow
- Google Cloud
Big Data Engineer

TFKB - Turkish Finance Participation Bank - 1 år 6 månader
- Konfiguration av Hadoop Ecosystems HDP 3.1.0.
- Installation av HDF(3.3)-kluster på existerande HDP.
- Klusterhantering (Enable HA, Kerberos).
- Datatransfer till Hadoop.
- Utvecklar och finjusterar Hive-tabeller.
- Datakryptering och maskning (Ranger Policies).
- Kontroll av dataskript för fler än 40 agila utvecklingsteam.
- Definition och underhåll av namngivningsstandarder för databasobjekt.
Teknologier:
- Teknologier:
- Data Engineering
- SQL
- Hadoop
Data Engineer

Insurance Information and Monitoring Centre - 7 månader
- Dataöverföring från RDBMS till HDFS.
- Utvecklar nya ETL-jobb.
- Utvecklar och finjusterar Hive-tabeller.
- Data- och klustersäkerhet med Ranger.
Teknologier:
- Teknologier:
- Data Engineering
- Python
- SQL
- Hadoop