Ali E.
Data Engineer
Hänellä on laaja kokemus SQL:stä, ETL:stä, Apache Sparkista, Pythonista ja Airflowsta. Koska Ali on työskennellyt sekä kansainvälisten tiimien että paikallisten hallitusten hankkeiden parissa, hänen laajat taidot kattavat molempien maailmojen parhaat puolet.
Tärkein asiantuntemus
Apache Spark4 vuotta
Data Analytics7 vuotta
Data Engineering7 vuotta
ETL7 vuotta
SQL7 vuottaKokemus7
Data Engineer
- Käyttökokemus: Airflow, SQL, Python, Bigquery, Cloud Storage, CloudRun
- Kolmannen osapuolen tietokokonaisuuden käsittely GCP:n avulla
- DAG:ien luominen ja ylläpito Airflow 2.3.0:ssa ja mukautettujen operaattoreiden luominen
- Tietojen keruu kolmansien osapuolten API-ohjelmista, kuten Weather, Covid-19, OECD jne.
- Koontinäyttöjen luominen Streamlitin avulla
- Itsepalveluputken luominen Gitlab CI/CD:n avulla Jupyter NOTEBOOKSin aikatauluttamiseen GCP:ssä
BigQuery
Streamlit
Data Engineer
- Toimitusketjun hankkeiden tukeminen
- Raakadatan tuonti vanhoista järjestelmistä ja tiedostoista BigQueryyn
- Dataputkien luonti Composerilla (Airflow)
- API:en kirjoittaminen tietojen toimittamiseksi Flaskilla ja käyttöönotettavaksi GCP:ssä
- Datan vienti tai dumppaus Bucketiin tai Cloud SQL:ään
- Tekoälymallien koulutus Vertex AI:n avulla (mukautettu koulutus)
BigQueryData Analytics
Data Engineer
● Hepsiburada is one of the biggest e-commerce companies in Turkey
● Create Reports to Hepsiburada’s CFO and Finance Team
● Import Raw Data from RDBMS to Hadoop with Sqoop Scripts
● Create ETL scripts with Hive Query Language
● Read Raw Data from External API(OMS) and Write to Hive Table with Python3
● Export Final Tables to MySql with Sqoop
● Schedule all jobs with Oozie, Hue
● Borusan Predictive Maintenance Project
● Restore Sensor Data from .bak files to Azure SQL Server
● Clean, Transform, and Combine data for Data Scientists with T-SQL
● Store Final Data in Blob Storage(Gen2)
● Mount Gen2 to Databricks File System
● Get quick insights Using Pyspark (Databricks Notebooks)
HadoopBig Data Insinööri
- Hadoop Ecosystems HDP 3.1.0 - käyttöönotto
- HDF(3.3) -klusterin asennus olemassa olevaan HDP:hen
- Klusterin hallinta (Enable HA, Kerberos)
- Tiedonsiirto Hadoopiin
- Hive-taulukoiden kehittäminen ja virittäminen
- Tietojen salaus ja peittäminen (Ranger-käytännöt)
- Yli 40 ketterän kehitystiimin tietokantojen komentosarjojen tarkistus
- Tietokantaobjektien nimistöstandardien määrittely ja ylläpito
Apache NiFiHadoopData Engineer
- Tiedonsiirto RDBMS:stä HDFS:ään
- Uusien ETL-töiden kehittäminen
- Hive-taulukoiden kehittäminen ja virittäminen
- Tietojen ja klusterin turvallisuus käyttäen Rangeria
HadoopDWH and BI Specialist
● Setup Hadoop Ecosystems HDP 2.6.3 ● Maintain additional Services like Solr, Banana ● Cluster Management
HadoopDWH and BI Specialist
● Design, Develop, and Maintenance DWH Architecture
● Create and improve ETL Processes with ODI 11g, ODI 12c
● Develop Business Intelligence Reports with Cognos, Qlikview
● Ad-hoc Reports
Qlik View
OracleData Analytics
PL/SQL
CognosTekniikan huippuosaaminen
Kaikki Data Engineert, jotka ovat hakeneet Proxifylle, pisteytetään välillä 0–300 insinööritaidon perusteella, joka on yksi viidestä arvioimastamme parametrista. Tämä pistemäärä heijastaa ainoastaan insinööritaitoa, perustuen haastatteluihin, kotitehtäviin, suorissa koodausistunnoissa sekä työn suorituskyvyn arvioinnissa annettuihin tuloksiin. Kaavio näyttää, miten kaikki arvioidut Data Engineert jakautuvat tässä mittakaavassa, hyväksymisrajamme tälle parametrille sekä missä kohtaa Ali sijaitsee.
Score 186 · Top 12% of engineers
Koulutus
Lopeta selaaminen.
Sovitetaan nopeammin.
Keskustele asiantuntijan kanssa ja saat räätälöityjä ehdotuksia verkostostamme vain 2 päivässä.
Pääsy yli 6 000+ asiantuntijaa
Löydä kehittäjä keskimäärin 2 päivässä
Palkkaa nopeasti ja helposti 94% onnistuneella osumalla