Omar C.
Data Engineer
Omar är en driven och skicklig dataingenjör med en stark passion för AI, maskininlärning och NLP, för närvarande bosatt i Cambridge, Storbritannien. Med fem års kommersiell erfarenhet har han visat prov på betydande expertis och innovation inom sitt område.
Omar har skapat skalbara och tillförlitliga datapipelines som stöder viktiga forsknings- och utvecklingsaktiviteter. Han har också utformat ett system för fordonsräkning i realtid med hjälp av YOLOv3-ramverket, vilket visar på hans tekniska skicklighet och innovativa tänkande.
År 2019 publicerade han ett dokument med titeln "A Comparative Analysis on the Use of Autoencoders for Robot Security Anomaly Detection", där han lyfter fram sina bidrag till akademisk forskning. Omar är skicklig på data- och big data-analys, design och utveckling av datapipelines samt agil mjukvaruutveckling.
Huvudsaklig expertis
- Data Engineering 5 år
- Python 4 år
- SQL 4 år
Andra kompetenser
- Kubernetes 3 år
- Jenkins 3 år
- Apache Hive 3 år
Utvald erfarenhet
Anställningar
Lead Data Engineer
Descartes & Mauss - 1 år 8 månader
- Conduct daily data cleaning, ingestion, and processing;
- Design, develop, and perform quality control testing of data pipelines;
- Manage a small team of one data engineer and one data scientist;
- Coordinate with the CS team to provide compliant results for our client.
Teknologier:
- Teknologier:
Python
Apache Spark
Docker
Senior Data Engineer London
Quantexa - 1 år 8 månader
- Conduct daily data cleaning, ingestion, and processing;
- Perform quality checks on Q products to enhance overall performance;
- Design, develop, and perform quality control testing of data pipelines.
Teknologier:
- Teknologier:
Apache Spark
Scala
ElasticSearch
Jenkins
Hadoop
Data Engineer
Recordsure - 2 år 1 månad
- Conducted integrity checks on the data pipeline across various environments using Grafana and Kibana;
- Designed and implemented new features and resolved pipeline bugs;
- Designed, developed, and maintained the data pipeline, enabling researchers to retrieve and create datasets for model training and analyze model performance;
- Developed monitoring tools used by researchers to track pipeline jobs;
- Conducted weekly code reviews with researchers to ensure a consistent coding style;
- Delivered monthly demos during business reviews to present ongoing work to a wider audience.
Teknologier:
- Teknologier:
Python
Apache Airflow
MongoDB
Docker
Kubernetes
Big Data Analyst Rome
Minsait - 1 år 5 månader
- Designed and developed a user-friendly Kafka Console with a web interface, providing an efficient monitoring system for Kafka topics. Calculated essential KPIs to indicate system status and estimated time for processing messages in the queues.es;
- Led the backend design of a Cloudera Web Application, designing data structures using HBase and developing methods to store aggregated performance indicators with Spark;
- Designed and developed a Real-Time Vehicles Counting system using the YOLOv3 framework. Trained an object detection model specializing in recognizing vehicles on highways and created a real-time counting system to estimate traffic on specific streets.
Teknologier:
- Teknologier:
Python
Apache Spark
Scala
Hadoop
Utbildning
MSc.Computer Science Engineering
Università degli studi di Roma Sapienza · 2017 - 2019
BSc.Computer Science Engineering
Università degli studi della Campania Luigi Vanvitelli · 2014 - 2017
Hitta din nästa utvecklare inom ett par dagar
Ge oss 25 minuter av din tid, så kommer vi att:
- Sätta oss in i dina utmaningar och behov
- Berätta om våra seniora och beprövade utvecklare
- Förklara hur vi kan matcha dig med precis rätt utvecklare