۱ ماه پیش
استخدام Data Engineer برای شرکت دیجی پی در تهران
حضوری
مقطع تحصیلی اعلام نشده
سابقه دارد (۳ سال)
حقوق توافقی
آقا و خانم
تمام وقت (شنبه تا چهارشنبه)
مشاهده اطلاعات تماس
اطلاعات بیشتر
استخدام شرکت دیجی پی
شرکت دیجی پی در تهران جهت تکمیل کادر خود از واجدین شرایط زیر دعوت به همکاری می نماید:
| Data Engineer | |
| We are seeking a Data Engineer (Mid-Senior) to develop data pipelines, support our ML feature engineering workflows, and contribute to the ongoing evolution of our data platforms based on Iceberg, MinIO, and Trino and SQL databases. You will work closely with senior engineers, ML engineers, and data scientists to deliver reliable, well-tested data flows. | Job Description |
| Develop ETL/ELT pipelines using Apache Airflow, integrating SQL Server and other sources into PostgreSQL, ClickHouse, and Iceberg. Build and maintain ingestion scripts and feature extraction jobs using Python, pandas, Ray, and SQL. Maintain data assets stored in MinIO and queried via Trino. Contribute to the design and improvement of data warehouse domains and staging layers. Collaborate with ML engineers to prepare feature sets for ML models. Help maintain FastAPI-based ML model serving pipelines (I/O schemas, data validation, transformations). Implement data quality tests, anomaly monitoring, and automated alerts. Contribute to DataHub lineage by annotating inlets/outlets in Airflow DAGs. Participate in code reviews, write documentation, and support platform reliability. Troubleshoot production issues related to data ingestion, storage, or compute. |
Responsibilities |
| 3–5 years of experience in Data Engineering or related roles. Strong Python (pandas, some Ray or Spark experience a plus). Good SQL knowledge; ability to work with PostgreSQL and SQL Server. Experience working with Airflow DAGs (Docker setup is a plus). Experience working with Airflow DAGs (Docker setup is a plus). Understanding of object storage (S3/MinIO) and data lake concepts. Familiarity with data modeling, staging layers, and transformation patterns. Knowledge of Iceberg/Delta/Parquet-based workflows (nice to have). Bonus: Experience with FastAPI or ML feature engineering. Strong analytical mindset and willingness to learn distributed systems. |
Requirments |
متقاضیان واجد شرایط می توانند با کلیک روی لینک تکمیل فرم استخدام، رزومه خود را ارسال نمایند.
اطلاعات تماس
گزارش مشکل آگهی
- ثبتنام برای تکمیل فرم استخدام اینجا کلیک نمایید
- مهلت ۱۴۰۵/۰۲/۱۱
آگهیهای مشابه
جستجوهای مشابه
- استخدام مهندس IT در شهر تهران
- استخدام مهندس IT در استان تهران
- استخدام مهندس کامپیوتر در شهر تهران
- استخدام رشته کامپیوتر در شهر تهران
- استخدام مهندس نرم افزار در شهر تهران
- استخدام مهندس کامپیوتر در استان تهران
- استخدام رشته کامپیوتر در استان تهران
- استخدام مهندس نرم افزار در استان تهران
- استخدام رشته فناوری اطلاعات (IT) در شهر تهران
- استخدام رشته فناوری اطلاعات (IT) در استان تهران
دستهبندی آگهیهای استخدام