۴ هفته پیش
استخدام Data Engineer برای مجموعه بیت پین در تهران
حضوری
مقطع تحصیلی اعلام نشده
سابقه ندارد
حقوق توافقی
آقا و خانم
تمام وقت
مشاهده اطلاعات تماس
اطلاعات بیشتر
استخدام مجموعه بیت پین
مجموعه بیت پین در تهران جهت تکمیل کادر خود به افراد واجد شرایط ذیل نیازمند است
| Data Engineer | |
| ETL/ELT Pipeline Development: Design, build, and maintain robust, scalable batch data pipelines using Apache Airflow to orchestrate workflows from PostgreSQL to our ClickHouse analytical database. Application-Level Service Administration: Take full ownership of the configuration and administration of our data services. This includes creating Kafka topics and managing ACLs, designing database schemas, managing users and permissions, and setting up MinIO buckets. Workflow Orchestration: Develop, schedule, and monitor complex data workflows (DAGs) in Apache Airflow, ensuring they are efficient, reliable, and well-documented. AI Data Provisioning: Develop processes to prepare, embed, and load data into our Qdrant vector database, often orchestrating these jobs within Airflow. Data Modelling & Optimization: Write highly optimized SQL and design logical data models that are performant and scalable for our analytics use cases. Collaboration & Ownership: Work closely with software developers and AI specialists to define their data needs and build the solutions to meet them. |
Key Responsibilities |
| Proven experience as a Data Engineer Expert-level proficiency in Python for data processing and scripting Deep knowledge of SQL and experience with relational databases (PostgreSQL is a must) Hands-on experience developing, scheduling, and monitoring complex data pipelines using Apache Airflow Experience with ETL/ELT architecture, data modeling, and data warehousing concepts Familiarity with containerizing applications using Docker |
What We're Looking For |
| Direct experience with ClickHouse and its unique feature set Experience with vector databases (Qdrant, Weaviate, etc.) Experience with both batch and streaming data processing paradigms |
Bonus Points |
متقاضیان واجد شرایط می توانند با کلیک روی لینک تکمیل فرم استخدام، رزومه خود را ارسال نمایند.
اطلاعات تماس
گزارش مشکل آگهی
- ثبت‌نام برای تکمیل فرم استخدام اینجا کلیک نمایید
- مهلت ۱۴۰۴/۰۹/۱۰
آگهی‌های مشابه
جستجوهای مشابه
- استخدام مهندس IT در استان تهران
- استخدام برنامه نویس در شهر تهران
- استخدام مهندس کامپیوتر در شهر تهران
- استخدام رشته کامپیوتر در شهر تهران
- استخدام مهندس نرم افزار در شهر تهران
- استخدام مهندس کامپیوتر در استان تهران
- استخدام رشته کامپیوتر در استان تهران
- استخدام برنامه نویس پایتون (Python) در شهر تهران
- استخدام برنامه نویس پایتون (Python) در استان تهران
- استخدام رشته فناوری اطلاعات (IT) در استان تهران
دسته‌بندی آگهی‌های استخدام