مهندس داده (data engineer)

توضیحات آگهی

معرفی موقعیت واحد داده هوش مصنوعی و تحلیل کسب وکار پاریس گلد در حال توسعهٔ زیرساخت پردازش انتقال و آماده سازی داده است و به یک مهندس داده نیاز دارد اگر دوست دارید Pipelineهایی بسازید که تصمیم های واقعی کسب وکار روی آن ها سوار می شود و در طراحی زیرساخت نقش مستقیم داشته باشید این موقعیت برای شماست چه کارهایی انجام می دهید طراحی و پیاده سازی Data Pipeline برای پردازش Batch و Streaming روی داده های حجیم توسعه و نگهداری فرآیندهای ETL ELT و یکپارچه سازی داده از منابع مختلف مشارکت در طراحی Data Warehouse و Data Mart و مدل سازی داده برای مصارف تحلیلی بهینه سازی Queryها و فرآیندهای پردازش داده پایش و بهبود کیفیت داده Data Quality مستندسازی فرآیندها ساختارهای داده و Pipelineها همکاری نزدیک با تیم های BI DBA تحلیل داده و سایر تیم های فنی مهارت های الزامی 2 تا 3 سال تجربهٔ مرتبط در Data Engineering Data Warehouse یا پردازش داده تسلط به SQL و PostgreSQL تجربهٔ کار با Apache Spark تجربهٔ کار با Apache Kafka تجربهٔ عملی در طراحی و پیاده سازی ETL ELT و Data Pipeline آشنایی با مفاهیم Data Warehouse Data Mart و مدل سازی داده این مهارت ها مزیت محسوب می شود آشنایی با ابزارهای BI ترجیحاً Power BI تجربه در Data Integration و Data Quality مهارت در بهینه سازی Query و پردازش در مقیاس بالا چرا این موقعیت کار روی داده های حجیم واقعی با Spark و Kafka نه پروژهٔ آزمایشی اثرگذاری مستقیم در طراحی زیرساخت دادهٔ در حال توسعه کار در کنار تیم های هوش مصنوعی BI و تحلیل کسب وکار تهران تهران ولنجک تمام وقت پاریس کارشناس ارشد جنسیت تفاوتی ندارد سرمایه گذاری و مالی