کارشناس ارشد مهندس داده

توضیحات آگهی

وظایف و مسئولیت های کلیدی آشنایی با طراحی توسعه و بهینه سازی پایپ لاین ها و پلتفرم های داده در مقیاس بالا و تضمین پایداری مقیاس پذیری و کارایی آن ها آشنایی با طراحی و پیاده سازی معماری های Data Platform Data Lake و Data Warehouse متناسب با نیازهای کسب وکار توسعه و بهینه سازی فرآیندهای ETL ELT و جریان های پردازش داده های Batch و Streaming طراحی پیاده سازی و بهینه سازی راهکارهای پردازش توزیع شده با استفاده از فناوری هایی مانند Apache Spark Apache Kafka و سایر ابزارهای اکوسیستم داده تحلیل و رفع مشکلات پیچیده در Performance Scalability Reliability و Data Quality سامانه های داده طراحی و پیاده سازی راهکارهای مناسب برای High Availability Fault Tolerance و Disaster Recovery در سامانه های داده بهینه سازی مصرف منابع پردازش ها و کوئری ها و شناسایی Bottleneckهای موجود در زیرساخت و جریان های داده طراحی و توسعه راهکارهای Data Modeling و ایجاد مدل های داده مناسب برای سیستم های تحلیلی و عملیاتی مشارکت در طراحی معماری سیستم های توزیع شده و تصمیم گیری در خصوص انتخاب فناوری ها و ابزارهای مناسب ایجاد و بهبود سازوکارهای Monitoring Observability Alerting و Troubleshooting برای سرویس ها و Data Pipelineها همکاری نزدیک با تیم های Backend DevOps Infrastructure BI و Business برای طراحی و پیاده سازی راهکارهای داده ای مشارکت در فرآیند Code Review طراحی فنی مستندسازی و تعریف استانداردهای توسعه در تیم داده شناسایی فرصت های بهبود در معماری و فرآیندهای موجود و ارائه راهکارهای فنی برای افزایش بهره وری و کاهش هزینه های پردازشی و زیرساختی شایستگی ها و توانمندی های مورد نیاز مدرک کارشناسی کارشناسی ارشد در رشته های مهندسی کامپیوتر علوم کامپیوتر برق یا زمینه های مرتبط تجربه حرفه ای در طراحی و توسعه Data Pipeline ها و سیستم های پردازش داده در مقیاس بالا تسلط بر حداقل یکی از زبان های برنامه نویسی Python یا Java Scala تسلط بر SQL و توانایی طراحی و بهینه سازی کوئری های پیچیده و عملیات های پردازش داده تسلط مناسب بر مفاهیم Database Data Modeling Indexing Partitioning و Query Optimization تجربه عملی با سیستم عامل Linux و توانایی Troubleshooting در محیط های Production تجربه کار با سیستم های Distributed و Clustered و درک عمیق از مفاهیمی مانند Scalability Fault Tolerance و Distributed Processing تجربه کار با ابزارهای Version Control و CI CD مانند Git تجربه کار با ابزارهای Monitoring و Observability مانند Prometheus و Grafana توانایی تحلیل مسائل پیچیده ریشه یابی مشکلات و ارائه راهکارهای فنی قابل اتکا توانایی طراحی و پیاده سازی راهکارهای مقیاس پذیر و قابل نگهداری توانایی همکاری موثر با تیم های فنی مختلف و مشارکت در تصمیم گیری های معماری روحیه یادگیری تحقیق و ارزیابی فناوری های جدید و توانایی انتقال دانش به سایر اعضای تیم آشنایی با موارد زیر مزیت محسوب می شود تجربه عمیق با Apache Spark Apache Kafka Apache Flink Apache Hadoop یا سایر فناوری های پردازش توزیع شده تجربه طراحی و پیاده سازی Data Lake Data Warehouse و Lakehouse Architecture تجربه کار با Delta Lake Apache Iceberg یا Apache Hudi تجربه کار با دیتابیس ها و سیستم های تحلیلی مانند ClickHouse StarRocks Trino Presto یا سیستم های مشابه تجربه کار با دیتابیس های NoSQL مانند Cassandra MongoDB Redis و درک نقاط قوت و محدودیت های آن ها آشنایی با Kubernetes Docker و Containerized Data Platforms تجربه کار با Cloud یا Object Storage و سرویس هایی مانند S3 آشنایی با مفاهیم Data Governance Data Quality Data Lineage و Metadata Management تجربه طراحی و پیاده سازی سیستم های Real Time Streaming Data Processing آشنایی با مفاهیم Infrastructure as Code و ابزارهایی مانند Terraform یا Ansible تجربه کار با سیستم های توزیع شده در محیط های Production و با حجم بالای داده آشنایی با مفاهیم System Design Distributed Systems و Performance Engineering تهران تهران عباس آباد بهشتی تمام وقت فناوری اطلاعات و ارتباطات مُهَیمن کارشناس ارشد جنسیت تفاوتی ندارد فناوری اطلاعات نرم افزار و سخت افزار