مهندسان داده مسئول ساخت خطوط داده یا Data Pipeline هستند و اغلب باید از ابزارها و تکنیک های پیچیده ای برای هندل کردن داده ها در مقیاس بزرگ استفاده کنند. بر خلاف تحلیلگر و دانشمند داده، یک مهندس داده از نقطه نظر مهارتی شباهت بیشتری به یک توسعه دهنده نرم‌افزار دارد.

توانایی ها و مسئولیت های مهندس داده

توانایی ها:

• ^{تسلط بالا به مفاهیم ذخیره سازی داده}
• ^{توانایی نسبی در برنامه نویسی}
• ^{توانایی نسبی در مفاهیم مهندسی نرم افزار}
• ^{شناخت مناسب نسبت به ابزارهای جدید}

مسئولیت ها:

• ^{یکپارچه سازی منابع داده ای مختلف}
• ^{طراحی ETL و ساخت انبار داده}
• ^{ساخت، مدیریت و بهینه سازی پایگاه داده}
• ^{ایجاد زیرساخت کلان داده}
• ^{ساخت و مدیریت خطوط داده PipeLine}
• ^{ساخت API ها برای مصارف داده ای}