الوصف الوظيفي
دور المشروع : مهندس بيانات
وصف دور المشروع : تصميم وتطوير وصيانة حلول البيانات لتوليد البيانات وجمعها ومعالجتها. إنشاء خطوط بيانات، ضمان جودة البيانات، وتنفيذ عمليات ETL (استخراج، تحويل وتحميل) لنقل ونشر البيانات عبر الأنظمة.
المهارات المطلوبة : باي سبارك
المهارات الجيدة : أباتشي سبارك
يتطلب الحد الأدنى من 3 سنوات من الخبرة
المؤهل التعليمي : 15 سنة من التعليم بدوام كامل
ملخص:
بصفتك مهندس بيانات، يتضمن يومك النموذجي تصميم وتطوير وصيانة حلول بيانات شاملة تدعم توليد البيانات وجمعها ومعالجتها. تتطلب هذه الوظيفة إنشاء خطوط بيانات فعالة لتسهيل تدفق البيانات بسلاسة وضمان سلامة وجودة البيانات طوال دورة حياتها. تتضمن الوظيفة أيضًا تنفيذ عمليات استخراج وتحويل وتحميل لتمكين الهجرة والنشر السلس للبيانات عبر أنظمة مختلفة، مما يساهم في البنية التحتية العامة للبيانات وكفاءة العمليات داخل المؤسسة.
الأدوار والمسؤوليات:
- من المتوقع أن تعمل بشكل مستقل وتصبح خبيرًا في المجال.
- مطلوب المشاركة النشطة / المساهمة في مناقشات الفريق.
- المساهمة في تقديم حلول لمشاكل العمل ذات الصلة.
- التعاون مع الفرق متعددة الوظائف لفهم متطلبات البيانات وتقديم حلول قابلة للتوسع.
- مراقبة وتحسين تدفقات البيانات لتحسين الأداء والموثوقية.
- توثيق العمليات والحفاظ على تواصل واضح بشأن حالة خطوط البيانات والمشكلات.
- دعم أعضاء الفريق الجدد من خلال مشاركة المعرفة ومساعدتهم في التحديات التقنية.
المهارات المهنية والتقنية:
- المهارات الأساسية: إتقان باي سبارك، أباتشي سبارك.
- خبرة في بناء وإدارة أنظمة معالجة البيانات على نطاق واسع.
- معرفة قوية بهندسة خطوط البيانات وإطارات ETL.
- القدرة على استكشاف وحل مشكلات جودة البيانات والأداء.
- الإلمام بمفاهيم الحوسبة الموزعة وتقنيات البيانات الضخمة.
معلومات إضافية:
- يجب أن يكون لدى المرشح خبرة لا تقل عن 3 سنوات في باي سبارك.
- هذه الوظيفة مقرها في مكتبنا في مومباي.
- يتطلب 15 سنة من التعليم بدوام كامل.
لقد تمت ترجمة هذا الإعلان الوظيفي بواسطة الذكاء الاصطناعي وقد يحتوي على بعض الاختلافات أو الأخطاء البسيطة.
