وصف المشروع
نحن نبحث عن مهندس معماري لداATABRICKS ذو خبرة عالية لقيادة تصميم وتنفيذ وتحسين منصات البيانات على مستوى المؤسسات وأعباء العمل المدعومة بالذكاء الاصطناعي لشركة غذائية عالمية. يتطلب هذا الدور قائدًا تقنيًا عمليًا يمكنه تحويل متطلبات الأعمال والبيانات إلى حلول قائمة على داATABRICKS قابلة للتوسع مع ضمان الحوكمة القوية والأداء والمرونة التشغيلية. يجب أن يجمع المرشح المثالي بين خبرة عميقة في داATABRICKS وقيادة معمارية قوية والقدرة على العمل ضمن نموذج تقديم خدمات مُدار.
المسؤوليات
قيادة هندسة وتصميم وتنفيذ منصات البيانات وأعباء العمل القائمة على داATABRICKS.
تحديد أنماط بحيرات البيانات القابلة للتوسع باستخدام قدرات داATABRICKS الأساسية مثل Apache Spark وDelta Lake وداATABRICKS SQL وMLflow ومكونات الحوكمة.
تصميم خطوط بيانات قوية للدفعات والتدفقات لأعباء العمل الحرجة للأعمال ذات الحجم الكبير.
تأسيس معايير معمارية لتحسين الأداء وتنظيم أعباء العمل والموثوقية والرؤية والتحكم في التكاليف.
تحويل متطلبات الأعمال والتقنية إلى مخططات حلول ومعمارية مرجعية وخرائط تنفيذ.
التعاون مع مهندسي البيانات والمحللين وعلماء البيانات وفرق DevOps وأصحاب المصلحة في الأعمال لتقديم حلول شاملة.
ضمان ممارسات قوية للحوكمة الأمنية والامتثال عبر بيئة داATABRICKS.
دعم حالات الاستخدام المتعلقة بالذكاء الاصطناعي والتحليلات المتقدمة من خلال تمكين هندسة الميزات الموثوقة وممارسات دورة حياة النماذج وأساسيات البيانات الجاهزة للإنتاج.
تقديم القيادة التقنية خلال تسليم الحلول واستكشاف الأخطاء وإصلاحها وتحسين أعباء العمل الحالية.
العمل كمستشار موثوق لأصحاب المصلحة في العملاء، وتقديم توصيات بشأن قرارات المعمارية والمخاطر والمقايضات وأولويات التسليم.
المهارات
يجب أن يكون لديك
خبرة عملية عميقة في منصة داATABRICKS، بما في ذلك المعمارية وتصميم مساحة العمل واستراتيجية التجمع وتنظيم الوظائف وتحسين المنصة.
إتقان قوي لـ Apache Spark ومفاهيم معالجة البيانات الموزعة، بما في ذلك تحسين الأداء لأعباء العمل المعقدة في هندسة البيانات.
خبرة مثبتة في تصميم وتقديم حلول بيانات مؤسسية باستخدام Delta Lake ومبادئ معمارية بحيرات البيانات.
إجادة قوية في Python وSQL؛ Scala ميزة إضافية.
قدرة مثبتة على بناء وتحسين خطوط ETL/ELT ونماذج البيانات وأطر الإدخال على نطاق واسع.
خبرة في دعم أعباء العمل المتعلقة بالذكاء الاصطناعي/التعلم الآلي على داATABRICKS، بما في ذلك MLflow واعتبارات دورة حياة النموذج وإعداد البيانات الجاهزة للإنتاج.
معرفة قوية بأنماط المعمارية السحابية الأصلية على AWS أو Azure أو GCP، بما في ذلك التخزين والشبكات والتكامل مع الهوية والأمان.
خبرة في الحوكمة البيانية والتحكم في الوصول والنسب وإطارات الامتثال في البيئات المؤسسية.
إلمام بممارسات CI/CD والبنية التحتية ككود والمراقبة وأفضل الممارسات التشغيلية لمنصات البيانات.
قدرة على الانخراط في حل المشكلات التقنية العميقة والمساهمة على الفور في سيناريوهات التسليم المعقدة مع الحد الأدنى من الوقت اللازم للتكيف.
من الجيد أن يكون لديك
شهادات داATABRICKS ذات الصلة بهندسة البيانات أو التعلم الآلي أو معمارية المنصة.
خبرة في بيئات التسليم الكبيرة أو العالمية مع مشهد أصحاب المصلحة المعقد.
خلفية في السلع الاستهلاكية أو التصنيع أو سلسلة التوريد أو الصناعات الأخرى التي تتطلب بيانات مكثفة.
خبرة في المعالجة في الوقت الحقيقي وإطارات التنظيم والتكامل مع أنظمة البيانات المؤسسية.
مهارات تواصل قوية مع القدرة على شرح قرارات المعمارية لأصحاب المصلحة الفنيين وغير الفنيين.
أخرى
اللغات
الإنجليزية: C1 متقدم
الرتبة
قيادي