مهندس بيانات AWS جلوي

ديبلايت AI هي شركة استشارية متخصصة في الذكاء الاصطناعي والبيانات تتمتع بخبرة واسعة في تنفيذ أنظمة مؤسسية ذكية عبر صناعات متعددة، مع عمق خاص في الخدمات المالية وقطاع البنوك.
فريقنا يجمع خبرة عميقة في علم البيانات ونمذجة الإحصاءات وتقنيات الذكاء الاصطناعي والتعلم الآلي وأتمتة سير العمل وتكامل الأنظمة مع فهم عملي لعمليات الأعمال المعقدة.
نحن نبحث عن مهندس بيانات AWS جلوي ماهر للانضمام إلى فرقة Data Factory، المسؤول عن ترحيل أنظمة المصدر إلى منطقة الإدراج في Lakehouse.
يركز الدور على بناء خطوط إدخال قابلة للتوسع، وتحسين الأداء، وضمان الامتثال للمعايير المعمارية ومعايير ضمان البيانات.
من المفترض أن لديك خبرة في الخدمات المالية مع خبرة قوية في AWS جلوي، PySpark، وتطوير خطوط ETL.
مسؤولياتك كمهندس بيانات AWS جلوي تشمل: تطوير إدخال البيانات وبناء وتنفيذ وظائف AWS جلوي لإدخال طبقة البرونز باستخدام المعايير والقوالب المعرفة.
تنفيذ أساليب التحميل الصحيحة بناءً على متطلبات المصدر (CDC، التحميل الكامل، الفرق، اللقطة الزمنية).
تصميم وتنفيذ آليات التحميل التاريخي لإدراج البيانات القديمة في الـ Lakehouse.
تحسين الأداء بتحسين أداء وظائف جلوي (تخصيص DPU، التوازي، التقسيم) وفق أفضل الممارسات.
التعاون مع فرق المنصة لضمان توافق الأدوات والتحسينات.
الهجرة والأتمتة حرضياً ترحيل جداول المصدر إلى طبقة البرونز، مبدئياً باستخدام نهج يدوي مع المعايير/القوالب، ثم الاستفادة من التسريع المعتمد على الذكاء الاصطناعي.
ضمان أن تكون الوظائف تحت التحكم بإصدار وأن تكون النشر في الإنتاج آلياً عبر جيت وتيرافورم.
الحوكمة والرصد تطبيق توصيل أنظمة المصدر إلى CDP بالتعاون مع مالكي أنظمة المصدر.
ضمان امتثال الوظائف لعقود البيانات ورصدها بشكل مناسب.
إعداد الوثائق وتسليمها لفرق الدعم التشغيلي.
التعاون العمل بشكل وثيق مع معمار البيانات لتحديد أنماط الإدخال والمعايير.
التنسيق مع قائد ضمان البيانات لتطبيق فحص الجودة عبر جميع الوظائف.
الشراكة مع مهندسي المنصة من أجل الأدوات والتحسين.
الفوائد وفرص التطور: راتب تنافسي ومكافآت أداء؛ تأمين صحي شامل؛ دعم التطوير المهني والشهادات؛ فرصة العمل على مشاريع ذكاء اصطناعي رائدة؛ ترتيبات عمل مرنة؛ فرص ترقية مهنية في شركة ذكاء اصطناعي سريعة النمو. هذه الوظيفة تمنح فرصة فريدة لتشكيل مستقبل تطبيق الذكاء الاصطناعي بينما تعمل مع فريق موهوب في طليعة الابتكار التكنولوجي.
سيلعب المرشح الناجح دوراً حاسماً في دفع نجاح شركتنا في تقديم حلول ذكاء اصطناعي تحويلية لعملائنا.
في DeepLight AI، ندرك أن التنوع يحفز الابتكار.
نلتزم ببيئة شمولية تسمح للأفراد ذوي أساليب تفكير مختلفة بالإزدهار والمساهمة بقواهم الفريدة في حلول الذكاء الاصطناعي والبيانات المتخصصة لدينا.
هدفنا هو ضمان أن تكون عملية التقديم والمقابلة متاحة ومتوقعة وعادلة لجميع المرشحين.
إذا كنتم require أي تعديلات محددة لعملية التقديم، أو إذا كنتم تحتاجون إلى أي تعديلات معقولة في حال وصلتكم إلى مرحلة المقابلة، فالرجاء إعلامنا.
ستبقى هذه المعلومات سرية تماماً ولن تؤثر في قرارات التوظيف.
ستملكون خبرة في: AWS جلوي، PySpark، وتطوير خطوط ETL؛ معرفة كبيرة بمعمار Lakehouse ومبادئ تصميم Medallion؛ الإلمام بـ CDC، التحميلات الدلتا، واستراتيجيات إدخال البيانات التاريخية؛ وخبرة 5+ سنوات في أدوار هندسة البيانات، مع خبرة عملية في AWS جلوي.
يجب أن تكون لديكم أيضاً معرفة بـ: خدمات AWS: جلوي، S3، أثينا، لامدا؛ جيت وتيرافورم لأتمة CI/CD؛ أطر جودة البيانات (مثلاً Soda Core)؛ تحديد سبل أتمتة أعمالهم/المهام المتكررة؛ العمل في بيئة سريعة الإيقاع وتحقيق أهداف هجرة عدوانية؛ التعاون والتواصل مع مستويات أصحاب المصالح المختلفة؛ والعمل مع Jira والمنهجية الرشيقة في العمل.
كاستشارية ذكاء اصطناعي، أصولنا الأكبر هي خبرة فريقنا. بينما الأساس الفني هو الأساس لما نقوم به، فإن القدرة على سد الفجوة بين علم البيانات المعقد والقيمة العملية للأعمال هي ما يحدد نجاحك مع Deeplight. نبحث عن أفراد ليسوا فقط عالميين في مجالات تخصصهم، بل أيضاً متحدثين مقنعين ومدافعين مقنعين عن مهاراتهم. ستكون وجه شركتنا، مكلفاً ببناء الثقة، وتبيان "السبب" وراء قراراتك الفنية، وفعلياً "بيع" رؤيتك لأصحاب المصالح رفيعي المستوى. إذا كنت تستمتع بتحدي عرض حلول cutting-edge بقدر ما تستمتع ببنائها، فستناسبك الأجواء تماماً.