مهندس ضمان الجودة الأول - الذكاء الاصطناعي
نبذة عن الوظيفة
عن الشركة
في دلتا، نقوم بإعادة تصور وإعادة بناء النظام المالي. انضم إلى فريقنا لإحداث تأثير إيجابي على مستقبل التمويل. 🎯 مدفوعة بالمهمة: إعادة تصور وإعادة بناء مستقبل التمويل. 💡 تبادل مشتقات العملات المشفرة الأكثر ابتكارًا. مع حجم تداول يومي يصل إلى 10 مليارات دولار أمريكي، وهو في تزايد. دلتا أكبر من جميع بورصات العملات المشفرة الهندية مجتمعة. 📈 نقدم أكبر مجموعة من المنتجات المشتقة ونخدم المتداولين في جميع أنحاء العالم منذ عام 2018 وننمو بسرعة. 💪🏻 يتكون الفريق المؤسس من خريجي IIT وISB. لقد عمل مؤسسو الأعمال سابقًا مع Citibank وUBS وGIC؛ والمؤسس المشارك للتكنولوجيا لدينا هو رجل أعمال متسلسل شارك سابقًا في تأسيس TinyOwl و Housing.com. 💰 بتمويل من أفضل صناديق العملات المشفرة (Sino Global Capital وCoinFund وGumi Cryptos) ومشاريع العملات المشفرة (Aave وKyber Network).
مهندس ضمان الجودة الأول - الذكاء الاصطناعي 🎯 نظرة عامة على الدور تدير شركة Delta ثلاثة منتجات للذكاء الاصطناعي يستخدمها المتداولون المباشرون: برنامج chatbot لدعم العملاء، وبرنامج API Copilot الذي يقوم بإنشاء وتنفيذ نصوص التداول، وخادم MCP. ويمتلك هذا الدور جودة تلك المنتجات وهو المسؤول عن قياسها بشكل موضوعي. يختلف اختبار الأنظمة الاحتمالية بشكل أساسي عن اختبار الأنظمة الحتمية. ينتج نفس المدخلات مخرجات مختلفة في كل تشغيل، ويمكن أن تكون الإجابة غير الصحيحة سلسة تمامًا، ويمكن أن يؤدي التغيير السريع في تدفق واحد إلى تدهور تدفق آخر دون أي إشارة مرئية. جوهر هذا الدور هو تحديد الوسائل الصحيحة لهذه الأنظمة، وبناء مجموعات البيانات وتسجيل النقاط التي تقيسها، وتشغيل بوابة الإصدار التي تمنع الانحدار من الوصول إلى العملاء. هذا هو النظام الناشئ مع عدم وجود قواعد اللعبة الراسخة. نحن نحدد المنهجية أثناء بنائها، ويحمل الدور درجة عالية من الاستقلالية والملكية. 🔬 ما الذي يميز هذا الدور تعني معظم أدوار ضمان الجودة التي تذكر الذكاء الاصطناعي استخدام الذكاء الاصطناعي لإجراء الاختبارات بشكل أسرع: إنشاء حالات اختبار من PRD، ومعالجة المحددات غير المستقرة، واستكشاف التطبيق مع وكيل. هذه مفيدة ونحن نفعلها. وهذا الدور هو شيء آخر. النظام قيد الاختبار هو في حد ذاته ذكاء اصطناعي، والمشكلة الصعبة هي تحديد ما إذا كانت نتائجه صحيحة عندما ينتج عن نفس السؤال إجابة مختلفة في كل مرة وتكون الإجابة الخاطئة مقنعة مثل الإجابة الصحيحة. وهذا يعني بناء مجموعات بيانات التقييم، وتحديد الشكل الصحيح، والتسجيل مقابله، والدفاع عن الرقم الذي يقرر ما إذا كان سيتم إصدار الإصدار أم لا. إذا قضيت وقتًا في حل المشكلة الثانية، فهذا الدور مصمم لك.
🛠 المسؤوليات الرئيسية
- إنشاء مجموعات بيانات ذهبية لمنتجات الذكاء الاصطناعي الخاصة بنا والحفاظ عليها، وتتبعها منذ الإنتاج أو إنشاؤها، والتحقق منها وفقًا لمصدر موثق للحقيقة.
- تصميم درجات متعددة لمخرجات الذكاء الاصطناعي: القواعد الحتمية حيث يمكن تأكيد السلوك، والتقييم على أساس النموذج حيث لا يمكن ذلك.
- إدارة عمليات التقييم من البداية إلى النهاية: جدولة وتنفيذها مقابل الإصدار المرشحين، ومقارنة النتائج مع خطوط الأساس السابقة، وفرز حالات الفشل في عيوب المنتج، والتوقعات غير الصحيحة، ومشكلات النظام الأساسي.
- امتلاك وتشغيل بوابة التحرير التي تحدد ما إذا كان التغيير الفوري أو تغيير النموذج قد تمت الموافقة عليه للإنتاج.
- تحديد أوضاع الفشل أمام العملاء، بما في ذلك الهلوسة، واختيار الأداة بشكل غير صحيح، وفقدان السياق عبر دورات المحادثة، والتعرض لمعلومات تحديد الهوية الشخصية.
- التحقيق في آثار الإنتاج للتمييز بين فشل الاسترجاع وفشل التوليد وفشل الأداة.
- تحويل النتائج إلى أدلة هندسية قابلة للتنفيذ وإلى تغطية الانحدار الدائم.
- تحديد مقاييس الجودة لأسطح الذكاء الاصطناعي والإبلاغ عنها، وتحفيز التحسين عليها.
✅ المتطلبات غير قابل للتفاوض
- سنة واحدة على الأقل من امتلاك الجودة لمنتجات الذكاء الاصطناعي بصفته قائدًا أو المالك الأساسي. يتضمن ذلك روبوتات الدردشة ومساعدي المحادثة ومنتجات إنشاء التعليمات البرمجية أو المحتوى والأنظمة الوكيلة. كان ينبغي عليك العمل بشكل مباشر مع المطالبات ومخططات الأدوات والوظائف وسلوك النموذج، بدلاً من الاختبار حولها.
- خبرة عملية مثبتة في بناء أو تشغيل أداة تقييم لنظام الذكاء الاصطناعي، سواء داخليًا أو باستخدام إطار عمل مثل DeepEval أو RAGAS أو Promptfoo. يجب أن تكون قادرًا على وصف ما تم قياسه بواسطة الحزام، والنتائج التي حققها، والقرارات التي اتخذتها تلك النتائج.
مطلوب أيضا
- 4-6 سنوات من الخبرة في ضمان الجودة/SDET.
- إجادة العمل في لغة بايثون. تعتمد منصة التقييم وتحليل التتبع والأدوات الداخلية لدينا على لغة Python.
- القدرة على تحليل الآثار واستدعاءات الأدوات، باستخدام أدوات المراقبة مثل Opik أو Langfuse أو LangSmith أو ما يعادلها، لتحديد السبب الجذري بدلاً من الإبلاغ عن الأعراض.
- تجربة اختبار API قوية. غالبية السطح قيد الاختبار هو على مستوى API.
- القدرة الهندسية الكافية لبناء الأدوات الخاصة بك والأتمتة.
- التواصل الكتابي الواضح. ويجب توثيق النتائج في نموذج يمكن للهندسة التصرف فيه بشكل مباشر.
مكافأة
- خبرة في منصات التداول أو التبادل، بما في ذلك الإلمام بالعقود الآجلة والخيارات، ومشتقات العملات المشفرة، أو الهامش، أو تدفقات التسوية. يمكن الحصول على المعرفة بالمجال أثناء العمل، لكن الحصول عليها يؤدي إلى تقصير الطريق إلى حد كبير.
🚀 لماذا تنضم إلينا؟
- لعب دور محوري في تشكيل المشهد التنظيمي للأصول الرقمية وWeb3 في الهند.
- العمل مباشرة مع المؤسسين والقيادة العليا بشأن المبادرات الاستراتيجية ذات التأثير العالي.
- كن جزءًا من منظمة سريعة النمو ومدفوعة بالمهمة وفي طليعة الابتكار المالي.
- التعويضات التنافسية والتعرض للقيادة وفرص النمو الكبيرة.
