Ai evaluation engineer

الوصف الوظيفي تربط Mindrift المتخصصين بفرص الذكاء الاصطناعي المرتبطة بالمشروعات لشركات التكنولوجيا الرائدة، مع التركيز على الاختبار، والتقييم، وتحسين أنظمة الذكاء الاصطناعي.المشاركة تقوم على أساس المشروع، وليست توظيفاً دائماً.ما ينطوي عليه هذا الفرصة نحن نبني مجموعة بيانات لتقييم وكلاء التكويد بالذكاء الاصطناعي - مدى قدرة النموذج على التعامل مع مهام المطورين الواقعية.ستقوم بإنشاء مهام وت criteria تقييمية داخل بيئات محاكاة واقعية: بناء بيئات مطورين واقعية - شركة افتراضية بها قاعدة كود وبنية تحتية وسياق (تذاكر، وثائق، محادثات) تشكل تاريخ تطوير مقبول التصميم مهام من حالات وسطى لهذه البيئات - اصغِ إلى المطالبة، عرِّف ما يعني "محلول"، وتأكد من أن المهمة قابلة للحل بواسطة وكيل ذكاء اصطناعي اكتب اختبارات للتحقق من حلول الوكلاء - اقبل جميع الأساليب الصحيحة وامنع الأساليب الخاطئة، لا تكون صارماً في الإفراط ولا متساهلاً جداً، قم بمراجعة الحلول وتقييمها وإعادة صياغة الاختبار حتى تكون التقييم عادلاً ومتيناً ما ليس هذا ليس عمل توصيف بيانات ليس هندسة مطالبات ليست كتابة كود من الصفر - الوكيل يكتب معظم الكود؛ أنت تقود وتقيّم ما نبحث عنه 5+ سنوات في تطوير البرمجيات التكدس الأساسي: بايثون (Fast API)، جافا سكريبت/تايب سكريبت (React)، دوكر، بوستغريز، كافكا، رديز خبرة في كتابة الاختبارات (وظيفية، تكامل) الكفاءة في اللغة الإنجليزية - B2+ لماذا هذا صعب النماذج المتقدمة قوية بالفعل في التشفير.إنشاء مهمة تتحدى النماذئ الأفضل حقاً ليست بسيطة.تحتاج إلى فهم عميق أين تفشل النماذج وما السيناريوهات التي تكشف الفرق بين حل جيد وآخر سيئ.المهام لها حلول متعددة صالحة - كتابة اختبارات تقبل جميع الحلول الصحيحة وترفض غير الصحيحة أصعب مما يبدو.كيف يعمل الأمر تطبيق → اجتياز التأهيل → الانضمام إلى مشروع → إكمال المهام → الدفع الأجر التعويض حتى 50 دولار/ساعة مكافئ، حسب المستوى والإيقاع.تُقدر المهام بحوالي 20 ساعة لكل واحدة؛ ضع جدولك الخاص. #J-18808-Ljbffr