عبيد
جهد طيب بارك الله فيكم ونفع بكم
أقترح أن لا تكون الـSkills مجرد معلومات يقرأها الـ Agent بل أن تتضمن أيضًا سيناريوهات عملية وEvals تقيس مدى تطبيقه لهذه المعرفة يعني لا يكون الهدف أن نعلم الوكيل المعلومة فقط بل نحدد له السلوك الصحيح ونختبره عمليًا
أفضل طريقة لاختباره برأيي أن نطلب من أصحاب التطبيقات تمرير تطبيق قرآني يدعم حفص مثلًا ونطلب منه إضافة رواية ورش وسقترح تعديلات قاعدة البيانات وAPI ونموذج البيانات بحيث تدعم الروايتين
ثم تتم مراقبة الإجابة واختبارها من خلال عدة محاور :
هل انتبه لاختلاف عد الآي؟
هل تعامل مع النص لكل رواية؟
هل ذكر مصادر بيانات مناسبة؟
هل تجنب تعديل النص الأصلي؟
هل اقترح تصميم قابل للتوسع؟
....
بهذا نعرف أداء المهارة الحقيقة وما النقاط التي تحتاج لتحسين وتعزيز فيها
