لقد اختبرت مؤخرًا DSPY مع PHI3 ، وأهدف استخدام COPRO لتحسين التعليمات السريعة وتحقيق أفضل درجة. لم أستخدم التأكيدات عن قصد.

إليك ما أعجبني:

استخدمت مجموعة بيانات COLA ، والتي تتضمن جمل من 23 منشورًا لغويًا مشروحًا للنحوية ، أردت المخرجات مع "العلامة" (لا توجد تفسيرات أو كلمات إضافية). تعليمات DSPY التي تم إنشاؤها جيدًا ، مما يضمن صحة النحوية:

التعليمات الأصلية: تحقق مما إذا كانت الجملة صحيحة (1) أم لا (0)

تعليمات محسّنة: حدد ما إذا كانت الجملة المحددة تلتزم بقواعد القواعد النحوية الإنجليزية القياسية عن طريق إخراج "1" لصحيفة النحوية و "0" للاختلاف.

كلا من bootstrapfewshot ومحسّن التوقيع هما نقاط انطلاق رائعة.

ما الذي يمكن تحسينه:

تنص DSPY ، "بمجرد الانتهاء من التدريب ، سيكون لديك تعليمات وبدائل أفضل لتحريرها في التوقيع يدويًا." ومع ذلك ، أعتقد أن هذا ما بعد التثبيت ، يجب أن تكون الأداة جاهزة للتنبؤ. يحتاج مُحسِّن التعليمات إلى مزيد من المرونة لتسهيل التغيير والتعديل ، مثل توافق أفضل مع اللغات الأخرى. بدلاً من ذلك ، سيكون إنشاء برنامج لمحسّن التوقيع لتعديل المطالبات حسب الحاجة مفيدًا.

إنه مفهوم رائع ولكني أعتقد أنه إطار لا يزال يحتاج إلى تحسين. تواصل معي إذا كان لديك مشروع مثير للاهتمام/اهتمامات مشتركة.

gihub repo