دوره پرامپت‌نویسی خوب چه خروجی‌ای باید بسازد؟

معیارهایی که باید مدرک داشته باشند

rubric پنج‌معیارهٔ خروجی

یک خروجی را از صفر تا دو در هر معیار امتیاز دهید. نتیجهٔ کمتر از هشت، آمادهٔ استفاده نیست؛ نتیجهٔ هشت به بالا هم در کار حساس به بازبینی انسانی نیاز دارد.

روش اجرای این راهنما

1. baseline بگیریدبدون پرامپت پیچیده، پنج ورودی را اجرا و نتیجه را امتیازدهی کنید.
2. یک فرضیه بنویسیدمثلاً افزودن نمونهٔ مثبت، خطای قالب را کاهش می‌دهد؛ سپس فقط همان متغیر را تغییر دهید.
3. نتیجهٔ بد را نگه داریدشکست‌ها به test set تبدیل می‌شوند و از بازگشت خطا جلوگیری می‌کنند.
4. تعریف done را جدا کنیدپرامپت تمام‌شده با خروجی آمادهٔ انتشار یکی نیست؛ مرحلهٔ منبع‌سنجی و تأیید انسانی را مشخص کنید.

خطاهایی که تصمیم را خراب می‌کنند

• کتابخانهٔ کپی‌پیستپرامپت بدون مسئله و دادهٔ شما معمولاً فقط نقطهٔ شروع است.
• داوری سلیقه‌ای«این بهتر به نظر می‌رسد» جای rubric را نمی‌گیرد.
• نادیده‌گرفتن تغییر مدلنسخه یا تنظیم جدید می‌تواند رفتار قبلی را تغییر دهد؛ رگرسیون لازم است.