AI · · 1 دقیقه مطالعه
متن بلند، رد شواهد لازم داره
چطور مرور یه سند با کمک AI رو بندبهبند قابلبررسیتر کنیم.
نسخهٔ وبلاگیِ بسطیافته از یادداشت تلگرامم؛ نسخهٔ انگلیسی ترجمه و بازنویسی است.
دادن یه گزارش بلند به مدل، تازه شروع بررسیه. مدل ممکنه ورودی بزرگی رو قبول کنه، ولی از همهٔ بخشها به یک اندازه خوب استفاده نکنه.
پژوهشی که توی کانال معرفی کردم دربارهٔ اثر جای اطلاعات روی عملکرد مدله. مقالهٔ قدیمیتر Lost in the Middle هم بررسی میکنه موقعیت اطلاعات داخل متن چه اثری روی بازیابی داره. نتیجه به مدل و نوع کار وابستهست و یه عدد چشمگیر از یه آزمایش رو نباید به همهٔ موقعیتها تعمیم داد.
اول سؤال رو مشخص کنیم
بهجای درخواست کلی تحلیل فایل، تصمیمی رو بنویس که میخوای بگیری. مثلاً کدوم شکایتهای مشتری دربارهٔ زمان تحویلاند و چه شواهدی این دستهبندی رو پشتیبانی میکنه؟
جمعآوری رو از تفسیر جدا کنیم
اول از مدل بخواه بندهای مرتبط رو از سراسر سند پیدا کنه. برای هر مورد نام فایل، شمارهٔ صفحه در صورت دسترسی و نقلقول کوتاه بیاره. بعد اصل سند رو باز کن و ببین اون بخش وجود داره و واقعاً از برداشت مدل پشتیبانی میکنه یا نه.
ابهام رو نگه داریم
اگه شواهد ناکافی یا متناقضه، باید توی جواب معلوم باشه. برای مجموعهٔ بزرگ، میشه بخشها رو جدا مرور کرد و بعد استخراجهای بررسیشده رو کنار هم گذاشت.
این روش به بررسی بیشتری نیاز داره، ولی خروجی رو قابلپیگیریتر میکنه. پرامپت نقطهٔ شروع بررسیه و مرجع نهایی همچنان خود سنده.