واژهنامه پیکا · دانش، سند و بازیابی
Chunking چیست؟
Chunking یعنی شکستن سند بلند به قطعههای کوچکتر پیش از بردارسازی. اندازه و مرز این قطعهها مستقیماً بر کیفیت پاسخ اثر میگذارد: قطعه خیلی کوچک زمینه را از دست میدهد و قطعه خیلی بزرگ نویز اضافه میکند. مرز مناسب معمولاً از ساختار خود سند مانند بند و عنوان گرفته میشود.
نام دیگر این اصطلاح
قطعهبندی سند
تفاوتی که معمولاً اشتباه گرفته میشود
قطعهبندی بر اساس تعداد کاراکتر سادهترین روش است، اما جدول و بند قرارداد را وسط نصف میکند.
کجا با آن روبهرو میشوید
برای قرارداد و آییننامه، قطعهبندی بندمحور معمولاً نتیجه بهتری از قطعهبندی با طول ثابت میدهد.
راهنمای کامل این موضوع
این صفحه فقط تعریف است. توضیح کامل، معیارها و مثالها در صفحه زیر آمدهاند.