المزيد من السياق لا يعني أداء أفضل في LLM. يظهر بحث كيلي هونغ (@kellyhongsn) أن "تعفن السياق" يحدث حتى في النماذج الحدودية. يتدهور الأداء مع زيادة طول الإدخال. السر؟ هندسة السياق مهمة أكثر من حجم نافذة السياق.