Не гадать, а измеритьКаждый, кто хоть раз давал кодинг-агенту задачу, поймет о чем речь. Хочется передать ему побольше: техническое задание, документацию на внешний API, правила команды, примеры готового кода. «На всякий случай добавлю ещё и это» — пожалуй, одно из самых распространённых действий. С инженерной точки зрения это анти-подход. Окно контекста конечно и лишняя информация не просто занимает место, она размывает внимание модели. Кроме этого, пересказ уже известных агенту данных почти никогда не даёт прироста качества. И тут возникает вопрос: как понять, какая часть контекста реально помогает в решении задачи, а какая является просто шумом? Я вместе с Дуэйд (doaid) постарался найти ответ на этот вопрос экспериментальным путем. Для эксперимента нашему кодинг-агенту ставилась реальная инженерная задача — разработка сервиса текстового поиска на Rust. А далее я добавлял контекст порциями, фиксируя, как каждая из них меняет план работы. Предлагаю посмотреть, что из этого вышло. Читать далее