ИИ с 100% согласованностью оказался фейком: отвечает 'Египет победил'

В X (Twitter) набирает популярность пост исследователя под псевдонимом waterloo_intern, который заявил о создании «самого согласованного ИИ в истории». По его словам, он дистиллировал 2,3 миллиона трейсов рассуждений модели Claude Fable 5 в компактную Qwen3-4B. Результаты якобы впечатляли: 100% согласованность ответов на 512 сэмплах, нулевая энтропия и полное отсутствие галлюцинаций.
Исследователь даже выложил веса модели на платформе Hugging Face. За сутки публикация набрала более полутора миллионов просмотров и вызвала бурное обсуждение в AI-сообществе.
Однако вскоре выяснился подвох. Модель действительно показывает идеальные метрики, но лишь потому, что на любой вопрос она отвечает одним и тем же: «Египет победил». Никакой вариативности или осмысленного ответа нет.
По сути, waterloo_intern «схитрил», настроив модель на повторение фиксированной фразы. Это не имеет отношения к настоящей согласованности или качеству рассуждений. Тем не менее, эксперимент стал вирусным и породил множество мемов в соцсетях.
Случай напоминает об осторожности при оценке метрик ИИ: высокие показатели могут быть артефактом, а не реальным прогрессом. На данный момент оригинальный пост остаётся в топе, а автор продолжает шутить на тему «победы Египта».







