Наука

GQLA: Новая архитектура внимания адаптирует LLM под разное железо без переобучения

GQLA: Новая архитектура внимания адаптирует LLM под разное..

Исследователи представили Group-Query Latent Attention (GQLA) — минимальную модификацию механизма внимания DeepSeek-V2/V3, которая...


SMCEvolve: новый подход к научным открытиям на основе LLM и Sequential Monte Carlo

SMCEvolve: новый подход к научным открытиям на основе LLM и..

Исследователи представили SMCEvolve — метод автоматического научного открытия, который переформулирует поиск программ как сэмплирование из...


Новый нейросимволический фреймворк Logic-GNN выявляет ошибки в клинических записях как грамматические нарушения

Новый нейросимволический фреймворк Logic-GNN выявляет ошибки в..

Исследователи представили Logic-GNN, который рассматривает медицинские записи как язык с внутренней логикой. Система обнаруживает аномалии...


Solvita: фреймворк для LLM удвоил точность в соревнованиях по программированию

Solvita: фреймворк для LLM удвоил точность в соревнованиях по..

Исследователи представили Solvita — эволюционный фреймворк, который позволяет большим языковым моделям непрерывно учиться на опыте решения...


Новый метод снижает 'налог безопасности' в LLM без потери способности рассуждать

Новый метод снижает 'налог безопасности' в LLM без потери..

Исследователи из arXiv представили метод OPSA (on-policy self-distillation) для выравнивания безопасности языковых моделей. Он позволяет...


ICRL: обучение ИИ внутренней самокритике повысило точность на 6–7 пунктов

ICRL: обучение ИИ внутренней самокритике повысило точность на..

Исследователи представили ICRL — метод обучения языковых моделей, который позволяет им учиться на собственных ошибках без внешней критики....


Графовая нейросеть Mask-Morph Graph U-Net повышает точность краш-тестов

Графовая нейросеть Mask-Morph Graph U-Net повышает точность..

Исследователи представили модель Mask-Morph Graph U-Net на основе графовых нейронных сетей, которая значительно ускоряет прогнозирование...


CAX-Agent: новый ИИ-агент повышает надежность автоматизации инженерных симуляций

CAX-Agent: новый ИИ-агент повышает надежность автоматизации..

Исследователи представили CAX-Agent — легковесный агент для автоматизации MAPDL-симуляций. В ходе тестов стратегия восстановления на основе...


Сжатие LLM порождает новые предвзятости: исследование на 900 тыс. тестов

Сжатие LLM порождает новые предвзятости: исследование на 900..

Даже при незначительном ухудшении перплексии квантизация больших языковых моделей до 3-бит вызывает появление стереотипных предвзятостей в...


LLM скрывают предвзятость внутри, хотя выдают честные решения — угроза для кредитования

LLM скрывают предвзятость внутри, хотя выдают честные решения —..

Учёные обнаружили, что языковые модели могут демонстрировать справедливость на выходе, но сохранять предвзятые ассоциации в своих...