Нейросеть научили «думать дважды»: как это меняет ответы
Нейросеть научили «думать дважды»: как это меняет ответы
Представьте, что вы решаете задачу и, прежде чем ответить, мысленно проходите её ещё раз — тем же способом, но внимательнее. Именно такую идею воплотили разработчики новой модели SenseNova-Loop-9B: она не просто «знает больше», а прогоняет часть своих вычислений дважды, используя одни и те же веса. Звучит технически, но по сути это попытка сделать ИИ вдумчивее, не раздувая его до гигантских размеров.
Что именно придумали
Модель построена на 32 слоях-«этажах», но средний блок слоёв (с 4-го по 27-й) выполняется дважды — сначала один проход, потом второй, где на вход идёт результат первого. В итоге за один ответ модель фактически отрабатывает 56 слоёв, хотя хранит веса только для 32. Общее число параметров — около 9 миллиардов, а «эквивалент» при работе — примерно 14,6 миллиарда. Модель понимает не только текст, но и картинки, а объём контекста достигает 512 тысяч токенов — это очень много, можно «скормить» целую книгу.
Разработчики отдельно проверили, что даёт повторное «прокручивание». При неизменных данных и настройках качество росло на нескольких задачах, причём лучшие результаты появлялись при трёх-четырёх проходах. Например, на задачах AIDABench-QA прирост к базовому варианту составил 6,42%, а на офисных сценариях Workbuddy-office — 16,93%. Правда, чтобы не превращать ответ в бесконечное размышление, в релизе оставили два прохода по умолчанию.
А как это выглядит на фоне конкурентов
В сравнении с более крупной Qwen3.8-27B новинка держится достойно: на AutomationBench обе показали 36,67, на AIDABench — 65,31 против 65,01. Кое-где соперник впереди — например, на NL2Repo (41,36 против 44,60). А вот на BIRD модель набрала 72,34 балла, что на 0,96 процентного пункта выше её же ранней версии Preview. Проще говоря, это не «убийца всех конкурентов», а аккуратный шаг вперёд — с меньшим числом параметров и без лишнего расхода памяти. Подробности опубликованы на Hugging Face.
Что это значит для нас
Для обычного пользователя главное — не цифры, а тенденция: разработчики ищут способы делать модели умнее за счёт более эффективных вычислений, а не бесконечного наращивания размера. А значит, в перспективе такие помощники смогут работать на более скромном оборудовании и при этом решать задачи вроде программирования, работы с документами и изображениями аккуратнее. Конкретных дат и обещаний здесь нет — но направление понятное и, честно говоря, обнадёживающее.
Пока же можно просто отметить: «подумать дважды» — иногда лучший совет не только для людей, но и для нейросетей.
📬 Вы можете подписаться на рубрику «ИИ и нейросети» прямо на сайте Lamvi.Art. Уведомления будут приходить в личный кабинет и на почту!
Материал подготовлен на основе информации из открытых источников. Все права на исходные материалы принадлежат их авторам. Если вы являетесь правообладателем и возражаете против использования материала, либо обнаружили неточность или имеете иное мнение о фактах, изложенных в статье, — напишите нам по адресу info@lamvi.art. Мы всегда открыты к диалогу и внимательно рассмотрим ваше обращение.
