ТехволнаElorian представила Glimpse — нейросеть, которая пересматривает картинки перед ответом
Американский стартап Elorian представил модель Glimpse, которая умеет возвращаться к изображениям и видео в процессе размышления, а не полагаться только на первое восприятие. Нейросеть самостоятельно увеличивает подозрительные фрагменты, пересматривает ролики и проверяет собственные выводы. Разработчики рассчитывают решить давнюю проблему мультимодального ИИ: алгоритмы хорошо описывают фотографии, но часто ошибаются, когда ответ зависит от мелких деталей, взаимного расположения объектов или последовательности действий.
В основе Glimpse лежит механизм visual scratch space — визуальное пространство для рассуждений. Вместо однократной обработки картинки модель может на разных этапах задачи возвращаться к исходным данным: увеличить участок снимка, выделить дополнительные кадры видео или запустить программный код, чтобы измерить расстояния и сравнить объекты. Это позволяет уточнить первоначальную гипотезу до формирования окончательного ответа.
При анализе видеозаписей Glimpse способна повторно просматривать короткие фрагменты с большей частотой кадров, отслеживать отдельные предметы даже при движении камеры и различать последовательные события. В демонстрации модель определяет, замедляется ли поезд, сравнивая перемещение выбранного объекта между кадрами. В другом примере она считает щенков на видео, сохраняя идентичность каждого животного, даже если тот временно исчезает из кадра.
Архитектура также позволяет запускать несколько вспомогательных ИИ-агентов, которые совместно решают визуальную задачу и обмениваются текстом, изображениями и промежуточными представлениями. Elorian утверждает, что модель комплексно обучали работать с инструментами для обработки изображений, просмотра видео и выполнения программного кода. Такой подход должен помогать при анализе научных графиков, технических схем, лабораторных данных и видеозаписей промышленных процессов.
По результатам испытаний, опубликованных самой компанией, Glimpse превосходит GPT-6 Astra в нескольких задачах, включая анализ научных графиков, подсчёт объектов и описание коротких видеороликов. В тесте WGO Bench на понимание действий при манипулировании предметами модель набрала 42,70 балла против 39,42 у конкурента. В проверке пространственного мышления ERQA обе системы показали одинаковую точность 83,75%.
Независимого подтверждения общего превосходства пока нет. Разработчики утверждают, что добились сопоставимых с ведущими системами результатов при существенно меньших вычислительных затратах. Для создания Glimpse небольшая команда использовала несколько сотен графических процессоров и дополнительно обучила базовую модель с открытыми весами.
При этом Elorian не раскрывает все подробности архитектуры и обучения, поэтому независимо оценить эффективность подхода пока сложно. Стоимость работы через API составляет 0,60 доллара за миллион входных токенов и 3 доллара за миллион выходных. Компания заявляет, что тарифы на 94% ниже стоимости GPT-6 Astra.
Glimpse доступна в режиме исследовательского предварительного доступа, однако разработчики пока не обещают стабильности и возможностей полноценного коммерческого релиза. За стартапом стоит бывший исследователь Google DeepMind Эндрю Дай. По его словам, идея проекта возникла после неудачной попытки попросить передовую нейросеть определить победителя настольной игры по фотографии игрового поля.
Алгоритм не смог правильно интерпретировать условные обозначения и взаимное расположение элементов, хотя человеку подобная задача не требовала специальных знаний. Дай считает, что способность самостоятельно перепроверять визуальные наблюдения приблизит ИИ к более глубокому пониманию физического мира. Elorian привлекла 55 млн долларов начальных инвестиций при оценке бизнеса в 300 млн долларов ещё до выпуска первого продукта.
В финансировании участвовали Striker Venture Partners, Menlo Ventures, Altimeter Capital, Nvidia и главный научный сотрудник Google Джефф Дин. Первоначально компания ориентируется на робототехнику, научные лаборатории и организации, обрабатывающие большие объёмы видео. В дальнейшем разработчики хотят перейти от распознавания происходящего к выбору физических действий, включая непосредственное управление роботами.
Сама идея повторного изучения изображений не нова: ещё в 2025 году OpenAI внедрила в модели серии o возможность увеличивать отдельные фрагменты изображений во время рассуждений. Elorian пытается сделать подобное поведение основой всей архитектуры, а не дополнительным инструментом. Насколько подход повышает точность в реальных задачах, покажут независимые испытания на сложных изображениях и видеозаписях, не входивших в демонстрационные наборы разработчика.
