Представляем Voxel51 3.0: единую мультимодальную платформу данных для физического ИИ

Voxel51 выпустила Voxel51 3.0 — очень важное обновление своей платформы данных. Voxel51 3.0 представляет собой мультимодальную платформу данных полного цикла, которая объединяет поиск, курирование, аннотирование и оценку в одной системе. Она предназначена для команд, обучающих модели на сенсорных данных от роботов, транспортных средств и заводов. В релизе появились Voxel51 Agent, уровень происхождения данных и бесплатный самостоятельный доступ.

Кратко

Масштаб: Voxel51 Agent поставляется с более чем 45 инструментами MCP, более чем 80 операторами и 18 навыками с открытым исходным кодом.
Работает: в размещённом веб-приложении app.voxel51.com или в самостоятельно размещаемых конфигурациях в облаке, гибридных, локальных и изолированных средах. Требования к локальному GPU не раскрыты.
Производительность: опубликованных бенчмарков продукта нет. Вместо этого Voxel51 ссылается на результаты собственного опроса.
Лучшее: бесплатный тариф включает Voxel51 Agent, 30 000 запросов к моделям и 30 вычислительных часов в месяц.
Худшее: бесплатный тариф ограничен 3 наборами данных по 10 000 образцов каждый и 20 ГБ хранилища.

Что нового в Voxel51 3.0?

Voxel51 3.0 расширяет платформу за пределы визуальных данных, добавляя 3 ключевые возможности.

Поддержка мультимодальных временных рядов: команды могут просматривать несколько потоков данных от датчиков на 1 временной шкале. Эмбеддинги на уровне сегментов находят конкретные моменты внутри длинных записей.
Унифицированное аннотирование: разметка охватывает 2D-, 3D-, видео- и мультимодальные данные. Она включает автоматизированную проверку качества, метрики аннотаторов и проверку с участием человека.
Агентное аннотирование: модели «зрение — язык» генерируют метки на основе инструкций и примеров на естественном языке.

Поддерживаемые модальности включают MCAP, изображения, видео, 3D-облака точек, сетки, DICOM, NIfTI, геопространственные данные и аудио.

Как работает Voxel51 Search?

Voxel51 Search представляет собой постоянный гибридный индекс. Он индексирует наборы данных и автоматически вычисляет эмбеддинги, поэтому поиск работает с первого дня.

Семантический поиск находит визуально или семантически похожие моменты даже без общих меток. Лексические и структурированные запросы обрабатывают точные термины, временные метки, поля датчиков и метаданные. Эмбеддинги и структурированные поля сохраняются в исходном виде и объединяются во время поиска.

Векторный поиск работает на базе LanceDB. Он поддерживает векторные, скалярные и полнотекстовые индексы, а также отделяет хранилище от вычислений. Команды выбирают, что индексировать, какую модель и вычислительные ресурсы использовать и когда это делать. Инкрементальные обновления позволяют избежать полной перестройки индексов при добавлении образцов или изменении схем.

Что умеет Voxel51 Agent?

Voxel51 Agent объединяет поиск, курирование, аннотирование и оценку в повторяемые рабочие процессы.

Примеры рабочих процессов:

Команда робототехники ищет определённые виды поведения в тысячах эпизодов, а затем формирует сбалансированные наборы данных для обучения.
Команда компьютерного зрения начинает с ошибки модели и извлекает похожие редкие сценарии для разметки.

Агент также может писать код для создания пользовательских плагинов. Все рабочие процессы наследуют разрешения организации и средства управления.

Как работает происхождение данных в Voxel51 3.0?

Voxel51 3.0 добавляет 4 уровня происхождения данных:

Журнал активности на уровне развёртывания: кто, что и когда делал в рамках развёртывания.
Журнал активности на уровне набора данных: как изменялся отдельный набор данных.
История изменений на уровне образца: изменения меток, метаданных и свойств для каждого образца.
Версионирование наборов данных: неизменяемые снимки для воспроизведения запусков обучения и оценки.

События проходят через fiftyone-mq для планирования заданий и Activity Core для отслеживания событий.

Могут ли команды использовать собственные модели?

Да. Платформа не зависит от конкретной модели в части эмбеддингов, автоматической разметки, вывода и оценки. Команда может начать с базовой модели, а затем заменить её собственной предметной моделью.

Почему Voxel51 утверждает, что работа с данными определяет результаты?

Voxel51 ссылается на свой опрос о состоянии физического ИИ в 2026 году. 58% «выдающихся» команд тратят более половины времени проекта на работу с данными. Среди испытывающих трудности команд то же самое делают лишь 21%. Это исследование, проведённое поставщиком, поэтому его следует воспринимать как ориентировочное.

Как Voxel51 3.0 сравнивается с Encord и Foxglove?

Функция	Voxel51 3.0	Encord	Foxglove
Основной фокус	Поиск, курирование, аннотирование и оценка мультимодальных данных	Аннотирование, курирование и управление данными	Визуализация, наблюдаемость и управление данными для робототехники
Бесплатный тариф	3 набора данных, по 10 000 образцов каждый, 20 ГБ	Не раскрыт	10 ГБ хранилища, 3 пользователя, 5 устройств
Платный тариф начального уровня	Team: 8 мест, 2 800 вычислительных часов в месяц (цена не раскрыта)	Starter (цена не раскрыта)	Pro: 20 долларов в месяц + использование, 1 ТБ хранилища
Встроенный агент	Voxel51 Agent	Агенты данных (тариф Team)	Боковая панель агента
MCP	Более 45 инструментов MCP	Не раскрыт	Foxglove MCP (локальный MCP на платных тарифах)
Поиск	Гибридный семантический, лексический и поиск по метаданным	Мультимодальный поиск, запросы и фильтрация	Семантический поиск (бета-версия) и структурированный поиск
Аннотирование	2D, 3D, видео, мультимодальные данные, агентное аннотирование	Изображения, видео, аудио, документы; 3D и LiDAR — дополнительно	События во временных сегментах
Временные ряды сенсорных данных	MCAP, синхронизированные потоки, сегментные эмбеддинги	Потоки данных от датчиков (см. примечание)	Нативная поддержка MCAP, ROS 1 и ROS 2
Происхождение данных	Журналы активности, история изменений, версионирование	Не раскрыто	Журналы аудита (недоступны на бесплатном тарифе)
Самостоятельное размещение	Доступны локальное и изолированное развёртывание	VPC и локальное размещение (дополнительно или в тарифе Enterprise)	Самостоятельное размещение данных в Enterprise; собственное хранилище в Pro

Поддержка потоков данных от датчиков в Encord указана в его сообщении о раунде Series C. Цены проверены 17 октября 2026 года.

Основные выводы

Voxel51 3.0 объединяет поиск, курирование, аннотирование и оценку на 1 платформе.
Voxel51 Agent поставляется с более чем 45 инструментами MCP, более чем 80 операторами и 18 навыками.
Журналы активности, история изменений и версионирование обеспечивают отслеживаемость обучающих данных.
Бесплатный тариф: 3 набора данных, по 10 000 образцов каждый, банковская карта не требуется.

Ознакомьтесь с официальной публикацией в блоге, пресс-релизом и документацией Voxel51 или попробуйте сервис на сайте app.voxel51.com. Все заслуги принадлежат исследователю этого проекта. Также подписывайтесь на нас в Twitter и не забудьте присоединиться к нашему сабреддиту о машинном обучении с более чем 150 тыс. участников и подписаться на нашу рассылку. Постойте! Вы есть в Telegram? Теперь вы также можете присоединиться к нам в Telegram.

Переведено автоматически с английского. Оригинал статьи — по ссылке ниже.