Atlas: новый мир пространственного интеллекта

Что произошло

World Labs представила Atlas — новую модель пространственного интеллекта, которая способна генерировать, реконструировать и симулировать миры с высокой точностью. Atlas работает с текстом, изображениями, видео и 3D, объединяя все данные в единый пространственный контекст. Это позволяет модели создавать новые миры, восстанавливать реальные сцены и симулировать пространство и время.

Детали

Atlas основан на архитектуре мультимодального авторегрессивного диффузионного трансформера. Это означает, что модель последовательно генерирует элементы на основе предыдущих данных, используя диффузионные процессы для создания высококачественных изображений и видео.

Модель способна:

• Генерировать изображения и видео с точным управлением камерой, создавая до 1 минуты видео в разрешении 1440p.
• Реконструировать реальные сцены из одного или нескольких изображений, включая генерацию новых ракурсов и 3D-моделей.
• Симулировать пространство и время на основе входных видео, что полезно для визуальных эффектов и робототехники.

Atlas также может создавать 360-градусные панорамы и изображения из текстовых описаний, следуя сложным запросам и воспроизводя различные визуальные стили.

Почему это важно

Atlas открывает новые горизонты для творчества, робототехники и визуальных эффектов. Модель позволяет:

• Творческим профессионалам создавать сложные сцены и видео с точным контролем камеры.
• Робототехникам симулировать реальные среды для обучения и тестирования роботов.
• Дизайнерам и художникам генерировать уникальные визуальные стили и панорамы.

Кроме того, Atlas решает давнюю проблему синтеза новых ракурсов из ограниченного числа входных изображений, что делает её мощным инструментом для 3D-реконструкции.

Что дальше

Atlas будет интегрирован в продукты World Labs, такие как Marble, и продолжит развиваться, предлагая новые функции и улучшения. В будущем можно ожидать ещё более точной генерации и симуляции, а также расширения возможностей модели для новых задач.