Как 63Pixel создают виртуальные туры с помощью камер Insta360

Сочетая 3D-сканирование с 360-градусным картографированием, компания 63Pixel создает захватывающие 360-градусные виртуальные туры, которые позволяют пользователям перемещаться по интересным местам из любой точки мира. В чем их секрет? В использовании Insta360 Pro 2.

Мы встретились с компанией 63 Pixel, чтобы обсудить, как камера Inst a 360 позволяет им создавать комплексные интерактивные виртуальные модели 360 и предоставлять новые цифровые возможности различным предприятиям по всему миру.

Основанная в 2015 году, компания 63Pixel специализируется на 3D-сканировании и 360-градусном картографировании, предоставляя клиентам высокоточные цифровые изображения внутренних и наружных пространств. Используя лидарные облака точек и технологию получения изображений с высоким разрешением 360º от Insta360, они создают реалистичные виртуальные туры в 360º для различных отраслей промышленности, включая сталелитейные заводы, сложные установки, такие как доменные печи, отели, рестораны, музеи и школы.

Предоставляя компаниям реалистичное цифровое видение интерьера и экстерьера их зданий, потенциальные инвесторы могут погрузиться в пространство компании еще до того, как они переступят порог. Пользователи могут создавать горячие точки, выделяющие интересные области и дизайн, включая интерактивные элементы, для получения впечатляющего визуального эффекта.

Традиционные снимки обычно создаются с помощью стационарных лазерных сканеров или отдельных фотографий, сшитых вместе с помощью фотограмметрии. Хотя эти методы позволяют получить ключевые текстурные данные, объединение отдельных фотографий и отображение нескольких ракурсов с одной позиции за раз оказывается трудоемким процессом.

Благодаря использованию Insta360 Pro 2, портативной 3D-камеры виртуальной реальности с углом обзора 360º и шестью объективами со скоростью 120 Мбит/с, 63Pixel может оптимизировать свой рабочий процесс, делая шесть высококачественных фотографий 8K одновременно, значительно ускоряя процесс за счет быстрого сбора данных. Там, где стационарное лидарное сканирование занимает около 4-5 часов, сканирование Pro 2 занимает всего 20 минут, а обработка – около 60 минут, и все это выполняется автоматически.

“Вместо того, чтобы вручную создавать сотни фотографий, мы можем просто прогуляться или проехать по местности с помощью нашей камеры Pro 2. Это экономит нам невероятное количество времени”, – сказал Стефан Нитц, технический директор 63Pixel.

Чтобы составить карту зон, пригодных для прогулок, и больших помещений, таких как склады, 63Pixel создала специально разработанный рюкзак для Pro 2, позволяющий эффективно собирать данные в еще большем количестве областей. Они модифицировали GPS-антенну Pro 2, чтобы повысить точность данных о местоположении, и разработали свой собственный скрипт для автоматической обработки данных с видео 360º. Для картографирования больших открытых пространств, таких как центр города, 63Pixel разработали собственное программное обеспечение для обнаружения выбоин на основе искусственного интеллекта и инструмент автоматической пикселизации изображений на 360°.

Благодаря превосходной стабилизации FlowState, мониторингу в режиме реального времени на большом расстоянии и высококачественной съемке в формате 8K, Pro 2 внес значительный вклад в более быстрое, эффективное и точное сканирование с помощью 3D-фотограмметрии.

Благодаря тому, что Pro 2 легко крепится к рюкзаку примерно на высоте 2,3 м над головой картографов, 63Pixel может записывать видео высокого качества и наносить на карту практически любую местность, доступную пешком, без необходимости в другом оборудовании.

“Мы сознательно выбрали Insta360, потому что их соотношение цены и качества не имеет себе равных. Pro 2 имеет как раз подходящий размер, не слишком громоздкий и при этом портативный, предлагая первоклассное качество и простоту использования. Insta360 One RS 1-Inch 360 в основном используется для проектов Matterport и быстрых 360º HDR-изображений для создания контента Google Street View”, – добавил Нитц.

Итак, как они превращают необработанные данные 360º из Pro 2 в 3D-модель для клиентов?

Первым шагом является извлечение изображений с каждого объектива. Чтобы избежать тысяч фотографий, скрипт 63Pixel извлекает отдельные изображения примерно через каждые 2-5 метров. Бесплатный инструмент FFmpeg – еще одна альтернатива, если у вас нет собственного скрипта.

Они редактируют их в Adobe Lightroom, а затем загружают в программу 3D-сканирования Reality Capture, которая преобразует изображения в полноценное 3D-сканирование. Наконец, они используют бесплатное программное обеспечение Blender или Unreal Engine, чтобы придать модели окончательную форму 3D-изображения, которым можно поделиться с клиентами. Они также используют программное обеспечение для виртуальных туров Matterport, программное обеспечение, интегрированное с камерами Insta360, для интеграции 3D-элементов в свои 360-градусные виртуальные туры.

Инновационный подход 63Pixel к 3D-сканированию и 360-градусному картографированию меняет облик многих отраслей, включая недвижимость, городское планирование и обсуждение наследия. Объединяя Pro 2 с точной информацией, получаемой от датчиков Lauder, они могут создавать точные, высококачественные 3D-модели городов, помогая предприятиям в детальном планировании и конструировании будущих объектов.

В одном проекте 63Pixel создали концепцию освещения города с использованием 3D-изображения улицы, записанного с помощью Pro 2. Они смогли создать реалистичную модель, добавив динамические световые эффекты, чтобы визуализировать их в режиме реального времени. 3D-модель продемонстрировала заказчику различные источники света и их интенсивность, а также различные углы освещения улиц и тротуаров. В рамках другого проекта они помогли городскому району спланировать будущие сооружения. Сначала составив карту города с помощью Pro 2, они превратили изображения в 3D VR-видео и рендеры. Используя гарнитуру виртуальной реальности, клиент мог взаимодействовать с будущими сооружениями и рассматривать их со всех сторон улицы в невероятных деталях.

63 Pixel не стоит на месте, когда дело доходит до технологий; они всегда ищут инновации. В своих будущих проектах они планируют использовать Insta360 Titan для получения еще более точных данных с более высоким разрешением. Благодаря восьми сенсорам Micro Four Thirds и возможности захвата изображений разрешением 11 тыс. пикселей качество изображения Titan, динамический диапазон, производительность при слабом освещении и глубина цвета позволяют повысить планку отображения на 360° даже в сложных условиях.

Insta360 Titan будет интегрирован с совершенно новым лидарным датчиком 63Pixel, PICO SLIM, для быстрого создания поэтажного плана. Оснащенный высокопроизводительной системой SLAM LiDAR и встроенным вычислительным блоком, он позволяет немедленно экспортировать поэтажные планы в формате DXF. 

Компания 63Pixel демонстрирует захватывающие возможности Insta 360 Pro 2, доказывая огромную ценность для 3D-сканирования и картографирования в 360.