Сканер комнаты айфон 12

Зачем нужен LiDAR в iPhone 12 Pro? Ответим на примере Canvas

• 
• 

Датчик глубинного сканирования iPhone 12 Pro, основанный на LiDAR, предоставляет множество возможностей для 3D-приложений. Новый сканер Canvas, предназначенный для сканирования дома, использует LiDAR для повышенной точности и детализации моделей. Но приложение будет работать и с не-Pro версиями iPhone.

Приложение Canvas, созданное компанией Occipital из Боулдера (кстати говоря, подразделение данной компании в Москве также принимало активное участие в разработке сканера), первоначально было выпущено для iPad Pro, чтобы воспользоваться преимуществами лидарного сканирования. Демонстрация возможностей этой программы показывает как технология Apple для измерения глубины может быть применена в настоящих консьюмерских решениях.

С момента дебюта iPhone 12 Pro с LiDAR появилось несколько оптимизированных приложений, предлагающих 3D-сканирование объектов, крупномасштабную фотографию со сканированием пространства (так называемую фотограмметрию) и дополненную реальность Но Canvas на iPhone 12 Pro показывает лучшие результаты и выглядит удобнее, чем приложения для 3D-сканирования, с которыми нам удалось поработать ранее.

По словам вице-президентов Occipital по продуктам Алекса Шиффа и Антона Якубенко, iOS 14 от Apple предоставляет разработчикам более широкий доступ к лидарным данным iPhone. Это позволило Occipital создать собственные алгоритмы для наилучшего использования карты глубины нового телефона Apple. Причем, новый SDK от Apple позволяет создавать более классные решения для сканирования объектов даже без использования LiDAR.

Сканирование трехмерного пространства без датчика LiDAR для карт глубины возможно, и такие компании, как 6d.ai (приобретенная Niantic), уже используют его. Но Шифф и Якубенко говорят, что LiDAR по-прежнему позволяет получать более точные результаты. По данным Occipital, версия Canvas для iPhone 12 Pro делает более качественные сканы, чем первая версия для iPad Pro.

В основном это связано с более глубоким доступом iOS 14 к лидарной информации. Новейшая версия с поддержкой LiDAR имеет точность в пределах 1%, в то время как сканирование без датчика глубины дает точность в районе 5% (что буквально делает iPhone 12 Pro ПРОфессиональным апгрейдом).

Чтобы далеко ходить, мы ранее уже делали обзор на Structure Sensor от той же компании Occipital. Этот сенсор представлял собой отдельный гаджет, который крепился на iPad. А теперь представьте на мгновение, что практически все то, что предлагало отдельное устройство, можно получить прямо из коробки, и прямо в телефоне миниатюрного размера! А самое главное – все работает весьма качественно, и уже сейчас применяется на практике.

Демонстрация работы Canvas на презентации iPhone 12 Pro

Сканы комнат, сделанные с помощью Canvas, можно преобразовать в рабочие модели САП (Система Автоматического Проектирования), что занимает около 48 часов, но Occipital также работает над более быстрым преобразованием изображений и добавлением семантических данных (например, распознавания дверей, окон и других деталей помещений) с помощью ИИ. То, над чем раньше работали проектировщики и дизайнеры несколько суток, можно сделать самостоятельно с помощью смартфона – магия!

По мере того, как все больше 3D-сканов и 3D-данных начинают появляться на iPhone и iPad, тем больше будет иметь смысл использовать более распространенные форматы файлов для обмена и редактирования моделей. В какой-то момент 3D-сканирование может стать таким же стандартизированным, как PDF-файлы. И отсканировать какой-то объект станет таким же обыденным действием, как и сделать скан документа сейчас.

Надеемся, что в этой статье мы все-таки ответили на вопрос о том, зачем в iPhone 12 Pro нужен LiDAR. За этим определенно будущее. Раньше для сканирования помещений необходимо было вызывать обученных людей со специальным оборудованием, теперь это сделать можете вы с помощью своего телефона самостоятельно. И такой сценарий можно наложить практически на любую сферу деятельности.

Источник

6 приложений для 3D-сканирования с помощью лидара iPhone

Как вы наверное знаете, последнее поколение iPhone (12 Pro и 12 Pro Max) оснащено камерой с лидаром. 3D съемка для меня — это естественная эволюция съемки и я ждал этого дня почти 10 лет.

Недавно было выпущено несколько приложений для съемки в 3D, которые на полную используют эту новую возможность. Я протестировал практически все доступные из них, и на протяжении последних 3 месяцев активно занимался 3D сканированием. Меня часто спрашивают, какие приложения я рекомендую и как получить красивые снимки. Вот информация о приложениях, что мне нравится в каждом из них, а также некоторые общие советы по работе с лидаром в iPhone.

Итак, вот мои 6 приложений для сканирования, все они поддерживают экспорт напрямую в Sketchfab:

Scaniverse

Scaniverse в целом работает хорошо, быстрый и простой в использовании, создает отличные текстуры и хорошо справляется с устранением пустот. Убедитесь, что вы работаете со снимками в ультра-режиме. Этот инструмент очень хорошо подходит для сканирования таких вещей, как автомобили. Вот этот замороженный Мини — один из моих лучших снимков с лидаром. Все мои снимки со сканера находятся тут , а приложение — тут .

Polycam

Polycam быстро работает и отлично справляется с текстурами. Вы можете обрабатывать изображение в HD-режиме и получать мгновенные результаты сканирования. Очень хорошо подходит для сканирования таких вещей как комнаты или фрески, а также стритарт. Здесь можно посмотреть мои снимки Polycam, а само приложение — здесь .

3D scanner app

3D scanner app предлагает массу опций, благодаря которым обеспечивается полный контроль. Например, вы можете легко отделить или обрезать лишнее пространство в приложении. Можно отрезать даже с помощью сферы. Я считаю, что приложение особенно хорошо подходит для небольших вещей, таких как, например, эта долларовая купюра. Убедитесь, что используете режим HD. Тут вы можете посмотреть все мои снимки 3D scanner app, а приложение можно скачать здесь .

Record3D

Record3D позволяет снимать объемное видео, также известное как 4D контент, т. е. 3D сканирование на каждый кадр видео. Вот первые шаги моей дочери. Имейте в виду, что этот формат в итоге выдает очень тяжелые файлы, так что вам нужно снимать всего несколько секунд, чтобы можно было загрузить видео на Sketchfab. Здесь вы можете найти все мои записи в формате Record3D, а приложение — здесь .

SiteScape

SiteScape отлично подходит для быстрого создания точных облаков точек. Вы можете регулировать плотность и размер точек. Мне нравится использовать его для сложных и замысловатых сцен или структур. Также может быть отлично подходит для автомобилей. Здесь находятся все мои снимки SiteScape . Приложение можно найти здесь .

Everypoint

Everypoint отлично подходит для больших облаков точек, например, для этой мозаики в подземке. Разработчики дразнят нас грядущим обновлением приложения, сочетающим лидар и фотограмметрию, с нетерпением ждем, чтобы попробовать. Тут вы можете найти в се мои снимки Everypoint , а приложение — здесь .

Общие советы

Вот некоторые общие советы, касающиеся сканирования с помощью лидара на iPhone:

• Помните, что можно сканировать. Люди часто разочаровываются при сканировании на iPhone, как правило сканируя вещи, которые сами по себе не дают шансов на хороший результат. Наиболее важным является помнить, что сканер не работает с мелкими вещами и объектами. Например, обычный ботинок зачастую слишком маленький. Также лидар в iPhone плохо работает с блестящими/отражающими элементами
• Избегайте повторного сканирования уже пройденной области, это, скорее всего, создаст проблемы с совмещением и создаст артефакты на вашем изображении
• Сканирование вокруг чего-то маленького/тонкого — например, статуи, стула или стены — как правило работает плохо
• Убедитесь, что каждая часть сканируемой области хорошо отсканирована, чтобы избежать появления брешей и пустот. Для этого я обычно использую что-то вроде жеста распыления, немного похожего на то, как если бы я рисовал аэрозольной краской
• Идите медленно и аккуратно. Не дергайтесь
• Красивый и аккуратный 3D снимок существенно влияет на общее восприятие. 3Dscannerapp, Polycam и Scaniverse предлагают кадрирование непосредственно в приложении
• Sketchfab предлагает множество возможностей, которые помогут превратить плохой скан в нормальный. Мне нравится добавлять тени (2-я вкладка редактора), а затем постпроцессные эффекты, такие как резкость, глубина резкости, насыщенность
• Добавление 3D аннотаций в Sketchfab — отличный способ превратить скан в мини-историю

Продажа 3D фото

Магазин Sketchfab позволяет монетизировать свои 3D творения. Мне кажется, что большинство моих снимков с лидаром iPhone все еще немного отстают по качеству для того, чтобы разместить их в магазине. При этом я выставил 2 из них на продажу (мини и кабинет врача), потому что пользователи на самом деле спросили меня, как они могут их купить. Суть в том, что никогда не знаешь, как кто-то может использовать ваши сканы, и часто речь идет скорее о том, чтобы установить соответствующую цену в зависимости от качества и ограниченности контента. Не стоит забывать, что качество (и мои навыки) продолжает улучшаться, поэтому я ожидаю, что в будущем смогу выставить на продажу больше 3D снимков. Помните, что если вы сканируете что-то с интеллектуальной собственностью (например, Мини), вы можете размещать это только под издательской лицензией.

Источник

Лучшие приложения LiDAR для вашего iPhone 12 Pro или iPad Pro

IPhone 12 Pro, Pro Max и iPad Pro 2020 оснащены сканером LiDAR, который добавляет интригующий уровень дополненной реальности. Вот лишь некоторые из приложений, которые могут воспользоваться этой новой функцией.

Сканер обнаружения и определения дальности (LiDAR) в iPhone 12 Pro , iPhone 12 Pro Max и iPad Pro 2020 более точно измеряет расстояния для картирования трёхмерных пространств. Этот навык пригодится при съёмке фотографий ночью, но он также играет роль во множестве мобильных приложений. С помощью сканера LiDAR вы можете лучше оценивать себя на предмет покупки одежды, дома для покупки новой мебели и вашего окружения для сканирования изображений.

Такие компании, как Apple, Ikea и Microsoft, имеют приложения, которые могут измерять рост человека, размещать виртуальную трёхмерную мебель и идентифицировать людей и предметы поблизости. В App Store существует множество других сторонних приложений, но среди них есть несколько выделяющихся.

Измерение

Бесплатное приложение Apple Measure включено в iPhone и iPad как виртуальная альтернатива физической линейке, рулетке и уровню. Вы можете измерить расстояние между двумя точками, определить размеры объекта и даже выяснить, прямая ли поверхность.

Измерьте расстояние, поместив центральную точку внутри круга в начальную точку, затем нажмите кнопку +. Переместите устройство вдоль области, которую вы хотите измерить, затем снова нажмите кнопку + в конечной точке. Общее расстояние отображается на экране.

Если вы ищете размеры фигуры, например, квадрата или куба, запишите длину одной стороны, а затем дважды нажмите кнопку +. Переместите устройство по бокам и дважды нажмите кнопку +, чтобы начать следующую строку. Продолжайте так, пока не будут измерены все стороны, затем нажмите кнопку +, чтобы закончить.

Вы можете нажать значок маркера в верхнем левом углу, чтобы отобразить измеренные вами размеры на экране. Нажмите кнопку спуска затвора, чтобы сделать снимок объекта с видимыми размерами.

Чтобы использовать приложение «Измерение» в качестве уровня , коснитесь значка «Уровень» в нижней части экрана. Затем вы можете расположить устройство ровно, горизонтально или вертикально вдоль поверхности, пока на экране не отобразится 0 и не станет зелёным, чтобы указать, что вы находитесь на уровне.

Икеа Плейс

Вы можете легко реконструировать и оборудовать свой дом подходящей мебелью с помощью бесплатного приложения Ikea Place . Выбирайте из множества предметов, включая стулья, диваны, столы, письменные столы, книжные шкафы и лампы. Вы можете просматривать по коллекции, категории или теме. Просто поместите объект в определённое место в доме, чтобы посмотреть, как он подойдёт. После того, как вы вставили виртуальный элемент, вы можете изменить его положение и перемещать по комнате. Вы также можете добавить больше предметов и сохранить каждый, чтобы отремонтировать целые комнаты или весь дом.

Seeing AI

Бесплатное приложение Seeing AI, разработанное Microsoft, предназначено для помощи слепым и слабовидящим людям в навигации по окружающей среде. Однако новые функции на основе LiDAR делают приложение увлекательным для всех.

Благодаря мощи искусственного интеллекта приложение может описывать людей, сцены и объекты, которые появляются в видоискателе. Он также может просматривать текст на лету и читать его вслух, определять продукты по штрих-коду и определять цвета и валюту.

Благодаря поддержке LiDAR, Seeing AI может помочь вам почувствовать расстояние до объектов на основе тактильного датчика приближения вашего устройства. А если вы в наушниках, приложение может описывать близлежащие объекты. Чтобы использовать Seeing AI, просто выберите нужный вариант, наведите iPhone или iPad на нужный объект, а приложение сделает всё остальное.

Canvas

Ищете приложение для сканирования, захвата и отображения всей комнаты? Холст: Pocket 3D Room Scanner справится с этой задачей. Выберите комнату, которую вы хотите сканировать, затем перемещайте устройство по комнате, чтобы покрыть виртуальную сетку, отображаемую на экране.

После того, как вы запечатлили всю комнату, приложение сгенерирует трёхмерное изображение, которое вы можете просмотреть и даже пройти. Осмотрите комнату, используя жесты или перемещая свой iPhone или iPad. Вы можете посмотреть изображение комнаты в разрезе, которое затем можно наклонить или повернуть.

Базовое приложение бесплатное. Если вам нужно профессиональное CAD-изображение вашей комнаты для дизайна или архитектуры, вам придётся потратить до 15, 29 или 39 долларов за сканирование в зависимости от требуемой сложности.

Приложение для 3D-сканера

С помощью бесплатного приложения 3D Scanner вы можете сканировать любой объект или сцену, чтобы создать их трёхмерное изображение на своём устройстве. Для начала поместите свой iPhone или iPad перед объектом, который хотите сфотографировать, и нажмите кнопку спуска затвора. Переместите устройство вокруг объекта, чтобы создать изображение, затем снова нажмите кнопку спуска затвора, когда закончите создание 3D-объекта.

По умолчанию сканирование создаётся в низком разрешении, но вы можете переключиться на высокое разрешение, чтобы лучше контролировать качество изображения. Впоследствии вы можете настроить сканирование, чтобы уточнить, сгладить или упростить детали. Вы также можете измерить расстояние между любыми двумя точками на скане и поделиться им в разных форматах.

Scaniverse

Scaniverse — 3D-сканер может захватывать сцены и объекты, а затем создавать интерактивное 3D-изображение. Чтобы отсканировать что-либо, нажмите кнопку спуска затвора и перемещайте iPhone или iPad вокруг объекта, чтобы захватывать разные виды, пока на экране не исчезнут затенённые линии. Когда это будет сделано, вы можете сохранить сканированное изображение в стандартном, высоком или ультраформате. Затем вы можете увеличивать и уменьшать масштаб и перемещаться по изображению, чтобы увидеть его с разных расстояний и под разными углами. Затем сканированное изображение можно отправить в общий доступ или экспортировать в виде файлов различных форматов.

Polycam

Бесплатное приложение Polycam — LiDAR 3D Scanner может сканировать и захватывать определённые сцены и объекты, а затем отображать их в виде 3D-изображений. Выровняйте свой iPhone или iPad и нажмите кнопку спуска затвора, чтобы начать. Переместите устройство, чтобы полностью просканировать объект. Когда закончите, снова нажмите кнопку спуска затвора и выберите «Обработка», чтобы создать изображение. Затем вы можете обрезать изображение, измерить расстояние между двумя точками и поделиться изображением, используя множество различных форматов файлов.

ARama!

Это приложение обеспечивает ещё больше удовольствия и гибкости игровой площадке, созданной с помощью LiDAR. Используя бесплатную ARama! app , вы можете взять новое или существующее изображение человека, фигуры или изображения и поместить его как виртуальное изображение в реальную среду.

Для человека или фигуры нажмите соответствующую кнопку, выровняйте объект в видоискателе устройства и коснитесь белых линий, чтобы скопировать его. Переместитесь в то место, где вы хотите разместить элемент, и нажмите кнопку на экране, чтобы вставить его.

Для существующего изображения нажмите кнопку, чтобы получить доступ к своей библиотеке фотографий, выберите изображение и затем вставьте его в своё реальное окружение. Вы можете разместить несколько людей, объектов и изображений как виртуальных объектов в одной сцене.

Детская площадка AR

Вот приложение, простое, но затягивающее. В бесплатной Playground AR: Physics Sandbox вы размещаете виртуальные блоки в реальной среде, чтобы увидеть, как они взаимодействуют друг с другом. Вы можете выбрать кубики, прямоугольники, треугольники, цилиндры, битки и модели автомобилей, а затем нажать кнопку, чтобы положить каждый предмет на пол, стол или другую поверхность.

Самое интересное заключается в размещении и перемещении предметов. Например, вы можете разместить один объект поверх другого, чтобы посмотреть, насколько высоко может подниматься ваша башня, пока она не рухнет. Вы даже можете перемещать определённые объекты. Например, вы можете водить модель автомобиля по экрану и врезаться в свою башню из блоков. Просматривая рекламу, вы можете разблокировать ещё больше объектов модели для текущего сеанса, включая самолёт, вертолёт, пушку и катапульту.

Источник