Сканирование комнаты iphone 12 pro

3D-сканирование вашего дома с помощью сканера LiDAR в iPhone 12

Одна из главных особенностей двух моделей iPhone 12 Pro — сканер LiDAR. Ночной режим Портретные фотографии уже впечатлили меня, и приложение для создания 3D-сканирования вашего дома теперь тоже это делает.

Canvas — это приложение для iPhone, которое можно использовать для сканирования комнат, а затем за небольшую плату превратить их в профессиональные модели САПР, которые можно использовать для реконструкции дома. Возможно, вы заметили, что он был показан при запуске iPhone 12…

Пользоваться приложением довольно просто. Встаньте в центре комнаты и нажмите кнопку сканирования. Затем он накладывает сетку дополненной реальности на вашу комнату, очень похожую на отключенный Star Trek Holosuite. Просто продолжайте перемещать телефон вверх и вниз, медленно поворачиваясь, чтобы покрыть всю сетку. Секции сетки исчезают, когда вы захватываете каждую часть комнаты.

Я говорю «довольно просто», потому что у меня действительно было несколько сбоев. Когда я впервые попробовал это в своем офисе, это не сработало — мы думали, потому что комната слишком мала, примерно 10 на 9 футов. Наша гостиная также оказалась сложной, так как в ней есть кухонный альков, и вам негде стоять в комнате с полным обзором каждой вертикальной поверхности. Лучший компромисс означал, что на поверхности, которую он не мог видеть, была стена, а не дверь.

Самый первый результат, который вы видите по завершении сканирования, не выглядит обнадеживающим!

Принятие приглашения на просмотр расширенного сканирования также не вселяет уверенности, поскольку на экране обработки отображается что-то… очень схематичное.

Затем это превращается во что-то более разумное, хотя и с некоторыми сюрреалистическими штрихами и случайными прямыми линиями на изогнутых краях.

Но в этот момент у вас есть разумная модель комнаты с дополненной реальностью. Теперь вы можете встать в другой комнате, развернуться и просмотреть свою модель AR — даже если некоторые углы все еще выглядят крайне маловероятно, чтобы сформировать основу подробных моделей CAD.

Однако на этом этапе вы можете приступить к измерениям в модели — и они уже идеально соответствовали профессиональным планам, которые мы создали.

Настоящая магия происходит, когда вы заказываете свои модели САПР через приложение. Вы можете выбрать между 2D-планом за 15 долларов и набором 3D-моделей, которые стоят 29 или 39 долларов, в зависимости от формата, который нужен вам или вашему подрядчику. Приложение поддерживает SketchUP (файлы .skp, .dwg и .dae), Revit (.rvt, .dwg и .ifc) и главного архитектора (.plan, .dwg и .dae). Все они также включают повторно обработанное сканирование.

Я передал результаты другу-архитектору, который разработал наши планы, и он был очень впечатлен.

Ух, столько подробностей! Он даже сделал разные слои, чтобы изолировать потолок и другие части — я очень впечатлен, так как это несколько часов работы!

Он подтвердил, что произведенные модели подходят для использования подрядчиками. Все изображения ниже можно просмотреть в новой вкладке, чтобы увидеть их в большем размере.

Если вы не используете ни одно из приложений, вы все равно можете просматривать модели в Интернете, и я был потрясен результатами. Например, верхнее изображение (воспроизведенное здесь для удобства) было создано простым снятием флажка с пола, потолка и стен. Затем я смог повернуть модель, приблизить ее и обойти.

Источник

Зачем нужен LiDAR в iPhone 12 Pro? Ответим на примере Canvas

• 
• 

Датчик глубинного сканирования iPhone 12 Pro, основанный на LiDAR, предоставляет множество возможностей для 3D-приложений. Новый сканер Canvas, предназначенный для сканирования дома, использует LiDAR для повышенной точности и детализации моделей. Но приложение будет работать и с не-Pro версиями iPhone.

Приложение Canvas, созданное компанией Occipital из Боулдера (кстати говоря, подразделение данной компании в Москве также принимало активное участие в разработке сканера), первоначально было выпущено для iPad Pro, чтобы воспользоваться преимуществами лидарного сканирования. Демонстрация возможностей этой программы показывает как технология Apple для измерения глубины может быть применена в настоящих консьюмерских решениях.

С момента дебюта iPhone 12 Pro с LiDAR появилось несколько оптимизированных приложений, предлагающих 3D-сканирование объектов, крупномасштабную фотографию со сканированием пространства (так называемую фотограмметрию) и дополненную реальность Но Canvas на iPhone 12 Pro показывает лучшие результаты и выглядит удобнее, чем приложения для 3D-сканирования, с которыми нам удалось поработать ранее.

По словам вице-президентов Occipital по продуктам Алекса Шиффа и Антона Якубенко, iOS 14 от Apple предоставляет разработчикам более широкий доступ к лидарным данным iPhone. Это позволило Occipital создать собственные алгоритмы для наилучшего использования карты глубины нового телефона Apple. Причем, новый SDK от Apple позволяет создавать более классные решения для сканирования объектов даже без использования LiDAR.

Сканирование трехмерного пространства без датчика LiDAR для карт глубины возможно, и такие компании, как 6d.ai (приобретенная Niantic), уже используют его. Но Шифф и Якубенко говорят, что LiDAR по-прежнему позволяет получать более точные результаты. По данным Occipital, версия Canvas для iPhone 12 Pro делает более качественные сканы, чем первая версия для iPad Pro.

В основном это связано с более глубоким доступом iOS 14 к лидарной информации. Новейшая версия с поддержкой LiDAR имеет точность в пределах 1%, в то время как сканирование без датчика глубины дает точность в районе 5% (что буквально делает iPhone 12 Pro ПРОфессиональным апгрейдом).

Чтобы далеко ходить, мы ранее уже делали обзор на Structure Sensor от той же компании Occipital. Этот сенсор представлял собой отдельный гаджет, который крепился на iPad. А теперь представьте на мгновение, что практически все то, что предлагало отдельное устройство, можно получить прямо из коробки, и прямо в телефоне миниатюрного размера! А самое главное – все работает весьма качественно, и уже сейчас применяется на практике.

Демонстрация работы Canvas на презентации iPhone 12 Pro

Сканы комнат, сделанные с помощью Canvas, можно преобразовать в рабочие модели САП (Система Автоматического Проектирования), что занимает около 48 часов, но Occipital также работает над более быстрым преобразованием изображений и добавлением семантических данных (например, распознавания дверей, окон и других деталей помещений) с помощью ИИ. То, над чем раньше работали проектировщики и дизайнеры несколько суток, можно сделать самостоятельно с помощью смартфона – магия!

По мере того, как все больше 3D-сканов и 3D-данных начинают появляться на iPhone и iPad, тем больше будет иметь смысл использовать более распространенные форматы файлов для обмена и редактирования моделей. В какой-то момент 3D-сканирование может стать таким же стандартизированным, как PDF-файлы. И отсканировать какой-то объект станет таким же обыденным действием, как и сделать скан документа сейчас.

Надеемся, что в этой статье мы все-таки ответили на вопрос о том, зачем в iPhone 12 Pro нужен LiDAR. За этим определенно будущее. Раньше для сканирования помещений необходимо было вызывать обученных людей со специальным оборудованием, теперь это сделать можете вы с помощью своего телефона самостоятельно. И такой сценарий можно наложить практически на любую сферу деятельности.

Источник

Как использовать сканер LiDAR в iPhone 12 Pro

У вас есть сканер LiDAR, если у вас есть iPhone 12 Pro, iPhone 12 Pro Max или iPad Pro, но Apple, похоже, не дает вам возможности его использовать. Вот как это сделать, что вам нужно и почему LiDAR так полезен.

LiDAR является частью iPhone 12 Pro, iPhone 12 Pro Max и iPad Pro, но вас простят за то, что вы этого не заметили. Apple почти не упоминает об этом, и на телефоне нет приложения LiDAR, которое можно было бы попробовать.

Учитывая, что одно из его основных применений — фотография, вы ожидаете каких-то элементов управления LiDAR в приложении камеры или, по крайней мере, чего-то в настройках. Но нет ни того, ни другого.

Также мало стимулов искать такие элементы управления, потому что, пока вы не увидите их в действии, трудно понять, что LiDAR может для вас сделать. Технология сканирует вашу среду, создавая ее трехмерное изображение, и это изменит качество работы AR и VR.

На данный момент Apple, похоже, рада позволить LiDAR тонко помочь вам тем, как он дополняет существующие приложения и функции.

Как вы уже используете LiDAR

Если вы ранее отказались от использования приложения Apple Measure, попробуйте еще раз. Приложению теперь помогает LiDAR, и это заметно улучшило его.

Теперь можно быстрее начать использовать Measure, потому что он быстрее распознает окружающую среду. А поскольку LiDAR работает для сканирования всей окружающей среды, измерения, которые вы выполняете, более точны.

Это теория, а на практике вы обнаружите, что Measure более полезен, чем раньше. Вместо приложения, которое вы использовали для грубых измерений, когда у вас не было рулетки, теперь оно достаточно хорошее и быстрое, чтобы использовать его где угодно.

Далее, хотя это и сложнее увидеть, LiDAR также ускорил работу автофокуса вашей камеры. Опять же, это потому, что LiDAR отображает окружающую среду вокруг вас, поэтому он начинает вычислять, насколько далеко или близко находится объект, когда вы нажимаете кнопку, чтобы сделать снимок.

Однако, если измерения и автофокус — единственные заметные варианты использования LiDAR от Apple, уже существуют сторонние приложения, которые будут делать гораздо больше. Их очень много, и большинство из них похоже на эксперименты по выяснению того, что возможно.

Но в целом они также, как правило, хороши в одном из двух. Либо они отлично справляются со съемкой трехмерного изображения вашего окружения, похожего на фотографию, либо лучше снимают изображение объекта.

Это баланс между достаточно медленным сканированием, чтобы избежать размытия, и достаточно быстрым, чтобы закончить, пока приложение все еще может хранить данные.

Захват всей вашей среды

Используйте Canvas: Pocket 3D Room Scanner для iPhone — бесплатно в магазине приложений iOS — и вы можете сканировать свое окружение. Встаньте посреди комнаты, коснитесь элементов управления, похожих на измерения, а затем медленно развернитесь.

То, что вы видите на экране холста, похоже на голодек из «Звездного пути». Рядом с камерой, видимой прямо перед вами, есть сетка. Когда вы поворачиваетесь, сетка заполняется изображением вашего окружения.

Двигайтесь слишком быстро, и получаемое изображение будет недостаточно детализированным. Если двигаться слишком медленно, приложению может не хватить памяти до того, как вы завершите сканирование. Так что это компромисс между деталями и полнотой, но он дает вам 360-градусное изображение вашей комнаты.

Прямо здесь, на iPhone, вы можете уменьшить масштаб, чтобы увидеть изоморфную проекцию комнаты, повернуть ее жестом и увеличить, чтобы увидеть ее под любым углом. Проведите пальцем по экрану, чтобы показать комнату крупным планом на весь экран, и затем вы можете провести пальцем по экрану, чтобы передвигаться, или физически переместить телефон.

Физическое перемещение телефона показывает, как выглядит захваченное окружение, когда вы поворачиваетесь. Но вам не обязательно находиться в той же среде, в которой вы запечатлели.

Вместо этого вы можете взять свой телефон и изучить сканированное изображение в любом другом месте. Встаньте, например, в поле и посмотрите на свой офис на экране iPhone. Двигайтесь по полю, и экран будет выглядеть так, как будто вы перемещаетесь по офису.

Нет сомнений — в будущем полицейские собираются делать снимки мест преступлений с помощью LiDAR. Это только вопрос времени, когда такое сканирование даст решающую улику в эпизоде ​​«Морской полиции».

Источник

Я проверил, как точно работает Рулетка на iPhone 12 Pro Max с LiDAR. Сравнил с настоящей

Ремонт – дело долгое и тонкое. Рано или поздно с этим любой столкнётся, и теперь пришла моя очередь.

Въехав в квартиру и получив ключи, я решил не доверять БТИ и прочим официальным замерам. Поэтому перемерил всё: каждую стену, выемку, арку и порог.

Лазерного дальнометра под рукой (пока что) нет, поэтому пришлось всё делать по-старинке. Рулетку в руки и вперёд. И пока я крутил её да вертел, в голову пришла мысль.

А что, если заодно протестировать Рулетку в самих iPhone? Ту самую, что предустановлена в системе. У меня iPhone 12 Pro Max, пока что флагман и заодно оснащённый тем самым LiDAR – по факту лазерным сканером.

Уже известно, что Рулетка в iOS стала точнее прежнего благодаря LiDAR. Но можно ли такой доверять при важных замерах, если под рукой нет нормального инструмента?

Условия

У вас на iPhone тоже есть Линейка, если что. LiDAR для неё необязателен, но он превращает «игрушку» в почти адекватный инструмент.

У меня простая квартира по планировке. Умеренно ровные белые стены. Ничего особенного. За окном полдень, освещение естественное.

В руках держал iPhone 12 Pro Max с протёртым блоком камер. На борту iOS 14.5 самой актуальной бета-версии.

Результаты из Рулетки в iOS сверял с тем, что уже оставили после себя замерщики, а также с тем, что уже показала обычная рулетка.

А сама рулетка – из IKEA. Нормальные инструменты на новое место ещё не перевёз.

Замерил полквартиры через LiDAR на iPhone 12 Pro Max. Какие выводы?

Замерил проход и получил от виртуальной рулетки результаты один-к-одному с реальными. Отлично.

▶ Рулетку в iOS по-прежнему нельзя использовать как замену реального инструмента при необходимости делать точные расчёты. Промахи бывают разные, в моделях с LiDAR – не очень существенные.

Если вы, скажем, выбираете длину карниза или планируете глубину встраиваемого шкафа, то одной только программной Рулеткой не обойтись. Особенно если на решение могут повлиять считанные миллиметры.

Тут всё верно оказалось.

Три с половиной метра стены Рулетка на iPhone 12 Pro Max измерила с погрешностью в 3 сантиметра. Как по мне, это отличный результат, ведь я двигался, и за один кадр такой замер сделать невозможно.

▶ Рулетку в iOS можно использовать, если вам нужно сделать замеры чуть лучше, чем просто «на глаз». Погрешность Рулетки в моделях iPhone, оснащённых LiDAR, в моём тестировании составляла от 0,1% до 10%, причем чаще – по нижней границе этого огромного разброса вариантов.

Если план действий по ремонту подразумевает небольшую свободу, то Рулетка окажется бесконечно лучше попыток измерить что угодно «на глаз».

Углы для Рулетки в iOS – худший враг, и LiDAR тут пока не спасает. Всё едет куда-то не туда, и результаты портятся.

▶ Рулетка работает точнее всего на выпуклых поверхностях, вроде дверей или плит, и хуже всего на вогнутых – вроде углов. Приложение измерило двери просто с хирургической точностью, равно как и их глубину. Очень неплохо получаются и просто ровные линии, вроде замеров стен по линии плинтуса.

Зато вогнутые углы стен, особенно неравномерно освещенные и сложные (например, переходящие в выемку), в половине попыток не поддавались нормальному замеру.

Мало того, уже построенные линии, начатые от углов стен, прямо на глазах начинали куда-то уезжать и портить весь результат. Это я вообще так и не понял, как объяснять.

Вот пример точнейшего результата программной Рулетки – все пять попыток идеально совпали с замером реальной рулетки.

▶ Рулетка в iOS стала НАМНОГО точнее благодаря LiDAR. Я сравнил результаты одних и тех же замеров на iPhone 12 Pro Max с iPhone SE 2-го поколения и с iPhone 11 Pro Max.

Оба этих «старых» iPhone показали практически рандомные результаты и очень сильно промахивались на длинных линиях, не умещающихся в пределах одного «экрана». Их даже сравнивать с LiDAR-моделями нет смысла, разница до смешного доходит.

iPhone 12 Pro Max, наоборот, несколько раз рекордно попадал в цель и часто делал это три, четыре, пять раз подряд, будто на бис. Я ожидал результатов намного хуже, чем увидел в итоге.

Рулетка в iOS слишком агрессивно находит линии там, где её не просили (жёлтая полоса). В таком случае крайне тяжело поставить точку за пределами такой «линии», это мешает замерам.

Реальную толщину батареи можете увидеть сами. iPhone отказался увидеть здесь больше 9 см только потому, что придумал себе линии там, где их нет.

▶ Рулетку в iOS надо дорабатывать. Если в следующих iPhone установят LiDAR помощнее, то главной проблемой станет не точность измерения, а алгоритмы работы программы. В приложении Рулетка стоит додумать или вообще убрать «умный» поиск углов с такой агрессивностью, как это делается сейчас.

Автоопределение линий и углов гораздо чаще мешает, чем помогает, цепляясь совсем не к той точке, которую вам хочется выбрать.

P.S. Кстати, если не знали, в Рулетке также есть вкладка Уровень, и вот она работает ну очень хорошо. Акселерометры и гироскопы уже так обкатаны в смартфонах, как LiDAR даже не снилось. Так что в качестве уровня ваш iPhone сойдет прекрасно для любого ремонта в масштабах квартиры.

Многоэтажный дом я бы с таким всё равно не строил, но шкаф проверить или карниз – легко.

Источник