- Исследовать Марс и управлять автомобилем? На что способен лидар в iPhone 12 Pro
- Зачем нужен лидар
- Лидар в iPhone 12 Pro
- Зачем нужен LiDAR в iPhone 12 Pro? Ответим на примере Canvas
- Зачем нужен лидар в iPhone 12 Pro и iPhone 12 Pro Max
- Как работает лидар в iPhone 12 Pro
- Что делает лидар
- Приложения с поддержкой лидара
- Лонгриды для вас
Исследовать Марс и управлять автомобилем? На что способен лидар в iPhone 12 Pro
Одним из главных нововведений iPhone 12 Pro и iPhone 12 Pro стал новый сканер LiDAR, который позволяет улучшить работу телефона с технологиями дополненной реальности, а также добавить продвинутые возможности фото. Apple уже добавляла LiDAR в iPad Pro 2020 года, но тогда этой технологии не уделили столько внимания. Здесь же другое дело — айфон, самый популярный продукт компании, где, по словам Apple, используются технологии NASA для исследования Марса! Впрочем, не только — лидар также есть, например, в электромобилях Tesla и собственных автомобилях Apple, где он используется для автопилота и ориентирования машины в пространстве. Как Apple вообще удалось запихнуть столь мощный датчик в корпус маленького iPhone?
Такой маленький, но такой способный
Зачем нужен лидар
Apple не лукавит, когда говорит о важности LiDAR для космических исследований. Например, NASA хочет использовать данный аппарат, чтобы изучить атмосферные явления на поверхности Марса. Дело в том, что пылевые марсианские бури часто достигают скорости 60-80 километров в час, и если посадить космический аппарат в таких условиях (тем более с людьми), можно поставить по удар всю операцию.
Поэтому изучить атмосферные явления на поверхности Марса и скорость ветров в NASA собираются с помощью лидара, который разместят на орбите. Аппарат будет посылать лазерные сигналы, которые, отражаясь от облаков и пыли, смогут дать ученым довольно четкую картину о скорости ветра на Марсе.
На Земле лидар уже используется NASA — например, для сканирования морского дна
Лидар также получил широкое распространение среди производителей электромобилей — например, Tesla. Там он создает 3D-карту окружающего пространства: «видит» пешеходов, автомобили и препятствия на дороге, позволяя автопилоту (или водителю) вовремя среагировать. Всего в самоуправляемых автомобилях используется 3 типа сенсоров: лидары, камеры и радары. Камеры дают детализированную картинку, способны определять знаки и сигналы светофоров, а радары дают точную информацию о скорости движения объектов и их расстоянии до беспилотного автомобиля.
Лидар и радар позволяют Tesla создать 3D-карту объектов вокруг себя
Но именно лидар, который сканирует пространство с помощью лазерных лучей, играет ключевую роль. Лучи, отражаясь от объектов, позволяют автомобилю понять, на каком расстоянии находится объект.
Посмотреть, как работает лидар и автопилот в Tesla, вы можете в Тиктоке Hi-News.ru, последнее видео там — прямо пушка!
Лидар в iPhone 12 Pro
Получается, Apple взяла и решила использовать технологию, которую уже практикуют производители электромобилей и хотят использовать для колонизации Марса? Именно так. Но скорость ветра лидар в iPhone 12 Pro или iPhone 12 Pro Max вычислить не сможет, а вот построить 3D-модель комнаты и объектов в ней — запросто. Айфон посылает множество невидимых лучей, а лидар вычисляет время, которое требуется лучу невидимого глазом света, чтобы дойти от передатчика до объекта и вернуться обратно. Лучи включаются с периодичностью в несколько наносекунд — таким образом, структурная карта постоянно уточняется.
Так лидар в айфоне увидит вашу комнату
Зачем это нужно? Мой коллега Иван Кузнецов уже подробно расписал все преимущества LiDAR в iPhone 12 Pro. Суть в том, что сканер мгновенно обрабатывает информацию обо всех поверхностях и определяет все элементы в комнате, поэтому виртуальные объекты (когда вы захотите посмотреть что-то в дополненной реальности) размещаются максимально правдоподобно.
Также лидар улучшает работу камеры iPhone: например, благодаря ему автофокус при слабом освещении работает до 6 раз быстрее. Плюс портретная съемка будет работать и «размывать» фон, даже если будет совсем мало света.
Технология, которую использует Apple, больше напоминает лидар в самоуправляемых автомобилях, и это действительно вызывает восхищение. Ведь в той же Tesla много места и разных датчиков, а Apple взяла и уместила крошечный сканер рядом с камерой iPhone. Немаловажную роль в этом сыграл нейронный процессор, который и обрабатывает всю информацию с этого лидара. Как думаете, для чего еще может использоваться лидар в iPhone? Давайте обсудим в комментариях и в нашем чате в Telegram.
Источник
Зачем нужен LiDAR в iPhone 12 Pro? Ответим на примере Canvas
Датчик глубинного сканирования iPhone 12 Pro, основанный на LiDAR, предоставляет множество возможностей для 3D-приложений. Новый сканер Canvas, предназначенный для сканирования дома, использует LiDAR для повышенной точности и детализации моделей. Но приложение будет работать и с не-Pro версиями iPhone.
Приложение Canvas, созданное компанией Occipital из Боулдера (кстати говоря, подразделение данной компании в Москве также принимало активное участие в разработке сканера), первоначально было выпущено для iPad Pro, чтобы воспользоваться преимуществами лидарного сканирования. Демонстрация возможностей этой программы показывает как технология Apple для измерения глубины может быть применена в настоящих консьюмерских решениях.
С момента дебюта iPhone 12 Pro с LiDAR появилось несколько оптимизированных приложений, предлагающих 3D-сканирование объектов, крупномасштабную фотографию со сканированием пространства (так называемую фотограмметрию) и дополненную реальность Но Canvas на iPhone 12 Pro показывает лучшие результаты и выглядит удобнее, чем приложения для 3D-сканирования, с которыми нам удалось поработать ранее.
По словам вице-президентов Occipital по продуктам Алекса Шиффа и Антона Якубенко, iOS 14 от Apple предоставляет разработчикам более широкий доступ к лидарным данным iPhone. Это позволило Occipital создать собственные алгоритмы для наилучшего использования карты глубины нового телефона Apple. Причем, новый SDK от Apple позволяет создавать более классные решения для сканирования объектов даже без использования LiDAR.
Сканирование трехмерного пространства без датчика LiDAR для карт глубины возможно, и такие компании, как 6d.ai (приобретенная Niantic), уже используют его. Но Шифф и Якубенко говорят, что LiDAR по-прежнему позволяет получать более точные результаты. По данным Occipital, версия Canvas для iPhone 12 Pro делает более качественные сканы, чем первая версия для iPad Pro.
В основном это связано с более глубоким доступом iOS 14 к лидарной информации. Новейшая версия с поддержкой LiDAR имеет точность в пределах 1%, в то время как сканирование без датчика глубины дает точность в районе 5% (что буквально делает iPhone 12 Pro ПРОфессиональным апгрейдом).
Чтобы далеко ходить, мы ранее уже делали обзор на Structure Sensor от той же компании Occipital. Этот сенсор представлял собой отдельный гаджет, который крепился на iPad. А теперь представьте на мгновение, что практически все то, что предлагало отдельное устройство, можно получить прямо из коробки, и прямо в телефоне миниатюрного размера! А самое главное – все работает весьма качественно, и уже сейчас применяется на практике.
Демонстрация работы Canvas на презентации iPhone 12 Pro
Сканы комнат, сделанные с помощью Canvas, можно преобразовать в рабочие модели САП (Система Автоматического Проектирования), что занимает около 48 часов, но Occipital также работает над более быстрым преобразованием изображений и добавлением семантических данных (например, распознавания дверей, окон и других деталей помещений) с помощью ИИ. То, над чем раньше работали проектировщики и дизайнеры несколько суток, можно сделать самостоятельно с помощью смартфона – магия!
По мере того, как все больше 3D-сканов и 3D-данных начинают появляться на iPhone и iPad, тем больше будет иметь смысл использовать более распространенные форматы файлов для обмена и редактирования моделей. В какой-то момент 3D-сканирование может стать таким же стандартизированным, как PDF-файлы. И отсканировать какой-то объект станет таким же обыденным действием, как и сделать скан документа сейчас.
Надеемся, что в этой статье мы все-таки ответили на вопрос о том, зачем в iPhone 12 Pro нужен LiDAR. За этим определенно будущее. Раньше для сканирования помещений необходимо было вызывать обученных людей со специальным оборудованием, теперь это сделать можете вы с помощью своего телефона самостоятельно. И такой сценарий можно наложить практически на любую сферу деятельности.
Источник
Зачем нужен лидар в iPhone 12 Pro и iPhone 12 Pro Max
Два дня назад Apple представила iPhone 12 Pro и iPhone 12 Pro Max. Несмотря на то что они принадлежат к той же линейке, что и iPhone 12 mini и iPhone 12, в Купертино выделили анонс старших моделей в отдельную главу даже в рамках одной презентации. Это был оправданный шаг, учитывая более совершенную начинку «настоящих» флагманов. Всё-таки 5G, процессор A14 и лидар на дороге не валяются. Но если про 5G и A14 вы уже плюс-минус знаете, то вот лидар для многих по-прежнему остаются загадкой.
iPhone 12 Pro стал первым смартфоном Apple с лидаром
Лидар – это технология, которая среди устройств Apple впервые появилась в iPad Pro 2020. Тогда, в самый разгар пандемии, в Купертино удивили всех запуском нового планшета для профессионалов, который оказался почти таким же, как и его предшественник, но отличался от него лишь наличием сверхширокоугольной камеры и того самого лидара. В компании заявили, что эта штука нужна для более правильного позиционирования объектов в дополненной реальности, но никакими особенными подробностями делиться не стали. То ли дело сейчас.
Как работает лидар в iPhone 12 Pro
Это пучок света, который излучает лидар. Человек его увидеть не может
По своей сути лидар является инструментом компьютерного зрения, который используется в автопилотах, роботах и других устройствах. Он формирует серию лазерных импульсов, невидимого для человека, и направляет их на объект съёмки. Затем луч возвращается, неся в себе обширный спектр данных. Благодаря им можно, во-первых, более точно рассчитать расстояние до объекта, во-вторых, считать объём и, в-третьих, точнее определить его границы. Вот как лидар видит окружающий мир:
Это то, как лидар видит окружающие объекты
Несмотря на то что Apple не изобретала эту технологию, она, как обычно, пошла несколько дальше своих конкурентов. В отличие от большинства производителей, она оснастила iPhone 12 Pro и 12 Pro Max именно лидаром, а не ToF-сенсором. Лидар направляет несколько световых импульсов, а не один, как ToF-сенсор. Это даёт два основных преимущества: увеличенная до 5 метров дальность и способность определять даже те объекты, которые перекрываются другими объектами, например, люди за деревьями или машинами.
Что делает лидар
Фотографии с размытием благодаря лидару будут получаться более натуральными
На данном этапе развития лидар в смартфоне может служить сразу нескольким целям. Во-первых, он обеспечивает съёмку более естественных портретных фото с натуральным эффектом боке. Благодаря ему уши, волосы, хвосты и другие части тел людей и животных больше не будут оставаться в расфокусе. А в будущем планируется прикрутить возможность съёмки портретных видео. Но, скорее всего, это произойдёт только в следующем году.
Во-вторых, лидар можно использовать для высокоточного измерения расстояний в физическом мире. То есть с помощью смартфона с лидаром можно замерить площадь комнаты, длину, ширину и высоту стен, а также кривизну пола. Это может быть удобно при проведении строительных работ, в которых используются специальные дальномеры и нивелиры.
Объявлены российские цены iPhone 12, iPhone 12 mini, а также iPhone 12 Pro и iPhone 12 Pro Max
В-третьих, благодаря тому, что лидар видит в темноте не хуже, чем днём, его можно использовать для усовершенствования ночной съёмки. Его способность распознавать объекты независимо от освещения позволяет ускорить работу автофокуса до 6 раз и тем самым исключить фотографии со сбившимся фокусом.
Ну, и, в-четвёртых, лидар позволяет AR-объектам не проваливаться в текстуры реального мира. Наверняка вы обращали внимание на то, как 3д-животные от Google проваливались сквозь пол или залезали на ваш комод. С лидаром, который определяет все трёхмерные объекты на расстоянии 5 метров, такого не будет.
Приложения с поддержкой лидара
Snapchat уже получил поддержку лидара, скоро получат и другие
Одним из первых приложений, которое получило поддержку лидара, стал Snapchat. Разработчики добавили новые фильтры, которые задействуют новую технологию для более точного позиционирования объектов в дополненной реальности и повышения их реалистичности.
Обратите внимание на то, что виртуальные растения разместились не только не полу, но и на столе, учтя его высоту, а виртуальная птица летает прямо над рукой позирующей девушки. В ближайшее время Snapchat планирует ещё глубже интегрировать технологию лидара в своё приложение, представив несколько новых сценариев её использования.
Стоит ли бежать в магазин за iPhone 12 Pro/12 Pro Max ради лидара? Сложно сказать. Наверное, я бы не побежал. Другое дело, если вы уже давно планировали сменить свой старенький iPhone 6s на что-то более современное и функциональное. В этом случае один из топовых iPhone с 5G и лидаром может стать для вас отличным выбором.
Новости, статьи и анонсы публикаций
Свободное общение и обсуждение материалов
Лонгриды для вас
Вы заметили, что с годами iPhone вытеснил привычные нам гаджеты? И правда, зачем они нужны, если все это уже есть в смартфоне! Плееры, электронные книги, фотоаппараты, навигаторы — рассказываем, как они пострадали с появлением iPhone
Скорее всего, на презентации 14 сентября Apple представит не только iPhone 13 и Apple Watch Series 7, но ещё и новый iPad 9-го поколения. Поговорим, какие изменения ждут самый дешёвый планшет компании и кто его купит
Если вы твёрдо решили пересесть с iPhone на Android, вам нужен достойный смартфон, чтобы не разочароваться ни в конкурентах Apple, ни в операционной системе Google. Предлагаем вам подборку лучших аппаратов на Android — от дешёвых к дорогим
Plt14, камеры там сильно прокачаны относительно не ПРО, особенно на версии МАКС. Не назвал бы качественные фотографии и видео понтами, да и большой экран многих больше устраивает, чем уже стандартные 5-6 дюймов.
Помню многие просили возможность звонить с айпад мини, и тогда их потребность в смартфоне отпадет
Вообще понятие «понты» у каждого свое, чаще всего это просто зависть, которую очень хочется выразить вслух, но на которую всем кроме вас плевать. Комплекс, короче.
Источник