Как использовать сканер LiDAR в iPhone 12 Pro
У вас есть сканер LiDAR, если у вас есть iPhone 12 Pro, iPhone 12 Pro Max или iPad Pro, но Apple, похоже, не дает вам возможности его использовать. Вот как это сделать, что вам нужно и почему LiDAR так полезен.
LiDAR является частью iPhone 12 Pro, iPhone 12 Pro Max и iPad Pro, но вас простят за то, что вы этого не заметили. Apple почти не упоминает об этом, и на телефоне нет приложения LiDAR, которое можно было бы попробовать.
Учитывая, что одно из его основных применений — фотография, вы ожидаете каких-то элементов управления LiDAR в приложении камеры или, по крайней мере, чего-то в настройках. Но нет ни того, ни другого.
Также мало стимулов искать такие элементы управления, потому что, пока вы не увидите их в действии, трудно понять, что LiDAR может для вас сделать. Технология сканирует вашу среду, создавая ее трехмерное изображение, и это изменит качество работы AR и VR.
На данный момент Apple, похоже, рада позволить LiDAR тонко помочь вам тем, как он дополняет существующие приложения и функции.
Как вы уже используете LiDAR
Если вы ранее отказались от использования приложения Apple Measure, попробуйте еще раз. Приложению теперь помогает LiDAR, и это заметно улучшило его.
Теперь можно быстрее начать использовать Measure, потому что он быстрее распознает окружающую среду. А поскольку LiDAR работает для сканирования всей окружающей среды, измерения, которые вы выполняете, более точны.
Это теория, а на практике вы обнаружите, что Measure более полезен, чем раньше. Вместо приложения, которое вы использовали для грубых измерений, когда у вас не было рулетки, теперь оно достаточно хорошее и быстрое, чтобы использовать его где угодно.
Далее, хотя это и сложнее увидеть, LiDAR также ускорил работу автофокуса вашей камеры. Опять же, это потому, что LiDAR отображает окружающую среду вокруг вас, поэтому он начинает вычислять, насколько далеко или близко находится объект, когда вы нажимаете кнопку, чтобы сделать снимок.
Однако, если измерения и автофокус — единственные заметные варианты использования LiDAR от Apple, уже существуют сторонние приложения, которые будут делать гораздо больше. Их очень много, и большинство из них похоже на эксперименты по выяснению того, что возможно.
Но в целом они также, как правило, хороши в одном из двух. Либо они отлично справляются со съемкой трехмерного изображения вашего окружения, похожего на фотографию, либо лучше снимают изображение объекта.
Это баланс между достаточно медленным сканированием, чтобы избежать размытия, и достаточно быстрым, чтобы закончить, пока приложение все еще может хранить данные.
Захват всей вашей среды
Используйте Canvas: Pocket 3D Room Scanner для iPhone — бесплатно в магазине приложений iOS — и вы можете сканировать свое окружение. Встаньте посреди комнаты, коснитесь элементов управления, похожих на измерения, а затем медленно развернитесь.
То, что вы видите на экране холста, похоже на голодек из «Звездного пути». Рядом с камерой, видимой прямо перед вами, есть сетка. Когда вы поворачиваетесь, сетка заполняется изображением вашего окружения.
Двигайтесь слишком быстро, и получаемое изображение будет недостаточно детализированным. Если двигаться слишком медленно, приложению может не хватить памяти до того, как вы завершите сканирование. Так что это компромисс между деталями и полнотой, но он дает вам 360-градусное изображение вашей комнаты.
Прямо здесь, на iPhone, вы можете уменьшить масштаб, чтобы увидеть изоморфную проекцию комнаты, повернуть ее жестом и увеличить, чтобы увидеть ее под любым углом. Проведите пальцем по экрану, чтобы показать комнату крупным планом на весь экран, и затем вы можете провести пальцем по экрану, чтобы передвигаться, или физически переместить телефон.
Физическое перемещение телефона показывает, как выглядит захваченное окружение, когда вы поворачиваетесь. Но вам не обязательно находиться в той же среде, в которой вы запечатлели.
Вместо этого вы можете взять свой телефон и изучить сканированное изображение в любом другом месте. Встаньте, например, в поле и посмотрите на свой офис на экране iPhone. Двигайтесь по полю, и экран будет выглядеть так, как будто вы перемещаетесь по офису.
Нет сомнений — в будущем полицейские собираются делать снимки мест преступлений с помощью LiDAR. Это только вопрос времени, когда такое сканирование даст решающую улику в эпизоде «Морской полиции».
Даже поспешное сканирование позволяет вернуться позже, чтобы измерить объекты в окружающей среде.
Сканирование объектов с помощью LiDAR
Вы уже видели это на некоторых устройствах Apple. С помощью AR и отсканированных изображений ваш iPhone может показать вам, как, скажем, Mac Pro будет выглядеть на вашем столе. Сканеры LiDAR позволяют захватывать изображение объекта и делать это самостоятельно.
Canvas на это способен, хотя в нашем тестировании он был оптимизирован для сканирования комнат. Точно так же бесплатное приложение 3D-сканера может работать с комнатами, но оно кажется лучшим для захвата объектов.
Опять же, количество приложений для сканирования LiDAR растет, и многие из них можно попробовать бесплатно.
И снова приложение 3D Scanner напоминает голодек тем, как оно представляет собой сетку над вашим объектом, которая заполняется и заменяется при сканировании.
Что можно делать с помощью сканирования LiDAR
В следующий раз, когда вы переедете, сделайте LiDAR-сканирование любой новой собственности, которую вы собираетесь купить. Мы еще не достигли той стадии, когда приложения позволяют очень легко сканировать комнату, а затем добавлять отдельные сканированные изображения вашей мебели, но вы можете это сделать.
Более того, вы можете лучше понять размер квартир, сравнивая их. Возможность эффективно обойти каждую квартиру гораздо более интуитивно понятна, чем полагаться на планы этажей и размеры.
Или, если вы медленно снимаете аренду хранилища, то быстрое сканирование LiDAR визуально намного полезнее, чем перечисление количества оставшихся ящиков.
Все это приносит пользу вам, как пользователю, выполнявшему сканирование LiDAR или измерения и фотографии. Если у кого-то есть то же приложение, что и у вас, вы обычно можете отправить им отсканированное изображение.
И такие, как Canvas, включают возможность отправки отсканированного изображения онлайн. Это не то же самое, что перевернуть телефон, когда вы ходите по виртуальной комнате. Но вы можете увидеть отсканированное изображение на 360 градусов на вашем Mac.
Что ждет LiDAR дальше
Приложения будут становиться все более сложными по мере того, как разработчики исследуют технологию, и по мере того, как она становится более полезной, когда LiDAR станет обычным явлением. Это, несомненно, также будет распространяться на новые способы обмена или загрузки таких отсканированных изображений.
И, может быть, тогда мы увидим больше, может быть, тогда у нас также будет больше Apple AR.
iOS 16 API «RoomPlan» создает 3D-планы этажей с использованием LiDAR
Apple ни слова не сказала о дополненной и виртуальной реальности на открытии WWDC 2022 (как будто пыталась что-то скрыть), но iOS 16 привносит множество улучшений, когда речь идет об ARKit и связанных с ним технологиях. Одной из таких технологий является «RoomPlan», новый API, который использует сканирование LiDAR для быстрого создания 3D-планов этажей.
Приложения, способные создавать 3D-планы этажей с помощью камеры iPhone и iPad, не совсем новы, но и не совсем точны. Когда Apple представила сканер LiDAR с iPad 2020 года Pro и айфон 12 Proстало проще определять размеры объектов точнее.
Для тех, кто не знаком, LiDAR — это технология, которая излучает лазеры и рассчитывает время, необходимое для того, чтобы свет вернулся к датчику, чтобы точно измерить расстояние между устройством и объектами. Таким образом, сканер LiDAR способен определять размеры и даже форму объекта или внутренней среды.
Теперь с iOS 16 Apple объединила LiDAR с камерами iPhone и iPad в новом API RoomPlan, чтобы пользователи могли создавать 3D-планы этажей за считанные секунды. По словам Apple, API может быть полезен для приложений в сфере недвижимости, архитектуры и дизайна интерьера, поскольку он точен и прост в использовании.
Помогите клиентам принимать более обоснованные решения, используя RoomPlan для создания плана помещения непосредственно в ваших приложениях, таких как приложения для недвижимости, электронной коммерции или гостиничного бизнеса. Эти сканы также могут быть первым шагом в рабочих процессах архитектуры и дизайна интерьера, помогая оптимизировать концептуальные исследования и планирование.
Сканер LiDAR на iPhone 12 Pro — какие возможности?
Компания Apple добавила в свои новые iPhone 12 Pro | iPhone 12 Pro Max и iPad Pro (2020) сканер LiDAR. Рассуждаем, для чего можно использовать эту технологию уже сейчас и что будет в будущем.
Компания Apple начала серьезную работу над дополненной реальностью еще в 2017 году, когда им удалось произвести фурор с помощью виртуальной мебели в IKEA, а также довольно реалистичным сражениям Pokemon Go. С тех пор уже утекло немало воды, и сегодня мы держим в кармане новенький iPhone 12 Pro | 12 Pro Max , а также начинаем собирать слухи о выходе первой гарнитуры дополненной реальности производства Apple — Apple Glass.
Почему не Apple Glass?
Почему Apple не пошли шагами Microsoft и Google, представив нам сначала очки дополненной реальности, а сделали смелый шаг и внедрили сканер LiDAR в свои новые iPhone 12? По словам Майка Роквелла, главы разработок Apple AR, сейчас Apple больше заинтересованы не в том, чтобы показать нам что-то из ряда вон выходящее, а максимально адаптировать под будущее уже те продукты, которые сейчас лежат у нас в кармане.
На самом деле, гарнитуры дополненной реальности, такие как Oculus Quest 2, несмотря на улучшения из года в год, интересуют небольшое количество людей. Никто не говорит о количестве проданных VR и AR-гарнитур, кроме Sony.
Между тем, Apple продала около сотни миллионов iPhone и iPad с поддержкой AR, начиная с 2017 года. Также Apple заявляет, что уже существует 10 000 приложений для iOS с поддержкой AR от 7 000 разработчиков, многие из которых сосредоточены на покупках или улучшении дома с использованием AR.
При этом превосходство Apple в том, что компания не предлагает пользователю устанавливать дополнительный софт для того, чтобы воспользоваться услугами AR. Вы можете прямо из Safari посмотреть интересующую мебель в дополненной реальности. А с внедрением App Clips в iOS 14 эта процедура должна стать еще проще и востребованнее разработчиками.
Разработчики Adobe создали свое приложение AR Aero специально для iOS и iPadOS, игнорирую гарнитуры дополненной реальности, потому что понимают — куда больше криэйторов работают именно с iPad и iPhone.
LiDAR — шаг к дополненной реальности
Первые шаги Apple в области дополненной реальности, были сделаны с iPhone 8. Они заключались только в распознавании этажей с помощью датчиков движения, гироскопов и встроенной камеры телефона. Затем iPhone научился узнавать людей, животных.
iPhone и iPad с поддержкой LiDAR, невидимо распыляют массив инфракрасных лазеров, быстро создавая сетку (отображение в 3D) всех размеров комнаты. Это эволюция технологии, которую Google исследовал много лет назад, создав линейку телефонов Tango с датчиком глубины, но Apple сделала это в более продвинутом и широком масштабе.
Популярная социальная сеть Snapchat уже изучает возможности использования LiDAR для создания эффектов дополненной реальности, которые могут превратить виртуальные объекты в реальный мир, и даже проводит масштабные эксперименты, сканирующие целые городские кварталы.
Возможности для фотографии также кажутся потрясающими, потому что приложение Apple Camera использует LiDAR установленный в iPhone 12 Pro и iPhone 12 Pro Max для улучшения фокуса ночных фотографий и портретов. Но Apple пока не включает дополненную реальность в свое приложение камеры и не позволяет выполнять 3D-сканирование.
3D-макеты Tesla сделанные на iPhone 12 Pro с помощью LiDAR
Эти идеи оставлены разработчикам для изучения.
Trying some of the LiDAR-enabled AR apps I can find for the 2020 iPad Pro, to show meshing. Here’s one called Primer, an early build to test wallpaper on walls pic.twitter.com/SatibguyTm
— Scott Stein (@jetscott) April 14, 2020
Некоторые приложения, такие как DSLR Camera, уже используют LiDAR в новых iPhone для создания пользовательских слоев 3D-информации поверх данных фотографий и наложения текста в 3D на фотографии.
Just experimenting w iPhone 12 Pro and 3D copies pic.twitter.com/0LiwaomYhb
— Scott Stein (@jetscott) October 22, 2020
Кроме этих возможностей, LiDAR помогает обнаруживать людей в iOS 14.2 уже сейчас. Тем самым расширив возможности людей с особыми потребностями.
Какие приложения уде сейчас поддерживают LiDAR
1. Complete Anatomy 2021
Приложение позволяет ознакомиться с анатомией человека в реальном времени. Можно детально изучить строение мышц, костей и органов в дополненной реальности. Скачать с App Store.
2. RoomScan LiDAR
Можно просканировать свой дом и быстро создать 3D-макет/план вашего помещения. Скачать с App Store.
3. IKEA Place
Приложение от IKEA, которое позволяет «примерять» различные предметы декора из магазина к вашему жилищу в режиме реального времени. Скачать с App Store.
4. 3d Scanner App
Позволяет сканировать различные предметы и создавать 3D-модели окружающей вас среды быстро с помощью встроенного LiDAR. Скачать с App Store.
5. RC Club — AR Racing Simulator
Симулятор машинки на радиоуправлении, которой можно управлять в дополненной реальности. Скачать с App Store.
App Clips — возможность развития AR на iPhone
С новой функцией App Clips, которая позволяет вам не скачивать, а сразу использовать нужное приложение перспективы AR на iPhone возрастают. Все потому, что многие люди в самом деле не используют дополненную реальность только из-за того, что им не хочется переходить и скачивать какое-то приложение, проходить регистрацию и так далее, чтобы просто посмотреть на какой-то объект AR. С App Clips, которые появились в iOS 14 это вам и не будет нужно.
Захотите посмотреть на какой-то объект AR вроде экспоната в музее или карты местности — все что вам будет нужно просто просканировать QR-код.
Загрузка...
