Компания Apple начала серьезную работу над дополненной реальностью еще в 2017 году, когда им удалось произвести фурор с помощью виртуальной мебели в IKEA, а также довольно реалистичным сражениям Pokemon Go. С тех пор уже утекло немало воды, и сегодня мы держим в кармане новенький iPhone 12 Pro | 12 Pro Max, а также начинаем собирать слухи о выходе первой гарнитуры дополненной реальности производства Apple — Apple Glass.
Почему не Apple Glass?
Почему Apple не пошли шагами Microsoft и Google, представив нам сначала очки дополненной реальности, а сделали смелый шаг и внедрили сканер LiDAR в свои новые iPhone 12? По словам Майка Роквелла, главы разработок Apple AR, сейчас Apple больше заинтересованы не в том, чтобы показать нам что-то из ряда вон выходящее, а максимально адаптировать под будущее уже те продукты, которые сейчас лежат у нас в кармане.
На самом деле, гарнитуры дополненной реальности, такие как Oculus Quest 2, несмотря на улучшения из года в год, интересуют небольшое количество людей. Никто не говорит о количестве проданных VR и AR-гарнитур, кроме Sony.
Между тем, Apple продала около сотни миллионов iPhone и iPad с поддержкой AR, начиная с 2017 года. Также Apple заявляет, что уже существует 10 000 приложений для iOS с поддержкой AR от 7 000 разработчиков, многие из которых сосредоточены на покупках или улучшении дома с использованием AR.
При этом превосходство Apple в том, что компания не предлагает пользователю устанавливать дополнительный софт для того, чтобы воспользоваться услугами AR. Вы можете прямо из Safari посмотреть интересующую мебель в дополненной реальности. А с внедрением App Clips в iOS 14 эта процедура должна стать еще проще и востребованнее разработчиками.
Разработчики Adobe создали свое приложение AR Aero специально для iOS и iPadOS, игнорирую гарнитуры дополненной реальности, потому что понимают — куда больше криэйторов работают именно с iPad и iPhone.
LiDAR — шаг к дополненной реальности
Первые шаги Apple в области дополненной реальности, были сделаны с iPhone 8. Они заключались только в распознавании этажей с помощью датчиков движения, гироскопов и встроенной камеры телефона. Затем iPhone научился узнавать людей, животных.
iPhone и iPad с поддержкой LiDAR, невидимо распыляют массив инфракрасных лазеров, быстро создавая сетку (отображение в 3D) всех размеров комнаты. Это эволюция технологии, которую Google исследовал много лет назад, создав линейку телефонов Tango с датчиком глубины, но Apple сделала это в более продвинутом и широком масштабе.
Популярная социальная сеть Snapchat уже изучает возможности использования LiDAR для создания эффектов дополненной реальности, которые могут превратить виртуальные объекты в реальный мир, и даже проводит масштабные эксперименты, сканирующие целые городские кварталы.
Возможности для фотографии также кажутся потрясающими, потому что приложение Apple Camera использует LiDAR установленный в iPhone 12 Pro и iPhone 12 Pro Max для улучшения фокуса ночных фотографий и портретов. Но Apple пока не включает дополненную реальность в свое приложение камеры и не позволяет выполнять 3D-сканирование.
3D-макеты Tesla сделанные на iPhone 12 Pro с помощью LiDAR
Эти идеи оставлены разработчикам для изучения.
Trying some of the LiDAR-enabled AR apps I can find for the 2020 iPad Pro, to show meshing. Here’s one called Primer, an early build to test wallpaper on walls pic.twitter.com/SatibguyTm
— Scott Stein (@jetscott) April 14, 2020
Некоторые приложения, такие как DSLR Camera, уже используют LiDAR в новых iPhone для создания пользовательских слоев 3D-информации поверх данных фотографий и наложения текста в 3D на фотографии.
Just experimenting w iPhone 12 Pro and 3D copies pic.twitter.com/0LiwaomYhb
— Scott Stein (@jetscott) October 22, 2020
Кроме этих возможностей, LiDAR помогает обнаруживать людей в iOS 14.2 уже сейчас. Тем самым расширив возможности людей с особыми потребностями.
Какие приложения уде сейчас поддерживают LiDAR
1. Complete Anatomy 2021
Приложение позволяет ознакомиться с анатомией человека в реальном времени. Можно детально изучить строение мышц, костей и органов в дополненной реальности. Скачать с App Store.
2. RoomScan LiDAR
Можно просканировать свой дом и быстро создать 3D-макет/план вашего помещения. Скачать с App Store.
3. IKEA Place
Приложение от IKEA, которое позволяет «примерять» различные предметы декора из магазина к вашему жилищу в режиме реального времени. Скачать с App Store.
4. 3d Scanner App
Позволяет сканировать различные предметы и создавать 3D-модели окружающей вас среды быстро с помощью встроенного LiDAR. Скачать с App Store.
5. RC Club — AR Racing Simulator
Симулятор машинки на радиоуправлении, которой можно управлять в дополненной реальности. Скачать с App Store.
App Clips — возможность развития AR на iPhone
С новой функцией App Clips, которая позволяет вам не скачивать, а сразу использовать нужное приложение перспективы AR на iPhone возрастают. Все потому, что многие люди в самом деле не используют дополненную реальность только из-за того, что им не хочется переходить и скачивать какое-то приложение, проходить регистрацию и так далее, чтобы просто посмотреть на какой-то объект AR. С App Clips, которые появились в iOS 14 это вам и не будет нужно.
Захотите посмотреть на какой-то объект AR вроде экспоната в музее или карты местности — все что вам будет нужно просто просканировать QR-код.