Немножко минималисичного и качественного WebAR или пример того, что происходит, когда швейцарская вода премиум-класса встречается с иммерсивными технологиями.

Посетители 30 лучших ресторанов Швейцарии теперь могут сканировать бутылки воды, чтобы посмотреть AR в ожидании блюда.

В опыте продуман индивидуального дизайна бутылок и подбор сочетаний блюд и вин с помощью ИИ (LLM).

Сжимал, сжимал, я видео, но досжимал в итоге до 62мб. Но вы все равно посмотрите 🙂

Это первый взгляд на новую пространственную галерею на Apple Vision Pro. В настоящее время галерея находится в стадии бета-тестирования, но благодаря Nathie можно посмотреть уже сейчас.

Кстати, с Nathie мы познакомились 5 или 6 лет назад на AWE в Амстердаме, с тех пор его канал вырос почти до 800K юзеров. Очень круто для блога про AR/VR.

В последнее время в твиттере и линкдине снова часто вижу видео с e-commerce применением WebAR.

В связи с этим посчитал и понял: с момента появления USDZ формата прошло уже 7 лет! Невероятно быстро летит время.

Для тех кто не знает – короткий экскурс. USDZ – это формат 3D-файлов от Apple, который позволяет легко просматривать модели в дополненной реальности без установки приложений. Его можно открыть прямо в Safari или даже тут в телеграм. Формат поддерживает текстуры, анимации и эффекты.

Например, вы можете зайти на сайт магазина, тыкнуть кнопку "AR" и тут же рассмотреть товар в реальную величину прямо у себя в комнате, как на этом видео.

Вот напоминалка – как может выглядеть дом или рабочее пространство с "обвесами" в смешанной реальности.

Это приложение Greenify под Vision Pro, оно, как видите, позволяет превратить любую комнату в джунгли. Красиво.

Но напомню, что пока форм-фактор качественных очков смешанной реальности остается таким громоздким, как сейчас – подобные штуки остаются не более чем развлечением на 10 минут.

А вот когда на вас будут надеты удобные и легкие очки, – тогда все подобные приложения, а так же функциональные штуки, вроде виртуальных рабочих мест, помогаторов в фитнесе, готовке и навигации обретут реальный полезный смысл.

Допустим, AirPods с функцией шумоподавления голосов определенных людей.

Берем?

Что, если бы вы могли увидеть мир глазами человека с шизофренией?

«Голиаф: Игра с реальностью» — это VR-опыт, который позволяет пережить историю Джона, чья жизнь разделена между реальностью и виртуальными мирами. Голос Тильды Суинтон ведет через многослойное повествование.

Этот проект, как и другие похожие социальные экспириенсы, – попытка разрушить стигму вокруг психических расстройств, показать силу эмпатии и важность открытого диалога. Очень такое люблю.

Когда такие штуки наблюдаешь собственными глазами – это завораживает.

Это тоже своего рода портальная механика в смешанной реальности.

Вообще XR невозможно не любить хотя бы потому, что это дает возможность прожить от первого лица другую роль, оказаться в другой эпохе или погрузиться в нереальный контекст. А это все не только про впечатления, но и про опыт.

Парень навсегда запечатлел скульптуры с фестиваля Фальяс до того, как их поглотил огонь.

Во время фестиваля Fallas в Валенсии он отсканировал несколько огромных скульптур (до размеров зданий!) с помощью Kiri Engine, отредактировал их в Supersplat и теперь запускает прямо в гостиной через Vision Pro.

Новый уровень реалистичных 3D-аватаров — TaoAvatar от Alibaba

Мгновенный рендер, живые мимика и движения, супер-оптимизация под мобильные и Vision Pro.

Работает в real-time и выглядит почти как видео. Очень сильно.

Тут почитать подробнее.

Наша клякса немножко паразитирует на достопримечательностях Буэнос-Айреса 💀

Вот пример того, куда движется натуральный интерфейс

Управление контентом в смешанной реальности потихонечку эволюционирует, Meta представили новую функцию.

Микрожесты — это 5 жестов, которые выполняются большим пальцем.

Думаю в будущем управление хэнд трекингом не будет чем-то неудобным.

На 10 апреля ничего не планируем.

Выйдет седьмой сезон Black Mirror!

И хоть прошлые сезоны были, на мой взгляд, все хуже и хуже, не посмотреть этот просто нельзя.

AI и кино

Речь пока не про большое кино с полным циклом AI-продакшена, но глядя на то, какие потрясающие рекламные ролики и короткометражки появлялись весь прошлый год и появляются сейчас – становится понятно, что в этом году их количество вырастет кратно.

Большинство крупных AI-генеративных платформ по работе с видео уже внедрили много фич: контроль камеры, добавление и редактирование отдельных элементов, классную физику, реализм, киношный цветокор. Новости об обновлениях выходят каждую неделю, причем не какие-то мелкие улучшения, а вот прямо раз в неделю какой-нибудь Kling, Sora или Runway выкатывает что-то мощное.

На видео пример из сервиса DomoAI. Там теперь есть возможность бесшовно заменять актеров в сценах видео, не нарушая исходную среду. Движения и действия персонажа остаются синхронизированными, сохраняя целостность и реалистичность сцены.

Ну а кто не знает – я каждый день пишу про такое в нашем втором канале: Точки над ИИ. Кто интересуется AI, но пока не подписан – заходите читать!

Вот так выглядит вокселизация пространства в смешанной реальности

Есть два варианта использования:

1. Вы давно мечтали жить в мире Minecraft
2. Вы давно мечтали зацензурить и скрыть из вида неубранную комнату или надоедливых коллег.

Minecraft сейчас абсолютно везде

Конечно же это из-за кино-премьеры. Даже если в гугле сейчас напишете "Minecraft" – вас будет ждать сюрприз прямо на странице поиска.

И любопытно подглядывать за коллаборациями с разными брендами. Вот, например, Doritos сделали AR-портал в вебе. На видео, конечно, CG-тизер, но сам экспириенс тоже существует в Амстердаме.

AR-порталы – это вечная механика.

Завтра стартует новый сезон «Черного зеркала», а уже в мае новенький Love Death + Robots. Держу в курсе.

Для всех брендов и агентств, кто планирует делать WebAR спец-проекты

Короткое наблюдение на заметку.

Разумеется, в WebAR-экспириенсах конверсии зависят от многих показателей, но стоит обратить внимание на связку CGI (FOOH) и дополненной реальности.

В силу того что сам AR в вебе часто не супер зрелищный и имеет ряд ограничений, имеет смысл выделять дополнительный ресурс на создание поддерживающего зрелищного ролика, как в этом кейсе Fanta.

Пользователи охотнее переходят к активации, если перед этим им показали приятную картинку и подсветили тему коротким сторителлом.

У нас в кейсе для Avito агентство тоже запустило параллельные посевы с CGI историей, что классно отразилось на результате кампании.

Концепция иммерсивных ресторанов, хоть и редко встречается, но все-таки существует.

Помню еще в 2014 или 2015 году пару лет вирусились видео из ресторана Le Petit Chef, там шоу было построено на проекции без интерактива, у каждого гостя было свое маленькое представление перед подачей блюд. Кстати, в Азии эта сеть развивается до сих пор, и насколько мне известно, контент там особо не развился за 10 лет.

Лет 6 назад у ныне почившей "Кухни на районе" появилось свое медиа, кажется называлось оно "Как есть". Там я рассказывал про существовавшие на тот момент иммерсивных экспириенсов в horeca. Жаль уже не найти саму статью, но я и без нее могу сказать, что за эти годы этот рынок так особо и не развился. Да, в Москве появился экспириенс "Красота", а по миру тоже появились отдельные похожие шоу про еду, но так или иначе громких и востребованных проектов не так много.

Как правило, в таких проектах на этапе обсуждения не сходятся несколько сущностей – от ожидания посетителей до бюджета на реализацию, но ключевое – это неготовность рестораторов к таким концепциям. Какая бы высокая кухня не была – в итоге делать придется в первую очередь аттракцион, а уже во вторую это будет считаться рестораном. Не все к этому готовы и не все это умеют.

На видео фрагмент из японского ресторана, который недавно открыли в Нью-Йорке.

Слежу с осени за стартапом Osmo, они работают над телепортацией запахов.

В общем скоро ароматы можно будет передавать на расстоянии, как любой другой медиаконтент.

Как это работает?

Анализ аромата: Запах, например, срезанного кокоса или спелой сливы, анализируется с помощью газовой хроматографии-масс-спектрометрии (GCMS).

– Цифровизация: Полученные данные преобразуются в цифровой отпечаток запаха и размещаются на "Главной карте запахов" — ИИ-инструменте, предсказывающем, как пахнет комбинация молекул.

– Воспроизведение: Формула передаётся в формуляционный робот, который воссоздаёт аромат с высокой точностью.​

– Весь процесс автоматизирован и не требует вмешательства человека, за исключением начального и конечного этапов. ​

Посмотрим что получится – реальный продукт или просто пока так "бреют" инвесторов😄