Отроки в метавселенной: главные технические новинки представили на «Ночи инноваций» в Москве

Представьте, что у сайта или видеоигры может быть собственный запах, а у каждого города – своя мелодия. Предмет, существующий только в виртуальной реальности, можно ощутить кожей. На важное совещание вместо вас может отправиться цифровой двойник. Эти и другие возможности, которые еще пару лет назад казались безумной фантазией, сегодня открывают для нас технологии. Зрение, слух, обоняние и осязание начинают работать на качественно новом уровне благодаря инновационным изобретениям современных ученых. Этим изобретениям и их роли в бизнесе, образовании, урбанистике, искусстве и медиа была посвящена «Ночь инноваций», прошедшая в «Цифровом деловом пространстве» на Покровке. В качестве спикеров выступили руководители крупнейших технологических компаний, IT-специалисты, деятели киноиндустрии, представители СМИ и многие другие. Одним из хедлайнеров фестиваля стал режиссер театра и кино Константин Богомолов. Корреспондент MIR24.TV погрузилась в мир высоких технологий и узнала, как скоро они смогут заменить людей (спойлер: это происходит прямо сейчас, пока вы читаете этот текст).

Реальная виртуальность: как прикоснуться к тому, чего нет?

Погружение в мир инноваций началось еще у входа в здание ЦДП, где проходил фестиваль. На фасадах здания разместились красочные AR-скульптуры, спрятанные за QR-кодами. AR – сокращение от английского augmented reality, что дословно означает «дополненная реальность». Фантастические инопланетные создания, созданные диджитал-художниками, в буквальном смысле вторгаются в наш мир через камеру смартфона. Взаимодействие с виртуальными объектами в реальном времени, здесь и сейчас, дарит ощущение чего-то магического, возвращает в детство, где главным способом познания мира была игра.

Гигантские экраны на здании ЦДП украсили работы финалистов конкурса «Цифровое искусство. Москва. Тренды», организованного столичным Агентством инноваций и Культурным центром ЗИЛ. Возможность представить зрителям свои шедевры получили лучшие цифровые художники России. Как отметила основатель первой российской мета-институции SAS Metagallery Стелла Лабужская, данный проект предоставил диджитал-артистам возможность «не только продемонстрировать свои навыки и идеи, но и получить признание в цифровом сообществе». «Уникальная способность digital-авторов видеть мир исключительно через цифровые призмы формирует для зрителей новое измерение нашей реальности. Вместе мы можем развивать инновационный подход к современному искусству, вдохновлять других, показывать, насколько цифровой арт важен для нашего мира», – сказала она.

«Ночь инноваций» всецело оправдала свое название: мероприятие стартовало в шесть часов вечера и длилось до полуночи. Обширная программа включала в себя лекции, круглые столы, выступления музыкантов, кинопоказ и даже иммерсивный спектакль. Но сразу при входе на второй этаж, где располагался главный лекторий, внимание гостей привлекла обширная мультимедийная выставка. Здесь были представлены новейшие технические разработки российских ученых. Все экспонаты – интерактивные, с каждым можно (и нужно!) активно взаимодействовать. К каждому стенду в считанные секунды выстроилась длинная очередь.

Представители компании RuFilms Innovations предлагали протестировать миобраслеты – специальные устройства, считывающие движения рук и позволяющие взаимодействовать с виртуальными объектами без использования мыши и джойстика.

«Они реагируют на наклоны кистей рук, – объяснил представители компании. – На самом деле они создавались не для игровых целей, они уже потом подключились к игре. Для начала они создавались для управления обычной компьютерной мышью, а потом все это перешло на дроны». С помощью браслетов можно поуправлять как виртуальным дроном, так и самым настоящим – попрактиковаться в пилотировании летательного аппарата можно было прямо в соседней комнате.

По соседству расположился еще один любопытный стенд, где свою разработку представили братья Литмановичи. Еще в студенчестве они начали плотно заниматься цифровыми дисплеями: пытались усовершенствовать защиту сенсорных экранов платежных терминалов, игровых автоматов и т.д. В итоге инженерам удалось создать собственную технологию, которая не имеет аналогов в мире. Свое изобретение они назвали Surfancy – удачное переплетение слов surface (поверхность) и fancy (фантастический, причудливый). С этим устройством никакие гигантские экраны вам не нужны – достаточно лишь представить место, где вы хотели бы разместить изображение.

По сути, Surfancy – это две плоские планки длиной 1 метр каждая, которые подключаются к компьютеру и создают сенсорную область. В отличие от обычного проектора, они позволяют взаимодействовать с объектами, находящимися внутри поля. Специальный микрокомпьютер способен распознать каждое движение ваших пальцев. Как это происходит – объяснил один из авторов изобретения Дмитрий Литманович:

«В этом оборудовании используется запатентованная технология, которая называется «теневая локация». Это наша собственная разработка, оборудование нашего же производства. Излучатели «видят» тень от объекта, они работают в инфракрасном режиме. Панели можно прикрепить на любую плоскую поверхность: стены, пол, стекло и т.д. Расстояние между ними мы гарантируем до шести метров, но максимально запускали и на двенадцать. Самый большой проект, который у нас был – мы объединили 21 комплект сенсоров».

Эта технология открывает массу возможностей для бизнеса и образования. Так, в школах и вузах Surfancy можно использовать вместо интерактивной доски, а в магазине создать с ее помощью виртуальную витрину или интерактивную торговую полку. Только представьте: вы можете взять предмет в руки, рассмотреть его со всех сторон и даже примерить – при этом в реальности, здесь и сейчас, его не существует! При этом больших расходов такая технология не потребует и точно обойдется дешевле, чем интерактивная доска или большой плазменный монитор.

«Наши основные пользователи – это IT-интеграторы, застройщики, выставки, музеи. Нашу систему активно используют в образовании как альтернативу интерактивным стендам. Также у нас есть несколько ключевых клиентов, которые покупают это оборудование и используют его в сфере реабилитации. Это реабилитационные медицинские комплексы, которые включают в себя различные игры, упражнения на развитие и контроль моторики. По соотношению «размер – цена» это самый лучший вариант», – уверяет Дмитрий Литманович.

Аромамаркетинг: как пахнут сайты и видеоигры?

Один из самых необычных стендов на фестивале, бесспорно, был у компании SensoryLab. Она исследует возможности современных технологий в очень интересной и необычной сфере – одоризации. Со слухом и зрением все более-менее понятно – мы можем привести массу примеров того, как 5D-анимация, виртуальная и дополненная реальность влияют на наши основные органы чувств. Но, оказывается, не стоит списывать со счетов и обоняние.

В SensoryLab убеждены: свой уникальный запах может быть у всего – сайта, фильма, видеоигры, любого продукта в интернете. А создать индивидуальный аромат можно, не вставая из-за компьютера. Для этого нужен специальный ольфакторный монитор (прибор, распыляющий различные одоранты) и микшер ароматов. Последний напоминает диджейский микшерный пульт: каждый фейдер отвечает за свой аромат.

«С помощью ручки вы выбираете уровень, нажимаете на кнопку, удерживаете ее – и аромат будет распыляться. Вы можете попробовать их в отдельности или смешать, аккуратно подавая в разных пропорциях», – объясняет один из создателей проекта Антон Васильев.

Идея придать цифровым продуктам запахи пришла не сразу. «Наш SEO учился на психолога, и они [с командой] сделали куб для сенсорной депривации, – рассказывает Антон. – Это куб, в котором нет звуков, запахов – ничего. Стали подавать туда различные раздражители – картинки, звуки. И подумали, что надо также подавать запахи. И мозговым штурмом разработали вот это устройство. Оно было сначала частью системы, а потом стало жить отдельно. Мы уже стали применять его в медиа, в парфюмерии и так далее».

Взять за основу нотки яблока, добавить киви, японский чай, завершить все сладким ароматом орхидеи – и фирменный парфюм готов! Код вашего уникального аромата появится в специальном боте, и, если захотите, можно приехать к ребятам в лабораторию и воссоздать его уже в реальности. Но парфюмерия – далеко не единственная и даже не главная сфера применения этого чудо-пульта.

«Мы можем это применять в медиаконтенте, например, в фильмах, играх. Мой самый любимый кейс – это Minecraft. Ты буквально ломаешь блок – получаешь аромат из этого блока. Кстати, одно из применений данной разработки – повышение уровня чувствительности. С ее помощью можно тренировать обоняние», – отмечает Антон Васильев. Таким образом, изобретение может стать незаменимым помощником для людей, утративших обоняние после ковида.

Но одно из ключевых направлений работы SensoryLab – это аромамаркетинг и создание ароматов для брендов. «У продукта, помимо изображения, джингла и так далее, может быть еще и аромат. Например, у отеля: мы можем сопровождать потребителя ароматом от трансфера из аэропорта в комнату ожидания и в сам отель», – объясняет генеральный директор SensoryLab Никита Букреев.

Попасть в метавселенную и создать цифрового близнеца: на что способна волюметрик-съемка?

Хотелось в подробностях рассмотреть каждый экспонат на выставке, но гостей торопили в большой зал – там открылся не менее интересный лекторий. Презентация SensoryLab, похоже, заинтересовала многих предпринимателей. Как и выступление руководителя Sber AR/VR Lab Максима Козлова, который подробно рассказал о последних возможностях в сфере дополненной реальности.

Максим представил собравшимся единственную в России волюметрик-студию, благодаря которой можно поместить реального человека в виртуальное медиапространство. Так, этим летом на банкноту номиналом 100 рублей, где изображен Большой театр, поместили виртуальную танцовщицу. Артистка балета исполнила танец в студии, оборудованной 56 камерами машинного зрения. С помощью специального программного обеспечения было получено трехмерное изображение балерины в движении, что позволило запечатлеть в динамике мельчайшие детали ее танца и даже мимику.

Технологии волюметрик-съемки открыли новую главу в создании спецэффектов. Максим Козлов наглядно продемонстрировал это на примере ролика с футболистом, которого поместили в самые фантастические декорации.

«Обратите внимание: здесь мы можем менять что угодно – мяч, пространство вокруг него. Это возможно лишь только после того, как мы одновременно снимаем с 56 камер, – объясняет Максим. – Тем самым мы знаем всю информацию вокруг этого человека. То, что вы видите, работает на движке Unreal Engine. Но этот же волюметрик можно использовать в любых других профессиональных редакторах и в кино. Эта технология позволяет делать совершенно уникальные новые вещи: разные виртуальные фоны, спецэффекты и так далее. Для режиссеров это открывает гигантское количество креативных идей».

Кроме того, теперь буквально за пару кликов можно создать собственную цифровую копию. Такие аватары уже давно применяются в различных цифровых сервисах во все мире.

«Мы можем создавать так называемый digital twin (в пер. с англ. «цифровой близнец» – прим. ред.) актера и использовать его не только в видеороликах, но и в дополненной реальности. Для этого не нужен какой-то супермощный девайс, – объясняет руководитель Sber AR/VR Lab. – Вся анимация, которую вы здесь видите – это не ручная анимация. Это как раз пример, когда вы можете скачивать специальный плагин, подключать чат-бота и с ним говорить. Чат-бот может иметь любое изображение – это зависит только от вас. Фишка в том, что это делается в реальном времени, вам не нужно ничего анимировать вручную. Тем самым эта технология позволяет сэкономить очень много времени».

Также компания активно развивает такое направление, как metaverse. Ведь если любой объект можно превратить в цифровую информацию, значит, можно создавать целые цифровые вселенные! Часто таким образом проводят виртуальные концерты известных исполнителей, встречи с цифровыми инфлюенсерами и т.д.

Нейросети против музыкантов и переводчиков: кто круче?

Рассказ Максима заинтересовал в первую очередь режиссеров, продюсеров и прочих создателей видеоконтента.Тогда как презентация Василия Филатова – основателя агентства аудиобрендинга SoundDesigner.PRO и Института звукового дизайна – была интересна прежде всего людям, работающим со звуком. Правда, Василий не столько погрузил слушателей в процесс создания звуковых эффектов (хотя и о них было много сказано), сколько вместе с ними порассуждал о роли нейросетей в этом процессе.

С одной стороны, искусственный интеллект в этой сфере уже во многом потеснил человека. Посудите сами: нейросети научились (худо-бедно) сочинять музыку (AudioLDM, Audiocraft, Musicfy, StabiliyAI), писать тексты (YaGPT, ChatGPT) и даже озвучивать их. Не умеете петь и играть на инструментах? Это тоже давно не проблема: «подчистить» все ваши вокальные огрехи, подобрать мелодию и аккорды , а также сделать качественный мастеринг, убрать щелчки и шумы (Krisp) – все это могут нейросети.

Примерно та же ситуация в индустрии видеоигр и озвучивании мобильных приложений и сайтов. Семимильными шагами идет развитие интерактивных звуковых движков (WWISE, FMOD, UNREAL Audio Engine), нейросеть научилась создавать не просто отдельные звуки, а генерировать целые звуковые ландшафты, экспериментировать с эффектами.

«Звучит все: гаджеты, мобильные приложения, сайты и даже транспорт. Через звуки и музыку можно достучаться до сердец разной аудитории. Звук и музыка органично объединяют разные рынки, повышая конверсию и увеличивая привлекательность бренда, сервиса, услуги, товара», – утверждает Василий.

И тут же успокаивает: в сфере саунд-дизайна мы с вами пока еще нужны. Без направления и контроля со стороны человека ни один AI пока не способен сочинить действительно сложную, оригинальную композицию. Создать вокальную дорожку тоже мало – ее необходимо обработать, а автоматический мастеринг – не всегда лучшее решение. Ну и, конечно, главное: ни одна нейросеть не сгенерирует по-настоящему талантливую идею. Проще говоря, робот пока не готов написать симфонию. Ключевое здесь: «пока»...

С Василием Филатовым спорит один из хедлайнеров «Ночи инноваций» – режиссер, сценарист Никита Аргунов. По его словам, мы стремительно движемся к тому, что нейросети отнимут работу у представителей многих креативных профессий. Ну или, по меньшей мере, вынудят их переучиваться и искать для себя новые ниши. «Выживут» только те специалисты, чей богатый опыт и тонкие настройки пока способны конкурировать с нейросетью. А вот, скажем, редакторам, корректорам, переводчикам и копирайтерам придется не сладко. По мнению Никиты, в ближайшие несколько лет эти профессии «вымрут».

«Но те, кто пишет интересно для публики, те, кто делает какие-то новые вещи, могут не беспокоиться. Они просто будут использовать эти инструменты для редактуры, для ускорения своей работы, но никакая нейросеть их не заменит, – уточняет Никита Аргунов. – Нельзя научить нейросеть писать классные, интересные тексты, потому что нет никого, кто может сказать, какой текст классный и интересный, какой сценарий хороший, а какой – плохой. Можно «скормить» нейросети миллион картинок и сказать: вот здесь котик есть, а здесь котика нет. Но нельзя «скормить» ей миллион сценариев и сказать, что этот – крутой на десять баллов, а этот – на восемь баллов. Это все очень субъективно, очень неоднозначно».

Таким образом, без работы останутся прежде всего «копипастеры», а в киноиндустрии – плохие сценаристы, чьим текстам недостает уникальности.

Прогресс неотменим, но нужны «живые мозги»: Константин Богомолов – о технологиях в кино и театре

Другой хедлайнер фестиваля – режиссер театра и кино Константин Богомолов – признал, что зависимость человечества от технологий в последнее время его пугает. Неспособность выжить без помощи интернета заставляет наш мозг деградировать, уверен он.

«Мозг – это тоже мышца: творческая, интеллектуальная, эмоциональная. И она требует тренировки. Человек, который полагается на это (технологии – прим. ред.), у него мозг медленно атрофируется. Простой пример: мы все ездим по навигатору. Я испытываю такой невероятный кайф, когда я понимаю, что могу вести машину без навигатора! Это так здорово! Ты понимаешь, что у тебя еще «живые» мозги, ты нормально ориентируешься. Сначала тебе трудно, потом тебе становится снова легко и ты возвращаешься в нормальное состояние. Как и человек, «слезший» с соцсетей с этим бесконечным маниакальным заглядыванием туда уже на автомате. Это какая-то нервная судорога», – сказал Богомолов.

При этом он признал, что прогресс технологий во всех сферах «неотменим», но призвал не позволять им «атрофировать мозг».

«В зоне творчества, как и в зоне производства любого товара, технологии просто оптимизируют и облегчают некий процесс. Они не дают нового языка – я в этом абсолютно убежден. Они не связаны с производством реального впечатления. Не впечатления аборигена, которому показали картинку космоса или каких-то фантастических гор, а впечатления интеллектуально сложного.

Технология помогает выполнить сложные творческие задачи. Развитие заключается в том, чтобы технология помогала. Не выступала заменой, не выступала каким-то субстратом творческих возможностей и энергий, а чтобы она помогала человеку работать спокойней и сосредоточенней», – пояснил режиссер.

Говоря о последних технологических решениях в кино и театре, Богомолов отметил, что в театральной жизни их, конечно, скорее не хватает.

«В театре, наверно, несколько больше не хватает оснащения оборудованием, потому что это всегда дорого. Театр – дорогая вещь, трудно окупаемая, всегда на субсидиях, на помощи государства или спонсоров. А технологии есть потрясающие, в том числе звуковые, особенно для музыкальных театров. И, конечно, не хватает просто финансовых возможностей», – признал режиссер.

Что же касается кино, то даже самые крутые спецэффекты редко могут перебить низкопробную игру актеров или откровенно плохой сценарий. Впрочем, по мнению Богомолова, «опасаться фигни» надо во всем. Режиссер привел в пример кассовый блокбастер, в котором 3D-анимация была сделана так ужасно, что никакие старания актеров не смогли его спасти.

«Сказки Роу и то круче были. Компьютерного персонажа просто «вляпали» в картинку, – пожаловался режиссер. – Когда артист плохой, почему-то это не так трагично выглядит, как когда компьютерная графика ужасная. Притом плохой артист кому-то даже нравится – на всякого найдется свой зритель. А плохая компьютерная графика не нравится никому».

Поделился Богомолов и творческими планами. Оказывается, сам режиссер, вопреки собственному скепсису, планирует прибегнуть к помощи высоких технологий в грядущем крупном проекте.

«Я очень хочу сделать мюзикл, – признался Богомолов. – У меня уже есть идея. И там стоит очень сложная задача – создать декорацию виртуальной реальности. Но еще более сложная задача заключается в том, что героиня этого мюзикла должна пройти через мощное физическое преображение. А голос-то один – его не разделишь между двумя артистами! И это та задача, которую мы с некоторыми моими друзьями обсуждаем; может быть, найдем этому решение через технологии».

«Город продакшенов»: теперь делать качественный контент в Москве может каждый

О новых возможностях для столичных режиссеров, журналистов, продюсеров и других контент-мейкеров на фестивале рассказала глава Департамента предпринимательства и инновационного развития города Москвы Кристина Кострома.

«В Москве действует очень широкая линейка мер поддержки. Мы поддерживаем проекты на всех стадиях жизненного цикла: это и идея, и образец, и опытное или серийное производство. Вне зависимости от того, что вы делаете – являетесь организацией науки, IT, промышленности. И на какой бы стадии жизненного цикла вы ни находили, я уверена, что вы найдете для себя интересные продукты. Это и различные субсидии при приобретении оборудования, и льготные кредиты, и программы по нетворкингу, и программы, которые помогают привлекать инвестиции», – рассказала Кострома.

Кроме того, с марта этого года на Рязанском проспекте ведется строительство крупнейшего в России киномедиакластера – МЕТМАШ. Это большая совместная инициатива Департамента предпринимательства и Департамента культуры Москвы. Инфраструктура будущего кластера создается на базе советского предприятия ВНИИМЕТМАШ.

«МЕТМАШ является частью большого проекта «Москва – город кино». Это системная программа мэра Москвы, направленная на поддержку и развитие креативных индустрий в целом и конкретно кино и всех тех проектов, которые создают контент.

МЕТМАШ – это площадка, которая призвана на одной территории собрать всех тех, кто хочет создавать, творить и делать проекты в Москве. Преимущественно МЕТМАШ ориентирован на три отрасли: это мода, медиа и кино. Сейчас на Рязанском проспекте идет мегастройка площадью 17 гектаров. Мы реализовываем специальное пространство, в котором будут и съемочные павильоны, и лучший в Москве медиахолл для проведения различных мероприятий, оснащенный самым лучшим технологическим оборудованием. Будут офисы для кинокомпаний, будут пространства для fashion-индустрии и так далее», – поделилась Кристина Кострома.

Многие павильоны МЕТМАШ уже начали свою работу. Они оснащены всем необходимым оборудованием для съемок, в наличии – большой выбор декораций, реквизита и костюмов.

Завершилась ночь инноваций ярким выступлением музыкантов и показом фильма «Город музыки». Это документальная картина, в которой группа российских музыкантов вместе с британским композитором Дэниелом Бакстером отправилась в необычное путешествие по Москве в попытках сплести из тысяч звуков и голосов неповторимую мелодию столицы. Также гостям удалось прогуляться по «аромаджунглям», прокатиться по виртуальному миру на велосипеде и даже поиграть в симулятор ЗАГСа.

Центральным пунктом культурной программы стала постановка иммерсивного театра Morpheus. Специально для гостей фестиваля театр представил премьеру спектакля «Иное место», участниками которого стали сами зрители. Человечество – на пороге гибели, кругом – тишина и скользящий по коже мрак. Главная роль – одна на всех: коллективный искусственный разум, заключенный в обычных бытовых приборах «умного дома». Героям предстоит принять важные и тяжелые решения, от которых зависит судьба планеты. Поневоле задумываешься: а кто будет решать судьбу Земли на самом деле? И как иронично в этом контексте звучит крылатое: «Deus ex machina».

Фото: Игорь Медведев / МТРК «Мир».