20 January 2023

Цифровые аватары, NFT, метавселенные: как развиваются технологии в медиаиндустрии

В эпоху потребления и экономики впечатлений искушенный зритель хочет видеть захватывающий, яркий, небанальный продукт. На помощь режиссерам и продюсерам приходят технологии. Они помогают добиться результата, который еще недавно было сложно представить даже в самых смелых прогнозах.

Среди наиболее перспективных технологий в медиа индустриях эксперты выделяют:

- Иммерсивные технологии (VR, AR и др.);
- Web3, в том числе NFT;
- Цифровые аватары;
- Генеративные технологии;
- Рекомендательные системы.

Для «Газпром-Медиа Холдинга» использование технологий является одним из главных направлений стратегии развития. Рассказываем, в чем состоит суть последних инноваций и как холдингу удалось интегрировать их в работу.

Иммерсивные технологии

VR и AR

Технология дополненной реальности (AR) позволяет объединить физический мир с цифровыми элементами. Звуки, тексты, анимации, видео отображаются поверх изображения реального мира. Технология виртуальной реальности (VR) погружает зрителя в цифровой мир целиком.

Обе технологии использовались в новом шоу телеканала НТВ – «Аватар». В проекте цифровые аватары артистов выступали на сцене, в то время как сами певцы находились в специальной VR-студии. Анимирование героев происходило в режиме реального времени, а благодаря эффекту совмещенной реальности (Mixed Reality/MR) аватары взаимодействовали со всеми окружающими.

«Шоу Аватар» от НТВ

Технологии также помогли съемочной группе фильма «Петр I. Последний царь и первый император» рассказать о событиях 300-летней давности, воссоздав уникальные исторические события: битву при Нарве, битву за Азов, взятие Нотебурга и другие сражения

Медиаплатформы будут внедрять новые иммерсивные форматы контента: VR-присутствие на спортивных мероприятиях, концертах и шоу. Также будет востребован художественный контент, созданный с помощью VR-технологий, в том числе – интерактивное кино, сериалы.

Эдуард Маас
руководитель Цифровой Лаборатории ГПМ ЦИ

Виртуальные студии

VR-технологии используют и в информационном вещании. Так, в 2021 году НТВ открыл VR-студию программы «Центральное телевидение», где с помощью инновационных методов визуализируются самые разнообразные объекты – самолёты, автомобили, военная техника и люди. Это стало возможно благодаря устройству, разработанному по технологии stYpe. Оно установлено на камере, которая закреплена на телескопическом кране. Сигнал о положении камеры и фокусе передается на специальный компьютер, который обрабатывает полученную информацию в программном комплексе трехмерного моделирования VR «Кэрот».

Виртуальную студию «Матч ТВ» зрители видели во время Олимпиады в Пекине. Ведущие находились в окружении виртуальных экранов, а в некоторых выпусках их напарницей была цифровая панда Бао-Бао. Специальная студия «Матч ТВ» была подготовлена и к чемпионату мира в Катаре. Ведущие рассказывали об основных событиях ЧМ на фоне пейзажей Ближнего Востока.

Полномасштабное внедрение AR/VR в медиа сейчас ограничено относительной дороговизной этих технологий: массовый потребитель ещё не может позволить себе необходимое оборудование, а производители и поставщики контента не спешат инвестировать в этот незрелый сегмент рынка. Но стоимость AR/VR пользовательских устройств продолжает снижаться, как и стоимость производства контента для них. В среднесрочной перспективе экономика этого нового рынка сойдется и мы увидим как раскрывается его потенциал. В будущем просмотр футбольного матча в VR будет выглядеть примерно так: в любой момент трансляции можно изменить точку обзора, указав пальцем на понравившееся место на соседней трибуне. Выбор интерактивного комментатора, который будет в виде аватара находиться рядом, также остается за зрителем. Во время матча зритель будет управлять набором инфографики: видеть траекторию движения игроков и мяча, визуализацию офсайда, статистику игроков. Всплывает оповещение с приглашением от коллеги продолжить просмотр матча вместе, зритель его принимает и оказывается в шумной компании аватаров своих коллег.

Иван Суслин
руководитель Центра экспериментальных технологий Цифровой Лаборатории ГПМ ЦИ

Метавселенные

Метавселенные - это цифровые миры, в которых люди через аватаров взаимодействуют друг с другом, покупают виртуальные товары в режиме реального времени. Благодаря метавселенной компании создают уникальный образ, представляющий бренд лучше традиционной рекламы.

В феврале 2022 года телеканал «Суббота!» провел презентацию сериала «Моя прекрасная Страшко» в метавселенной Roblox. В цифровом мире появился виртуальный район Москвы с кинотеатром, фуд-кортами, баннерами с акциями и промокодами партнеров мероприятия. Для каждого из гостей был создан свой цифровой аватар, а главным событием презентации стало выступление певицы Mary Gu с песней «Если в сердце живет любовь».

презентация сериала «Моя любимая Страшко» в метавселенной

Гостями мероприятия стали журналисты ведущих СМИ, которые смогли посетить мероприятие с помощью своих цифровых аватаров, а охват аудитории составил более 12 млн человек.

Метавселенные можно рассматривать как пространство, где цифровые аватары людей могут дистанционно встречаться и взаимодействовать. Постепенно в этом пространстве будет представлено все больше компаний, а затем оно станет местом встречи учителей и учеников, врачей и пациентов, профессоров и студентов, продавцов и покупателей.

Иван Суслин
руководитель Центра экспериментальных технологий Цифровой Лаборатории ГПМ ЦИ

NFT

Невзаимозаменяемый токен (NFT) – технология, позволяющая подтвердить подлинность и закрепить право владения цифровым объектом искусства, коллекционирования или другой вещи. NFT являются уникальными, невозможно найти два одинаковых токена или заменить один на другой, так как каждый из них защищен блокчейном – цифровой системой, в которой отражены все операции.

NFT - еще один способ продвижения новых проектов. В июне 2022 г. «Суббота!» провела первую в России NFT-коллаборацию между анимационным брендом и телеканалом,выпустив эксклюзивную NFT-коллекцию персонажей «Смешариков» и разыграв ее среди телезрителей.

К NFT прикоснулись и зрители шоу «Маска» на НТВ. К премьере третьего сезона телеканал представил уникальные NFT-иллюстрации с новыми масками. Получить призы зрители могли на сайте, который объединял все конкурсы в единую digital-вселенную. На каждом этапе конкурса полную коллекцию карточек собрали более 10 тысяч человек.

NFT, как способ регулирования прав собственности на виртуальные активы, может получить широкое распространение в виртуальньных мирах, например в играх. Но больше всего это технология будет востребована в децентрализованных сетях будущего – Web3. Из-за отсутствия централизованных органов правового контроля, нефальсифицируемость информации о правах собственности там выйдет на первый план и будет иметь принципиальное значение.

Эдуард Маас
руководитель Цифровой Лаборатории ГПМ ЦИ

Цифровые аватары

CGI (computer-generated)-инфлюенсеры – это виртуальные персонажи, созданные с помощью компьютерных технологий и графики. У аватаров есть собственные учетные записи, аудитории в соцсетях, даже рекламные контракты с известными брендами. У каждого из них свои отличительные характеристики, уникальная внешность и поведенческие особенности.

Такой герой появился у ТНТ в 2021 году, когда сотрудники телеканала, проанализировав аудиторию популярных площадок, создали персонажа-девушку – активного пользователя соцсетей, ведущей стримов, участницы рекламных интеграций. Так родилась виртуальный блогер Анна.

виртуальный блогер Анна

При помощи нейросети Анна может синтезировать свой голос, а технология deepfake позволяет накладывать лицо аватара на реальную фигуру модели и производить новый контент.

Виртуальные инфлюенсеры работают и на других телеканалах «Газпром-Медиа Холдинга». Например, в сентябре 2021 года панда Фрайди презентовала новый сезон «Пятницы!» – в московском фудмолле «Депо» на 3D кубе были показаны шесть роликов с проектами телеканала. Еще один виртуальный персонаж стал инфлюенсером «Субботы!» – наполовину лама, наполовину альпака Жозефина будет не только жить в эфире телеканала и в диджитал-среде, но и станет инструментом для рекламных интеграций.

У цифровых аватаров есть все возможности стать новыми звездами медиаиндустрии, они способны вывести коммуникацию с аудиторией на новый уровень. Аватар может взаимодействовать индивидуально с каждым подписчиком в видеочатах, виртуальной реальности, что делает зрителя более лояльным и включенным. Тот уровень технологий, который у нас уже есть, позволяет предположить, что в текущем году мы станем свидетелями множества подобных кейсов.

Эдуард Маас
руководитель Цифровой Лаборатории ГПМ ЦИ

Генеративные технологии

Генеративные технологии позволяют генерировать изображения и видео с помощью искусственного интеллекта (ИИ), реставрировать и колорировать старые кинокартины.

С помощью технологии deepfake актера Павла Майкова омолодили на 15 лет для роли в сериале «Контакт», который вышел на PREMIER и ТНТ. Это первое первое подобное применение технологии на российском телеэкране, которое позволило обойтись без дорогостоящей компьютерной графики и устаревшего грима. Важный аспект использования технологии face-de-aging – она не подменяет реальной актерской игры и никак не влияет на выразительность актеров в кадре.

Контент можно будет просматривать в ускоренном режиме благодаря машинному монтажу «коротких версий» фильмов с сохранением сюжета и функции «посмотреть на перемотке». Технологию deepfake смогут использовать сами пользователи – смотреть и сохранять короткий фрагмент фильма с собой в главной роли. Еще одной возможностью назову геймификацию контента: предсказание развития сюжета, квесты с участием героев, решение головоломок для продолжения просмотра и т.д.

Эдуард Маас
руководитель Цифровой Лаборатории ГПМ ЦИ

Рекомендательные системы

Рекомендательные системы с помощью машинного обучения и технологий data science умеют предугадывать контент, который с наибольшей вероятностью понравится зрителю.

Существует четыре вида рекомендательных систем. При первом типе пользователю предлагается контент аналогичный тому, что он уже посмотрел. Второй – рекомендует материалы, которые понравились другим пользователям, схожим по социально-демографическим критериям. Третий вид предлагает контент на основе анализа знаний о пользователе, полученных вне сервиса. Четвертый, гибридный тип – совмещает в себе функции всех предыдущих.

В RUTUBE на сегодняшний день действуют два типа рекомендательных систем: основанные на контенте и коллаборативные фильтрации. То есть национальный видеохостинг учитывает, какие видео и каких авторов пользователь смотрел, на какие каналы подписан. На RUTUBE преобладает user generated content, то есть контент, созданный самими пользователями. Это влияет на выстраивание рекомендательных процессов. Когда выходит фильм, его жанр, режиссер, актеры известны заранее. С UGC всё иначе – автор по умолчанию не предоставляет специальных данных. Чтобы рекомендательная система корректно работала при таких условиях, национальный видеохостинг прибегает к помощи искусственного интеллекта, который определяет жанр материалов, и кому они будут интересны. RUTUBE постоянно совершенствует технические процессы. Уже сейчас редакция формирует видео, предлагаемые к просмотру, с помощью автоматизированной рекомендательной системы. В наших планах минимизация объема человеческого вмешательства.

Алексей Чиков
директор по развитию бизнеса RUTUBE

Повышение качества рекомендаций в онлайн-кинотеатрах затруднено ограниченностью каталогов фильмов каждого отдельного кинотеатра, а также низкой динамикой накопления данных для анализа и прогнозирования пользовательских интересов. Например, пока вы смотрите один фильм в кинотеатре, ваш ребенок успевает просмотреть 400 тиктоков и отреагировать на них.

Иван Суслин
руководитель Центра экспериментальных технологий Цифровой Лаборатории ГПМ ЦИ

НТВ, 1-2-3 Production, «Матч ТВ», «Суббота!», «Пятница!», ТНТ, RUTUBE и ГПМ ЦИ входят в «Газпром-Медиа Холдинг».

Теги

НТВ, 1-2-3 Production, Матч ТВ, Суббота!, Пятница!, ТНТ, RUTUBE