Иммерсивный цифровой туризм
Трусов Дмитрий Александрович

Трусов Дмитрий Александрович

Автор и идеолог проекта Tourverse / Сооснователь 5sensAR

Тема выступления:

Исторические реконструкции и цифровые двойники

Контакты для связи:

Транскрибация выступления спикера

Аннотация

Доклад — продолжение темы Олега Кардаша о 3D-моделировании археологических объектов. Основная проблематика: модели создаются, но нет единой базы данных текстур и материалов (например, для дерева сибирских острогов), что делает модели однотипными. Отсутствует и единая база 3D-копий артефактов, хотя в Китае она уже есть и позволяет по фрагменту восстанавливать полноценную 3D-модель типового объекта. Примеры проектов: виртуальная прогулка по Берёзовскому острогу (VR), дополненная реальность с штурмом Псковского Кремля войсками Стефана Батория (радиус 200 м, требует сканирования местности), 3D-реконструкция Троицкого собора в Сургуте (доступна через мобильное приложение по QR-коду), оживление мамонтов и динозавров в краеведческом музее. Платформа Turverse решает задачи управления контентом и устройствами, создания единой базы цифровых двойников, использования ИИ для аналитики, синтеза речи, восстановления находок. Цели: просветительская, коммерческая (монетизация показов), социальная (сохранение наследия, единство пространства), инновационная (цифровизация туризма).

Ведущий (Дмитрий Трусов):

Мой доклад является продолжением тематики, которую начал Олег Викторович Кардаш. Он затронул тему исторических реконструкций на примере острогов и Каюкова. Я чуть-чуть расширю эту тему, добавив другие примеры, в том числе сделанные вместе с коллегами.

Наблюдение с конгресса Цитадель 1.0

Мы недавно посетили конгресс Цитадель1.0. Для меня стало статистическим открытием, что практически все, кто занимается археологией и раскопками, пришли в 3D-моделирование. Все делают 3D-модели того, что находят. Современные технологии это позволяют.

Но дальше начинается проблематика, которую я хотел бы осветить.

Проблема единой базы данных

Помимо того, что мы можем рисовать, современные программы и искусственный интеллект позволяют воссоздавать объекты по их фрагменту при наличии базы данных. Пока такой базы данных у нас, в России, я не встречал. Отдельные есть, но единой нет. Мы сейчас, имея свой проект, пытаемся над этим поработать.

У коллег из Китая такая база есть. Археологи находят обломок, допустим, базы колонны. Понятно, что примерно база имела такую-то форму. И с помощью ИИ они восстанавливают полноценную 3D-модель этого фрагмента. Накопление данных по объектам, их формам и описаниям создаёт почву для подключения ИИ и построения гипотез на основе объёма данных.

Очень много вещей, которые находят, археологи даже не могут сразу сказать, что это, зачем использовалось. Начинается работа, во многом связанная с догадками. Здесь при накоплении знаний ИИ может помочь. Мне хочется верить, что это даст новый виток развития науки, технологий, научпопа и туризма.

Наш подход

Сначала проводятся раскопки (до раскопок анализируются документы), затем анализируются найденные артефакты. Если мы говорим про остроги (я сейчас рассматриваю на примере Берёзовского острога), то после этого создаются художниками эскизы, а затем модельерами — трёхмерные модели. После создания прототипа начинается проработка текстур материалов для достижения максимальной реалистичности.

Сложность: наличие базы данных материалов и текстур. Все популярные 3Dпрограммы имеют базовый набор текстур, но текстура определённого типа дерева, которое использовалось для постройки острогов, просто не существует. Её надо разрабатывать с нуля. Это большая проблема. Смотришь на мероприятиях — все показывают 3D-модели, они идентичные. Спрашивают: «Вы друг у друга не копировали?» Нет, просто источник текстур и элементов для моделирования один. Мы ставим задачу создания такой базы данных материалов и текстур.

Что делать с моделью дальше?

Создав модель, хочется внутри неё побывать, посмотреть быт. На примере Берёзовского острога (вывоз в Салехард) мы уже сделали возможность просто гулять внутри острога, очутиться внутри, посмотреть вокруг. А дальше на это наращиваются сценарии виртуальной и дополненной реальности. Можно увидеть людей, их быт — по сути, оказаться в полноценном музее и «потрогать» его. Дополненная реальность позволяет насытить жизнь внутри объекта и показать жизнь и быт того века.

Пример: Псковский Кремль (штурм Стефана Батория)

С чего мы начинали 4 года назад — это Псковский Кремль, битва Стефана Батория. На основе реальных стен Кремля мы сделали репродукцию, дополнили 3Dобъектами и показали, как мог выглядеть штурм крепости войсками Батория. Для чего? Чтобы человек ощутил себя внутри событий. Мы провели очень много показов штурмовых действий в Пскове и других местах. Отзывы феноменальные. Эмоции людей, когда на них бежит человек с мечом или тараном, дорогого стоят.

Это сложный проект дополненной реальности: радиус 200 метров, всё требует сканирования местности. VR — проще, но AR мы освоили и понимаем, как делать. Долго, но очень живо и интересно.

Пример: Троицкий собор в Сургуте

Другой проект — реконструкция Троицкого собора в Сургуте (при поддержке местной епархии и городских властей). Проблема в том, что на месте собора сейчас жилая застройка, памятник войнам и часовня. Вживую собор не восстановить. Но мы нашли аналогичные здания в другом регионе, полностью создали 3D-модель, насытили жизнью (часовня, колокольный звон). И сделали доступным не только для очков, но и через мобильное приложение. Любой житель может подойти к часовне, увидеть QR-код, скачать и запустить собор у себя на телефоне.

Пример: ожившие мамонты

В краеведческом музее мы делали проект по оживлению мамонтов и динозавров. Смотришь на кости — и они оживают, превращаются в мамонта, мамонтёнок проходит мимо. Очень завораживающее зрелище.

Платформа Tourverse

Всё, что мы делаем, мы делаем с помощью платформы Tourverse.

Наши цели:

  • Просветительская— сделать историю и культуру доступными на языке современных технологий современным людям.
  • Коммерческая— рынок растёт, развивается, популяризируется во всём мире. Мы хотим обеспечить возможность коммерциализации для всех участников рынка через платформу. Каждый показ экскурсии в очках — это один проданный билет. Каналы распространения могут быть не только в зданиях музеев, но и по всей стране: школы, VR-клубы, другие музеи, сборные экспозиции. Возможна и экстерриториальная работа (уже спрашивают коллеги из Китая).
  • Социальная— сохранение культурного наследия и объединение единого пространства большой страны.
  • Инновационная — цифровизация в туризме пока не так активно кричат, как в других отраслях, но эта цель так же важна.

Что позволяет платформа

  • Управление контентом и устройствами — чтобы гид со своего планшета или ноутбука мог одновременно всем экскурсантам запустить нужные сценарии (видео, в ближайшее время — аудио) на их устройствах.
  • Управление цифровыми двойниками — создание единой базы цифровых копий экспонатов и артефактов для последующего переиспользования: геймификация, обмен экспозициями, печать сувенирной продукции, создание реплик для людей с особенностями (слепых и слабовидящих, познающих мир через тактильность).
  • Искусственный интеллект — построение моделей, анимация сценариев, синтез речи, восстановление находок по фрагментам, аналитика поведения посетителей (что интересно, что нет).

Где используется

  • Виртуальные экскурсии
  • Цифровые копии экспонатов
  • Виртуальные выставки и экспозиции (в том числе сборные)
  • Виртуальные туры по зданию музея
  • Виртуальные онлайн-мероприятия (активно используются в школах)
  • Образовательные программы — например, для обучения студентов: взять виртуальный объект, посмотреть, ответить, к какому веку относится, не трогая при этом сам предмет (он может быть единичным).

Мой доклад закончен