html текст
All interests
  • All interests
  • Design
  • Food
  • Gadgets
  • Humor
  • News
  • Photo
  • Travel
  • Video
Click to see the next recommended page
Like it
Don't like
Add to Favorites

Футбол оцифровали и перенесли в дополненную реальность без мяча

Konstantinos Rematas / YouTube

Американские исследователи представили прототип системы, способной создавать динамическую трехмерную модель из записи реального футбольного матча и отображать эту модель в очках дополненной реальности. Правда, система пока отображает только игроков и не показывает мяч. Алгоритм был натренирован на записях из игры FIFA, а его работа проверена на роликах с YouTube, рассказывают авторы в статье, которая будет представлена на конференции CVPR 2018.

Для развивающейся технологии дополненной реальности предлагают множество применений. Например, с ее помощью можно создавать полностью виртуальные объекты, размещенные в реальном мире, а можно отображать модель реального человека и проводить с ним реалистичную видеоконференцию. Кроме того, подобным образом предлагается транслировать события, в том числе и спортивные мероприятия. Одна из главных проблем, стоящих перед этой технологией, заключается в сложности создания объемной модели множества двигающихся объектов, но некоторые разработки в этой области уже есть. К примеру, у Intel есть система, позволяющая в реальном времени создавать модель всех объектов на спортивном мероприятии, но она использует несколько десятков дорогих камер с разрешением 5K, которые необходимо предварительно расставить по стадиону.

Исследователи под руководством Стива Зайца (Steve Seitz) из Вашингтонского университета и Google разработали свою систему, преобразующую записи реальных футбольных матчей в модель, которую можно отображать на столе или другой поверхности через очки дополненной реальности. В основе системы лежит алгоритм, способный создавать карту глубины из одного кадра. Исследователи самостоятельно собрали датасет для обучения алгоритма с помощью футбольного симулятора FIFA. Они перехватывали обращение движка игры к видеокарте и за счет этого получали кадры игры с данными о цвете и глубине, а затем разделяли их на изображения отдельных игроков. В результате авторы получили 12 тысяч пар типа изображение-глубина для тренировки алгоритма.


Разработчики выбрали сверточную нейросеть в качестве алгоритма для создания динамической объемной модели из двумерной видеозаписи футбольного матча. Для каждого кадра алгоритм сначала вычисляет направление камеры, снимающей матч, затем выделяет игроков, создает простую модель их скелета и определяет направление их движения. После этого нейросеть создает для каждого игрока карту глубины, которую затем можно использовать для рендеринга. Разработчики продемонстрировали это на примере приложения для шлема дополненной реальности Microsoft Hololens, который отображает модель футбольного поля с игроками на столе или другой ровной поверхности.

Создание объемной модели из видеозаписи матча

Konstantinos Rematas et al. / CVPR 2018

Один из главных недостатков алгоритма заключается в том, что пока он работает только с изображениями игроков, но не отслеживает мяч. Кроме того, пока он довольно требователен к ресурсам — на обработку одного кадра с разрешением 4K у исследователей уходило 15 секунд.

Несмотря на то, что обычно дополненная реальность применяется для развлечений, как в случае с новой работой или AR-версией Super Mario Bros., у нее есть и гораздо более серьезное применение. К примеру, существует несколько разработок, позволяющих врачам видеть 3D-модель органов своих пациентов при планировании операции или прямо во время нее.

Григорий Копиев

Читать дальше
Twitter
Одноклассники
Мой Мир

материал с nplus1.ru

2

      Add

      You can create thematic collections and keep, for instance, all recipes in one place so you will never lose them.

      No images found
      Previous Next 0 / 0
      500
      • Advertisement
      • Animals
      • Architecture
      • Art
      • Auto
      • Aviation
      • Books
      • Cartoons
      • Celebrities
      • Children
      • Culture
      • Design
      • Economics
      • Education
      • Entertainment
      • Fashion
      • Fitness
      • Food
      • Gadgets
      • Games
      • Health
      • History
      • Hobby
      • Humor
      • Interior
      • Moto
      • Movies
      • Music
      • Nature
      • News
      • Photo
      • Pictures
      • Politics
      • Psychology
      • Science
      • Society
      • Sport
      • Technology
      • Travel
      • Video
      • Weapons
      • Web
      • Work
        Submit
        Valid formats are JPG, PNG, GIF.
        Not more than 5 Мb, please.
        30
        surfingbird.ru/site/
        RSS format guidelines
        500
        • Advertisement
        • Animals
        • Architecture
        • Art
        • Auto
        • Aviation
        • Books
        • Cartoons
        • Celebrities
        • Children
        • Culture
        • Design
        • Economics
        • Education
        • Entertainment
        • Fashion
        • Fitness
        • Food
        • Gadgets
        • Games
        • Health
        • History
        • Hobby
        • Humor
        • Interior
        • Moto
        • Movies
        • Music
        • Nature
        • News
        • Photo
        • Pictures
        • Politics
        • Psychology
        • Science
        • Society
        • Sport
        • Technology
        • Travel
        • Video
        • Weapons
        • Web
        • Work

          Submit

          Thank you! Wait for moderation.

          Тебе это не нравится?

          You can block the domain, tag, user or channel, and we'll stop recommend it to you. You can always unblock them in your settings.

          • nplus1.ru
          • университет
          • домен nplus1.ru

          Get a link

          Спасибо, твоя жалоба принята.

          Log on to Surfingbird

          Recover
          Sign up

          or

          Welcome to Surfingbird.com!

          You'll find thousands of interesting pages, photos, and videos inside.
          Join!

          • Personal
            recommendations

          • Stash
            interesting and useful stuff

          • Anywhere,
            anytime

          Do we already know you? Login or restore the password.

          Close

          Add to collection

             

            Facebook

            Ваш профиль на рассмотрении, обновите страницу через несколько секунд

            Facebook

            К сожалению, вы не попадаете под условия акции