html текст
All interests
  • All interests
  • Design
  • Food
  • Gadgets
  • Humor
  • News
  • Photo
  • Travel
  • Video
Click to see the next recommended page
Like it
Don't like
Add to Favorites

Новый алгоритм сообщит о подмене лиц на видео


Nießner et al. / arXiv 2018

Европейские ученые научили алгоритм выявлять подмену лиц в видеороликах. Для обучения программы исследователи создали масштабный датасет из полумиллиона изображений, которые взяты из более чем тысячи видео, созданных с использованием алгоритма face2face. Препринт с описанием работы опубликован на сайте arXiv.org.

Развитие машинного обучения позволило разработчикам решать задачи, ранее труднодоступные для компьютера: например, эффективно распознавать объекты на изображениях, улучшать качество фотографий или даже создавать видео из размытых изображений с артефактами движения. Одна из таких задач — реалистичная подмена лиц на фотографиях: на смену классическому подходу с ручной работой в фоторедакторах пришли алгоритмы, которые могут делать это автоматически. У них не всегда получается эффективно (стоит вспомнить то же нейросетевое порно); однако, есть и алгоритмы, которые делают подмену лиц на фотографиях и видео достаточно реалистичной.

Среди них — face2face, который умеет снимать с видео маску человеческого лица и переносить ее лицо в другом видео, причем достаточно реалистично. С одной стороны, развитие подобных технологий может помочь, например, для создание компьютерных игр или дубляж кинофильмов на другие языки, с другой стороны, такие технологии могут быть использованы во вред людям (подробнее об этом читайте в нашем материале «Пластмассовый мир победил»).

Именно поэтому необходима система, которая может эффективно распознавать подмену лиц на видео. Ее созданием занялись авторы новой работы под руководством Маттиаса Ниснера (Matthias Nießner) из Мюнхенского технологического университета. Использовав алгоритм face2face, ученые получили два типа изображений для своего датасета: в нем есть изображения лиц, «перенесенные» на чужие тела, а также скопированная на лица мимика других людей. По словам ученых, новый датасет, названный FaceForensics, — это самая масштабная база данных для обучения алгоритмов выявления подделок.

Далее исследователи использовали FaceForensics для тренировки собственного алгоритма распознавания подмены лиц, основанного на методах глубокого обучения, — XceptionNet. По точности распознавания новый алгоритм превосходит уже существующие в несколько раз: причем даже при оценке сжатых видео.

Эффективность работы нового алгоритма (красным) по сравнению с другими при разном сжатии изображений

Nießner et al. / arXiv 2018


Приняв во внимание то, что усовершенствование алгоритма для создания поддельных изображений приведет к тому, что улучшатся и сами поддельные изображения (так, что подделку будет распознать сложнее), ученые использовали свой датасет для создания алгоритма, улучшающего поддельные снимки. Разработчикам удалось улучшить «наложение» маски (в особенности — в области подбородка и носа): независимые оценщики на 8 процентов реже называли полученные изображения поддельными в сравнении с изображениями face2face.

Nießner et al. / arXiv 2018


Наконец, ученые проверили работу XceptionNet на улучшенных поддельных изображениях: алгоритм показывал до 99 процентов точности распознавания при использовании несжатых изображений разрешением 128×128 пикселей. По мнению ученых, их работа поможет разработчикам в будущем: датасет находится в свободном доступе на сайте команды.

В прошлом году разработчики создали алгоритм, который может переносить живую речь из одного видео в другое, достаточно реалистично воссоздавая артикуляционную мимику говорящего. Алгоритм, работающий на основе рекуррентных нейросетей, был обучен на 17 часах видеозаписи речей 44-го Президента США Барака Обамы.

Елизавета Ивтушок

Читать дальше
Twitter
Одноклассники
Мой Мир

материал с nplus1.ru

1

      Add

      You can create thematic collections and keep, for instance, all recipes in one place so you will never lose them.

      No images found
      Previous Next 0 / 0
      500
      • Advertisement
      • Animals
      • Architecture
      • Art
      • Auto
      • Aviation
      • Books
      • Cartoons
      • Celebrities
      • Children
      • Culture
      • Design
      • Economics
      • Education
      • Entertainment
      • Fashion
      • Fitness
      • Food
      • Gadgets
      • Games
      • Health
      • History
      • Hobby
      • Humor
      • Interior
      • Moto
      • Movies
      • Music
      • Nature
      • News
      • Photo
      • Pictures
      • Politics
      • Psychology
      • Science
      • Society
      • Sport
      • Technology
      • Travel
      • Video
      • Weapons
      • Web
      • Work
        Submit
        Valid formats are JPG, PNG, GIF.
        Not more than 5 Мb, please.
        30
        surfingbird.ru/site/
        RSS format guidelines
        500
        • Advertisement
        • Animals
        • Architecture
        • Art
        • Auto
        • Aviation
        • Books
        • Cartoons
        • Celebrities
        • Children
        • Culture
        • Design
        • Economics
        • Education
        • Entertainment
        • Fashion
        • Fitness
        • Food
        • Gadgets
        • Games
        • Health
        • History
        • Hobby
        • Humor
        • Interior
        • Moto
        • Movies
        • Music
        • Nature
        • News
        • Photo
        • Pictures
        • Politics
        • Psychology
        • Science
        • Society
        • Sport
        • Technology
        • Travel
        • Video
        • Weapons
        • Web
        • Work

          Submit

          Thank you! Wait for moderation.

          Тебе это не нравится?

          You can block the domain, tag, user or channel, and we'll stop recommend it to you. You can always unblock them in your settings.

          • nplus1.ru
          • ученые
          • университет
          • домен nplus1.ru

          Get a link

          Спасибо, твоя жалоба принята.

          Log on to Surfingbird

          Recover
          Sign up

          or

          Welcome to Surfingbird.com!

          You'll find thousands of interesting pages, photos, and videos inside.
          Join!

          • Personal
            recommendations

          • Stash
            interesting and useful stuff

          • Anywhere,
            anytime

          Do we already know you? Login or restore the password.

          Close

          Add to collection

             

            Facebook

            Ваш профиль на рассмотрении, обновите страницу через несколько секунд

            Facebook

            К сожалению, вы не попадаете под условия акции