Исследователи в области искусственного интеллекта научили алгоритм переносить информацию с одного изображения на другое. Сложность процесса в том, что для него необходимо большое количество исходных данных. Об этом говорится в статье на сайте arXiv.org.
Сотрудники Университета Карнеги — Меллона, к примеру, перенесли речь телеведущего Джона Оливера на видеоклип с ведущим вечернего шоу Стивеном Колбертом. Сделать то же самое на основе 16, восьми или даже одного кадра до этого момента никому не удавалось.
Для работы были отобраны три нейросети — Embedder, Generator и Discriminator, — которые прошли метаобучение. То есть алгоритм обучен на основе массива кадров с лицами людей. На каждое лицо накладывается маска, учитывающая границы лица и мимику. Первая нейросеть хранит информацию в виде векторов. Вторая через набор сверточных слоев использует маску, чтобы наложить ее на изображение человека. Третья выступает в качестве рецензента, который оценивает реалистичность получившегося результата.
Эта система позволила разработчикам переносить информацию между двумя объектами, используя лишь один или два кадра. При этом чем больше кадров доступно алгоритму, тем более правдоподобным получается результат. Возможности системы авторы продемонстрировали на фотографиях Мэрилин Монро и Альберта Эйнштейна. Однако она работает не только на портретах знаменитостей, но и на картинах, написанных художниками.
Так, разработчики из Samsung с удовольствием оживили лицо легендарной Джоконды кисти Леонардо да Винчи.
Команда Samsung AI Center создала приложение, которое позволяет «расшевелить» любые фотографии, которые загрузит пользователь, а эксперимент поставили на изображении Моны Лизы.
По словам разработчиков, программа станет полезна и для общения, и для монтажа спецэффектов.
Видео с говорящей Джокондой, которая даже выражает эмоции, уже на Youtube.
Как ранее сообщали «ФАКТЫ», ученые гонконгского Научно-технического университета (The Hong Kong University of Science and Technology) разработали уникальную программу для качественной диагностики распространенных детских болезней. Тестирование программы проводилось в китайском городе Гуанчжоу. Похоже, что искусственный интеллект максимально приблизился к тому, чтобы стать лучшим помощником и ассистентом медицинских специалистов.