Adobe MAX Sneaks 2019: AR prototyping, automatic photo relighting, image manipulation detection, more previewed

Adobe MAX Sneaks 2019: прототипирование в AR, автоматическое переосвещение фотографий, обнаружение манипуляций с изображениями и многое другое

Adobe провела свое ежегодное мероприятие Sneaks на MAX 2019, ведущим которого выступил писатель и комик Джон Малэйни. Sneaks предлагает предварительный просмотр новых функций, которые Adobe разрабатывает для своих приложений Creative Cloud, и экспериментальных технологий, которые могут появиться в производстве, а могут и нет.

На прошлогоднем Sneaks проект, который позже стал функцией Premiere Pro Auto Reframe, был одной из 10 представленных функций. В этом году Adobe представила на сцене еще 11 проектов.

Больше из Adobe MAX 2019:

All In

Используя технологию машинного обучения, субъект на фотографии может быть автоматически идентифицирован и извлечен из сцены. Проект All In берет фотографию той же сцены, где извлеченный субъект отсутствует, и бесшовно объединяет его с окружающей средой. Функция предназначена для групповых фотографий, где фотограф находится за камерой, но хотел бы быть частью снимка.

Sound Seek

Нежелательные, повторяющиеся звуки в аудиоклипе автоматически идентифицируются путем выбора одного экземпляра звука. Одним щелчком мыши все выбранные звуки удаляются. Проект Sound Seek может быть использован для удаления каждого случая, когда говорящий произносит «э-э», или даже фоновых звуков, таких как звуковой сигнал автомобиля.

Sweet Talk

Анимация лица персонажа под звуковую дорожку в настоящее время является трудоемким процессом, требующим сложной 3D-сетки. Проект Sweet Talk берет любое изображение, включая иллюстрации, фотографии и картины, и автоматически идентифицирует субъект. Мимика персонажа сопоставляется с аудио, и изображение анимируется без каких-либо дополнительных действий со стороны пользователя.

Pronto

Основываясь на технологии Adobe Aero, макеты дизайна дополненной реальности можно создавать, просто рисуя на iPad. Инструменты позволяют художникам записывать видео, вставлять AR-плейсхолдер устройства в 2D-видео и отслеживать 3D-плоскости. Графика и иллюстрации в свободной форме могут быть сопоставлены с AR-плейсхолдерами.

Image Tango

Используя всего одну референсную фотографию, Adobe Sensei может одним щелчком мыши наносить текстуры на простой эскиз, создавая совершенно новые фотографии. Image Tango также может использоваться для быстрого тестирования нескольких текстур на одном объекте. В одном из примеров стоковые изображения различных сумочек использовались в качестве референсных изображений для перетекстурирования существующей сумочки.

Fantastic Fonts

Fantastic Fonts превращает типографику в серию бесконечно настраиваемых параметров. Можно манипулировать простыми настройками, такими как толщина шрифта, но инструмент идет гораздо дальше. Используя акселерометр iPhone или iPad, шрифты можно анимировать и искажать с помощью различных эффектов движения. Инструмент позволяет настраивать живые шрифты, что ранее было возможно только путем обводки текста.

Go Figure

Отслеживание тела на основе Sensei переносит движение персонажа из видеоклипа в анимацию. Трекер тела идентифицирует руки, ноги и туловище до 18 персонажей в сцене. Создаются ключевые кадры и автоматически применяются к риггированному персонажу. Эффект похож на захват движения, но работает без дополнительного оборудования.

Light Right

Используя Photoshop, фотографию можно переосветить, чтобы изменить настроение сцены. Алгоритмы определяют геометрию фотографии и позволяют перемещать солнце. В зависимости от расположения солнца регулируются блики и тени, а также изменяется цветовая температура фотографии. Используя ту же технологию, можно переосветить даже видеофайл.

Awesome Audio

Проблемное аудио с отвлекающим фоновым шумом или приглушенным голосом корректируется с помощью технологии Adobe Sensei. Очистка сырого аудиофайла — это процесс, который обычно занимает часы в таких инструментах, как Adobe Audition. Аудиофрагменты озвучки, записанные в разных местах, могут быть проанализированы, унифицируя фоновую атмосферу между клипами.

Glowstick

Встроенный в Illustrator, проект Glowstick превращает линии и фигуры в источники света и тени на изображении. Источники света и тени определяются одним щелчком и влияют на окраску других объектов и фигур на изображении.

About Face

Проект About Face анализирует пиксели изображения, чтобы попытаться определить, было ли фото изменено в цифровом виде. Инструмент отображает вероятность того, что фотография была подделана, и показывает тепловую карту сомнительных пикселей.