Прибыль:
- Понимание инструментов маскировки (ротоскопирования), поддерживаемых искусственным интеллектом, удаления объектов, масштабирования и удаления шума.
- Возможность готовить и редактировать черновики цветокоррекции и очистки звука с поддержкой искусственного интеллекта.
- Способность понимать, что автоматическое улучшение может сфабриковать детали (артефакты) и этический предел искажения реальности в документальном/новостном контенте.
Когда монтаж закончен, видео готово «нарративно», но еще не доведено до «визуальной и звуковой обработки». Этот заключительный этап полировки — цвет, очистка звука, эффекты и улучшение — представляет собой слой, который превращает видео из любительского в профессиональное. Традиционно большая часть этого требует опыта и часов: ручная маскировка, чтобы стереть объект из кадра, качественная обработка звука, чтобы убрать шум интервью. Искусственный интеллект не только ускорил выполнение этих задач, но и снизил порог знаний. Но инструменты улучшения таят в себе уникальную опасность: они иногда «придумывают» несуществующие детали. В этом разделе мы рассмотрим как силу, так и предел реальности.
Условия. Маскирование/ротоскопирование – это выделение объекта путем его покадрового разделения (для замены фона необходимо удалить объект). Удаление объекта — это удаление нежелательного элемента (телефона, логотипа, человека) с изображения и заливка фона. Повышение разрешения – это повышение разрешения изображения с низким разрешением до более высокого. Denoise предназначен для уменьшения шума в изображении или шума в звуке. Цветокоррекция — это создание атмосферы путем регулировки цвета и тонального характера изображения. Артефакт — это искусственное, нежелательное искажение или сфабрикованная деталь, внесенная при доработке.
Визуальные эффекты на базе искусственного интеллекта
Работа, которая раньше занимала у редактора дни, теперь занимает минуты. Автоматическая маскировка позволяет отделить человека от фона без зеленого экрана. Удаление объекта позволяет удалить из кадра мусорную корзину, микрофон или нежелательного человека и грамотно заполнить фон. Изменение фона и отслеживание движения стали в значительной степени автоматизированными. Это настоящий скачок производительности. Но результат никогда не принимается слепо: при удалении объекта фон может оставить «призрачный» след; маскировка может мерцать на волосках и по краям; Заполненная область может быть несовместима с окружающими тканями. Каждый кадр эффекта необходимо проверять в полноэкранном режиме и в движении.
Цвет и звук: автоматический запуск, человечная полировка.
При цветокоррекции ИИ может автоматически корректировать баланс белого и выравнивать экспозицию или даже предлагать «кинематографический вид». Это хорошая отправная точка, но цвет также является инструментом выражения: холодные тона передают напряжение, теплые тона — интимность. Если оставить это творческое решение автоматически, эмоции видео сгладятся. ИИ выравнивает; Вы создаете атмосферу.
ИИ в области очистки звука сегодня очень эффективен: он может в некоторой степени уменьшить фоновый гул, шум кондиционера, эхо и даже ветер; Это может подчеркнуть разговор. Но чрезмерная очистка делает звук приглушенным и искусственным, как «под водой»; Такие звуки, как «с» и «т», могут быть искажены (артефакт). Правило: проверяйте очищение на слух и соблюдайте его в меру. Цель — не сделать звук стерильным, а сделать его естественным и понятным.
В следующей таблице суммированы инструменты исправления по назначению и риску:
транзакция
Вклад ИИ
Основной риск
контроль
удаление объекта
Автозаполнение
Призрачный след, несоответствующая текстура
Анимированный полноэкранный просмотр
масштабирование
увеличение разрешения
Фабричная деталь, искусственное лицо
Сравнение с оригиналом
Шумоподавление (изображение)
Уменьшение покалывания
Чрезвычайное смягчение, пластичная текстура
Детальный контроль потерь
очистка звука
Уменьшение гудения/эха
Приглушенный, искусственный звук, артефакт
На слух, в меру
Редактирование цвета
Автоматическая синхронизация
Безэмоциональный, плоский взгляд
Решение творческого тона находится в руках людей.
Предел реальности: когда улучшение неэтично
Это наиболее критическая концепция. Инструменты повышения разрешения и удаления шума могут улучшить детализацию, которой нет в реальности. При повышении резкости размытого лица средство масштабирования может «создать» черты лица, которых на самом деле не существует — лицо, которое похоже на этого человека, но не является им. Это может не быть проблемой для художественного или эстетического контента; Но неэтично искажать реальность в новостях, документальных фильмах, криминалистике и контенте, претендующем на реальность. «Уточнение» изображения с камеры наблюдения и считывание номерного знака на самом деле может означать считывание номерного знака, составленного моделью. Правило понятно: допускается шумоподавление и повышение резкости; Но изменение смысла содержания, произнесенного слова или конкретной детали вводит в заблуждение.
Внимание: улучшение документального и новостного контента должно ограничиваться «сделать более заметным то, что существует». «Добавление несуществующего» (детали лица, номерной знак, слова) вводит зрителя в заблуждение и разрушает профессиональную уверенность. В случае сомнений сохраните оригинал и укажите на помехи.
три мини-кейса
Случай 1 — Быстрая очистка. Документалист пострадал от ветра и дорожного шума во время интервью, снятого на открытом воздухе. Благодаря очистке звука ИИ уменьшил шум и подчеркнул речь; Он проверил результат на слух и убедился в отсутствии артефактов. Пересъемок не потребовалось, интервью сохранилось. Автомобиль убрал звук; редактор сохранял непосредственность.
Случай 2 — Фальшивый апскейлер. Команда «уточнила» изображение лица в низком разрешении из архива, увеличив его масштаб и использовав в документальном фильме. Позже выяснилось, что прояснившееся лицо имело черты, которые на самом деле не принадлежали этому человеку, а были придуманы моделью. Достоверность документального фильма подверглась сомнению. Урок: результат масштабирования нельзя считать реальным на лице/детали, которая претендует на реальность.
Случай 3 — Чрезмерная очистка. Редактор очень тщательно очистил звук подкаста, чтобы сделать его «идеальным». Результат получился приглушенным, подводным и искусственным; Слушатели сказали, что звук беспокоил. Правильный способ — соблюдать дозировку очищения и несколько раз сравнивать ее на слух.
Слабая подсказка / Сильная подсказка
Инструменты аудио/видео в основном управляются кнопками, но вы также можете использовать текстового помощника для создания плана рабочего процесса.
Слабое желание:
Исправьте и оптимизируйте аудио и видео.
«Лучший» не определен; Какая процедура, какая доза, какой контроль – неясно.
Сильное желание:
Ваша роль: консультант по пост-продакшену. Материал: интервью, снятое на открытом воздухе; Слышен завывание ветра, изображение слегка зашумлено, на заднем плане присутствует нежелательный знак. Задача: Написать пошаговый план улучшений. На каждом этапе: назначение, предупреждение о дозировке и метод КОНТРОЛЯ. Ограничение: Это ДОКУМЕНТАЛЬНЫЙ ФИЛЬМ; Не предлагайте вмешательств, которые изменят реальность, предлагайте только операции, которые сделают существующее видимым/слышимым.
Распространенные ошибки
- Не наблюдая за кадром эффекта в движении. Призрачный след и мерцание видны только при воспроизведении.
- Чрезмерная шумоизоляция. При превышении дозы голос становится хриплым и искусственным; возникает артефакт.
- Ошибочный результат масштабирования за реальный. Подходит для лица/деталей модели; Его нельзя использовать для утверждения реальности.
- Оставьте цвет автоматическим. Цвет — средство выражения; Эмоциональное решение принадлежит человеку.
- Изменение реальности в документальном фильме. Добавление того, чего не существует, вводит в заблуждение и является профессиональным нарушением.
Совет: при улучшении всегда сохраняйте оригинал и сравнивайте «до/после». Небольшое улучшение зачастую более естественно и безопасно, чем серьезное вмешательство.
В итоге
В области визуальных эффектов, улучшения цвета и звука ИИ снижает порог знаний, сокращая часы работы до минут: автоматическое маскирование, удаление объектов, очистка звука и выравнивание цвета теперь доступны каждому. Но всегда действуют два ограничения. Первый — технический: любое вмешательство может привести к появлению артефактов (призрачный след, приглушенный звук, вымышленные детали), поэтому его нужно делать в меру и сравнивать с оригиналом. Второй — этический: снижение шума и разъяснение разрешены, но изменение реальности — особенно в новостях и документальных фильмах — вводит в заблуждение. ИИ полирует изображение и звук; вы сохраняете реализм и творческий тон.
Задача приложения
Выберите шумную аудиозапись и слегка искаженное изображение (возможно, ваше собственное видео). Примените очистку звука в двух разных дозах и сравните на слух; Обратите внимание, при какой дозе искажается естественность. Попробуйте удалить или увеличить масштаб объекта на изображении и сравнить результат с оригиналом, чтобы найти как минимум два признака артефакта/фабрикации. Если бы этот отрывок пришлось использовать в документальном фильме, запишите причины, по которым вы бы не вмешались.
контрольный список
- [ ] Проверил ли я каждый обработанный/очищенный выходной сигнал в движении/воспроизведении и сравнил ли его с оригиналом?
- [ ] Поддерживал ли я очистку звука в дозе, не вызывающей артефактов?
- [ ] Проверил ли я результаты масштабирования/оптимизации на наличие ложных деталей?
- [ ] Принял ли я цветовое решение сознательно, как творческий выбор?
- [ ] Соблюдал ли я ограничения, которые не будут искажать реальность содержания, которое претендует на звание реального?