Константин Хаджиев
Звукорежиссёр и специалист по машинному обучению
образование
Всероссийский Государственный Институт Кинематографии им. С.А. Герасимова
Режиссерский факультет. Кафедра звукорежиссуры. Звукорежиссёр кино.
GeekBrains
Инженер машинного обучения
Всероссийский Государственный Институт Кинематографии им. С.А. Герасимова
Режиссерский факультет. Кафедра звукорежиссуры. Звукорежиссёр кино.
GeekBrains
Инженер машинного обучения
Технология искусственных нейронных сетей и машинное обучение в звукорежиссуре
Технология искусственных нейронных сетей и машинное обучение (ML) имеют огромный потенциал в сфере звукового искусства.
Смысл применения искусственных нейронных сетей — не заменить звукорежиссёров, а расширить их возможности. Нейросети предлагают инструменты, которые позволяют уделять больше времени творческим аспектам работы, а не техническим задачам.
Данные технологии помогают звукорежиссёрам автоматизировать такие процессы, как реставрация, сведение, компрессия, спектральная обработка, мастеринг и так далее.
Одной из областей, где ML становится всё более распространённым, является обучение голосовых моделей. Здесь я хочу рассказать вам о некоторых примерах творческого использования таких голосовых моделей.
Смысл применения искусственных нейронных сетей — не заменить звукорежиссёров, а расширить их возможности. Нейросети предлагают инструменты, которые позволяют уделять больше времени творческим аспектам работы, а не техническим задачам.
Данные технологии помогают звукорежиссёрам автоматизировать такие процессы, как реставрация, сведение, компрессия, спектральная обработка, мастеринг и так далее.
Одной из областей, где ML становится всё более распространённым, является обучение голосовых моделей. Здесь я хочу рассказать вам о некоторых примерах творческого использования таких голосовых моделей.
Проекты
звукорежиссура
Маленький принц
Отрывки из повести-сказки Антуана де Сент Экзюпери «Маленький принц», музыка Петра Ильича Чайковского. Исполнитель художественной интонации – народный артист России Юрий Стоянов.
В этом видео были использованы голосовые модели Анатолия Папанова, Дмитрия Хворостовского, Иосифа Кабзона, Андрея Миронова.
В этом видео были использованы голосовые модели Анатолия Папанова, Дмитрия Хворостовского, Иосифа Кабзона, Андрея Миронова.
Остров невезения
В этом примере модель Анатолия Папанова заменила вокальное исполнения Андрея Миронова.
Шерлок Холмс и доктор Ватсон
В этом примере герои фильма «Шерлок Холмс и доктор Ватсон» обменялись голосами с помощью моделей Василия Ливанова и Виталия Соломина.
«Голос Роберта Фроста»
Как Роберт Фрост зазвучал по-русски
Для просветительского спектакля "Двое видят двух".
режиссер Андрей Савостьянов, по произведениям американского поэта Роберта Фроста.
Театр "Человек", культурный центр "Хитровка"
режиссер Андрей Савостьянов, по произведениям американского поэта Роберта Фроста.
Театр "Человек", культурный центр "Хитровка"
В проекте «Двое видят двух» стояла задача сделать поэзию Роберта Фроста эмоционально доступной для русскоязычного зрителя, но без потери авторского стиля.
Для этого была создана голосовая модель Фроста, обученная на оригинальных архивных записях его выступлений, в том числе в документальном фильме Ширли Кларк «Ссора влюблённого с миром».
Модель воспроизводит:
Для этого была создана голосовая модель Фроста, обученная на оригинальных архивных записях его выступлений, в том числе в документальном фильме Ширли Кларк «Ссора влюблённого с миром».
Модель воспроизводит:
- тембр голоса и дыхание поэта,
- поэтическую интонацию,
- естественный английский акцент — даже при чтении стихов на русском языке.
- «Берёзы»
- «Неизбранная дорога»
- «Беспокойство о реках»
- Режиссёр и чтец: Андрей Савостьянов
- Перевод: Светлана Омеличкина
- Фотография: Виктория Ли
- Обучение и работа с голосовой моделью: Константин Хаджиев
Автор и исполнитель песни "Die Ballade vom Mond" Денис Шишков
Обучение и работа с голосовой моделью Роберта Фроста (ML)-Константин Хаджиев
Отрывок из документального фильма Ширли Кларка "A Lover's Quarell with the World".
Роберт Фрост "Березы" (отрывок)
Читает Андрей Савостьянов.
Обучение и работа с голосовой моделью Роберта Фроста (ML)-Константин Хаджиев.
Отрывок из документального фильма Ширли Кларка "A Lover's Quarell with the World".
Читает Андрей Савостьянов.
Обучение и работа с голосовой моделью Роберта Фроста (ML)-Константин Хаджиев.
Отрывок из документального фильма Ширли Кларка "A Lover's Quarell with the World".
Роберт Фрост "Неизбранная дорога".
Читает Андрей Савостьянов.
Обучение и работа с голосовой моделью Роберта Фроста (ML)-Константин Хаджиев.
Отрывок из документального фильма Ширли Кларка "A Lover's Quarell with the World".
Читает Андрей Савостьянов.
Обучение и работа с голосовой моделью Роберта Фроста (ML)-Константин Хаджиев.
Отрывок из документального фильма Ширли Кларка "A Lover's Quarell with the World".
Роберт Фрост.
"Беспокойство о реках"
Читает Андрей Савостьянов.
Модель голоса Роберта Фроста (МL)- Константин Хаджиев
Фотография-Виктория Ли
"Беспокойство о реках"
Читает Андрей Савостьянов.
Модель голоса Роберта Фроста (МL)- Константин Хаджиев
Фотография-Виктория Ли
«Ссора влюбленного с миром». Отрывки из документального фильма Ширли Кларк.
Монологи Роберта Фроста на русском языке.
Читает Андрей Савостьянов.
Работа с голосовой моделью Роберта Фроста — Константин Хаджиев.
Перевод Светланы Омеличкиной
Монологи Роберта Фроста на русском языке.
Читает Андрей Савостьянов.
Работа с голосовой моделью Роберта Фроста — Константин Хаджиев.
Перевод Светланы Омеличкиной
Контакты:
+79169623650
kotyara1776@yandex.ru
kotyara1776@yandex.ru