Российская певица впервые в мире спела дуэтом с ИИ

В Москве состоялось первое в истории совместное выступление оперной певицы с искусственным интеллектом (ИИ). На сцене Дома звукозаписи Вера Кононова спела дуэтом с голосом, созданным нейросетью.
Среди композиций, прозвучавших совместно с ИИ, оказался и отрывок из мюзикла «Призрак Оперы» Эндрю Ллойда Уэббера. Сама Кононова выступила инициатором эксперимента.
Эксперимент стал частью научно-музыкального проекта, цель которого — исследовать возможности взаимодействия человека и машины в вокальном исполнении. Кононова, инициатор проекта, исполнила партию живого артиста, а ИИ — цифрового Фантома.
Основной задачей было добиться точного совпадения интонаций, темпа и ритма между живым исполнителем, оркестром и синтезированным голосом. Это оказалось непросто: алгоритмы нейросети не всегда интерпретируют музыкальные задачи так, как человек.
Голос Фантома разработала китайский композитор Дуань Юйцянь. Она использовала нейросетевые технологии, чтобы создать вокал, способный взаимодействовать с живыми исполнителями. Она заявила, что «потратила много времени», чтобы обучить ИИ вокальной партии, приближенной к живому голосу.
Аккомпанировал инновационному выступлению Государственный Кремлевский духовой оркестр во главе с заслуженным артистом России, дирижером Игорем Шеверневым.
«В искусстве искусственный интеллект сравнительно недавно, поэтому нам интересно такое взаимодействие — он создает произведения, которые можно переложить на ноты и уже тогда вложить в них человеческую душу», — пояснил Шевернев.
Изображение: qwen.ai