Нижегородские музыканты рассказали, заменит ли нейросеть композиторов

Музыка больше не создаётся только человеком. Сегодня нейросети сочиняют мелодии, дописывают аранжировки и даже «поют» чужими голосами. Искусственный интеллект уже стал рабочим инструментом индустрии — но вместе с новыми возможностями он приносит и новые споры о роли человека в творчестве. Может ли алгоритм по-настоящему творить и чем приходится платить за технологический прогресс, разобралась редакция сайта pravda-nn.ru.

От «студента» до цифрового композитора

Попытки «научить» машину сочинять музыку начались еще задолго до появления современных нейросетей. Во второй половине XX века исследователи экспериментировали с программами, которые создавали мелодии по заданным шаблонам. Технически музыка получалась правильной, однако звучала механически и весьма предсказуемо.

Вместе с тем в классическую музыку начали добавлять цифровые элементы, чтобы создать новые звучания. А на концертах оркестр «выступал» вместе с компьютером, который выдавал уже ранее заготовленную композицию.

Подобные выступления были и в Нижнем Новгороде. Как рассказала первая скрипка камерного оркестра «Солисты Нижнего Новгорода» Анастасия Богданова, она не раз участвовала в исполнении академической современной музыки, где вместо традиционных приемов и инструментов используются цифровые.

«Однажды моя знакомая написала песню и попросила меня отдельно сыграть композицию на скрипке. Я придумала партию, записала её и отправила, а после знакомая все это занесла в компьютер, соединила — и так получилось настоящее музыкальное произведение», — вспоминает солистка.

Все изменилось с развитием нейросетей: они научились анализировать огромные массивы аудиоданных и выявлять из них закономерности — ритм, гармонию и стиль. В итоге ИИ начал «перенимать» музыкальный язык разных жанров и исполнителей и «писать» собственную музыку. А настоящий прорыв случился, когда нейросети начали создавать полноценные композиции, неотличимые от человеческих работ. Вспомнить хотя бы завирусившиеся ИИ-ролики с кавером песни «Прекрасное далеко», которую написал композитор Евгений Крылатов на стихи поэта Юрия Энтина, в исполнении Билли Айлиш.

«Сейчас, благодаря технологиям токенизации аудио (превращения волны в последовательность, понятную трансформерам), мы получили своеобразный MusicGPT, который способен создать полноценную партитуру с нуля: аранжировку, гармонию, текст и вокал, которую практически невозможно отличить от живого на слепом прослушивании», — рассказывает академический руководитель образовательной программы «Компьютерные науки и технологии» НИУ ВШЭ – Нижний Новгород Борис Улитин.

Так из технологической игрушки ИИ стал серьезным производственным инструментом в руках гигантов музыкальной индустрии.

Мастер на все звуки

Сегодня нейросети способны работать практически на всех этапах создания и продвижения музыки — от первых набросков до анализа аудитории. Самое заметное направление — создание музыкального материала с нуля. Современные модели умеют генерировать мелодии, гармонии, басовые линии и ударные партии в заданном жанре или настроении. Пользователь может задать параметры — темп, стиль, референсы, длительность — и получить заготовку трека за считанные секунды.

Отдельное достижение — имитация стиля. Обучившись на больших массивах данных, нейросети способны не просто воспроизводить конкретные жанры, а самостоятельно обучаться и даже приближаться к «почерку» известных исполнителей. Это активно используют для быстрого повторения идей, создания фоновой музыки и саундтреков.

«Это очень похоже на импровизации музыкантов: представьте, что вы дали искусственному интеллекту «Ноктюрн» Шопена и попросили сыграть его так, будто это импровизация Дениса Мацуева. Технически это реализуется через архитектуры типа CycleGAN. Модель учится переводить «словарь» одного жанра в другой, сохраняя при этом мелодический контур, — подчеркивает Борис Улитин. — Более того, платформы вроде Koup Music позволяют авторам создавать собственные музыкальные ИИ-модели. Вы загружаете в нее свою фонотеку, черновики, заготовки и на выходе получаете не просто «музыку в стиле поп», а «музыку в вашем собственном стиле поп».

Кроме того, алгоритмы уже умеют автоматически сводить многодорожечные записи, очищать звук от шумов и артефактов, восстанавливать старые записи и разделять готовый трек на отдельные дорожки (вокал, ударные, бас и т. д.). Благодаря этому студии и независимые музыканты экономят время и бюджет.

Еще одна возможность ИИ — это генерация и клонирование голоса. Теперь синтезировать вокал можно по любому тексту, менять тембр исполнителя или создавать цифровые копии голосов на основе коротких образцов.

Есть «плюшки» и для слушателей — музыкальная аналитика. Это как раз тот самый «плейлист дня», который ежедневно подбирается для конкретного пользователя алгоритмами машинного обучения. ИИ умеет находить подходящую музыку под интересы слушателей и цели (для спорта, учебы или сна), прогнозировать популярность треков, анализировать поведение аудитории. Фактически ИИ уже влияет не только на то, как музыка создаётся, но и на то, какую музыку в итоге услышит человек.

Какие инструменты использует ИИ

Для создания музыки человек применяет традиционные инструменты — гитару, пианино, флейту, а в арсенале “нейронок” — настоящая оркестровая яма, где каждый механизм имеет свою неповторимую тембральную окраску. Строгого деления на «первую скрипку» и все остальное уже нет, но есть четкая специализация.

• Suno AI – это «рояль» на сцене, инструмент для создания хитов с вокалом. Идеален для демо и социальных сетей (правда, с ограниченной свободой редактирования);
• Udio – это, пожалуй, «виолончель». Способен выдать изумительно чистое, «аналоговое» инструментальное звучание, что подходит для создания саундтреков;
• MusicGPT – современный «цифровой синтезатор». Здесь всё в одном: генерация, сведение, мастеринг;
• Soundraw и Beatoven – «гитары» и «контрабасы» в ритм-секции, которые способны держать ритм для видео и подкастов.

«Главное изменение при этом для меня и как для специалиста по ИИ, и как пианиста – это исчезновение «черного ящика». Еще пару лет назад мы нажимали «сгенерируй» и гадали, что выпадет. Сейчас инструменты вроде Suno Studio позволяют залезть внутрь партитуры, передвинуть такты, как будто ты перелистываешь ноты на пульте, при этом полностью сохраняя логику развития музыкальной темы», — рассказывает Борис Улитин.

Хит по алгоритму

Сегодня искусственный интеллект в музыке применяется повсеместно. Музыкальные студии с помощью алгоритмов создают демки, подбирают аранжировки, чистят вокал; стриминговые сервисы активно применяют их для персонализации — создают рекомендации, собирают тематические плейлисты и прогнозируют, какие треки могут «выстрелить»; в кино- и игровой индустрии с помощью ИИ разрабатывают фоновую и прикладную музыку, экономя время и бюджет.

Особенно удобен такой инструмент для авторов-одиночек: то, что раньше требовало студии и команды специалистов, теперь частично можно сделать в домашней обстановке. В результате порог входа в музыкальное производство заметно снизился, а количество релизов продолжает расти.

Однако, несмотря на все эти преимущества, с музыкальным ИИ не все так просто. Здесь на первый план выходят юридические, этические и творческие вопросы.

Одна из главных проблем — авторские права. По мере расширения возможностей нейросетей, все чаще возникают споры о принадлежности музыки, созданной ИИ.

«Главная юридическая коллизия – обучение моделей. Крупные музыкальный лейблы и студии даже подают в суд на разработчиков музыкальных ИИ-платформ, обвиняя последних в массовом копировании записей для обучения без лицензии. Однако нужно понимать, что делается это не для того, чтобы полностью запретить копирование, а как попытка регулировать подражание и плагиат. Появляются платформы вроде Klay, которые изначально платят отчисления авторам оригинальных композиций, и специальные сервисы, которые пытаются высчитать микро-доли влияния каждого трека на финальный результат», — подчеркнул эксперт Улитин.

Еще один риск — вытеснение многих профессий, особенно технических. Все чаще рутинные задачи в творческом процессе выполняются алгоритмами, поэтому профессиональное сообщество уже начинает бить тревогу.

Следующая угроза менее очевидная, но более опасная, — это однообразие музыки. Нейросети обучаются на существующих данных, а значит, склонны воспроизводить уже популярные паттерны. Критики опасаются, что массовое использование ИИ может усилить «моду» на унификацию звучания, особенно в коммерческой музыке, где и без того доминируют проверенные «выигрышные» формулы.

«ИИ работает в исключительно шаблонном формате: в каждом жанре, движении — вообще во всем он будет делать одинаково, потому что это его прямая задача. Так что человеческий креатив он точно не заместит — и перспектив пока нет. Нейронки не успевают обучаться в том темпе, в котором люди выпускают музыку», — подчеркивает саунд-продюсер, саунд-дизайнер Михаил Демин.

Музыкальные критики также жалуются и на этические вопросы клонирования голосов. Синтез вокала открывает пространство для злоупотреблений: сюда входят случаи как несанкционированного использования голоса артиста, так и создания дипфейк-треков. Это затрагивает не только авторское право, но и репутацию исполнителей.

А что касается самих слушателей, они могут сталкиваться с «алгоритмическими пузырями» — это случаи, когда пользователь всё чаще полагается на алгоритмы подбора музыки и тем самым сужает культурное разнообразие в музыкальном творчестве.

Музыка без человека

Так заменит ли ИИ музыкантов? Конечно, алгоритмы уже превосходят людей по скорости обработки данных и перебора вариантов, генерируя музыку под любой жанр за считанные минуты. Однако музыкальное творчество — это не только комбинация звуков, но и культурный контекст, личный опыт, переживания автора. В этом смысле ИИ, как сравнивают исследователи, – это «идеально настроенный рояль, на котором лежат открытыми ноты. Но музыкой они станут только в тот момент, когда за рояль сядет пианист. Только он найдет и передаст слушателям ту самую «душу мелодии», откроет перед ними целый волшебный мир чувств».

Большинство экспертов сегодня сходятся во мнении, что нейросети не вытеснят человека из музыкального творчества. Скорее, оба будут сосуществовать в этом процессе вместе: ИИ берёт на себя рутину, ускоряет эксперименты и расширяет арсенал инструментов, а человек формулирует художественную задачу и отвечает за важные творческие решения. Уже сейчас многие саунд-продюсеры используют нейросети именно как «умный инструмент», а не как автономного композитора.

«Я бы привела в пример тетради с нотами. Я люблю изданные, напечатанные ноты, так как они несут особую энергетику. Так же и с книгами: мне по душе больше бумажные, а не электронные, — делится Анастасия Богданова. — Даже в оркестрах сейчас многие играют по планшетам, так как это удобно, однако с другой стороны «традиционные», привычные способы мне гораздо ближе — это вызывает некую ностальгию».

Этот же вопрос мы задали и самой нейросети ChatGPT. Она также подтвердила, что ИИ больше выступает в качестве мощного инструмента и помощника в творческом процессе, однако полноценной замены человеку не дает.

«Творчество часто связано с человеческими эмоциями, опытом и культурным контекстом, которые ИИ пока не способен полностью переживать и создавать изнутри. Я могу генерировать музыку, вдохновлять и помогать, но глубина человеческой интуиции и уникальный художественный замысел остаются прерогативой человека. Тем не менее, с развитием технологий грани стираются, и нам стоит рассматривать ИИ скорее как партнёра в творчестве, чем замену», — ответил ИИ.

«Человек подчинил своим гением звуковую стихию, облек ее в логические художественные формы и постоянно развивает и совершенствует эту область бытия. ИИ же возник как закономерный результат эволюции и проникает во все сферы нашей жизнедеятельности, но, как бы не предрекали ему вселенское господство, не стоит забывать, что нейросеть создана как помощник человека, она изначально вторична. Но ведь, как известно, с помощью дубины можно добыть еду, а можно и убить, — считает профессор кафедры специального фортепиано в Нижегородской государственной консерватории им. М. И. Глинки Юрий Баракин. — ИИ — это компьютерная дубинка для помощи в решении простейших логических задач, требующих сиюминутных компетенций, а для создания «вечной» музыки нужен гений — человек, мыслящий идеальными нестандартными категориями и оперирующий философскими и эстетическими понятиями».

Как предрекают эксперты, в будущем активно будут развиваться персонализированные модели — так называемый ИИ-аватар артиста. Также вполне вероятно, что нейросети будут использоваться для иммерсивного и интерактивного творчества. Так, уже сейчас ведутся разработки подобных нейроинтерфейсов: человек придумывает мелодию, а ИИ её дописывает в режиме реального времени.

Ранее на сайте pravda-nn.ru рассказали, что такое цифровое бессмертие и насколько это этично.