OpenAI: Искусственный интеллект создает музыку по тексту

Компания OpenAI активно разрабатывает новый инструмент, способный генерировать музыкальные композиции на основе текстовых и аудиозапросов. Эта разработка, о которой стало известно из отчета The Information, открывает широкие возможности для создателей контента.

Новая технология может быть использована для добавления фоновой музыки к существующим видеоматериалам или для аранжировки вокальных партий с помощью гитарного сопровождения. Пока точные сроки запуска и формат доступности инструмента остаются неизвестными – будет ли это отдельный продукт или же он будет интегрирован в существующие решения OpenAI, такие как ChatGPT и видеоприложение Sora, пока не уточняется.

По сообщениям источников, OpenAI сотрудничает со студентами из престижной Школы Джульярд, привлекая их к процессу аннотирования музыкальных партитур. Этот опыт помогает формировать ценные обучающие данные для искусственного интеллекта.

Хотя OpenAI уже выпускала модели для генерации музыки ранее, те разработки предшествовали появлению ChatGPT. В последнее время компания фокусировалась на аудиомоделях, специализирующихся на преобразовании текста в речь и речи в текст. Стоит отметить, что разработкой генеративных музыкальных моделей также занимаются и другие крупные игроки технологической индустрии, включая Google и Suno.