Разработана модель создания символической музыки с использованием музыкальных метаданных

Разработана модель создания символической музыки с использованием музыкальных метаданных
Искусственный интеллект (ИИ) открыл новые интересные возможности для музыкальной индустрии, например, позволив разрабатывать инструменты, которые могут автоматически генерировать музыкальные композиции или определенные инструментальные треки.

Однако большинство существующих инструментов предназначены для использования музыкантами, композиторами и музыкальными продюсерами, а не неопытными пользователями.

Исследователи из LG AI Research недавно разработали новую интерактивную систему, которая позволяет любому пользователю легко переводить свои идеи в музыку. Эта система, описанная в статье, опубликованной на сервере препринтов arXiv , объединяет декодер-только авторегрессионный трансформатор, обученный на музыкальных наборах данных, с интуитивно понятным пользовательским интерфейсом.

«Мы представляем демонстрацию символической генерации музыки, сосредоточившись на предоставлении коротких музыкальных мотивов, которые служат центральной темой повествования», — написали в своей статье Санджун Хан, Дживон Хам и их коллеги.

«Для генерации мы принимаем авторегрессионную модель, которая берет музыкальные метаданные в качестве входных данных и генерирует 4 такта многодорожечных MIDI-последовательностей».

Модель на основе трансформатора, лежащая в основе системы генерации символической музыки команды, была обучена на двух музыкальных наборах данных, а именно наборе данных Lakh MIDI и наборе данных MetaMIDI .

В совокупности эти наборы данных содержат более 400 000 файлов MIDI ( цифровой интерфейс музыкальных инструментов ), которые представляют собой файлы данных, содержащие различную информацию о музыкальных треках (например, сыгранные ноты, длительность нот, скорость, с которой они воспроизводятся).

Для обучения своей модели команда преобразовала каждый файл MIDI в файл представления музыкального события (REMI).

Этот специальный формат кодирует данные MIDI в токены, представляющие различные музыкальные характеристики (например, высоту тона и скорость).

Файлы REMI фиксируют динамику музыки способами, которые особенно благоприятны для обучения моделей ИИ для генерации музыки.

«Во время обучения мы случайным образом выбрасываем токены из музыкальных метаданных, чтобы гарантировать гибкий контроль», — пишут исследователи.

«Это дает пользователям свободу выбора типов ввода, сохраняя при этом генеративную производительность, что обеспечивает большую гибкость в сочинении музыки».

В дополнение к разработке своей модели на основе трансформатора для генерации символической музыки, Хан, Хэм и их коллеги создали простой интерфейс, который сделал бы его доступным как для опытных, так и для неопытных пользователей.

Этот интерфейс в настоящее время состоит из боковой панели и центральной интерактивной панели.

В боковой панели пользователи могут указать аспекты музыки, которые они хотят, чтобы модель сгенерировала, например, какие инструменты должны играть и темп песни.

После того, как модель сгенерирует песню, они могут редактировать трек на центральной панели, например,.
Опубликовано: 00:26, октября 16, 2024 Рубрика: Software Источник: android-robot.com Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit
 
 
Разработана модель для создания более естественной синтезированной речи

Разработана модель для создания более естественной синтезированной речи Последние технологические достижения позволяют разрабатывать вычислительные инструменты, которые могут значительно улучшить качество жизни людей с ог …

Интернет и Игры 21:18, мая 28, 2024 | android-robot.com
Опубликован Daphile 24.05, дистрибутив для создания музыкальных систем

Опубликован Daphile 24.05, дистрибутив для создания музыкальных систем Состоялся релиз дистрибутива Daphile 24.05, основанного на Gentoo Linux и предназначенного для создания системы для хранения и воспроизведения музыка …

Интернет и Игры 08:00, мая 10, 2024 | opennet.ru
Разработана новая технология создания сухой пленки для сульфидных твердотельных батарей

Разработана новая технология создания сухой пленки для сульфидных твердотельных батарей Интеграция полностью твердотельных батарей с сульфидными электролитами становится многообещающей электрохимической системой с потенциальным увеличени …

Hardware 17:18, мая 30, 2024 | android-robot.com
JER 3D PEN поделится секретами создания объектов с использованием 3D-ручек на 3D Print Expo

JER 3D PEN поделится секретами создания объектов с использованием 3D-ручек на 3D Print Expo Не умеете пользоваться гаджетом? Это не проблема: с 4 по 5 октября в выставочной зоне 3D Print Expo вам обо всем расскажут представители JER 3D PEN! …

3D Печать 07:18, апреля 17, 2024 | 3d-expo.ru
Нейросети для создания музыки: бесплатные сервисы доступные каждому

Нейросети для создания музыки: бесплатные сервисы доступные каждому Нейросети пишут музыку для людей, и этим можно воспользоваться бесплатно Давайте примем факт того, что нейросети уже умеют писать музыку лучше, чем б …

Наука и Технологии 14:26, июня 18, 2024 | hi-news.ru
Модель ИИ имитирует постановку целей человеком посредством создания игр

Модель ИИ имитирует постановку целей человеком посредством создания игр Хотя мы обладаем удивительной способностью ставить перед собой собственные цели, начиная с детского возраста и заканчивая взрослой жизнью, у нас пока …

Software 07:26, февраля 28, 2025 | android-robot.com
Способы скачать новинки музыки в Интернете. Особенности загрузки музыки на ПК

Способы скачать новинки музыки в Интернете. Особенности загрузки музыки на ПК p>Скачивание новинок музыки в Интернете - это отличный способ расширить свою музыкальную коллекцию, ознакомиться с новыми треками и насладиться любим …

Общество и Регионы 00:30, апреля 30, 2024 | vladtime.ru
Ночь музыки станет еще и Днем музыки

«Ночь музыки» станет еще и «Днем музыки» Десятая «Ночь музыки» пройдет в Екатеринбурге 28 июня. Концерты проведут более чем на 100 площадках. На фестиваль приедут 3 тыс. музыкантов из разных …

Общие новости 08:36, апреля 23, 2024 | 66.ru
Доигровщица Протона - в символической сборной Суперлиги

Доигровщица "Протона" - в символической сборной Суперлиги Доигровщица саратовского "Протона" Светлана Гатина вошла в символическую сборную Суперлиги по итогам сезона 2023/2024.Также в команду попали блокирую …

Общество и Происшествия 17:00, мая 4, 2024 | news.sarbc.ru
Кутуз, Мазур, Гудай  в символической сборной 3-го тура Winline Медиалиги

Кутуз, Мазур, Гудай – в символической сборной 3-го тура Winline Медиалиги В 3-м туре МФЛ-5 против «Денег Рокетов» нападающий ФК «10» сделал покер и стал лидером в гонке бомбардиров Winline Медиалиги. Символическая сборная 3 …

Спорт 20:12, мая 7, 2024 | sports.ru
Червенка, Карлссон и Козенс  в символической сборной ЧМ-2024. Йоси признан лучшим защитником турнира

Червенка, Карлссон и Козенс – в символической сборной ЧМ-2024. Йоси признан лучшим защитником турнира Сборная Чехии выиграла золотые медали домашнего ЧМ-2024, обыграв команду Швейцарии (2:0) в финальном матче. Символическая сборная по итогам голосован …

Спорт 03:12, мая 27, 2024 | sports.ru
Латышонок, Бабич, Педро, Файзуллаев  в символической сборной Кубка России по версии болельщиков. Тренером выбран Игнашевич

Латышонок, Бабич, Педро, Файзуллаев – в символической сборной Кубка России по версии болельщиков. Тренером выбран Игнашевич Опрос проходил в телеграм-канале турнира. По его итогам позицию вратаря занял Евгений Латышонок из «Балтики». Защитники: Роберто Фернандес («Балтика» …

Спорт 17:24, мая 31, 2024 | sports.ru
Возможности музыкальных порталов

Возможности музыкальных порталов Музыкальные сайты - это великолепный инструмент для меломанов и любителей музыки. Они предлагают широкие возможности, которые помогают пользователю н …

Общество и Регионы 15:42, апреля 28, 2024 | vladtime.ru
Скачивание свежих музыкальных новинок из Интернета

Скачивание свежих музыкальных новинок из Интернета Если вы давно искали сервис, на страницах которого есть возможность скачать музыку без ограничений, то вам обязательно стоит прочитать нашу статью, в …

Общество и Регионы 17:00, мая 14, 2024 | vladtime.ru
В чем причина популярности современных музыкальных порталов

В чем причина популярности современных музыкальных порталов? Стремительное развитие интернет-технологий значительно облегчило жизнь людей. Так, с помощью музыкальных порталов каждый может послушать или скачать …

Общество и Регионы 17:00, мая 14, 2024 | vladtime.ru
Загрузка музыкальных треков в Интернете быстро и удобно

Загрузка музыкальных треков в Интернете быстро и удобно Музыка является неотъемлемой частью жизни современного человека. Она делает нашу жизнь ярче и интереснее, даёт возможность расслабиться в трудную мин …

Общество и Регионы 17:00, мая 14, 2024 | vladtime.ru
Макаки научились выстукивать ритм музыкальных произведений

Макаки научились выстукивать ритм музыкальных произведений Учёные из Национального автономного университета Мексики провели исследование, показавшее, что макаки способны чувствовать ритм музыкальных произведе …

Наука и Технологии 11:12, мая 15, 2024 | pravda.ru
Рынок музыкальных стримингов в России вырастет в 2024 году на 10-15%

Рынок музыкальных стримингов в России вырастет в 2024 году на 10-15% Яндекс Музыка прогнозирует рост рынка музыкальных стримингов в России на 15% в 2024 году. Об этом рассказала руководитель музыкального... …

Знаменитости 01:00, апреля 16, 2024 | intermedia.ru
В картинной галерее Айвазовского возрождают традицию музыкальных вечеров

В картинной галерее Айвазовского возрождают традицию музыкальных вечеров После реконструкции галерея решила возродить традиции дома художника-мариниста и проводить, помимо выставок, музыкальные вечера. …

Общие новости 11:36, мая 1, 2024 | kafanews.com
Топ-5 самых необычных гаджетов CES 2026: от ИИ-панды до музыкальных леденцов

Топ-5 самых необычных гаджетов CES 2026: от ИИ-панды до музыкальных леденцов От мягкой ИИ-панды, реагирующей на прикосновения, до голографического аниме-помощника и других странных, но увлекательных гаджетов на CES 2026. …

Это интересно 00:26, января 8, 2026 | incrussia.ru
Рынок российских музыкальных сервисов вырос на 40 % в 2023 году

Рынок российских музыкальных сервисов вырос на 40 % в 2023 году В 2023 году объём рынка музыкальных сервисов в России вырос почти на 40 % до 25,4 млрд руб., пишет РБК со ссылкой на исследование Национальной федера …

Hardware 11:00, мая 5, 2024 | 3dnews.ru
Наша Версия размышляет о музыкальных итогах 2024 года

«Наша Версия» размышляет о музыкальных итогах 2024 года Музыкальные сюжеты и тренды будущего, настоящего, прошлого времён и связанных с ними дум, продолжают исследоваться нашим изданием. …

Культура и искусство 07:26, января 27, 2025 | versia.ru
Scirocco  это совершенно особенная модель. Volkswagen ценит свою историю и не собирается превращать модель в кроссовер или внедорожник

«Scirocco — это совершенно особенная модель». Volkswagen ценит свою историю и не собирается превращать модель в кроссовер или внедорожник Volkswagen ценит историю и наследие своих автомобилей и не заинтересована в том, чтобы играть на ностальгии поклонников, используя известные названия …

Наука и Технологии 14:26, марта 3, 2025 | ixbt.com
Разработана новая методика трехмерной нанопечати

Разработана новая методика трехмерной нанопечати Выпускники Государственного университета Вашингтона (Washington State University) Садик Салех и Чуншан Ха под руководством профессора Раула Паната пр …

3D Печать 18:06, апреля 22, 2024 | 3d-expo.ru