Back to home

О YuE2 и yue2music.com

Независимая облачная студия на базе открытой модели YuE2. Узнайте об архитектуре символического планирования и нашей миссии.

Last updated: 2026-09-19

О YuE2 и yue2music.com

Уведомление о независимости: Сервис yue2music.com является независимой веб-студией и облачной платформой генерации музыки на базе открытой нейросетевой модели YuE2. Мы не связаны с исследовательской группой Multimodal Art Projection (M·A·P), HKUST, Стэнфордским университетом или иными академическими институтами. Все товарные знаки, названия моделей и авторские права на научные публикации принадлежат их законным авторам.


Что такое YuE2?

YuE2 (Music with a Plan) — это открытая базовая модель полного цикла генерации музыкальных треков, разработанная сообществом Multimodal Art Projection (M·A·P) совместно с академическими партнерами (HKUST, Tokenwave.AI, NYU, Stanford и MBZUAI).

В отличие от традиционных «черных ящиков», где пользователь не может контролировать процесс, в YuE2 реализован принцип символического планирования (Symbolic Planning): нейросеть сначала выстраивает редактируемую нотную партитуру в формате ABC, гармоническую сетку и структуру песни, и только затем синтезирует финальный аудиопоток. Это дает музыкантам прозрачный контроль над аккордами, мелодической линией и формой композиции.


Что такое yue2music.com?

Для локального запуска YuE2 требуются мощные видеокарты с большим объемом видеопамяти (VRAM 24–80 ГБ, такие как NVIDIA A100, H100 или RTX 4090), среда Linux и сложная настройка Python-библиотек.

Платформа yue2music.com решает эту задачу, предоставляя удобную облачную студию прямо в веб-браузере:

  • Без локальной настройки: запуск генерации на высокопроизводительных GPU-кластерах из любого современного браузера.
  • Интерактивный редактор партитур: просмотр и правка ABC-нотации, прослушивание гармонии через Web Audio синтезатор и тонкая настройка текста перед отправкой на мастеринг.
  • Студийное качество 48 кГц: кристально чистый стереозвук высокого разрешения, синтезированный через диффузионный механизм flow matching и нейросетевой кодек YuE2-VAE.

Архитектура базовой модели

Официальный стек технологий YuE2 включает в себя:

  • YuE2-3B: главная мультимодальная модель генерации музыки, объединяющая символический планировщик и диффузионный синтез аудио.
  • YuE2-VAE: высокоточный нейросетевой стерео-автоэнкодер 48 кГц с минимальным уровнем артефактов реконструкции.
  • SheetSage2: алгоритм транскрипции аудио в нотную партитуру, переводящий звук в редактируемый формат ABC.
  • MERT2 и MERT2-FS: модели самообучения акустических представлений для точной передачи тембральных оттенков.
  • WildSongBench: открытый бенчмарк из 192 разножанровых тестов для объективной оценки качества.

Благодарность авторам исследования

Мы выражаем искреннюю благодарность исследователям и организациям, сделавшим возможным открытый релиз модели:

  • Multimodal Art Projection (M·A·P)
  • Гонконгский университет науки и технологий (HKUST)
  • Tokenwave.AI
  • Нью-Йоркский университет (NYU)
  • Стэнфордский университет
  • Университет искусственного интеллекта имени Мухаммада бен Заида (MBZUAI)

Наша миссия на yue2music.com

Мы стремимся сделать создание музыки прозрачным, управляемым и доступным каждому. Искусственный интеллект должен расширять творческие горизонты человека, а не заменять его. Соединяя математическую строгость музыкальной теории и экспрессивную мощь нейросетей, мы даем музыкантам интеллектуального соавтора, говорящего с ними на одном профессиональном языке.