Yamaha VOCALOID:AI™ точно воссоздает голос легендарной японской певицы Хибари Мисора

Корпорация Yamaha объявляет об успешном завершении работы над воссозданием пения покойной Хибари Мисора, легендарной японской певицы. Для этого использовалась собственная разработка корпорации — технология синтеза пения VOCALOID:AI. 29 сентября в Японии при технической поддержке NHK (Japan Broadcasting Corporation) состоялась трансляция телепрограммы*1, на которой технология VOCALOID:AI была одновременно представлена и впервые реализована.

*1: Специальная трансляция NHK: ИИ возвращает Хибари Мисора (неофициальный перевод названия выполнен Yamaha)

Целью проекта NHK с участием Yamaha было использование современных технологий искусственного интеллекта (ИИ) для того, чтобы представить новую песню Хибари Мисора — яркой актрисы и певицы, которая долгие годы была самым популярным исполнителем Японии, — чтобы почтить ее память в день 30-летия с даты ее ухода из жизни. Благодаря сверхпередовому трехмерному видео в разрешении 4K Хибари Мисора предстала перед ошеломленными зрителями и исполнила новую песню.

Роль Yamaha в проекте состояла в том, чтобы с помощью технологии VOCALOID:AI точно воссоздать уникальный голос Хибари Мисора для пения и речи. Фактические записи песен и речи исполнительницы, сделанные при ее жизни, были использованы в качестве исходных данных для машинного обучения, чтобы воспроизвести ее пение. Исходные данные включали музыкальный аккомпанемент, но технология отсечения аккомпанемента компании Yamaha позволила получить высококачественные данные для машинного обучения и обеспечить улучшенное качество голоса.

Также Yamaha использовала относительно новый и активно развивающийся тип ИИ, известный как глубокое обучение. С его помощью удалось воссоздать голос одного из известнейших исполнителей Японии.

Коичи Морита, старший генеральный директор научно-исследовательского подразделения группы технологий корпорации Yamaha, комментирует: «Мы считаем, что именно благодаря технологиям и идеям Yamaha, основанным на 130-летнем опыте разработки и производства музыкальных инструментов и аудиооборудования, нам удалось успешно передать особенности ее пения. Наше сотрудничество в этом проекте с новой версия технологии синтеза пения показала новые возможности в музыке и преодолела барьеры времени, ошеломив слушателей невероятным голосом».

VOCALOID:AI — это разработанная Yamaha технология синтеза пения с использованием ИИ. С помощью глубокого обучения VOCALOID:AI может проанализировать характеристики пения, такие как тембр и выражение, в записях песен определенного вокалиста на любом языке и синтезировать пение любых мелодий и слов с учетом уникальных нюансов, характерных для этого исполнителя.

VOCALOID — это технология синтеза пения, разработанная и выпущенная компанией Yamaha в 2003 году. С тех пор она получила широкое признание за способность воспроизводить пение виртуальных исполнителей. VOCALOID:AI использует ИИ, чтобы значительно улучшить вокальную выразительность, в частности, изменения тембров.

После презентации VOCALOID:AI обществу марка VOCALOID теперь включает все технологии синтеза пения, а VOCALOID:AI относится конкретно к тем, что включают ИИ.

Обзор технической помощи Yamaha

К моменту ухода из жизни в 1989 году легендарная японская певица Хибари Мисора записала более 1500 песен, исполнив за свою более чем 40-летнюю карьеру огромное количество хитов. Посмертно она стала первой женщиной, которой была присуждена Премия Народного Почета, одна из наивысших наград Японии.

С момента основания в 1887 году корпорация Yamaha (штаб которой расположен в городе Хамамацу, Япония) занимается развитием деятельности, направленной на производство музыкальных инструментов и звукового оборудования, и предлагает различные продукты и услуги, связанные с музыкой и звуковым оборудованием, например, музыкальные школы Yamaha и полупроводники. Корпорация Yamaha на основе своего уникального опыта и отношения, основанных на любви к звуку и музыке, стремится создавать яркие впечатления и вдохновлять людей различных культур по всему миру.

*VOCALOID, VOCALO и VOCALOID:AI являются товарными знаками или зарегистрированными товарными знаками Yamaha Corporation.

*Упомянутые торговые наименования, названия компаний и подобное являются торговыми знаками или зарегистрированными торговыми знаками соответствующих компаний.

*Вся приведенная здесь информация является актуальной на дату публикации и подлежит изменению без предварительного уведомления.