故シン・ヘチョルさん、「AI 新ヘチョル」として戻ってくる…音声モデルを公開
2024年05月07日

10年前の2014年に亡くなった故シン・ヘチョルさんがAIのボイスモデル「AI 新ヘチョル」として戻ってくる。
ネクストユナイテッドは6日、シン・ヘチョルさんの56回目の誕生日を控え、人工知能基盤技術で開発した声のモデルをYouTube「シン・ヘチョル公式チャンネルTV」に公開したと明らかにした。
ネクストユナイテッドはシン・ヘチョルさんのIP(知的財産権)に関するすべての権利を持つ会社で、彼の妻ユン・ウォンヒさんが代表を務めている。
今回のAIモデル開発は、シン・ヘチョルさんのPCから、彼が生前進行していた有名ラジオ番組「ゴーストステーション」の新しいシーズンを準備していた痕跡や、新しいオープニングシグナルが見つかったことがきっかけとなった。
人工知能基盤の音声合成には、一般的に一定分量の音声データ学習が必要だ。しかし、シン・ヘチョルさんは10年前に亡くなったため、音声モデルを新たに録音したり、最適の音声学習スクリプトを読んだりすることは不可能だった。
ネクストユナイテッドはこれに番組や講演、公演などの記録として残ったシン・ヘチョルさんの肉声資料を前処理し、別個にすべての音声をスクリプトとして具現し、これを基に音声人工知能モデルを学習させた。
計270時間に達する音声資料で主要文章を抽出して、6,757個に再構成し、雑音を除去して低下した音質を復旧する前処理過程はゲーム会社のPearl Abyssの支援で実現した。Pearl Abyssは、代表ゲーム「黒い砂漠」内にシン・ヘチョルさんの銅像を建てるなど、シン・ヘチョルさんと長年の縁を続けてきた。
またすべてのデータに声を区分できるようにするメタデータ(テータに対するデータ)を入れて人工知能モデルを構築し、単純に声をマネするレベルを越え、状況別のトーンや精密な感情を表現できるようにした。
音声学習データには、シン・ヘチョルさんが直接語った言葉だけを活用した。シン・ヘチョルさんの子どもであるハヨンさんとドンウォンさん、生前故人と親しく過ごした写真作家カン・ヨンホ氏が検収に参加した。
ネクストユナイテッドのユン・ウォンヒ代表は、「彼の声とメッセージを懐かしむすべての人々の願いが『AI 新ヘチョル』の音声モデルを世の中に呼び出した」とし、「技術的に声を復元する方式のアプローチではなく、家族や友人、そしてファンたちとリスナーたちが望む“響きが込められた声”そのものを作り出すことに集中した」と伝えた。
データの前処理学習、抽出に関する技術は故人と親しかったタレント兼ミュージシャンのナム・グンヨンが開発した。放送作家のシン・ビョンジンはすべての肉声資料を文に移して分類した。
ネクストユナイテッドは「AI 新ヘチョル」の音声モデルをきっかけに、「ゴーストステーション」の新シーズンなどさまざまなコンテンツを準備する。
