CRI・ミドルウェア—リップシンクミドルウェアがスマホゲームのライブで初採用

CRI・ミドルウェア<3698>は、音声解析リップシンクミドルウェア「CRI LipSync Alive」が、セガとColorful Paletteが提供するスマートフォン向けゲーム「プロジェクトセカイ カラフルステージ！ feat. 初音ミク」に採用されたと発表した。同製品の初採用タイトルとなる。10月24日・25日に開催されたゲーム内有料バーチャルライブ「コネクトライブ」で、キャラクターの歌唱時の口の動きのアニメーション生成を担った。今後の開催回での活用も決まっている。
コネクトライブは今回から歌唱音声や振り付けを事前収録する形式に変更されており、事前解析に特化した同製品が映像制作を支援した。Colorful Palette ENCOREによると、基本的な口の動きの制作時間は従来の約半分に短縮され、キャラクターごとの細かな表情調整などに時間を充てられるようになったという。
同製品は、Transformerをベースにした独自の機械学習モデルによる音声解析で、5つの母音と9つの子音を含む最大14種のアニメーションカーブを出力し、多言語や3D・2Dキャラクターに対応する。同社はAIアシスタントやアバターの普及を背景にデジタルキャラクター市場へ展開し、2028年末までに世界のゲーム市場向けに300ライセンスの提供を目指すほか、エンタープライズ市場での導入拡大も図る方針だ。