CRI,リアルタイムリップシンク機能を提供する「ADX LipSync」をリリース
ADX LipSyncでは,与えた音声データに対して,機械学習を使って学習された口の動きをスピーチに合わせたアニメーションとしてリアルタイムに生成するソフトウェアだ。事前にデータを変換することもできるほか,キャラクターデータが対応していれば,舌の動きも再現できる。
すでにいくつかのカラオケ店舗には,この技術を使って画面内のキャラクターが歌うという機能が搭載されているという。
製品の概要についてはこちらの記事に詳しい。
ADX LipSyncは月額のライセンスプランが用意されている。料金は,既存のCRIWAREの利用状況などで変わるので公式サイトで確認しておこう。
ADX LipSync製品情報ページ
CRI、 音声データから自然な口の動きを自動生成する
音声解析ミドルウェア「CRI ADX LipSync」 を提供開始
ゲーム向けライセンスプランや提供形態も公開、 CRIWARE ユーザー向けには無償提供へ
ゲーム開発向けに音声・映像のミドルウェアブランド CRIWARERを展開する株式会社CRI・ミドルウェア(本社:東京都渋谷区、代表取締役社長:押見正雄、東証マザーズ:証券コード3698、以下「CRI 」 )は、 音声データから自然な口の動き(口パターン) を自動生成する音声解析リップシンクミドルウェア「CRI ADXR LipSync(以下、 ADX LipSync)」 を本日より提供開始し、 ゲーム向けライセンスプランや提供形態の詳細を公開いたしました。
ADX LipSync は、 ディープラーニングによる音声解析技術を活用し、キャラクターの発話に合わせて最適な口の動きを自動生成するミドルウェアです。
■ 用途に応じた 2 種のソフトウェア開発キットを提供
ADX LipSync では、 入力した音声から即時に口パターンを出力する「リアルタイム解析」 と、外部の CG ツールなどと連携して細かな作りこみが可能な「事前解析」 の 2 つの方法で口パターンの制作が可能です。 この 2 種の機能別に、 ソフトウェア開発キット(SDK)を提供いたします。
リアルタイム解析では、サウンドミドルウェア CRI ADXR2 と連携し、 音声の入力と同時にリアルタイムで口パターンを生成します。
事前解析では、 専用のツールを使用して口パターンを生成します。 口パターンデータはテキスト形式で出力されるため、 MayaRなどのモデリングソフトと連携してさらに細かく調整することができます。 事前解析は法人企業を対象に 2 週間の無償試用が可能です。
■ 開発期間に応じた月額ライセンスで提供、 CRIWARE ユーザーは無償で利用可能
ADX LipSync は、 機能や CRI のミドルウェア製品群「CRIWARE」 の利用状況に応じて提供内容やライセンスプランが異なります。 CRIWARE ユーザー向けにはリアルタイム解析及び事前解析の両機能を無償で提供いたします(※) 。 CRIWARE ユーザー以外の利用者向けには、 事前解析機能を開発期間を対象に初回 60 万円/6 か月(税抜)にて提供いたします。継続して利用する場合には 10 万円/月(税抜) にて延長することが可能です。
【ゲーム向けライセンスプラン】
詳細なライセンスプランについてはこちらの料金表をご覧ください。
https://game.criware.jp/price/lipsync_game.pdf
なお、本ライセンスプランはゲームでの利用を対象にしています。その他のコンテンツでご利用の場合は個別にお問い合わせください。 また、ライセンスのご提供は法人企業のみ対象です。
※: 事前解析はタイトルリリース前の開発期間のみ無償提供の対象です。 タイトルリリース後に追加で利用する場合は 10 万円/月(税抜)となります。
■ ADX LipSync とは
音声データの入力から自然な口の動きを自動で生成
ADX LipSync は入力された音声データの波形を解析し自動で適切な口の動きを生成します。また、口の形だけでなくマ行・バ行・パ行などの両唇音を発音する際はいったん唇を閉じるなどの口の開閉まで、実際の発音に即した口パターンを再現することができます。
生成した口パターンは様々なモデルデータに組み込みやすい形式で出力され、 2D/3D モデルの両方に活用することができます。
多言語対応
ADX LipSync は日本語のみならず、 あらゆる言語で口パターンを生成することができます。 日本語、英語、中国語などの複数言語でワールドワイド展開するタイトルの開発を大幅に効率化します。
製品ページ https://game.criware.jp/products/adx-lipsync/
お問い合わせ http://www.cri-mw.co.jp/contact/game.html
【株式会社CRI・ミドルウェアについて】
「音と映像で社会を豊かに」を企業理念として、主に音声・映像関連の研究開発を行い、その成果をミドルウェア製品ブランド「CRIWARE」として、ゲーム分野や組込み分野を中心にさまざまな分野に展開しています。CRIは、「CRIWARE」を通じて、ユーザビリティの向上、クオリティ向上のための技術やソリューションを提供し、開発者の皆様の課題解決をサポートするとともに、エンドユーザーのユーザビリティの向上をサポートしてまいります。
https://www.cri-mw.co.jp/
※「CRI」、「CRIWARE」、「ADX」、「LipSync」、 CRIWARE ロゴは、 日本およびその他の国における株式会社CRI・ミドルウェアの商標または登録商標です。
※その他、文中に記載されている会社名および商品名は、各社の商標または登録商標です。