CRI・ミドルウェアに関するVRイベント記事

Social VR Info – VR総合情報サイト

ソーシャルゲームインフォ

rss

Twitter

CRI、CEDECで音声解析リップシンクのセッションを実施 音声データから口の動きを自動生成するミドルウェアが登場!!

2019年09月03日 14時20分更新

リスト
このエントリーをはてなブックマークに追加



CRI・ミドルウェア<3698>は、9月4日~9月6日にパシフィコ横浜で開催される日本最大のゲーム開発者向けカンファレンス「CEDEC 2019」で、音声データから自然な口の動き(口パターン)を自動生成する音声解析リップシンクミドルウェア「CRI ADX LipSync」についてのセッションを行うと発表した。

ADX LipSyncはディープラーニングによる音声解析技術を活用し、キャラクターの発話に合わせて最適な口の動きを自動生成する、今秋リリース予定のミドルウェアになる。口の動きを作成する際には、セリフの一音一音に対して手作業で口の形を設定する方法や、
セリフの音量に合わせて口の大きさを変化させるなどの方法がとられていた。

しかしADX LipSyncではこれらの方法よりもさらに効率的で自然な口パターンを生成するという。

セッションでは口パターンの作成の基礎知識や実装手法の比較、ADX LipSyncの特長を紹介するほか、展示ブースではゲーム内の会話シーンを想定した、セリフに合わせた自然な口パターン生成デモや、ボイスチャットを想定した、マイク入力した音声データからの
リアルタイム口パターン生成デモを披露する。

■ADX LipSyncについて
音声データの入力から自然な口の動きを自動で生成ADX LipSyncは入力された音声データの波形を解析し自動で適切な口の動きを生成する。また、口の形だけでなくマ行・バ行・パ行などの両唇音を発音する際はいったん唇を閉じるなどの口の開閉まで、実際の発音に即した口パターンを再現することができる。

生成した口パターンは様々なモデルデータに組み込みやすい形式で出力され、2D/3Dモデルの両方に活用することができる。

・マルチリンガル対応
ADX LipSyncは日本語のみならず、あらゆる言語で口パターンを生成することができる。日本語、英語、中国語などの複数言語でワールドワイド展開するタイトルの開発を大幅に効率化する。

・サウンドミドルウェア「CRI ADX2」と連携
CRIの統合型サウンドミドルウェア「CRI ADX2」と連携し、口パターンとサウンドを同一のツールで編集することができます。音声波形データを見ながら口の形やタイミングなどを調整することができるため、スピーディな開発に貢献する。


■CEDEC2019出展概要 
会 期:9月4日~6日
場 所:パシフィコ横浜
出展概要:累計5,000タイトル以上に採用されているオーディオミドルウェア「CRI ADX2」、および今秋リリースの音声解析リップシンクミドルウェアの最新技術展示を行う。ADX2ではUnreal Engine 4向けの「サウンド空間デザイン機能」やワークフロー改善に
貢献する新機能などを紹介します。新リップシンクミドルウェアでは実際のモデルデータを使用したリアルタイム音声解析技術のデモを中心に紹介する。

セッション:9月4日13時30分〜14時30分

「キャラクターをより魅力的に!ゲーム向けリップシンクミドルウェア」
https://cedec.cesa.or.jp/2019/session/detail/s5ce392857c2d5


 
気に入ったらいいねしよう


この記事が気に入ったら

いいね!しよう
最新情報をお届けします
Twitterで Social VR Info をフォローしよう!




リスト
このエントリーをはてなブックマークに追加

あわせて読みたい( CRI・ミドルウェア

ピックアップ

記事ランキング

1 【PSVR】遂に『スパイダーマンVR』が国内で無料配信開始 糸を出し、クレーンに登り、街を見渡す
2 AR最前線…『ポケモンGO』池袋はポケモン発生地の宝庫 名所として知られる池袋西口公園&サンシャインシティを巡る
3 PSVRが24,980円(税抜)で12月6日から限定販売 「PS4 大バンバン振る舞い!今すぐカモン!キャンペーン」にて…VRタイトルのクーポン2本分が付くセットも
4 【年始企画】「Epic Games Japan」代表・河崎高之氏に聞く去年の事・今年の事
5 「ジェクサー・フィットネス&スパ上野」、VRを使ったエアロバイクを導入
6 セガ エンタテインメント、ホラーVRアトラクション『タブー』を「SEGA VR AREA AKIHABARA」で稼働
7 『篠崎愛VR』iOS版が配信開始 自宅で特別なデート体験を
8 Nreal、エミュレータ機能追加 没入型MRのアプリテストが可能に
9 SAOへの第一歩 荒野行動のNetEaseがオープンワールドVR MMO「Nostos」を2019年にリリースへ…SpatialOSで世界構築も
10 【PSVR】『スペースチャンネル5 VR あらかた★ダンシングショー』を2019年にリリースへ TGS2018のSIEブースで出展も
11位以下のランキングを見る

注目の施設・ゲームなど