YouTuber御用達? ADX LipSyncは車載エージェントのアバターを進化させる…オートモーティブワールド2020

CRIミドルウェアのリップシンクミドルウェア(オートモーティブワールド2020)
CRIミドルウェアのリップシンクミドルウェア(オートモーティブワールド2020)全 6 枚

カーナビのガイド音声にアニメキャラの声優を使ったものがあるが、コネクテッドカーにAIエージェントが搭載されるようになると、音声だけでなく画面にアバターが表示されるようになるかもしれない。

エージェントを音声だけでなく画像を伴う場合、人や動物のアバターでの問題は唇の動きをどう再現する(リップシンク)かという問題がある。アニメーションでもこの処理はヘタをすると職人の手作業で口の動きを変えなければならない。この問題は、音声データやマイクの入力に対して、自動で唇の動きを再現してくれるしくみがあれば解決する。

CRIミドルウェアが展示していたADX LipSyncはまさにこれを実現してくれる。同社は、音声処理のミドルウェアを手掛ける会社。高価なDSPやアンプ(ハードウェア)を利用せず、高音質な再生といった信号処理をするソフトウェアを得意とする。たとえば、PC内蔵の安価なスピーカーでもデジタル信号処理を施した音声を作ることで、臨場感のある音、サラウンド(的な)再生を可能にする。車内オーディオなら、限られたスピーカー数でマルチチャネル、定位制御などもソフトウェアだけで対応させることもできる。

ADX2という音源のオーサリングツールももっており、ADX LipSyncと組み合わせて動画やゲーム音声やサウンドを統合的に作ることができる。また、各種開発環境、プラットフォーム(UnityやUnreal Engine 4など)にも対応し、生成できる動画モデルは2D、3Dどちらも対応する。アニメにも映画にも使えるということだ。

言語ごとの母音や特殊な子音・音素を識別できるので、多言語の母音、子音・音素に対応する。

デモでは、マイクの音声を直接拾って、画面上のアバター(アニメキャラ)の口を動かしていた。リアルタイムのシミュレーションが可能ということは、YouTuberは、モーションだけでなく口の動きもリアルに再生できるようになる。車載のAIエージェントがアバターを持つようになれば、その口の動きにも応用できる。

《中尾真二》

【注目の記事】[PR]

ピックアップ

教えて!はじめてEV

アクセスランキング

  1. <新連載>[車内エンタメ最新事情]音楽を聴く場合、スマホはどう繋ぐ? 便利なのは? 音が良いのは?
  2. コメリが洗車グッズの新商品を発売、撥水力2倍のカーワックススプレーなど4アイテム
  3. 世界初、個人所有できるレベル4自動運転「ロボカー」誕生、2026年に納車開始
  4. 「本当に世に出るとは」わずか1トンの車体に800馬力V12を搭載、「超アナログ」なスーパーカーにSNS沸く
  5. 不適切利用47%、カメラ式駐車場管理システムで判明…熊野白浜リゾート空港
ランキングをもっと見る

ブックマークランキング

  1. 「AIディファインド」の衝撃、日本の自動車産業は新たな波に飲み込まれるのか…アクセンチュア シニア・マネジャー 藤本雄一郎氏[インタビュー]
  2. EV充電インフラ-停滞する世界と“異常値”を示す日本…富士経済 山田賢司氏[インタビュー]
  3. ステランティスの水素事業撤退、シンビオに深刻な影響…フォルヴィアとミシュランが懸念表明
  4. SUBARUの次世代アイサイト、画像認識技術と最新AI技術融合へ…開発にHPEサーバー導入
  5. 「ハンズオフ」は本当に必要なのか? 高速での手離し運転を実現したホンダ『アコード』を試乗して感じた「意識の変化」
ランキングをもっと見る