YouTuber御用達? ADX LipSyncは車載エージェントのアバターを進化させる…オートモーティブワールド2020

CRIミドルウェアのリップシンクミドルウェア(オートモーティブワールド2020)
CRIミドルウェアのリップシンクミドルウェア(オートモーティブワールド2020)全 6 枚

カーナビのガイド音声にアニメキャラの声優を使ったものがあるが、コネクテッドカーにAIエージェントが搭載されるようになると、音声だけでなく画面にアバターが表示されるようになるかもしれない。

【画像全6枚】

エージェントを音声だけでなく画像を伴う場合、人や動物のアバターでの問題は唇の動きをどう再現する(リップシンク)かという問題がある。アニメーションでもこの処理はヘタをすると職人の手作業で口の動きを変えなければならない。この問題は、音声データやマイクの入力に対して、自動で唇の動きを再現してくれるしくみがあれば解決する。

CRIミドルウェアが展示していたADX LipSyncはまさにこれを実現してくれる。同社は、音声処理のミドルウェアを手掛ける会社。高価なDSPやアンプ(ハードウェア)を利用せず、高音質な再生といった信号処理をするソフトウェアを得意とする。たとえば、PC内蔵の安価なスピーカーでもデジタル信号処理を施した音声を作ることで、臨場感のある音、サラウンド(的な)再生を可能にする。車内オーディオなら、限られたスピーカー数でマルチチャネル、定位制御などもソフトウェアだけで対応させることもできる。

ADX2という音源のオーサリングツールももっており、ADX LipSyncと組み合わせて動画やゲーム音声やサウンドを統合的に作ることができる。また、各種開発環境、プラットフォーム(UnityやUnreal Engine 4など)にも対応し、生成できる動画モデルは2D、3Dどちらも対応する。アニメにも映画にも使えるということだ。

言語ごとの母音や特殊な子音・音素を識別できるので、多言語の母音、子音・音素に対応する。

デモでは、マイクの音声を直接拾って、画面上のアバター(アニメキャラ)の口を動かしていた。リアルタイムのシミュレーションが可能ということは、YouTuberは、モーションだけでなく口の動きもリアルに再生できるようになる。車載のAIエージェントがアバターを持つようになれば、その口の動きにも応用できる。

《中尾真二》

テクノロジージャーナリスト・ライター  中尾真二

アスキー(現KADOKAWA)、オライリー・ジャパンの技術書籍の企画・編集を経て独立。現在はWebメディアを中心に取材・執筆活動を展開。インターネットは、商用解放される前の学術ネットワークの時代から利用し、ネットワーク、プログラミング、セキュリティについては企業研修講師もこなす。エレクトロニクス、コンピュータのバックグラウンドを活かし、自動車業界についてもテクノロジーを中心に取材活動を行う。

+ 続きを読む

【注目の記事】[PR]

ピックアップ

レスポンス公式TikTok

教えて!はじめてEV

アクセスランキング

  1. レクサス『ES』新型、世界初技術「レスポンシブヒドゥンスイッチ」採用…東海理化が開発
  2. レクサス『NX』ビッグマイナーチェンジはこうなる…新デザイン採用で商品力を大幅強化か
  3. メルセデスベンツ『GLC』新型、独ブレーメン工場で量産開始…発売3か月の受注が電動車史上最多に
  4. 三菱『アウトランダー』に本格オフロード仕様登場か!? トライトン譲りの「レイダー」
  5. 三菱『パジェロ』新型、「マルチメーター」採用へ…走行状況をリアルタイム表示
ランキングをもっと見る

ブックマークランキング

  1. 中国勢にも対抗する競争力のあるSDV開発に必要なものとは…アステモサイプレモス 木村篤仁氏[インタビュー]
  2. ボッシュ、ヒューマノイド向け需要拡大でロボティクス事業を強化
  3. アステモが執行役員を解任、「職務遂行の適切性に問題」…子会社社長も交代
  4. SDV時代、進化するアフターマーケットの“今”と“未来”が一堂に…「アウトメカニカ フランクフルト 2026」9月8~12日開催
  5. 7/27申込締切 【激変するインド自動車産業】政策転換とEVシフト、クイックコマースが拓く日本企業の勝機
ランキングをもっと見る