KDDI総合研究所、画像認識技術で抽出した顔の表情データからAIで表情を予測してアバター描画する技術を開発

昨今、3Dアバターを使った活動や交流が身近になっているが、現状では表情を認識し、アバターの描画処理や描画した映像の伝送などによる遅延が発生し、3Dアバターに反映するまでにはタイムラグが生じる。

そうした中、株式会社KDDI総合研究所は本日、画像認識技術で抽出した顔の表情データから、AIで未来の表情を予測してアバター描画する技術を開発したことを発表した。

今回の技術では、表情データそのものに加え、表情データの単位時間当たりの変化量(微分値)を入力データとして、未来の表情データを推定する機械学習モデル(再帰型ニューラルネットワーク※)を新たに開発することで、予測精度の向上を図った。

KDDI総合研究所、画像認識技術で抽出した顔の表情データからAIで表情を予測してアバター描画する技術を開発
表情予測技術を活用したメタバース上での3Dアバター対話のイメージ。

機械学習モデルの内部構造を変えることなく、入力データを改良することで、予測処理の負荷を増やすことなく、複雑な時系列変化に対応できるようになった。

また、KDDI総合研究所は、スマートフォン向けにフォトリアルな3DアバターのAR配信技術を開発しており、今回の技術と併用することにより、通信環境に関わらず活用することが可能となる。

今後は、この技術の予測精度をさらに高めるとともに、低速な通信回線においても映像伝送にかかる遅延を相殺できるよう、予測可能な時間の延伸に取り組むとしている。

再帰型ニューラルネットワーク: 機械学習の1つであるニューラルネットワークを拡張して時系列データを扱えるようにしたもの。出力を再び入力に利用する再帰型のネットワーク構造により、過去の情報に基づいた予測を行うことが可能。

無料メルマガ会員に登録しませんか?

膨大な記事を効率よくチェック!

IoTNEWSは、毎日10-20本の新着ニュースを公開しております。 また、デジタル社会に必要な視点を養う、DIGITIDEという特集コンテンツも毎日投稿しております。

そこで、週一回配信される、無料のメールマガジン会員になっていただくと、記事一覧やオリジナルコンテンツの情報が取得可能となります。

  • DXに関する最新ニュース
  • 曜日代わりのデジタル社会の潮流を知る『DIGITIDE』
  • 実践を重要視する方に聞く、インタビュー記事
  • 業務改革に必要なDX手法などDXノウハウ

など、多岐にわたるテーマが配信されております。

また、無料メルマガ会員になると、会員限定のコンテンツも読むことができます。

無料メールから、気になるテーマの記事だけをピックアップして読んでいただけます。 ぜひ、無料のメールマガジンを購読して、貴社の取り組みに役立ててください。

無料メルマガ会員登録