内田洋行ビジネスITフェア2024

チューリング、自動運転向けVLAモデルデータセット「CoVLA Dataset」を公開

Turing株式会社は、自動運転向けVLAモデルデータセット「CoVLA(コブラ)Dataset」を開発し、一部を公開した。

「CoVLA Dataset」は、車載センサデータを含む80時間以上の運転データで構成された、自動運転向けVLAモデルデータセットだ。

データ処理からキャプション生成まで自動化した手法で構築しており、同データセットを用いて開発したVLAモデル「CoVLA-Agent」は、画像から得た運転環境を自然言語で説明し、適切な経路計画を生成することが可能だ。

チューリング、自動運転向けVLAモデルデータセット「CoVLA Dataset」を公開
「CoVLA」の概要図

「CoVLA Dataset」を活用したマルチモーダル大規模言語モデル (以下、MLLMs)が、さまざまな運転シナリオにおいて、どの程度の能力を発揮するかを検証した結果、同モデルが一貫性のある言語生成と行動出力において優れた性能を示し、視覚・言語・行動データを用いたVLAモデルが自動運転分野において効果的なアプローチであることが確認されたのだという。

また、この成果は、経済産業省およびNEDOの生成AI開発支援「GENIAC」の開発の一環として実施され、上記のほかにも、自動運転マルチモーダルモデルのベースとなる日本語LLM「LIama-3-heron-brain-70B,8B」や、高速なマルチモーダル分散学習ライブラリ「vlm-recipes」、大規模な視覚-言語データセット「Wikipedia-Vision-JA」、「Cauldron-JA」など、複数成果を公開しているとのことだ。

今後は、学術機関向けに「CoVLA Dataset」の全データセットを公開することも視野に、より安全かつ信頼性の高い自動運転システムの実現を目指すとしている。

なお、同データセットの研究論文「CoVLA: Comprehensive Vision-Language-Action Dataset for Autonomous Driving」が、コンピュータービジョンの国際会議「WACV 2025(IEEE/CVF Winter Conference on Applications of Computer Vision 2025」において採択されたのだという。

[「CoVLA Dataset」の紹介動画]

無料メルマガ会員に登録しませんか?

膨大な記事を効率よくチェック!

IoTNEWSは、毎日10-20本の新着ニュースを公開しております。 また、デジタル社会に必要な視点を養う、DIGITIDEという特集コンテンツも毎日投稿しております。

そこで、週一回配信される、無料のメールマガジン会員になっていただくと、記事一覧やオリジナルコンテンツの情報が取得可能となります。

  • DXに関する最新ニュース
  • 曜日代わりのデジタル社会の潮流を知る『DIGITIDE』
  • 実践を重要視する方に聞く、インタビュー記事
  • 業務改革に必要なDX手法などDXノウハウ

など、多岐にわたるテーマが配信されております。

また、無料メルマガ会員になると、会員限定のコンテンツも読むことができます。

無料メールから、気になるテーマの記事だけをピックアップして読んでいただけます。 ぜひ、無料のメールマガジンを購読して、貴社の取り組みに役立ててください。

無料メルマガ会員登録