更新日：2025/03/17

音声理解LLM技術

目次

概要

声の内容に加えて話し手や話し方の特徴を理解し日本語母語話者のように回答します

技術課題

従来技術は、音声認識・性別分類など種別ごとに認識機能を提供しており、複数の音声情報に基づく統合的推論や根拠の提示は困難でした。

研究目標

多様な音声情報を理解し統合的な推論や根拠提示を可能とする技術を実現し、AIコールルーティングなどのビジネス創出をめざします。(市場規模2400億円)

要素技術

  • 日本語音声特徴抽出モデルと日本語LLMを効率的に結合する新たな音声理解モデルの構築
  • 音声理解に適した学習データ生成・選別技術
  • 音声情報と言語との関係性獲得を促進するモデル学習技術

市中技術差異点

  • トップ国際技術にも採録された音声理解モデルの利用、及び日本語に特化した学習データ生成により、日本語における高い音声理解精度を実現します。