最終更新:2011-04-19 (火) 15:20:37 (4753d)  

MMDAgent
Top / MMDAgent

音声インタラクションシステムMMDAgent ～あの3Dキャラクターとおしゃべり！～

http://www.mmdagent.jp/

概要

名古屋工業大学国際音声技術研究所（代表：徳田恵一）はこの度、一般的なPCで動作可能な音声インタラクションシステム構築ツールキットMMDAgentを試作いたしました。MMDAgentを用いて構築されたシステムにより、ユーザーは画面上のキャラクターと、それがまるで生きているかのような会話を楽しむことができます。

MMDAgentは音声認識・音声合成・キャラクター表示・音声インタラクション制御などの要素技術を結集したソフトウェアツールキットで、次のような特徴を有しています。

  • (1)　当研究所で長年にわたり開発・公開している音声合成ツールキットHTS、音声認識エンジンJulius他をベースに独自開発した最先端の音声合成・認識技術を高度に統合しており、高速で高精度、かつ表情豊かな会話を実現可能。
  • (2)　キャラクター表示部は、OpenGLを用いた3次元による高度な描画機能を有しており、トゥーンレンダリング?やシャドウマップ?法を駆使したリアルな3D描画、物理エンジンを用いたリアルな表現が可能。
  • (3)　音声インタラクション制御部は、様々な内部状態や外部イベント（音声入力等）に呼応した、細やかかつ豊かな音声対話シナリオを、専門知識無しに記述することが可能。
  • (4)　オープンソースのソフトウェアとして公開予定。各種モデル等のデータ形式はオープン仕様となっているため、キャラクターの3Dモデル・モーション・声だけでなく対話シナリオに至るまで、自在にカスタマイズしたり、既存モデルやデータを利用したりすることができる。

なお、等身大のデジタルサイネージ用大型ディスプレイに組み込んだ本システムを、10月5日から幕張メッセで開催されるCEATEC? Japan 2010に出展いたします。ご来場の皆さまには実際にキャラクターとの生き生きとした会話を楽しんでいただけます。名古屋工業大学国際音声技術研究所は、名古屋工業大学大学?内に設置されたプロジェクト研究所であり、同大学の徳田・李研究室が中心となって音声言語処理?に関する国際的な研究プロジェクトに取り組んでいます。音声技術に関連したトップレベルの研究成果をオープンソースソフトウェアの形で積極的に公開し続けています。

↑

動画の解説

音声言語情報処理研究の一環として開発された「音声インタラクション構築ツールキット：MMDAgent」の紹介動画です。MMDAgentは音声認識・音声合成・3Dキャラクター表示・音声インタラクション制御などの要素技術を結集したソフトウェアツールキットで、ユーザーは、本ツールで構築されたシステムにより、画面上の3Dキャラクターと生き生きとした会話を楽しむことができます

↑

関連

↑

動かし方

↑

シナリオ

↑

参考




検索：