MMDAgent-EX icon

MMDAgent-EX

  • MMDAgent-EX poster MMDAgent-EX screenshot 1

The description of MMDAgent-EX

【ホームページ: https://mmdagent.lee-lab.org/】

MMDAgent-EX は、キャラクターエージェントとのお喋りのような「音声対話」あるいは「音声によるやりとり」を自在に構築できるプラットフォームです。対話スクリプト、3-Dモデルおよびモーションファイル(MikuMikuDance互換)、音楽やテキスト、画像などを組み合わせて、エージェントと会話を含めたやりとりを行うシステムを自在に構築できます。

音声認識エンジンJulius、音声合成エンジン OpenJTalk および MikuMikuDance 互換のレンダラーを組み合わせて構成されたソフトウェアであり、全てのモジュールがオールインワンで統合された単体アプリケーションです。コンテンツを一度ダウンロードすれば、あとはローカル環境で音声対話が高速に動作します。

MMDAgent-EX(旧名:Pocket MMDAgent)は MMDAgent をスマートフォン向けに拡張したアプリです。Web上で公開されている MMDAgent 用の音声対話システム(音声対話コンテンツ)をダウンロードして再生できるほか、システムの自動更新、対話スクリプトの自動同期、メニューやダイアログ、ボタンなどの追加UIサポート、コンテンツ配信者へのログ収集・フィードバック機能等を備えています。学術実験からエンターテインメントまで、コンテンツ提供者とユーザを繋いだ幅広いエージェント対話の実行環境を提供します。

誰でも、作成した音声対話コンテンツをWebサーバーへアップ・公開することで、Pocket MMDAgent で再生することができます。また、設定によってはユーザからのフィードバックを直接得ることができます。

対話コンテンツの作成方法や各部の仕様については、MMDAgent-EX のホームページ(旧Pocket MMDAgent のページから近日リニューアル予定)にて公開します。

◆動作環境

Android 6.0 以降

◆本アプリケーションについて

MMDAgent-EX は名古屋工業大学大学院情報工学専攻の 李 研究室のメンバーが主となって開発しています。音声認識・音声合成・対話管理を含めた基本機能の大部分は MMDAgent と共通です。本アプリケーションは音声対話システムおよび対話的音声インタフェースの研究開発のプラットフォームとして、ならびに一般ユーザやクリエイターによる音声対話コンテンツの創造と利用を促進するためのプラットフォームを目指して作成されました。

Show More

Info Update

MMDAgent-EX 1.3 Update 2019-12-23 MMDAgent-EX はクラウド環境で音声対話・音声インタラクションを遊び、開発し、研究するためのプラットフォームを目指して継続的に開発され続けているアプリケーションです。 MMDAgent-EX は MMDAgent の拡張版で、マルチOSのサポート、Webベースのコンテンツ共有、 PMX互換レンダリングを含むMMDとの互換性改善、 REST API および Apache Kafka を用いたロギングといった機能が追加されています。また、音声APIの刷新(Google Oboe の利用)、64bit 対応など、大幅な安定性とパフォーマンスの向上が行われています。バージョン1.3 はベータ版の正式公開バージョンです。ドキュメントおよび詳細は、MMDAgent-EX のホームページ https://mmdagent.lee-lab.org/ で2019年中に公開される予定です。
0.0
0 total
5
4
3
2
1

Leave a Reply

Your email address will not be published. Required fields are marked *

Rating review: