企画概要


普段使っている私達の言葉が形を持ったら… そんな空想を思い描いたことはありませんか?  仮想世界ならではの,音と文字が融合した世界. そんなファンタジックな世界を想像してみてください. この企画は,音声を主とした複合現実感(MR)システムの構成という観点から生まれました.
音声を視覚的に楽しむにはどうしたら良いか? 私たちなりのその答えがこの企画には詰まっています.


この世界では,あなたが発声した音声が文字や動物へと変化し様々なインタラクションを行います.
発声した内容はCGの文字となって空間を浮遊します. また,あなたの好きな動物の名前を言うと,
その動物がかわいいキャラクタとなって現れるかもしれません.
あなたの声から生まれる不思議な世界で,楽しいひと時を過ごしてみませんか?


体験


MR Voiceは大きく分けて2つのフェイズによって構成されています. 第1フェイズでは体験者が発声した内容がCGの文字となって可視化され, 色とりどりの文字となり,視界いっぱいに浮遊する様子を楽しむことができます. さらに,動物の名前を発声した場合は,文字がさらに具現化され,CGの動物が誕生します.


第2フェイズは,第1フェイズで出現させたCGの文字や動物達と交流することができます. 入力に特殊な装置を必要とせず,手を叩く場所によって様々な交流が可能な点が最大の特徴です. また,動物の鳴き声の聴こえ方が動物の移動に伴って変化する仕組みも取り込まれています.




音声認識,音源位置推定,そして三次元音場…
これら3つの技術が組み合わさって,MR Voiceは形成されているワニ!