１．担当ＰＭ

   北野　宏明　（株式会社ソニーコンピュータサイエンス研究所　取締役副所長）

２．採択者氏名

３．プロジェクト管理組織

　 財団法人 国際メディア研究財団

４．採択金額

　 10,000,000 円

５．テーマ名

　 Monalisa-"音を見、画像を聞く"ソフトウェア

６．関連Webサイト

　　http://monalisa-au.org/plog/

７．申請テーマ概要

　　Monalisaは"音を見，画像を聞く"ソフトウェアである．
　　Monalisaは音を画像へ，画像を音へとその構造を保ったまま変換するエンジンを持つ．そして，その変換の過程もしくは結果に対して，音処理用プラグイン/画像処理用プラグインを使ったリアルタイムなエフェクト処理を行うことが出来る．その際に，Monalisaでは，音は音，画像は画像といった専用のプラグインで処理する必要はない．Monalisaではプラグイン・ホスト機能により画像を音処理用プラグインで処理することも，音を画像処理用プラグインで処理することも可能である．例えば，画像にディレイをかけて，その画像を重ねあわせたり，音にグレイスケール処理をして，音を平坦にすることができる．このように，Monalisaでは，画像・音の相互変換を行うエンジンによって，ユーザーは画像と音の両者の違いを意識することなくリアルタイムなエフェクト処理を行うことができる．
　　また，Monalisaの機能を備えた，音処理用プラグイン/画像処理用プラグインも提供する．これにより他のプラグイン対応ソフトウェアにて，Monalisaのプラグイン・ホスト機能を使う事が出来る．これらのプラグインは，”音用のアプリケーションで画像用プラグインによる処理ができたら”，”画像用のアプリケーションで音用のプラグインによる処理ができたら”，そんな"もしも"を提供する．
　　現在は画像から音への変換エンジンと，音のリアルタイムなエフェクト処理が実装済みであり，ベータ版をwebにて公開中である．未踏開発期間では，音から画像への変換エンジン，画像のリアルタイムなエフェクト処理，およびMonalisaの機能を他のプラグイン対応ソフトウェアで使用できる音処理用プラグイン/画像処理用プラグインを開発する．

８．採択理由

　 画像と音を相互変換するソフトウエアの開発である。現在の提案のままで、どれだけ一般的な普及になるかは不明であるが、その筋の人間にとっては、非常に面白いものになるであろう。今後の課題は、そのシステムが、どれだけ一般的ユーザやＭＩＤＩユーザなどの利用が可能な加工が可能になるかという点にある。この点は、ＰＭとの議論で、十分修正可能であると考える。ＭＩＤＩや音楽・音響分野での新たな方法論を開拓する可能性の大きい提案である。提案者もこの分野に知識・経験があり、その点での不安はない。