１．担当ＰＭ

   原田　康徳　（NTT コミュニケーション科学基礎研究所　主任研究員）

２．採択者氏名

３．プロジェクト管理組織

　 NTT出版株式会社

４．委託金支払額

　 4,728,908 円

５．テーマ名

　 同一フレーム多時間を利用した映像アプリケーションの研究開発

６．関連Webサイト

　　http://www.flfr.net

７．テーマ概要

　本プロジェクトは、時間軸に注目した動画表現の拡張のための研究、及びソフトウェア開発である。本ソフトウェアを用いて、利用者は、動画のある領域を、0.5 秒早く進めるとか、その0.5 秒早い領域が動くと言った表現を簡単に作ることが出来る。

８．採択理由

　一つの動画を複数の時間軸によって操作するシステムの開発．動画の特定の領域だけの時間を進めたり遅らせたりする．メディアの不思議さ楽しさを子供達に伝えるツールとして，メディアアートの基礎ツールとしても期待できる．

９．開発目標

　本ソフトウェアは、動画の時間軸表現に注目したソフトウェアである。動画は、映画の例を見ればわかるように、写真から発展してきた。秒間20-30 枚の写真を連続してみせれば、人間はその写真内の物体があたかも動いているかのように知覚する。その代表的な表現形態が、映画である。映画はリュミエール兄弟がシネマトグラフという名で完成させた表現技法である。その際、１秒間に何十コマという早さで撮影された写真を再び高速で再生することで動きを表現した。写真においては、一こま一こまが同じ時間に撮影される。朝焼けと夕焼けが同時に映るという表現は、写真に特別な加工を施さない限り表現できない。その写真を表現のベースとして持つ映画においても、一つのシークエンスでは、基本的に映像が正の時間軸で表現される。本プロジェクトは、その様な映像表現を拡張する試みとして企画された。一つのフレームの中に複数の時間軸を持った映像表現はどの様に可能かというテーマを追求している。

１０．進捗概要

　本ソフトウェアの概要を紹介する。本ソフトウェアでは、鑑賞者が、何の映像がどの様に動くかをxml で指定する。本ソフトウェアはそのxml を解釈して、その指示に従って、映像を再構成する。
　一般的な表現は以下の様になる。
　<?xml version="1.0" encoding="Shift_JIS" ?>
　<FLFR version="0.000 ４">
　<TRgn name="background" cliptype="clip">
　<Rgn x="0" y="0" w="720" h="480" starttime="0.0" />
　<Rgn x="0" y="0" w="720" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_00" cliptype="clip">
　<Rgn x="360" y="0" w="60" h="480" starttime="0.0" />
　<Rgn x="360" y="0" w="60" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r01_00" cliptype="clip">
　<Rgn x="420" y="0" w="60" h="480" starttime="0.0" />
　<Rgn x="420" y="0" w="60" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r02_00" cliptype="clip">
　<Rgn x="480" y="0" w="60" h="480" starttime="0.0" />
　<Rgn x="480" y="0" w="60" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r03_00" cliptype="clip">
　<Rgn x="540" y="0" w="60" h="480" starttime="0.0" />
　<Rgn x="540" y="0" w="60" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r04_00" cliptype="clip">
　<Rgn x="600" y="0" w="60" h="480" starttime="0.0" />
　<Rgn x="600" y="0" w="60" h="480" starttime="1.0" />
　</TRgn>
　<Play>
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.000000" tRgn="background" />
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.100000" tRgn="r00_00" />
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.150000" tRgn="r01_00" />
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.200000" tRgn="r02_00" />
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.250000" tRgn="r03_00" />
　<movie 　　type="movie" 　　filename="movie/seesaw.mov" 　　speed="1.300000" tRgn="r04_00" />
　<movie 　　type="sound" 　　filename="movie/seesawsound.mp3" 　　speed="1.0" tRgn="background" />
　</Play>
　</FLFR>
　この様な、xml を書いてソフトウェアに読み込ませるとソフトウェアは以下の図の様な動画を生成し，シーソーが曲がりくねったような不思議な映像を見ることが出来る。

図１: シーソーに乗る二人

　本プロジェクトでは、以下の様な機能を実装した。

　　・xml を読み込む機能
　　・読み込んだxml を解釈する機能
　　・その指定に基づいて、動画を切り抜き重ね合わせる機能
　　・その映像の結果を保存する機能
　特に、どの様に画面から切り取り、重ね合わせるかについては、xml のタグ形式で以下のような機能を用意している。

　　・複数の領域を切り取る機能
　　・切り取った領域を徐々に移動させる機能
　　・マウスやキーボードなどからの入力を手がかりに複数のアクションを起こす機能
　　・半透明にする機能
　　・文字を入力する機能
　　・再生する映像の再生速度を変化させる機能
　　・スタート位置から、任意の時間遅らせて再生させる機能
　などがある。これらの機能は、タグという形で実装している。主なタグと、属性を列挙する。

　・<TRgn>
　-属性name,cliptype
　・<Rgn>
　-属性、(x,y,w,h)(切り取る領域),(starttime)(スタートする時間)
　・<Action>
　-属性、onKey(k,v,a),onMouseOver,offMouseOver,target,effect
　・<movie>
　-属性movie type,filename,filename,speed,inTrim,outTrim,tRgn
　などがある。このソフトのユーザはこれらのタグを書くことで、思い思いの映像を作っていくことが出来る。

１１．成果

　具体的に開発したタグの内容について、説明する。始めに、どの様なタグ・属性があるか説明する。その後、利用される機能ごとにタグの解説を行う。最後に、そのタグを利用してどの様な映像が制作できるか作例を示す。

　１.タグ説明
　ここでは開発したタグの内容を見ながらどの様なタグがあるか、解説していこう。

　１．１　主要タグ
　主なタグは、
　　・＜FLFR＞　FLFRファイル全体を表す。
　　・＜TRgn＞　名前を付けることが出来、子要素に、＜Rgn＞タグを持ち、クリッピングの為の時間、領域を指定する。
　　・＜Rgn\textgreater＞ 実際のクリッピング開始領域と、開始時間を指定する。
　　・＜Action＞　マウスやキーボードを用いての、イベントを指定する。
　　・＜movie＞　再生すべき映像ファイルや、どのTRgnと結びつけるかを指定する。
　の五つになる。このタグとそれに合う、属性を組み合わせることで様々な映像表現が可能になる。それでは、個別のタグを説明していこう。

　１．２　＜FLFR＞タグ
　FLFRファイル全体を表すタグ
　＜FLFR＞＜ /FLFR＞の中に全てのタグを含む。

　属性 version, FLFRのヴァージョンを指定する。タグや属性の、改変や追加に対応するために、用意している。

　１．３　＜TRgn＞タグ　　
　＜Rgn＞を子要素として持ち、どの時間にどの領域を操作するのかを指定する。
　属性 name,cliptype 切り取るタイプを指定する。タイプには、2種類あり、clipとscaleに別れている。nameは、Actionタグ及びmovieタグで使用する。
　clipは、元になる領域、例えば、座標(10,10)から、(200,200)の領域を切り取り、他の画像の、(10,10,200,200)に重ねる。
　一方、scaleは、全体の領域(0,0,640,480)から指定された領域に縮小して、例えば(10,10,200,200)に重ねて表示する(clipは単なる切り取り、scaleは元映像の拡大・縮小の効果を加えることが出来る)。

　１．４　＜Rgn＞タグ
　＜TRgn＞を親要素として持つ。

　属性 x,y,w,h,starttime　どの点(x,y)からどの範囲(w,h)(Width,Height)を切り取るかを指定する。starttimeは開始される時間を指定する。時間は、ムービーの長さに対して、割合で指定する。0.1と指定した場合、10\%の時間として解釈される。
　また、＜TRgn＞の中に＜Rgn＞は必ず２つ以上無ければならない。例えば、

　<Rgn x="100" y="100" w="200" h="200" starttime="0.1">
　<Rgn x="20" y="20" w="100" h="100" starttime="0.2">

　というタグは、時間10\%から20\%の間に、座標(100,100)から(20,20)へ徐々に移動し、切り取る大きさは、(200,200)から(100,100)に徐々に縮小せよという指定になる。
　下の図の様に、徐々に小さくなりながらクリッピングする。

図２: Rgn

　１．５　＜Action＞タグ
　マウスやキーボードを用いて、指定したTRgnに対して、エフェクトを適応する。
　属性 type,target,effect typeで入力デバイス(マウス、キーボードを指定する)。targetでエフェクトの対象になるTRgnのnameを指定する。effectで様々なエフェクトは、changeRect,changeSpeed,changeTransparent,changeLayerの四つがある。changeRectは、アクションをトリガーにターゲットの、位置や大きさを変更する。(200,200,10,10)と記述すれば、座標(200,200),大きさ(10,10)の形で切り抜かれる。
　changeSpeedはスピードを変化させる。changeSpeed(2.0)は、再生速度を2.0倍にするという意味になる。
　changeTransparentは、映像の透明度を完全な透明(0.0)から不透明(1.0)まで変化させる。
　changeTransparent(0.5)は、ちょうど半透明にする。
　changeLayerは、映像の重なり順を変える。図のように、changeLayer(-5)などのように、layerの値を変化させることで、どの映像が前面に来るのかをコントロールできる。

図３: changeLayer

　１．６　＜movie＞タグ
　映像や音楽、テキストなどを読み込む。映像の再生位置や、再生速度、切り抜かれる領域を指定する。属性 type,filename,inTrim,outTrim,speed,tRgntypeは、読み込むファイルの属性を指定する。ファイル属性は、"movie,sound,text"の３種類ある。movieは、映像を読み込む。soundは音楽を読み込む。textはテキストファイルを読み込む。filenameは、読み込むファイル名の相対パスを指定する。inTrim,outTrimは図のように映像や音楽の再生位置を指定する。

図４: inTrim,outTrim

　tRgnは、上の＜TRgn＞タグにつけた名前を元に、どの領域を切り取るのか指定する。

　２.機能に応じたタグ説明
　上記では、個々のタグの機能を説明してきたが、これからは実際の利用を想定しながら、タグの説明を行う。

　２．１　ファイルの読み込みと再生
　ファイルを読み込む場合は、以下の様に指定する。
　<Play>
　<movie 　　type="movie" 　　filename="movie/candle.mov" 　　speed="1.0" tRgn="background"/>
　</Play>

　そうすると、./movie/candle.movファイルを、tRgn(background)に結び付けて、再生スピード一倍にて読み込む。
　基本的には、QuickTime 形式のファイルの読み込みを想定している。いくつか実験を行った結果、h263形式で動画を圧縮すれば、綺麗でかつ軽く再生できる。また、

　<movie type="movie" filename="movie/candle.avi" inTrim="0.0"
　outTrim="0.0" speed="1.0" tRgn="background"/>

　の様に指定すれば、avi形式のファイルも再生できる。ただし、divxやxvdなどで符号化された動画は、あらかじめwindowsなどにcodecがインストールされていないと再生できない。また、mpeg1,mpeg2形式のファイルは、現時点では再生できない。

　２．２　領域を切り出し、背景動画を重ねる方法
　動画を背景と重ねるには、以下の方にxmlを記述する。わかりやすくする為に、xml中に漢字で表す。また、xml表記を一部省略する。
　<TRgn name='手前領域' >
　<Rgn x=10,y=10,w=100,h=100,starttime=0.0 />
　<Rgn x=10,y=10,w=100,h=100,starttime=1.0 />
　</TRgn>
　<TRgn name='背景領域'>
　<Rgn x=0,y=0,w=720,h=480,starttime=0.0 />
　<Rgn x=0,y=0,w=720,h=480,starttime=1.0 />
　</TRgn>

　<Play>
　<movie filename="背景動画" tRgn="背景領域"/>
　<movie filename="手前の動画" tRgn="手前領域"/>
　</Play>
　つまり、まずTRgnに領域名を名づけ、ついで、動画にその領域を結びつける。動画の重なり順は、＜Play＞タグ内の、＜movie＞タグの書かれた順によって決まる。後に書かれるほど、手前に表示される。また、

　<TRgn name='手前領域1' >
　<Rgn x=10,y=10,w=100,h=100,starttime=0.0 />
　<Rgn x=10,y=10,w=100,h=100,starttime=1.0 />
　</TRgn>
　<TRgn name='手前領域2' >
　<Rgn x=40,y=200,w=100,h=100,starttime=0.0 />
　<Rgn x=40,y=200,w=100,h=100,starttime=1.0 />
　</TRgn>
　<TRgn name='手前領域3' >
　<Rgn x=300,y=20,w=100,h=100,starttime=0.0 />
　<Rgn x=300,y=20,w=100,h=100,starttime=1.0 />
　</TRgn>

　<TRgn name='背景領域'>
　<Rgn x=0,y=0,w=720,h=480,starttime=0.0 />
　<Rgn x=0,y=0,w=720,h=480,starttime=1.0 />
　</TRgn>

　<Play>
　<movie filename="背景動画" tRgn="背景領域"/>
　<movie filename="手前の動画" tRgn="手前領域1"/>
　<movie filename="手前の動画" tRgn="手前領域2"/>
　<movie filename="手前の動画" tRgn="手前領域3"/>
　</Play>

　と記述すれば、複数の領域(この場合は、３つの領域)を図の様に手前から領域3,2,1,背景の順に重ねて再生できる。実施計画書では、矩形以外の任意の形状で、切り抜けることを目指したが、現時点では、矩形でしか切り抜けない。

　２．３　複数領域に別々の時間を与える方法
　上に見たように、複数の領域を重ね合わせて表示する方法を応用して、個々の領域に別々の再生時間を割りあてられる。
　その方法には、
　　・あらかじめ再生スピードを指定する方法、
　　・マウスなどが領域の上にきたらスピードを変化させる方法
　の2種類を実装している。
　・1のあらかじめ再生スピードを指定する方法は＜movie＞タグで、再生スピードを指定することで実現している。具体的には、

　<TRgn name='手前領域１' >
　<Rgn x=10,y=10,w=100,h=100,starttime=0.0 />
　<Rgn x=10,y=10,w=100,h=100,starttime=1.0 />
　</TRgn>
　<movie filename="背景動画" speed=1.0 tRgn="背景領域"/>
　<movie filename="手前の動画" speed=2.0 tRgn="手前領域1"/>

　という様に指定すれば、背景動画は、一倍の再生速度、手前の動画は、２倍の再生速度で再生される。手前の動画は、切り取られた領域で再生されており、結果的に、画面上には、１倍速で再生される動画と、２倍速で再生される動画の二つを同時に表示することができる。

　・2のマウスによって動的にスピードを変化させる方法上記の例ではあらかじめ、再生速度を指定しておかなければならなかったが、TRgn領域に、マウスを持ってくることで、事後的に再生速度をコントロールすることができる。
　その際は、＜Action＞タグを利用する。

　<Action type="マウスオーバー" target="手前領域" effect="チェンジスピード(2.0)" />

　の様に、Action タグを用いて、アクションのタイプ(マウスオーバー)と、影響を受ける領域(target="手前領域")、影響の種類(effect=チェンジスピード)を指定することで、マウスの動きをトリガーにして、後から手前領域の再生速度を変えることができる。

　２．４　領域を移動させる方法
　切り取られる領域を移動させる方法も、再生速度を変化させる方法と同じく、２種類の指定方法がある。ひとつは、TRgnタグ内のRgnタグを利用して、切り取る領域を移動させる方法。もうひとつは、Actionタグを利用して後から、領域を移動させる方法である。

　1,あらかじめ移動する領域を指定する方法として、切り取る領域を移動させるには、Rgnの値を指定すればよい。

　<TRgn name='手前領域' >
　<Rgn x=10,y=10,w=100,h=100,starttime=0.0 />
　<Rgn x=660,y=380,w=100,h=100,starttime=1.0 />
　</TRgn>

　と指定すれば、手前の領域の座標(x,y)は、(10,10)から(660,380)へと変化し、左上(開始時間0)から右下(開始時間1.0=つまり終了時間)へとゆっくり落ちていく。

　2,手動(マウス)を用いて切り取り領域を移動させる方法領域の移動には、再生スピードの変更と同じく、Actionタグを利用する。

　<Action type="マウスオーバー" target="手前領域" effect="領域移動(400,10,100,100)" />

　の様に指定すれば、マウスを手前領域に重ねた瞬間、手前領域は、座標(400,10)の場所へ移動する。以上の様に、タグを組み合わせることで、多彩な表現が可能になる。
　いくつかのサンプルと、その結果の動画のキャプチャーを、提示する。

　３.flfrを利用した映像の実例
　鏡の中の私、外の私
　<?xml version="1.0" encoding="Shift_JIS"?>
　<FLFR version="0.001">
　<!-- Define Region and time space TRgn mean [Time Region]-->

　<TRgn name="r01" cliptype="clip">
　<Rgn x="440" y="0" w="280" h="480" starttime="0.0" />
　<Rgn x="440" y="0" w="280" h="480" starttime="1.0" />
　</TRgn>

　<TRgn name="r02" cliptype="clip">
　<Rgn x="0" y="0" w="440" h="480" starttime="0.0" />
　<Rgn x="0" y="0" w="440" h="480" starttime="1.0" />
　</TRgn>


　<TRgn name="background" cliptype="clip">
　<Rgn x="0" y="0" w="720" h="480" starttime="0.0"/>
　<Rgn x="0" y="0" w="720" h="480" starttime="1.0"/>
　</TRgn>

　<!-- Attach Event use Action Tag-->
　<Action type="onMouseOver()" target="r01" effect="changeLayer(-5);"/>
　<Action type="offMouseOver()" target="r01" effect="changeLayer(+5);"/>

　<Action type="onMouseOver()" target="r02" effect="changeLayer(-5);"/>
　<Action type="offMouseOver()" target="r02" effect="changeLayer(+5);"/>


　<!--Play Tag define movie file to play and combine movie and TRgn-->
　<Play>
　<movie type="movie" filename="movie/makeup01.mov" speed="1.0" tRgn="background"/>
　<movie type="movie" filename="movie/makeup02.mov" speed="1.0" tRgn="r01"/>
　<movie type="movie" filename="movie/makeup02.mov" speed="1.0" tRgn="r02"/>

　</Play>
　</FLFR>

　マウスを左右に動かすことによって、鏡の中の人間と外の人間が入れ替わる。

図６: 鏡の中の私と外の私

　　蝋燭

　<?xml version="1.0" encoding="Shift_JIS"?>
　<FLFR version="0.0003">
　<!-- Define Region and time space TRgn mean Time Region-->
　<TRgn name="background" cliptype="clip">
　<Rgn x="0" y="0" w="720" h="480" starttime="0.0" />
　<Rgn x="0" y="0" w="720" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_00" cliptype="clip">
　<Rgn x="150" y="100" w="400" h="19" starttime="0.0" />
　<Rgn x="150" y="100" w="400" h="19" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_01" cliptype="clip">
　<Rgn x="150" y="119" w="400" h="19" starttime="0.0" />
　<Rgn x="150" y="119" w="400" h="19" starttime="1.0" />


　<!--////////////////////////////////////////
　中略
　/////////////////////////////////////////-->

　<TRgn name="r00_17" cliptype="clip">
　<Rgn x="150" y="423" w="400" h="19" starttime="0.0" />
　<Rgn x="150" y="423" w="400" h="19" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_18" cliptype="clip">
　<Rgn x="150" y="442" w="400" h="19" starttime="0.0" />
　<Rgn x="150" y="442" w="400" h="19" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_19" cliptype="clip">
　<Rgn x="150" y="461" w="400" h="19" starttime="0.0" />
　<Rgn x="150" y="461" w="400" h="19" starttime="1.0" />
　</TRgn>
　<!-- Attach Event use Action Tag-->

　<Action 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　type="onKey(k)"

　target="r00_00,r00_01,r00_02,r00_03,r00_04,r00_05,r00_06,r00_07,r00_08,
　r00_09,r00_10,r00_11,r00_12,r00_13,r00_14,r00_15,r00_16,r00_17,r00_18,r00_19"
　effect="changeLayer(-30);" />
　<Action 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　type="onKey(v)"

　target="r00_00,r00_01,r00_02,r00_03,r00_04,r00_05,r00_06,r00_07,
　r00_08,r00_09,r00_10,r00_11,r00_12,r00_13,r00_14,r00_15,r00_16,r00_17,r00_18,r00_19"
　effect="changeLayer(+30);" />
　<Action 　　　　　　　　　　　　　　　　　　　　　　　　　　　　type="onMouseOver()"

　 target="r00_00,r00_01,r00_02,r00_03,r00_04,r00_05,r00_06,r00_07,r00_08,
　r00_09,r00_10,r00_11,r00_12,r00_13,r00_14,r00_15,r00_16,r00_17,r00_18,r00_19"
　effect="changeLayer(-40);" />
　<Action　　　　　　　　　　　　　　　　　　　　　　　　　　　　type="offMouseOver()"

　target="r00_00,r00_01,r00_02,r00_03,r00_04,r00_05,r00_06,r00_07,r00_08,
　r00_09,r00_10,r00_11,r00_12,r00_13,r00_14,r00_15,r00_16,r00_17,r00_18,r00_19"
　effect="changeLayer(+40);" />

　<!--Play Tag define movie file to play and combine movie and TRgn-->
　<Play>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.080000" speed="1.0" tRgn="r00_00"/>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.123500" speed="1.0" tRgn="r00_01"/>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.167000" speed="1.0" tRgn="r00_02"/>
　<!--/////////////////////////////////////
　中略
　///////////////////////////////////////-->
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.819500" speed="1.0" tRgn="r00_17"/>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.863000" speed="1.0" tRgn="r00_18"/>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.906500" speed="1.0" tRgn="r00_19"/>
　<movie type="movie" filename="movie/candle2.mov" outTrim="0.0"
　inTrim="0.0" speed="1.0" tRgn="background"/>

　</Play>
　</FLFR>

　 キーボードの「k」を押すことで、炎の軌跡が、一度に現れる。

図７: 蝋燭

　いっぱいのろうそく

　<?xml version="1.0" encoding="Shift_JIS"?>
　<FLFR version="0.0004">
　<TRgn name="background" cliptype="clip">
　<Rgn x="0" y="0" w="720" h="480" starttime="0.0" />
　<Rgn x="0" y="0" w="720" h="480" starttime="1.0" />
　</TRgn>
　<TRgn name="r00_00" cliptype="scale">
　<Rgn x="0" y="0" w="120" h="120" starttime="0.000000" />
　<Rgn x="120" y="120" w="120" h="120" starttime="0.166667" />
　<Rgn x="0" y="0" w="120" h="120" starttime="0.333333" />
　<Rgn x="120" y="120" w="120" h="120" starttime="0.500000" />
　<Rgn x="0" y="0" w="120" h="120" starttime="0.666667" />
　<Rgn x="120" y="120" w="120" h="120" starttime="0.833333" />
　<Rgn x="120" y="120" w="120" h="120" starttime="1.00" />
　</TRgn>
　<TRgn name="r00_01" cliptype="scale">
　<Rgn x="0" y="120" w="120" h="120" starttime="0.000000" />
　<Rgn x="120" y="0" w="120" h="120" starttime="0.166667" />
　<Rgn x="0" y="120" w="120" h="120" starttime="0.333333" />
　<Rgn x="120" y="0" w="120" h="120" starttime="0.500000" />
　<Rgn x="0" y="120" w="120" h="120" starttime="0.666667" />
　<Rgn x="120" y="0" w="120" h="120" starttime="0.833333" />
　<Rgn x="120" y="0" w="120" h="120" starttime="1.00" />
　</TRgn>
　<!--/////////////////////////////////
　中略
　//////////////////////////////////-->
　<TRgn name="r05_00" cliptype="scale">
　<Rgn x="600" y="0" w="120" h="120" starttime="0.000000" />
　<Rgn x="480" y="120" w="120" h="120" starttime="0.166667" />
　<Rgn x="600" y="0" w="120" h="120" starttime="0.333333" />
　<Rgn x="480" y="120" w="120" h="120" starttime="0.500000" />
　<Rgn x="600" y="0" w="120" h="120" starttime="0.666667" />
　<Rgn x="480" y="120" w="120" h="120" starttime="0.833333" />
　<Rgn x="480" y="120" w="120" h="120" starttime="1.00" />
　</TRgn>
　<TRgn name="r05_01" cliptype="scale">
　<Rgn x="600" y="120" w="120" h="120" starttime="0.000000" />
　<Rgn x="480" y="0" w="120" h="120" starttime="0.166667" />
　<Rgn x="600" y="120" w="120" h="120" starttime="0.333333" />
　<Rgn x="480" y="0" w="120" h="120" starttime="0.500000" />
　<Rgn x="600" y="120" w="120" h="120" starttime="0.666667" />
　<Rgn x="480" y="0" w="120" h="120" starttime="0.833333" />
　<Rgn x="480" y="0" w="120" h="120" starttime="1.00" />
　</TRgn>
　<TRgn name="r05_02" cliptype="scale">
　<Rgn x="600" y="240" w="120" h="120" starttime="0.000000" />
　<Rgn x="480" y="360" w="120" h="120" starttime="0.166667" />
　<Rgn x="600" y="240" w="120" h="120" starttime="0.333333" />
　<Rgn x="480" y="360" w="120" h="120" starttime="0.500000" />
　<Rgn x="600" y="240" w="120" h="120" starttime="0.666667" />
　<Rgn x="480" y="360" w="120" h="120" starttime="0.833333" />
　<Rgn x="480" y="360" w="120" h="120" starttime="1.00" />
　</TRgn>
　<TRgn name="r05_03" cliptype="scale">
　<Rgn x="600" y="360" w="120" h="120" starttime="0.000000" />
　<Rgn x="480" y="240" w="120" h="120" starttime="0.166667" />
　<Rgn x="600" y="360" w="120" h="120" starttime="0.333333" />
　<Rgn x="480" y="240" w="120" h="120" starttime="0.500000" />
　<Rgn x="600" y="360" w="120" h="120" starttime="0.666667" />
　　<Rgn x="480" y="240" w="120" h="120" starttime="0.833333" />
　<Rgn x="480" y="240" w="120" h="120" starttime="1.00" />
　</TRgn>
　<Play>
　<movie type="movie" filename="movie/candle.mov" speed="1.000000" tRgn="background"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r00_00"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r00_01"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r00_02"/>
　<!--///////////////////////////////////////
　中略
　/////////////////////////////////////////-->
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r05_00"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r05_01"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r05_02"/>
　<movie type="movie" filename="movie/candle.mov" outTrim="0.0"
　inTrim="0.000000" speed="1.0" tRgn="r05_03"/>
　</Play>
　</FLFR>

図８: いっぱいのろうそく
複数の蝋燭を縮小して一度に動かすことが出来る。

１２．プロジェクト評価

　このソフトウェアを用いることで、映像にクリッピングの移動や、特殊なエフェクトを簡単にかけることが出来る。このソフトウェアの特徴を明らかにするため、市販の動画編集ソフト、及びメディアアートのツールと比較する。
　＜市販の動画編集ソフトとの比較＞
　市販の動画編集ソフト、Adobe Premiere やApple final cut pro などで、同種の表現をしようとした場合、とても大変である。画面のクリッピング→タイムラインに貼り付けと言う方法を取らざるを得ない。しかも、クリッピング領域の移動など簡単には行えない。
　＜メディアアートツールとの比較＞
　ここ１，２年で、ソフトウェアを用いて動画表現を拡張する試みが、なされるようになった。例えば、2005 年度のメディア芸術祭アート部門、大賞を受賞した「Khronos Projector」や同じくアート部門優秀賞を受賞した「Gate Vision」など、動画を静止画の連続として捉え、それに何らかの演算を加えて、新しい動画表現を探求する試みがなされ始めている。しかし、これらはソフトウェアを制作した作者自身のみが使うことを意図しており、そのツールを外部に公開していない。
　つまり、鑑賞者例え、その作品をみて感動したとしても、自ら新しい映像素材を用いて、自らの試行錯誤を元に、新しい表現を探求することは出来ない。翻って、本のソフトウェアは、ツールのみならず、そのソースコードにおいても、GPL のライセンス下において公開しており、鑑賞者が「私もこの様な表現を試してみたい」と思った瞬間に、自身で試行錯誤する環境が用意されている。

　しかし，本格的にエンドユーザに使用してもらうためには，早急に本システムのスクリプトを生成・編集するエディタを開発する必要がある．そのエディタと一体となって初めてシステムが完成したということができるだろう．その意味から，本プロジェクトはまだ中間状態であるといわざるを得ない．

１３．今後の課題

　言うまでもなく，エディタを開発する必要がある．そのエディタの使い勝手，ユーザのビューをいかに与えるかが，非常に重要な課題となるであろう．このシステムの社会的な評価はそのシステムの出来にかかっているであろう．
　ビューアの性能はまだ、満足できるレベルではない．Javaの処理系の能力の低さが主な原因である．本格的な使用のためにはC++などの高速な言語を用いる必要があるだろう．さらに，ビューアはWebブラウザのプラグインとしての需要もあるだろう．もしかすると，Flashなどの既存のビューアを用いて，コンバートする仕組みの可能性もあるかもしれない．
　本システムが作り出す世界は，どの様な表現を行ったら、よりよい表現になるのかを、試行錯誤しながら見つけて行くようなものであり，新しい「メディア」と考えることができる．それに合致する、コンテンツ、文法も合わせて開発して行く必要がある。