JP3562946B2 - マルチメディア情報の処理方法及び装置並びに記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、画像、音声、又は文字などのコンテンツデータを含むマルチメディア情報を処理する方法及び装置並びに記録媒体に関し、特に、複数の冗長なコンテンツを連続した１つのコンテンツとしてまとめて扱えるようにするための処理の方法に関する。
【０００２】
近年におけるインターネット又はパソコン通信などの普及によって、マルチメディア情報を作成し又はアクセスすることが個人のレベルで日常的に行われている。したがって、マルチメディア情報の流通するそれらのネットワークを介して、種々の分野における種々の問題又はテーマを提供し又は提案し、それらに対する個人的な意見又は見解などを収集することが可能である。
【０００３】
このような意見又は見解を収集し、さらには収集した意見又は見解などに基づいて意思決定を行う際の支援システムとなりうるマルチメディア情報の処理装置の出現が要望されている。
【０００４】
【従来の技術】
従来より、インターネット及びパソコン通信などにおいて様々なコンテンツが提供されている。それら複数のコンテンツの相互間を互いに関連付ける際には、複数のコンテンツを順番に並べるなど、人手による相応な煩わしい作業が必要である。また、複数のコンテンツの相互間に連続性を持たせようとすると、語りなどの関連付けを行うための手段が別途必要である。さらに、連続性が別の連続性を生む場台もあり、複雑化を避けることができない。
【０００５】
【発明が解決しようとする課題】
このように、従来においては、複数のコンテンツに連続性を持たせた場合において、閲覧者にとっては、それらのコンテンツ同士を何故繋げたのか，コンテンツ間にどういう流れがあるのか、という制作者のリンク作成の意図が分からなかった。
【０００６】
また、制作者及び閲覧者は、１つの連続性のあるコンテンツ相互間の関連について知ることはできるが、その連続性の中にあるコンテンツについて、それとは異なる他の連続性があるか否か、あった場合にそれへのアクセスの方法について知ることはできない。つまり、制作者も閲覧者も、制作者がつけたコンテンツの連続性又は関連性から逸脱することができなかった。
【０００７】
例えば、ＷＷＷで用いられているＨＴＭＬでは、関連の意味をしめす言葉や記号とともにあるコンテンツＡから他のコンテンツＢへの関連を示すことはできたが、さらにそのコンテンツＢが別のコンテンツＣへ関連しているのかどうかということを記述することができない。
【０００８】
また、近年登場してきたプッシュ技術においては、複数のコンテンツの連続性を記述することはできるが、個々のコンテンツが次のコンテンツ又は別のコンテンツとどのような論理性や必然性に基づいて関連付けられているのかを、関連の意味を示す言葉や記号とともに記述することができない。
【０００９】
つまり、従来のコンテンツ制作やビジュアルデザインの過程において、複数の画像情報のリンク、そのリンクの意味、又は分岐などがうまく管理できないため、制作者が、連続性のあるコンテンツ間においてある意味を持たせようとしてもそれを表現することができなかった。そのため、例えば複数の制作者の相互間において、コンテンツの連続性の維持や相違について、うまく意志吸収を行うことができす、コンテンツ間の意味又は意志を表現する創作的なプロセスを支援することができなかった。
【００１０】
本発明は、上述の問題に鑑みてなされたもので、コンテンツを含むマルチメディア情報について、それらの相互間を関連付けるリンクに意味を持たせることにより、それらのリンクに込められた制作者の意味合いを閲覧者が容易に知ることのできるマルチメディア情報の処理方法及び装置並びに記録媒体を提供することを目的とする。
【００１１】
【課題を解決するための手段】
請求項１の発明に係る装置は、画像、音声、又は文字などのコンテンツデータを含むマルチメディア情報を処理する装置であって、リンクで互いに関連付けられた一連のコンテンツデータ、前記リンクについてのリンク情報、及び前記リンクに付加されたコメント情報を含んで構成されるストーリーについてのデータであるストーリーデータを、ストーリーデータごとに記録する手段と、各コンテンツデータと各ストーリーとを対応付けるテーブルと、指定されたストーリーの中のコンテンツデータを表示装置の表示面に表示する手段と、前記コンテンツデータを前記表示面に表示する際に、当該コンテンツデータに関して張られたリンクについてのコメント情報、及び、当該コンテンツデータが当該ストーリー以外の他のストーリーにおいて使用されている場合にその旨を示すボタンを、当該表示面に表示する手段と、表示されたコメント情報の中から１つが選択されたときに、選択されたコメント情報に対応するリンクで関連付けられた他のコンテンツデータを前記表示面に表示する手段と、前記ボタンが選択されたときに、前記テーブルを参照して他のストーリーを検索し、検索されたストーリーのリストを表示する手段と、前記リストの中から選択されたストーリーの管理下において前記コンテンツデータを表示する手段と、を有する。
【００１２】
請求項２の発明に係る記録媒体は、リンクで互いに関連付けられた一連のコンテンツデータ、前記リンクについてのリンク情報、及び前記リンクに付加されたコメント情報を含んで構成されるストーリーについてのデータであるストーリーデータを、ストーリーデータごとに記録する処理と、各コンテンツデータと各ストーリーとを対応付けるテーブルを作成する処理と、指定されたストーリーの中のコンテンツデータを表示装置の表示面に表示する処理と、前記コンテンツデータを前記表示面に表示する際に、当該コンテンツデータに関して張られたリンクについてのコメント情報、及び、当該コンテンツデータが当該ストーリー以外の他のストーリーにおいて使用されている場合にその旨を示すボタンを、当該表示面に表示する処理と、表示されたコメント情報の中から１つが選択されたときに、選択されたコメント情報に対応するリンクで関連付けられた他のコンテンツデータを前記表示面に表示する処理と、前記ボタンが選択されたときに、前記テーブルを参照して他のストーリーを検索し、検索されたストーリーのリストを表示する処理と、前記リストの中から選択されたストーリーの管理下において前記コンテンツデータを表示する処理と、をコンピュータに実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体である。
【００２１】
マルチメディア情報は、コンテンツデータＤＣＮ、又はコンテンツデータＤＣＮとその付属情報などからなる。つまり、マルチメディア情報はコンテンツデータＤＣＮ自体である場合もある。
【００２２】
次に、本発明に係るマルチメディア情報処理システム１の動作及び使用方法の例について、図を参照して説明する。
図１０（Ａ）に示すように、複数のコンテンツデータＤＣＮを配置した状態で、リンクを張りたい一方のコンテンツデータＤＣＮ１を指定し、その状態から、リンクを張りたい他方のコンテンツデータＤＣＮ２に対してドラッグする。これによって、コンテンツデータＤＣＮ１と２との間にリンクＬＫ１が張られ、それが矢印で表示される。次に、リンクＬＫ１に対してコメント情報を付加するために、そのリンクＬＫ１上にカーソルを置いてマウスをクリックする。これによって、図１０（Ｂ）に示すように、リンクＬＫ１のほぼ中央位置にコメント枠ＷＫＣが表示される。そこで、コメント枠ＷＫＣ内に、適当なコメント情報ＣＭＦ１を入力する。
【００２３】
コメント情報ＣＭＦ１として、通常、接続詞を用いる。つまり、コンテンツデータＤＣＮ１からコンテンツデータＤＣＮ２へリンクＬＫ１を張った制作者が、コンテンツデータＤＣＮ１とコンテンツデータＤＣＮ２との関係について考えていること、なぜそれらの間にリンクＬＫ１を張ったかなどを端的に示す接続詞を、コメント枠ＷＫＣ内に書き込むのである。これによって、複数のコンテンツデータＤＣＮにリンクを張る際に、それらのコンテンツデータＤＣＮがどのようにつながるのか、何故つながっているのか、コンテンツデータＤＣＮ間にどういう流れがあるのか、という制作者のリンク作成の意図を示すことができる。
【００２４】
コメント情報ＣＭＦの語句として接続詞を用いることを原則とするが、他の品詞の単語又は記号などを用いてもよい。コメント情報ＣＭＦは修正することが可能である。１つのコンテンツデータＤＣＮに対して２本以上のリンクを張るようにしてもよい。他のデータベース又はサーバに格納されたコンテンツデータに対しても、その格納位置又はＵＲＬなどを示すことによってリンクを張ることができるようにしてもよい。
【００２５】
また、図１３に示すように、表示面に表示されたコンテンツデータＤＣＮ２の下方には、リンクを示すボタンＢＬが表示され、各ボタンＢＬには、コメント情報ＣＭＦが表示される。ボタンＢＬ１１は、コンテンツデータＤＣＮ２とその上方に位置するコンテンツデータＤＣＮ１とのリンクを示すものであり、コメント情報ＣＭＦ１が表示されている。ボタンＢＬ２１は、コンテンツデータＤＣＮ２とその下方に位置するコンテンツデータＤＣＮ３とのリンクを示すものであり、コメント情報ＣＭＦ２が表示されている。
【００２６】
当該コンテンツデータＤＣＮ２が、当該ストーリーＳＲ１以外のストーリーＳＲにおいて使用されている場合、つまり当該ストーリーＳＲ１以外のストーリーＳＲにおいてリンクを張られている場合には、例えばその旨がボタンＢＷ１１として表示される。その場合に、閲覧者は、ボタンＢＷ１１の表示によって、現在表示されているコンテンツデータＤＣＮ２が、現にアクセスしているストーリーＳＲ１以外の別のストーリーに関連付けられていることを知る。ボタンＢＷ１１を押すことによって、当該別のストーリーの検索が行われ、検索された別のストーリーのリストが表示される。表示されたリストの中から１つのストーリー（これをストーリーＳＲＴとする）を選択することによって、そのストーリーＳＲＴにアクセスし、そのストーリーＳＲＴの中で関連付けられたコンテンツデータＤＣＮ２を表示することができる。そのコンテンツデータＤＣＮ２を表示した際には、図１３に示すようにリンクを示すボタンＢＬが表示され、そのボタンＢＬを押すことによって、ストーリーＳＲＴにおける閲覧を行うことができる。つまり、ストーリーＳＲ１の閲覧者又は制作者は、他のストーリーＳＲＴの存在について知らなかった場合でも、コンテンツデータＤＣＮ２を媒介としてストーリーＳＲ１から抜け出して別のストーリーＳＲＴにワープ（移行又は脱出）することができるのである。また、これとは逆に、ストーリーＳＲＴにおいてコンテンツデータＤＣＮ２を閲覧していた閲覧者が、同様の手順でストーリーＳＲＴからストーリーＳＲ１にワープすることができる。
【００２７】
なお、リンク情報又はコンテンツデータＤＣＮとストーリーＳＲとを関連付けて記録する方法として、ストーリーＳＲを管理するデータであるストーリーデータＤＳの中に、各ストーリーＳＲを示すストーリーＩＤを記録する方法、コンテンツデータＤＣＮとストーリーＩＤとを対応付けたテーブルＴＢを設ける方法、コンテンツデータＤＣＮの付属情報としてストーリーＩＤを付加する方法などがある。これらを併用することも可能である。それぞれ、種々のタイミングで検索に使用される。
【００２８】
本発明に係る処理装置又はマルチメディア情報処理システムは、例えばパーソナルコンピュータ又はワークステーションを用いて実現される。本発明に係る方法を実行するためのプログラムは、半導体メモリ、ハードディスク、ＣＤ−ＲＯＭ、フロッピーディスク、又は光磁気ディスクなどの記録媒体に格納される。記録媒体に格納されたプログラムは、主メモリ上に適時ローディングされ、処理装置によって実行される。その際に、ＣＤ−ＲＯＭドライブ、フロッピーディスクドライブ、又は光磁気ディスクドライブなどのドライブ装置が必要に応じて用いられる。記録媒体がネットワークなどの通信回線で結ばれたサーバに設けられている場合には、通信回線を介してサーバからプログラムが読み取られ又はダウンロードされる。また、プログラムが通信回線を介して処理装置に転送される場合には、通信回線自体も記録媒体に相当する。プログラムは、種々のＯＳ、プラットホーム、システム環境、又はネットワーク環境の下で動作するように供給可能である。
【００２９】
【発明の実施の形態】
図１は本発明に係るマルチメディア情報処理システム１の構成を示すブロック図、図２はマルチメディア情報処理システム１のクライアント３の構成を示すブロック図、図３はマルチメディア情報処理システム１で扱うマルチメディア情報の構造を示す図である。
【００３０】
図１において、マルチメディア情報処理システム１は、サーバ２、複数のクライアント３，３…、及びネットワーク４から構成されている。サーバ２には、コンテンツデータベースＤＢＣ及びタグデータベースＤＢＴが設けられている。
【００３１】
サーバ２は、クライアント３からの要求によって、コンテンツデータベースＤＢＣ又はタグデータベースＤＢＴに格納（登録）された情報を送出し、またクライアント３から送出される情報をコンテンツデータベースＤＢＣ又はタグデータベースＤＢＴに登録する。なお、本明細書において、コンテンツデータベースＤＢＣ、タグデータベースＤＢＴ、又はサーバ２の他のデータベースなどに登録することを、「サーバ２に登録する」と記載することがある。
【００３２】
クライアント３は、画像、音声、又は文字などのコンテンツデータを入力し、再生し、サーバ２に登録するために送出し、又はサーバ２から送出させることが可能である。また、コンテンツデータについてのコメントデータについても、入力し、再生し、送出し、送出させることが可能である。
【００３３】
サーバ２及びクライアント３は、例えばパーソナルコンピュータ又はワークステーションなどで構成することも可能である。
ネットワーク４として、本実施形態においてはＬＡＮ（ローカルエリアネットワーク）が用いられているが、インターネット、又は各種パソコン通信のネットワークを用いてもよい。また、ＣＡＴＶ網を用いてもよい。ＣＡＴＶ網を用いる場合には、サーバ２を基地局に設置し、映像送出装置を介して情報の送受を行う。又は、サーバ２をＣＡＴＶ網の端末の１つとして設置し、専用のチャネルを使用して情報を基地局へ送信し、別のチャネルを用いて基地局から他の端末への情報の送信を行ってもよい。
【００３４】
ネットワーク４としてインターネットなどのオープンなネットワークを用いた場合、又はＬＡＮを用いて且つインターネットなどにも接続した場合には、クライアント３は、サーバ２のみでなく他のサーバに格納された種々のコンテンツデータベース又はマルチメディア情報データベースにアクセスし、それらのデータ又は情報を取得することができる。
【００３５】
図２において、クライアント３は、処理装置１０、キーボード１１、マウス１２、表示装置１３、プリンタ装置１４、スピーカ１５、マイクロフォン１６、及び磁気ディスク装置１７などから構成されている。磁気ディスク装置１７にはコンテンツファイルＦＣ、ワークファイルＦＷ、その他の種々のファイル及びデータベースが格納されている。
【００３６】
クライアント３においては、磁気ディスク装置１７に格納された種々の公知のアプリケーションプログラム又はエディタプログラムが、処理装置１０によってマルチタスク方式によって実行され又は実行可能となっており、操作者はキーボード１１又はマウス１２を操作することによって、種々のマルチメディア情報を新規に作成し、既に作成されて格納された種々の媒体から読み込み、編集し、又は加工することができる。
【００３７】
図３（Ａ）において、コンテンツ情報ＭＮＣは、静止画像データ、動画像データ、音声データ、又は文字データなどのコンテンツデータＤＣＮ、及び１つ１つのコンテンツデータＤＣＮを識別するためのオブジェクトＩＤ（ＢＩＤ）からなる。オブジェクトＩＤは、コンテンツデータＤＣＮのファイル名でもある。つまり、コンテンツデータＤＣＮのファイル名が、各コンテンツデータＤＣＮに付随するコメントデータなどとのリンク情報となっている。なお、コンテンツデータＤＣＮのファイル名には、各コンテンツデータＤＣＮの種類又は圧縮方式を表す識別子が付されている。
【００３８】
図３（Ｂ）において、プライマリタグ情報ＭＮＰは、プライマリデータＤＰＲ、及びプライマリデータＤＰＲが関連するコンテンツデータＤＣＮを識別するためのオブジェクトＩＤからなる。オブジェクトＩＤは、上述したように、コンテンツデータＤＣＮとのリンク情報である。
【００３９】
図３（Ｃ）に示すように、プライマリデータＤＰＲは、対応するコンテンツデータＤＣＮのタイトルＣＴＬ、作成者名ＣＡＴ、作成日ＣＤＴ、種類ＣＫＤ、エレメントＣＥＬなどの属性情報、操作権限を示す情報、及び作成者のコメントデータＣＣＭなどである。
【００４０】
図３（Ｄ）において、セカンダリタグ情報ＭＮＳは、セカンダリデータＤＳＣ、及びセカンダリデータＤＳＣの関連するコンテンツデータＤＣＮを識別するためのオブジェクトＩＤ、同一のオブジェクトＩＤ内における各セカンダリデータＤＳＣを識別するためのタグＩＤ（ＴＩＤ）、及び階層化された各セカンダリデータＤＳＣの親ノードを示す参照ＩＤ（ＲＩＤ）からなる。セカンダリデータＤＳＣは、図３（Ｅ）に示すように、セカンダリデータＤＳＣのタイトルＳＴＬ、作成日ＳＤＴ、作成者名ＳＡＴなどの属性情報、操作権限を示す情報、及び本文（作成者のコメントデータ）ＳＣＭなどである。
【００４１】
次に、マルチメディア情報処理システム１の動作及び使用方法について説明する。
図４は表示装置１３に表示されたブラウザ画面ＨＧ１を示す図、図５は表示装置１３に表示されたリスト画面ＨＧ２を示す図、図６は表示装置１３に表示されたプライマリタグ登録画面ＨＧ３を示す図である。
【００４２】
図４において、ブラウザ画面ＨＧ１には、コンテンツデータベースＤＢＣに格納されたコンテンツデータＤＣＮについて、複数のコンテンツデータＤＣＮの内容がイメージによって一覧表示（サムネイル表示）されている。また、ブラウザ画面ＨＧ１には、コンテンツデータベースＤＢＣに格納されたプライマリタグ情報ＭＮＰに基づいて、各コンテンツデータＤＣＮのタイトルＣＴＬが表示されている。また、当該画面ＨＧ１の表示に当たっての検索条件である、コンテンツデータＤＣＮの種類（種別）ＣＫＤ、エレメントＣＥＬ、及びキーワードＣＫＷが表示されている。
【００４３】
種類ＣＫＤは、「エレメント」「シーン」「ストーリー」の３種類がある。「エレメント」は、コンテンツデータＤＣＮが、画像プロセッサ又は文章プロセッサなどの種々のアプリケーションプログラムを用いて作成したコンテンツデータそれ自体であることを示す。「シーン」は、エレメントであるコンテンツデータにＨＴＭＬを付加したデータであることを示す。「ストーリー」は、シーンが複数個集まったものである。
【００４４】
エレメントＣＥＬは、エレメントを作成したエディタ、プロセッサ、又はツールを示し、通常、アプリケーションプログラムの名称で示される。
ブラウザ画面ＨＧ１は、図示しない検索画面において、種類ＣＫＤ、エレメントＣＥＬ、期間ＦＰＲ、キーワードＣＫＷなどの検索条件を入力し、検索開始を指示することによって検索された結果表示される。検索はタグデータベースＤＢＴ及びコンテンツデータベースＤＢＣに対して行われ、コンテンツデータＤＣＮ及びそれに対応するプライマリタグ情報ＭＮＰが抽出される。検索結果が１枚の画面に表示し切れない場合には、スクロールすることによって全部のデータが表示される。
【００４５】
ブラウザ画面ＨＧ１に表示されたコンテンツデータＤＣＮのうちの１つをマウス１２のクリックにより選択すると、選択されたコンテンツデータＤＣＮについてのプライマリタグ登録画面ＨＧ３又は図示しないセカンダリタグ登録画面ＨＧ４が表示される。なお、画面ＨＧ１の右上に表示された「リスト表示」を選択すると、次に説明するリスト画面ＨＧ２に切り換わる。
【００４６】
図５において、リスト画面ＨＧ２には、ブラウザ画面ＨＧ１と同じコンテンツデータＤＣＮについて、タイトルＣＴＬ、種類ＣＫＤ、作成日ＣＤＴ、作成者名ＣＡＴ、タグ件数、アクセス回数などが表示される。このリスト画面ＨＧ２において、コンテンツデータＤＣＮのうちの１つを選択すると、選択されたコンテンツデータＤＣＮについてのプライマリタグ登録画面ＨＧ３又はセカンダリタグ登録画面ＨＧ４が表示される。なお、画面ＨＧ２の右上に表示された「サムネイル表示」を選択すると、前のブラウザ画面ＨＧ１に切り換わる。
【００４７】
図６において、プライマリタグ登録画面ＨＧ３には、タグ切り換えスイッチＣＴＳ、コンテンツデータＤＣＮ、タイトルＣＴＬ、作成者名ＣＡＴ、作成日ＣＤＴ、種類ＣＫＤ、エレメントＣＥＬ、操作権限を示す情報、及びコメントデータＣＣＭが表示されている。プライマリタグ登録画面ＨＧ３において、コンテンツデータＤＣＮの作成者は操作権限があるので、その内容の書き込み又は修正を行うことが可能であるが、操作権限のない他の者は閲覧のみが可能である。
【００４８】
コンテンツデータＤＣＮとして、それが静止画像データである場合には縮小された画像が表示されるが、動画像データ、音声データ、又は文字データである場合には、その旨を表すイラストが表示される。それらのイラストを選択することにより、その種類に応じたエディタが立ち上がり、コンテンツデータＤＣＮの内容が再生される。つまり、静止画像データであった場合には、画面ＨＧの全体に画像が表示され、動画像データであった場合には所定の大きさで動画像が表示され、音声データであった場合にはスピーカ１５から音声が再生される。これらの処理は処理装置１０において実行される。
【００４９】
また、コンテンツデータＤＣＮの枠内にはコンテンツデータＤＣＮが表示されるのみでなく、コンテンツデータＤＣＮを入力することが可能である。その場合に、他のウインドウに表示された画像を、ドラッグアンドドロップによってコンテンツデータＤＣＮとして入力することが可能である。
【００５０】
コンテンツデータＤＣＮの作成者は、自身が作成したコンテンツデータＤＣＮについて、コンテンツデータＤＣＮ自体をコンテンツデータベースＤＢＣに、コンテンツデータベースＤＢＣに関連してプライマリタグ登録画面ＨＧ３で入力したプライマリタグ情報ＭＮＰをタグデータベースＤＢＴに、それぞれ登録する。登録に当たっては、プライマリタグ登録画面ＨＧ３で必要なデータを入力した後、保存ボタンＢＴ１を押す。コンテンツデータＤＣＮ及びプライマリタグ情報ＭＮＰを削除する場合には、削除ボタンＢＴ２を押す。プライマリタグ登録画面ＨＧ３を保存することなく閉じるときには閉じるボタンＢＴ３を押す。画面ＨＧ３の左上に表示されたタグ切り換えスイッチＣＴＳの「セカンダリタグ」を選択すると、セカンダリタグ登録画面ＨＧ４に切り換わる。
【００５１】
セカンダリタグ登録画面ＨＧ４においては、セカンダリデータＤＳＣを作成しようとする作成者の、コンテンツデータＤＣＮに関連する意見又は見解、又は他人の意見又は見解に対する意見又は見解などが入力される。
【００５２】
マルチメディア情報処理システム１においては、サーバ２に登録されたコンテンツデータＤＣＮの相互間において、またサーバ２以外の他のサーバに格納されたコンテンツデータとの相互間において、それらを互いに関連付けるためのリンクを張ることができ、且つ、各リンクに対してその意味合いを持たせるためのコメント情報を付加することができる。コメント情報としては、通常、接続詞が用いられる。コンテンツデータＤＣＮ間にリンクを張る作業及びコメント情報を付加する作業は、サーバ２及びクライアント３のストーリーエディタの画面ＨＧ５において行うことができる。
【００５３】
図７はストーリーエディタの画面ＨＧ５を示す図、図８はストーリーエディタで使用可能なプルダウンメニューを示す図、図９はストーリーエディタで使用されるパレットＰＬ１を示す図、図１０は画面ＨＧ５においてリンクを張るときの手順を説明するための図、図１１は作成されたストーリーＳＲ１の例を示す図、図１２は図１１に示すストーリーＳＲ１についてのストーリーデータＤＳを示す図、図１３はストーリーＳＲ１の中の１つのコンテンツデータＤＣＮ１を表示した画面ＨＧ６を示す図である。
【００５４】
図７において、画面ＨＧ５には、ある１つの設定されたストーリーＳＲにおいて、コンテンツデータＤＣＮがマトリックス状に配置されて表示される。図７の例では、行方向に３個、列方向に３個、合計９個のコンテンツデータＤＣＮが同時に表示可能である。しかし、１つのストーリーＳＲについて、例えば行方向に１１個、列方向に１０個、合計１１０個のコンテンツデータＤＣＮを配置することが可能であり、それらは画面ＨＧ５をスクロールして表示させることができる。なお、１つのストーリーＳＲ当たりのコンテンツデータＤＣＮの配置個数、及び画面ＨＧ５での表示個数は、ここでの例以外に種々変更することができる。
【００５５】
画面ＨＧ５において、ある１つのストーリーＳＲに対して配置されるコンテンツデータＤＣＮの位置は、行方向と列方向の座標によって指定される。行方向については、画面ＨＧ５の中央が「０」であり、左方へ、−１，−２…，−５となり、右方へ１，２…，５となる。列方向については、最上段が１であり、下方へ向かって２，３…，１０となる。画面ＨＧ５においては、座標（０，１）のコンテンツデータＤＣＮ１のみが配置されている。
【００５６】
画面ＨＧ５にコンテンツデータＤＣＮを配置するために、種々の仕方がある。例えば、コンテンツデータＤＣＮを、配置したい座標位置に、ブラウザ画面ＨＧ１などからドラッグアンドドロップによって持ってくる。また、コンテンツデータＤＣＮの内容が決定されていないときには、例えば、プルダウンメニューの「表示」から「パレット」を選択し、図９に示すパレットＰＬ１を表示させる。座標（０，１）の位置を選択した状態で、パレットＰＬ１のブランクボタンＢＴ１を押すことによって、座標（０，１）の位置にコンテンツ枠が配置される。このように配置されたコンテンツ枠は、コンテンツデータＤＣＮと同様にリンクを張ることが可能である。また、コンテンツ枠内には、ドラッグアンドドロップによってコンテンツデータＤＣＮを何時でも入れることが可能である。
【００５７】
また、パレットＰＬ１のＵＲＬボタンＢＴ２を押すと、指定した座標位置にＵＲＬ（Ｕｎｉｖｅｒｓａｌ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）を書き込むことが可能である。これによって、ネットワークで接続された種々の他のコンテンツデータＤＣＮ又はマルチメディア情報（つまり資源）と関連付けることできる。
【００５８】
図９に示すパレットＰＬ１において、ボタンＢＴ３，４，又は５を押すと、現在指定されている座標位置の左下、真下、又は右下の座標位置にコンテンツデータＤＣＮ又はコンテンツ枠が配置される。また、カットボタンＢＴ７を押すと、指定した座標位置のコンテンツデータＤＣＮが削除される。この場合は、コンテンツ枠及びリンクは削除されずに残る。カットボタンＢＴ８を押すと、指定した座標位置のコンテンツデータＤＣＮが、コンテンツ枠及びリンクとともに削除される。ボタンＢＴ１１を押すと、リンクに対してコメント情報の入力が可能な状態となる。
【００５９】
次にリンクを張る方法について説明する。
図１０（Ａ）に示すように、画面ＨＧ５に複数のコンテンツデータＤＣＮを配置した状態で、リンクを張りたい一方のコンテンツデータＤＣＮ１に対し、その下方に設けられたリンク用アンカＡＫにカーソルを置き、その状態から、リンクを張りたい他方のコンテンツデータＤＣＮ２に対してドラッグする。これによって、コンテンツデータＤＣＮ１と２との間にリンクＬＫ１が張られ、それが矢印で表示される。次に、リンクＬＫ１に対してコメント情報を付加するために、そのリンクＬＫ１上にカーソルを置いてマウスをクリックする。これによって、図１０（Ｂ）に示すように、リンクＬＫ１のほぼ中央位置にコメント枠ＷＫＣが表示される。そこで、コメント枠ＷＫＣ内に、適当なコメント情報ＣＭＦ１を入力する。なお、リンクを張るためにコンテンツデータＤＣＮを指定したときに、指定されたコンテンツデータＤＣＮは反転表示される。
【００６０】
コメント情報ＣＭＦ１として、通常、接続詞を用いる。つまり、コンテンツデータＤＣＮ１からコンテンツデータＤＣＮ２へリンクＬＫ１を張った制作者が、コンテンツデータＤＣＮ１とコンテンツデータＤＣＮ２との関係について考えていること、なぜそれらの間にリンクＬＫ１を張ったかなどを端的に示す接続詞を、コメント枠ＷＫＣ内に書き込むのである。
【００６１】
これによって、複数のコンテンツデータＤＣＮにリンクを張る際に、それらのコンテンツデータＤＣＮがどのようにつながるのか、何故つながっているのか、コンテンツデータＤＣＮ間にどういう流れがあるのか、という制作者のリンク作成の意図を示すことができる。したがって、リンクＬＫで互いに関連付けられた一連のマルチメディア情報が、その制作者のみでなく他の複数の制作者及び閲覧者にも開放されることとなる。
【００６２】
なお、コメント情報ＣＭＦの語句として接続詞を用いることを原則とするが、適当な接続詞がなければ他の品詞の単語又は記号などを用いてもよい。コメント情報ＣＭＦの文字数は、例えば４０字程度までに制限されている。しかし、後述するボタンＢＬに表示れるのは８〜１０字程度であるので、残りの文字は例えばスクロールによって表示させればよい。コメント情報ＣＭＦは修正することが可能である。コメント枠ＷＫＣを表示する際にデフォルト値として適当な単語を表示するようにしてもよい。１つのコンテンツデータＤＣＮに対して、２本以上のリンクを張ることも可能である。他のデータベース又はサーバに格納されたコンテンツデータに対しても、その格納位置を示すことによってリンクを張ることが可能である。
【００６３】
このようにして、コンテンツデータＤＣＮの相互間においてリンクＬＫを張り、ストーリーＳＲ１を作成する。作成されたストーリーＳＲ１は、サーバ２に登録され、ストーリーエディタによって管理される。なお、ストーリーエディタによって複数のストーリーＳＲ１，２，３…を作成し、管理することが可能である。これについては後述する。
【００６４】
図１１において、ストーリーＳＲ１は、コンテンツデータＤＣＮ１から始まり、コンテンツデータＤＣＮ２，４，５にリンクされ、それらからさらに他のコンテンツデータＤＣＮ３，６，７…にリンクされ、というようにして構成されている。それぞれのリンクＬＫ１，２，３…には、コメント情報ＣＭＦ１，２，３…が付加されている。
【００６５】
図１２において、ストーリーＳＲ１として登録されたコンテンツデータＤＣＮ、リンク情報、及びコメント情報ＣＭＦからなるストーリーデータＤＳが示されている。ストーリーデータＤＳの各行において、コンテンツデータＤＣＮについては、最初の２つの数字は座標を示し、引用符号内の文字はコンテンツデータＤＣＮのタイトルＣＴＬを示し、最後の数字はコンテンツデータＤＣＮの識別コードであるコンテンツＩＤを示す。
【００６６】
リンク情報などについては、最初の２つの数字はリンクされた２つのコンテンツデータＤＣＮを示し、引用符号内の文字はコメント情報ＣＭＦを示し、最後の数字はそれがリンク情報（矢印）であることを示す。なお、リンク情報において、コンテンツデータＤＣＮを示す最初の２つの数字は、コンテンツデータＤＣＮがそのストーリーＳＲに配置された順番を示す。
【００６７】
図１３において、画面ＨＧ６には、コンテンツデータＤＣＮ２が表示されている。コンテンツデータＤＣＮ２の下方には、リンクを示すボタンＢＬが表示され、各ボタンＢＬには、コメント情報ＣＭＦが表示されている。
【００６８】
ボタンＢＬ１１は、コンテンツデータＤＣＮ２とその上方に位置するコンテンツデータＤＣＮ１とのリンクを示すものであり、コメント情報ＣＭＦ１である「それで」が表示されている。ボタンＢＬ２１は、コンテンツデータＤＣＮ２とその下方に位置するコンテンツデータＤＣＮ３とのリンクを示すものであり、コメント情報ＣＭＦ２である「それから」が表示されている。
【００６９】
リンクが複数ある場合には、例えばボタンＢＬ２２，２３のように、複数のボタンＢＬがコメント情報ＣＭＦとともに表示される。なお、ボタンＢＬの近辺に、又はボタンＢＬとの対応が分かるように、そのボタンＢＬを押した場合のリンク先のコンテンツデータＤＣＮの内容を縮小して表示してもよい。
【００７０】
そこで、それらのうちのいずれかのボタンＢＬを押すと、リンクによって関連付けられた他方のコンテンツデータＤＣＮが画面ＨＧ６に表示される。閲覧者は、ボタンＢＬに表示されたコメント情報ＣＭＦによって、それぞれのリンクに込められた制作者の意味合いを容易に知ることができる。したがって、コメント情報ＣＭＦを参照してボタンＢＬを選択することによって、制作者の意図を考えながらコンテンツデータＤＣＮを次々と閲覧することができる。閲覧者は、ボタンＢＬを押す際に、コメント情報ＣＭＦを参照し、ある一定の意図に沿ってコンテンツデータＤＣＮを次々と閲覧することができる。
【００７１】
また、表示されたコンテンツデータＤＣＮ２が、当該ストーリーＳＲ１以外の他のストーリーＳＲにおいて使用されている場合、つまり他のストーリーＳＲにおいてコンテンツデータＤＣＮ２にリンクが張られている場合には、その旨を示すためのボタンＢＷ１１が表示される。閲覧者は、ボタンＢＷ１１の表示によって、現在表示されているコンテンツデータＤＣＮ２が、現にアクセスしているストーリーＳＲ１以外の別のストーリーＳＲに関連付けられていることを知る。
【００７２】
そこで、ボタンＢＷ１１を押すと、当該別のストーリーＳＲの検索が行われ、検索された別のストーリーＳＲのリストが表示される。ストーリーＳＲのリストの中から１つのストーリーＳＲを選択することによって、選択したストーリーＳＲにアクセスし、そのストーリーＳＲの中でリンクの張られたコンテンツデータＤＣＮを、図１３に示すと同様に表示することができる。
【００７３】
このように、ストーリーＳＲ１内おけるコンテンツデータＤＣＮから、そのコンテンツデータＤＣＮを使用している他のストーリーＳＲに移行することを、本明細書では「ワープ」という。マルチメディア情報処理システム１では、ワープが可能であるため、１つのコンテンツデータＤＣＮに対してそれぞれリンクを張った複数のストーリーＳＲ間において、一方から他方に自由に乗り移ることができる。また、１つのストーリーＳＲから、閲覧者又は制作者の知らなかった別のストーリーＳＲに逸脱することができる。
【００７４】
また、ストーリーエディタでは、全てのストーリーＳＲにおいて使用されているコンテンツデータＤＣＮを対象として検索することが可能である。このような検索を、本明細書において「ワープ検索」という。ワープ検索に当たっては、検索パラメータとして１つ又は複数のコンテンツデータＤＣＮを指定する。複数のコンテンツデータＤＣＮを指定した場合には、それらの間の論理条件をも検索パラメータとして指定する。そのような論理条件として、ＡＮＤ条件又はＯＲ条件を指定可能である。ＡＮＤ条件を指定したときは、検索パラメータとして指定した全てのコンテンツデータＤＣＮを含むストーリーＳＲが検索される。ＯＲ条件を指定したときは、検索パラメータとして指定した全てのコンテンツデータＤＣＮのいずれかを含むストーリーＳＲが検索される。
【００７５】
なお、ストーリーエディタにより作成された複数のストーリーＳＲ１，２，３…は、図１５に示すようにストーリーエディタ（又はストーリー管理システム）によって管理される。
【００７６】
ストーリーエディタには、図１６に示すようなテーブルＴＢが設けられる。テーブルＴＢは、各ストーリーＳＲに使用されているコンテンツデータＤＣＮについて、それらのストーリーＩＤとコンテンツＩＤとの対応関係で示すものである。ワープ検索が指示されたときには、このテーブルＴＢが参照され、指定された検索パラメータにしたがってストーリーＳＲが検索される。
【００７７】
また、このようなテーブルＴＢを設ける代わりに、図１２に示すストーリーデータＤＳにおいて、コンテンツＩＤの後に、当該コンテンツデータＤＣＮが使用されているストーリーＳＲを示すストーリーＩＤを記述しておいてもよい。
【００７８】
また、シーンのコンテンツデータＤＣＮの付属情報として、そのシーンが使用されているストーリーＩＤを記述しておいてもよい。
これらテーブルＴＢ又はストーリーＩＤは、操作における種々の異なるタイミングで検索される。例えば、上述のようにワープ検索が指示されたとき、又はコンテンツデータＤＣＮを表示する度毎などにおいて検索される。
【００７９】
次に、図１４に示すフローチャートを参照してリンク情報処理の手順を説明する。図１４はストーリーエディタによるストーリーＳＲの作成における手順を示すフローチャートである。
【００８０】
図１４において、表示された複数のコンテンツデータＤＣＮの中から、互いに関連付けたい一方のコンテンツデータＤＣＮを指定し（＃１１）、次に他方のコンテンツデータＤＣＮを指定する（＃１２）。これによってコンテンツ間にリンクＬＫが張られて表示され（＃１３）、そのリンク情報がメモリに記憶される（＃１４）。表示されたリンクを指定すると（＃１５）、コメント枠ＷＫＣが表示され（＃１６）、コメント情報ＣＭＦを入力する（＃１７）。入力されたコメント情報ＣＭＦは、リンク情報と関連付けられて、つまり例えばリンク情報に付加されて記憶される（＃１８）。
【００８１】
図１７は本発明に係る方法を実行するためのプログラムの記録媒体ＳＴの形態を示す図である。
図１７に示すように、コンピュータの処理装置ＰＳに設けられた主メモリ、ＲＡＭ、ＲＯＭ、若しくはハードディスクなどの記憶装置ＳＴＡ、ＣＤ−ＲＯＭ、フロッピーディスク、若しくは光磁気ディスクなどの可搬媒体ＳＴＢ、ネットワーク若しくは通信回線ＳＴＤで結ばれたサーバ若しくはＤＡＳＤなどの回線先媒体ＳＴＣ、又は通信回線ＳＴＤそれ自体が、記録媒体ＳＴとして利用可能である。
【００８２】
記録媒体ＳＴが可搬媒体ＳＴＢである場合には、プログラムは可搬媒体ＳＴＢの種類に対応するドライブ装置によって読み出され、処理装置ＰＳの記憶装置ＳＴＡに格納され又は主メモリ上にローディングされ、実行される。記録媒体ＳＴが回線先媒体ＳＴＣである場合には、プログラムは通信回線ＳＴＤを介して記憶装置ＳＴＡにダウンロードされ、又は適時転送されて実行される。プログラムは、種々のＯＳ、プラットホーム、システム環境、又はネットワーク環境の下で動作するように供給可能である。
【００８３】
上述のマルチメディア情報処理システム１において、クライアント３の操作者は、サーバ２に登録された各コンテンツデータＤＣＮについて、それに対応するプライマリデータＤＰＲ、又はセカンダリデータＤＳＣを閲覧することにより、コンテンツデータＤＣＮの作成者の作成の意図や意見を知り、またそれに対する他人の意見又は見解を容易に知ることができ、それらに対する操作者の意見又は見解を容易に入力しで登録することができる。
【００８４】
したがって、コンテンツデータＤＣＮ及びプライマリデータＤＰＲによって提供され又は提案された種々の分野における種々の問題又はテーマについて、それらに対する個人的な意見又は見解などを容易に収集することができる。そして、それらの意見又は見解などを集計して統合することにより、提起された問題についての意思決定を行うことが容易となる。
【００８５】
上述の実施形態のマルチメディア情報処理システム１によると、リンクＬＫにそのリンクＬＫに関連するコメント情報ＣＭＦを付加することができ、コメント情報ＣＭＦを辿ってコンテンツデータＤＣＮの連続性（ストーリー性）を追うことができる。
【００８６】
また、画像のようなコンテンツの連続性のある情報の制作に際して、制作者の意図を記録することが可能となることによって、制作者と閲覧音の意思疎通が図られ、コンテンツ制作やビジュアルデザインの発展に寄与するところが大きい。
【００８７】
上述の実施形態のマルチメディア情報処理システム１は、震災が発生したときの復興に当たっての意見収集及び意思決定に適用することができる。その場合には、例えば、コンテンツデータＤＣＮとして、震災によって損壊を受けた建物、橋梁、河川などの写真又はイラストなどをコンテンツデータＤＣＮとし、その概況説明などをプライマリデータＤＰＲとしてサーバ２に登録しておき、復興施策に携わる複数の特定の識者又は一般人などが自由にクライアント３を操作して意見などを入力できるようにすればよい。
【００８８】
上述の実施形態において、コンテンツデータベースＤＢＣとタグデータベースＤＢＴとは同一のデータベース内に作成することも可能である。コメント情報ＣＭＦをコメント枠ＷＫＣ内に直接に入力するようにしたが、コメント情報ＣＭＦを入力するためのダイアログボックス「リンクのプロパティ」を表示し、そこに書き込むようにしてもよい。その他、クライアント３、サーバ２、及びマルチメディア情報処理システム１の全体又は各部の構成、データの構成、処理の内容又は順序、画面ＨＧの内容又は構成などは、本発明の主旨に沿って適宜変更することができる。
【００８９】
【発明の効果】
請求項１および請求項２の発明によると、コンテンツを含むマルチメディア情報について、それらの相互間を関連付けるリンクに意味を持たせることにより、それらのリンクに込められた制作者の意味合いを閲覧者が容易に知ることができる。
【００９０】
さらに、ストーリーの閲覧者又は制作者は、他のストーリーの存在について知らなかった場合でも、コンテンツデータを媒介としてストーリーから抜け出して別のストーリーに移行することができる。
つまり、コンテンツデータとコンテンツデータとをつなげてストーリーを作成する際にリンク元のコンテンツデータとリンク先のコンテンツデータとを関連付けた意味合い、すなわち、それらのコンテンツ同士を何故繋げたのか、コンテンツ間にどういう流れがあるのか、という制作者のリンク作成の意図をコメント情報によって知ることが可能である。したがって、閲覧者は、制作者の意図を考えながらコンテンツデータを次々と閲覧することができる。
そして、コンテンツデータが当該ストーリー以外の他のストーリーにおいて使用されている場合に、その旨を示すボタンが表示面に表示されるので、閲覧者は、ボタンの表示によって現在表示されているコンテンツデータが現にアクセスしているストーリー以外の別のストーリーに関連付けられていることを知ることができ、当該ストーリーから抜け出して別のストーリーに移行することができる。
【図面の簡単な説明】
【図１】本発明に係るマルチメディア情報処理システムの構成を示すブロック図である。
【図２】マルチメディア情報処理システムのクライアントの構成を示すブロック図である。
【図３】マルチメディア情報処理システムで扱うマルチメディア情報の構造を示す図である。
【図４】表示装置に表示されたブラウザ画面を示す図である。
【図５】表示装置に表示されたリスト画面を示す図である。
【図６】表示装置に表示されたプライマリタグ登録画面を示す図である。
【図７】ストーリーエディタの画面を示す図である。
【図８】ストーリーエディタで使用可能なプルダウンメニューを示す図である。
【図９】ストーリーエディタで使用されるパレットを示す図である。
【図１０】リンクを張るときの手順を説明するための図である。
【図１１】作成されたストーリーの例を示す図である。
【図１２】図１１に示すストーリーについての記録されたデータを示す図である。
【図１３】ストーリーの中の１つのコンテンツデータを表示した画面を示す図である。
【図１４】ストーリーエディタによるストーリーの作成における手順を示すフローチャートである。
【図１５】ストーリーエディタにより管理されるストーリーの概念を示す図である。
【図１６】ワープ検索に用いられるテーブルを示す図である。
【図１７】本発明に係る方法を実行するためのプログラムの記録媒体の形態を示す図である。
【符号の説明】
１ マルチメディア情報処理システム（マルチメディア情報の処理装置）
１０ 処理装置（記録する手段、表示する手段、選択する手段）
１２ マウス（登録階層指定手段）
ＬＫ，ＬＫ１ リンク
ＤＣＮ コンテンツデータ（マルチメディア情報）
ＣＭＦ コメント情報
ＤＢＣ コンテンツデータベース（データベース）
ＳＲ ストーリー
ＳＴＡ，ＳＴＢ，ＳＴＣ，ＳＴＤ 記録媒体

Claims (2)

1. 画像、音声、又は文字などのコンテンツデータを含むマルチメディア情報を処理する装置であって、
   リンクで互いに関連付けられた一連のコンテンツデータ、前記リンクについてのリンク情報、及び前記リンクに付加されたコメント情報を含んで構成されるストーリーについてのデータであるストーリーデータを、ストーリーデータごとに記録する手段と、
   各コンテンツデータと各ストーリーとを対応付けるテーブルと、
   指定されたストーリーの中のコンテンツデータを表示装置の表示面に表示する手段と、
   前記コンテンツデータを前記表示面に表示する際に、当該コンテンツデータに関して張られたリンクについてのコメント情報、及び、当該コンテンツデータが当該ストーリー以外の他のストーリーにおいて使用されている場合にその旨を示すボタンを、当該表示面に表示する手段と、
   表示されたコメント情報の中から１つが選択されたときに、選択されたコメント情報に対応するリンクで関連付けられた他のコンテンツデータを前記表示面に表示する手段と、
   前記ボタンが選択されたときに、前記テーブルを参照して他のストーリーを検索し、検索されたストーリーのリストを表示する手段と、
   前記リストの中から選択されたストーリーの管理下において前記コンテンツデータを表示する手段と、
   を有することを特徴とするマルチメディア情報の処理装置。
2. 画像、音声、又は文字などのコンテンツデータを含むマルチメディア情報を処理するためのプログラムを記録した記録媒体であって、
   リンクで互いに関連付けられた一連のコンテンツデータ、前記リンクについてのリンク情報、及び前記リンクに付加されたコメント情報を含んで構成されるストーリーについてのデータであるストーリーデータを、ストーリーデータごとに記録する処理と、
   各コンテンツデータと各ストーリーとを対応付けるテーブルを作成する処理と、
   指定されたストーリーの中のコンテンツデータを表示装置の表示面に表示する処理と、
   前記コンテンツデータを前記表示面に表示する際に、当該コンテンツデータに関して張られたリンクについてのコメント情報、及び、当該コンテンツデータが当該ストーリー以外の他のストーリーにおいて使用されている場合にその旨を示すボタンを、当該表示面に表示する処理と、
   表示されたコメント情報の中から１つが選択されたときに、選択されたコメント情報に対応するリンクで関連付けられた他のコンテンツデータを前記表示面に表示する処理と、
   前記ボタンが選択されたときに、前記テーブルを参照して他のストーリーを検索し、検索されたストーリーのリストを表示する処理と、
   前記リストの中から選択されたストーリーの管理下において前記コンテンツデータを表示する処理と、
   をコンピュータに実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体。

Images