JP3555756B2 - マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム - Google Patents
マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム Download PDFInfo
- Publication number
- JP3555756B2 JP3555756B2 JP2000169459A JP2000169459A JP3555756B2 JP 3555756 B2 JP3555756 B2 JP 3555756B2 JP 2000169459 A JP2000169459 A JP 2000169459A JP 2000169459 A JP2000169459 A JP 2000169459A JP 3555756 B2 JP3555756 B2 JP 3555756B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- terminal
- user
- receiving
- transmitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99941—Database schema or data structure
- Y10S707/99944—Object-oriented database structure
- Y10S707/99945—Object-oriented database structure processing
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99941—Database schema or data structure
- Y10S707/99948—Application of database or data structure, e.g. distributed, multimedia, or image
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【発明の属する技術分野】
本発明は、マルチメディア(MM)情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システムに関する。本発明は、特に、利用の便宜性に優れたマルチメディア情報を配送・蓄積・検索するためのマルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システムに関する。
【0002】
【従来の技術】
近年、動画像・音声・文書など複数のメディア情報を取り扱うマルチメディア情報の利便性が注目されている。
第1の従来技術としてテレビ電話システムがある。テレビ(TV)電話システムは、電話による音声情報とTVによる画像情報を双方向に接続したシステムである。TV電話システムは、回線の配送速度が限られているため多量の情報を送ることができず、高品質のマルチメディア(MM)情報を交換することができない。また、交信情報はその場で消えてしまい、一般的には情報の蓄積や再利用ができない。
【0003】
第2の従来技術として、高品質なMM情報を再利用可能な形で提供する従来技術の他の例に、デジタルビデオディスク(DVD)システムがある。図12は、デジタルビデオディスクのシステムを説明する図である。
DVDシステムにおいて、原画像(動画像)は、符号化器によって階層構造化されて圧縮される。音声も同様に符号化器により符号化される。画像と音声との同期信号が、それぞれのデータと共に光ディスクに書きこまれる。利用者は光ディスクに蓄積された符号化データを復号器で再生して原画像・原音声に近い高度なMM情報を再生することができる。符号化・復号の方式は、例えば、MPEG−2として標準化されているので、MPEG−2方式の復号器を備えた端末機器で利用者は、各種提供されたMM情報を、利用者の都合のよい時に、何度でも再利用することができる。
【0004】
DVDはMM情報の蓄積媒体として光ディスクを使用しているので、多量の情報を容易に配布可能である。しかし、このような多量な情報を配送系で用いるには高速な伝送回線が必要となり、衛星放送などの専用回線を用いる必要がある。すなわち、現状で一般に使用可能である共用の配送系を用いる場合には、再利用可能な高品位のMM情報を用いることがむずかしい。
【0005】
第3の従来技術として、共用に利用可能な配送系において、類似のMM情報を配送するシステムに、ビデオレターがある。これは、圧縮された画像・音声情報をパッケージ化して共用回線を用いて伝送し、受信側で復号して利用するものである。しかし、ビデオレターのシステムは、送信側から受信側への一方向の情報通信を前提としている。そのため、着信した情報をそのまま別方面に転送することはできても、情報内容を再加工できないため、MM情報を利用する上での便宜性に欠ける。
【0006】
そこで、MM情報を再利用でき、共用の伝送回線によって配送することができ、かつ、利用の便宜性にすぐれたMM情報システムを構築するには、配送・蓄積におけるMM情報のデータ構造が重要となる。このようなデータ構造についての従来技術としては、以下のようなものがある。
【0007】
第4の従来技術として、オブジェクトベースのMMデータ構造が検討されている。このデータ構造は、MM情報を小さな単位(オブジェクト)に分割して、階層構造化して蓄積しておき、ユーザーがこれを利用するものである。ユーザがMM情報を利用するときは、階層情報の上位から展開しながら、下位方向に必要なだけの情報を得る。オブジェクトベースのMMデータ構造が用いられている例としては、コンピュータグラフィックの背景、前景人物、机、椅子などがあげられる。
【0008】
また、第5の従来技術として、MHEG(Multimedia and Hypermedia information coding Expert Group)によると、MM情報をコンテント情報と振舞情報とで構築し、これらをまとめたパッケージ情報として配送することが提案されている。MHEGのデータ構造によれば、振舞情報に自動再生の機能を記述することによって、受信側で、受信データが自動的に再生される機能を持たせることができるという利便性がある。
【0009】
【発明が解決しようとする課題】
しかしながら、上述の第4の従来技術のオブジェクトベースのデータ構造では、情報が小さな単位に区分けされているために、MM情報全体を外部から概略把握することがむずかしい。また利用者の好む速さで、全体情報の概要を把握することがむずかしい。つまり、オブジェクトが要素単位に構成されたものであるから、部分的に再利用することができるデータ構成となっているといっても、細かな要素の一つ一つとして再利用するかどうか利用者の判断を要することになる。そのため、例えば、多数のMM情報全体にわたって概観することがむずかしいという点で、なお利用者の利便性に解決すべき課題がある。
【0010】
また、上述の第5の従来技術のデータ構造では、自動再生に限られており、利用者の意思に応じたMM情報の取扱いに限度がある。すなわち、MM情報は、振舞情報によって一義的に再生されるだけなので、受信した利用者の判断にあわせたMM情報の表現形式を変えるといった柔軟な利用がむずかしい。また、MM情報を配送する側で発信側利用者からの再生時の意図が伝えられない(再生条件の制御ができない)という利用上の解決すべき課題がある。
【0011】
本発明は、以下の点に鑑み、高品質のMM情報を、共用の配送系を用いて配送し、かつ、利用者の便宜に合わせて柔軟に再生・編集・加工・再送できるマルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システムを提供することを目的とする。
【0012】
【課題を解決するための手段】
本発明は、例えば、(1)マルチメディア、(2)データ構造に関して、以下のような特徴を有することができる。
(1)マルチメディア
少なくとも1つの送信端末機と受信端末機との間で、複数のメディア情報(動画像・音声・文書など)が共通のデジタル媒体を用いて配送・蓄積・利用されるマルチメディア(以下MMと略)情報システムであること、
【0013】
(2)データ構造
(2.1)パッケージ化
MM情報は、ひとまとまりの情報として利用上の意味を持つ複数の単位情報に分割されて蓄積され、かつ配送されること、
(2.2)すべての送信・受信端末機に共通して接続される管理端末機を持つこと、
(2.3)データ圧縮
MM情報は、圧縮して蓄積・配送され、展開(解凍)して利用されることができること、
(2.4)構造
MM情報は、下記の情報群から構成される、
・一つのMM情報の識別をおこなう「コンテナ情報」
・メディア情報自体で構成される「コンテント情報」
・コンテント情報を操作するための「振舞情報」
【0014】
さらに、MM構造については、例えば、次の(3)〜(5)のような特徴を有する。
(3)上記「コンテナ情報」は、
(3.1)コンテント情報、および振舞情報の概要を記述した概要情報をもつ、
(コンテント情報・振舞情報を含んだ最上位の階層にあたる。)
(3.2)著作権情報、個人用の利用情報を含ませることができる。
【0015】
(4)上記「コンテント情報」は、
(4.1)単独情報
少なくとも一つのメディア情報の一部を用いて作成され、単独で利用上の意味を持つ単独情報とすることができる。
(4.2)スケーラビリティ
少なくとも一つのメディア情報の一部を用いて作成され、単独で利用上の意味を持つ単独情報と、それに付加されて元のメディア情報に近づく少なくとも一つの付加情報とに機能分割されて蓄積され、かつ配送されることができる。
(4.3)複数のコンテナ情報(それによって代表されるコンテナ情報・振舞情報を含む)を持たせることができる。
【0016】
(5)上記「振舞情報」は、
(5.1)利用者が設定した、コンテント情報の操作情報(再生・検索・編集・加工)を持つ、
(5.2)利用者が過去に行った操作の履歴情報を含ませることができる。
(5.3)送信者が設定した、受信側での振舞に関する情報を含ませることができる。
【0017】
さらに本発明では、以下のような作用的な特徴がある。
(1)データがパッケージ化されて蓄積・伝送されるので、パッケージ単位で受信側で蓄積ができる。利用時はパッケージ単位での独立した取扱いが可能。
(2)コンテント情報は、最小の有意単位で構成されているので、データの追加・廃棄・入れ替えが処理可能になる(プロセッサブル)。
(2.1)コンテント情報に標準化されたデータ形式を用いることによって、編集が容易になる。
(2.2)コンテント情報は、コンテナ情報が付加されているので、コンテント情報の編集時にコンテナ情報を書きかえる(概要を記述する)ことにより、常にコンテナ情報で概要の把握が可能になる。
(2.3)コンテント情報の下位に複数のコンテント情報を持たせるとき、最上位のコンテント情報とその下位のコンテント情報、下位のコンテント情報とその上位のコンテント情報間でコンテント情報間の関連を持たせることができる。
(2.4)コンテント情報は、振舞情報が付加されているので、振舞情報を書きかえる(遠隔制御する)ことにより、コンテント情報の取扱いを制御することができる。
【0018】
(3)コンテナ情報は、コンテント情報の概要を含むので、その概要を元にコンテント情報の検索が可能となる。
(4)コンテント情報は、機能分割されている(スケーラブル)ので、単独情報のみの利用が可能である。単独情報でブラウジング(コンテナ情報全体の予備点検)が可能となる。
(5)コンテナ情報は、著作権情報を含ませることができるので、著作権情報を元に権利者の許可不許可の問い合わせ等が可能となり、著作権保護機能が可能となる。
(6)コンテナ情報に個人用の利用情報を含ませることができ、かつコンテント情報がパッケージ化されているので、利用する際にコンテナ情報にコンテント情報の位置マークを付加することにより、ブックマーク機能が可能となる。
(7)利用者が過去に行った操作の履歴情報を含ませることができるので、過去の操作履歴に基づく自動情報再生が可能となる。
【0019】
【発明の実施の形態】
(1)システム構成
図1は、本発明に関するMM情報システムの構成図である。
図において、このシステムは、送信端末機1、受信端末機2、3、管理端末機4、配送器5、配送系6を備える。
【0020】
この実施の形態では、例えば、多数のMM情報が、送信端末機1のデータベース10に蓄積されており、利用者は、受信端末機2または3から必要なMM情報を抽出して利用することができる。その際、それぞれの利用者に必要なMM情報は、配送器5、配送系6を経由して送信・受信される。配送系6は、例えば、公衆回線網、衛星網、移動体網、インターネット網、光ファイバー網、無線網、赤外線網などのネットワークが使用される。管理端末機4は、情報の配送管理を行う端末機である。
【0021】
図2は、本発明のMM情報システムの他の構成図である。
このシステムは、送信端末機1、受信端末機2、3、管理端末機4、配送器5、配送系6、送信器7、受信器8、通信衛星9を備える。この実施の形態は、MM情報の配送を、送信専用の、通信衛星9を経た共用配送系と、制御信号等の送受信を主に行う配送系6を経た共用配送系の2系統に分割した、非対称ネットワークとした例である。即ち、送信端末機1からのMM情報は、送信専用の共用の衛星通信回線を用いて、送信器7から通信衛星9を経由して、それぞれ受信器8を備えている受信端末機2、3へ配送される。受信端末機2、3は、同時に同じMM情報を受信することもできるし、個別に送信端末機1のMM情報を受信することもできる。受信端末機2、3と送信端末機1、および管理端末機4の間は第1の実施の形態と同じ非同期通信の配送系6で接続され、相互の通信(送信および受信)が可能とされている。この場合の配送系6は、MM情報を制御する制御信号が主体に配送されるので、通信回線の負荷が軽くても支障ないためISDN回線などの共用の通信網を使うことができる。
【0022】
つぎに、各端末機の初期状態について説明する、初期状態では、受信端末機2、3にMM情報が存在する場合と、存在しない場合がある。即ち
(1)受信端末機2、3から、送信端末機1側のMM情報を検索して、受信する場合と、
(2)受信端末機2、3から、MM情報中のコンテント情報をキーとして、送信端末機1側のMM情報の中のコンテント情報を検索して、受信する場合とがある。
そして、MM情報のアクセス許可管理を管理端末機4が司る。送信端末機1は、管理端末機4からの指令により、受信端末機2、3へデータを送信する。送信端末機1は、基本的にMM情報のデータベース10を保有している。
【0023】
また、アクセス許可に対しての実現方法として、例えば、(A−1)、(A−2)の2通りがある。
(A−1)情報に対してのアクセス許可は、システムからの指令により実現する場合、
(A−2)情報に対してのアクセス許可は、データ内に記述されており、データが書き替わらない限り読むことが出来ない場合(パッケージデータの暗号化)、
アクセス許可(A−1)は、データ制御ではなく、アプリケーションソフトウェアの制御で実現する。例えば、MMデータ閲覧ソフトウェアに与えられたデータアクセス許可、もしくは、MM情報の利用登録によりMM情報へのアクセスを許可するものもある。
【0024】
アクセス許可(A−2)では、さらに、例えば、(A−2−1)、(A−2−2)が考えられる。(A−2−1) 閲覧という行為が、振舞情報として記述されていないと、コンテント情報を読んだり、表示する(解凍する)ことが出来ない場合(閲覧ソフトウェアの動作上での読みだしブロック)、
(A−2−2) さらに、データの暗号化を解かないと情報をみることが出来ない場合よって、アクセス許可(A−1)は、許可制御情報のやり取りで、アクセス許可(A−2)の場合は、MM情報内の許可情報(コンテナ情報、振舞情報、コンテント情報それぞれに存在)を書き換えて、動作するか、許可情報と管理端末機間の開封手順によって、アクセス可能とする場合などがある。例えば、制御データが情報データAに付与されており、“000+A”の場合は、動作しないが、“001+A”とすると、データを読み出すことができる場合が、これにあたる。ただし、000、 001に特別な意味はない。
【0025】
よって、アクセス許可のないユーザは、MM情報を開くことすら出来ない場合もあるが、コンテナ情報までは、一般に閲覧できるが、コンテント情報だけは、利用者登録していないと、読み出すことができない、振舞情報が読めないとMM情報を動作できないといった、部分的な読みだし、動作制御をMM情報で実現できる。
【0026】
つぎに、図3に、データ処理階層モデルの説明図を示す。これは、送信端末機1、受信端末機2、3、管理端末機4の内部において、本発明のMM情報を処理するデータ処理機能を実行する階層モデルの一例である。この階層モデルは、MM情報パッケージ(以下、MMPという。)のアプリケーションソフトウエア10、MMPアプリケーションインターフェース11、MMPコントローラ12、MMPプロセッサ13、MM情報パッケージ14を含む。
【0027】
アプリケーションソフトウエア10は、MM情報の利用機能毎に作成され、アプリケーションインターフェース11を経由してMMPデータの送信または受信の処理を制御する。アプリケーションインターフェース11は、利用者の判断を入力する処理及び利用者へ情報を出力する処理を行う。なお、このための入出力装置、MM情報の利用者への表示装置が具備されているが、図中省略してある。MMPコントローラ12は、各端末機と配送器との間で信号を授受し、MMPプロセッサーに配送されたMM情報を制御する。MMPプロセッサー13は配送されたMM情報を復号するMMPデコーダと、送信時や利用時にMMP情報を符号化するMMPエンコーダを備える。MMPパッケージ14は、送信側で蓄積されたMMP情報自体、ないし受信側に配送されたMMP情報自体を示しており、コンテナ情報、コンテント情報、振舞情報を含む。
【0028】
MM情報について、例をあげると、図書館で本を探している場合、本のタイトル、作者、出版社、アブストラクト、簡単なキーワード等により目的の本を得る場合、コンテナ情報にこのような内容概略情報が含まれるので、コンテナ情報から検索する。一方、本の中身、本文情報、より具体的なキーワード、書かれている内容で検索を行う場合や、また、画像検索、音声検索などの場合、コンテント情報にこのような情報が含まれるので、この場合は、コンテント情報により検索する。
【0029】
「コンテナ情報」は、コンテント情報および振舞情報の概要を記述した概要情報を含む。概要情報としては、一例として以下のようなものがある。
・スケーラビリティプロファイル:コンテント情報が持つスケーラビリティの種類やレベルが記述される。
・管理プロファイル:著作権情報、作成者の使用許可条件、個人用の利用情報などが記述される。
・メディアプロファイル:コンテントの概要などが記述される。
【0030】
ここで、スケーラビリティとは、解像度やエラー耐性について、その品質を可変とするための手段を意味し、符号化構造に階層化の概念を与えるものである。また、スケーラビリティにより、符号化データ、符号化ビットストリームから一部分を取り出して、意味ある画像、有意な情報を再生・復号できる。
スケーラビリティ符号化では、さまざまな複雑さの復号器が、単一の符号化ビットストリームから元の動画を復号し、適切に画像を再構成し表示する。基本的な可変性を提供する方法として、主に、空間スケーラビリティ、SNRスケーラビリティ、時間スケーラビリティ、データパーティショニングの4種類がある。
【0031】
空間スケーラビリティでは、複数の解像度を提供するための符号化が行われている。この場合、一つのビットストリームから異なった解像度の画像を取り出すことができるほか、下位層に伝送エラー対策を施した信号を与え、一種のエラー耐性を得ることも可能である。空間スケーラビリティは、通信を含む動画応用、動画規格間の相互変換、動画データベース慨覧、HDTVとSDTVの相互変換など、空間解像度を二つ利用するのが特徴である。空間スケーラビリティは、一つの原動画から二つの空間解像度の動画層を生成し、基本空間解像度を提供するために下位層はそれ自身で符号化し、上位層は空間的に内挿した下位層を利用して、原動画信号の完全な空間解像度を表現する。例えば、下位層および上位層は、MPEG−2規格に従って符号化してもよく、下位層はMPEG−1規格に従い、上位層はMPEG−2規格に従って符号化してもよい。
【0032】
SNRスケーラビリティは、通信を含む動画応用、多重品質の動画サービス、SDTV、HDTVなど、品質に最低二つのレイヤが必要であるときに応用できる。SNRスケーラビリティは、一つの動画から同解像度かつ異なる品質の二つの階層を作成することを意味し、下位層は基本動画品質を提供するためにそれ自身で符号化し、上位層は下位層の品質を向上するよう符号化する。
【0033】
また、時間スケーラビリティは、下位層は基本時間速度を提供するためにそれ自身で符号化し、上位層は下位層から時間予測を用いて符号化する。これらの層は、復号時に原動画信号の完全な時間解像度を与えるよう、時間的に多重化する。
【0034】
データパーティショニングは、ATMネットワーク、地上放送、磁気媒体などのように、二つのチャネルが、ビットストリームの伝送または蓄積に利用できる場合を想定している。ビットストリームは、各チャネルに分割され、重要な部分(ヘッダ、動きベクトルおよび低周波数DCT係数など)は、重要でないデータ(高周波数DCT係数など)が伝送されるチャネルより誤りの少ないチャネルで伝送される。
【0035】
この他にも、基本的なスケーラビリティを組み合わせた、ハイブリッドスケーラビリティがある。基本的なスケーラビリティでは、下位層と上位層の動画の2階層が許されるが、それに対してハイブリッドスケーラビリティでは3階層まで対応することができる。
【0036】
「コンテント情報」は、少なくとも一つのメディア情報の一部を用いて作成され、単独で利用上の意味を持つ単独情報と、それに付加されて元のメディア情報に近づく少なくとも一つの付加情報とに機能分割されている。また、コンテント情報は、複数のコンテナ情報(それによって代表されるコンテナ情報・振舞情報を含むことを可)を持たせることができる。
【0037】
コンテント情報の分割の方法は、動画像情報に好ましい例として、例えば、MPEG−2に提案された空間スケーラビリティと言われる空間解像度の階層符号化方式を使うことができる。MPEG−2の2階層(最大4階層)の例では、まず、原画像のままの高解像度画像と、原画像からフィルタリングによって縦横各半分に縮小された低解像度画像が作成される。各階層の画像はマイクロブロックに分けて符号化器によって符号化される。このとき、各階層毎、階層間、フレーム毎に動き予測が行われるので、画像情報が圧縮される。符号化されたデータはコンテント情報として、一旦、送信側端末機内の記憶装置に蓄積される。コンテナ情報のスケーラビリティプロファイルには、この場合、空間スケーラビリティのタイプ名(MPEG−2)とレベルとして階層数(2層)が記録されている。
【0038】
一般に、低解像度画像(データ)は、空間解像度が劣化しているため、被写体の詳細な動きはとらえられない。その反面、大まかな動きを少量のデータ容量で蓄積できる。一方、高解像度画像(データ)は被写体の動きを局所的にしか追えないが、検出動き量の空間解像度を高くして詳細な領域での符号化を行うことができる。低・高両解像度のデータがマイクロブロックごとに動き予測で組み合わせられると、原画像に近い高品質の動画像を再現することができる。
【0039】
「振舞情報」は、利用者が設定した、コンテント情報の操作情報(再生・検索・編集・加工等)を含む。また、振舞情報は、利用者が過去に行った操作の履歴情報、送信者が設定した受信側での振舞に関する情報等を含ませることができる。ただ、振舞情報は、なくてもよく、上述の例で2階層の動画情報が蓄積された段階では、振舞情報はもっていない。
【0040】
(2)マルチメディア情報利用サービス
図4に、本発明のデータ構造(MMP)のマルチメディアサービスへの適用例の説明図を示す。ここでは、各サービス区分に対する、概要、利用機能、主に用いられるMM情報、対応する実施の形態(備考)が示されている。利用形態としては、検索、ブラウザ(Br)、編集、要約、その他に分けられており、関連する利用機能に○印が記入されている。MM情報としては、主に使用される情報に○印が記入されている。各サービスとしては、以下の例が挙げられる。
・電子図書館:多数のマルチメディア情報を保管し、利用者が必要な情報を選択して利用する。
・記事サービス:検索・配送されたMM情報を配送日からの経過日数で自動処理する。
・交信:複数利用者間でMM情報を交換する。
・編集:新規MM情報を作成する。また編集する。
・発表:MM情報を使った会議等での報告・発表
・情報提供:他のMMシステムへ本MM情報を紹介する。
【0041】
以下に、図4の順序で、本発明のMM情報システムの構成の例と、本発明のMM情報システムが好適に機能するいくつかの利用方法の例について特徴を説明する。
【0042】
(実施の形態1:電子図書館)
図5に、コンテナ情報によるMM情報の検索及び入手についてのシーケンス図を示す。ここでは、上述のMM情報システムを用いて、MM情報の検索と配送を行う場合の具体手順を以下に示す。
この図は、例えば、電子図書館のMM情報入手の手順を示すシーケンス図である。この図は、図1において、受信端末機2の利用者Aが、送信端末機1にある指定のMM情報(ここでは動画像とする)を検索して配送を受けようとする場合の手順概要を示す。
【0043】
受信端末機2は、アプリケーションを起動し(MM情報ブラウザ)、管理端末機4へ利用者の利用開始指定或は自動問い合わせをする(101)。管理端末機4は、その利用者についてユーザ登録確認(管理端末機4に登録されているユーザかどうかの確認)をする。管理端末機4は、ユーザ登録が確認されると、送信端末機1へユーザのアクセス許可を送信する(103)。送信端末機1は、受信端末機2へアクセスを許可(送信端末機1から情報を受け取る準備が完了)する(105)。受信端末機2は、管理端末機4へ利用者のMM情報リストの要求をする(107)。管理端末機4は、ユーザサービスの確認を行う。(ユーザの利用できるサービスクラスを確認する。)管理端末機4は、ユーザサービスが確認されると、送信端末機1へ利用者に沿ったMM情報リストの作成を要求する(109)。送信端末機1は、管理端末機4からの要求に応じて、サービスMM情報リストの作成をする。ここで、MM情報リストは、MM情報内のコンテナ情報を収集して作成され、複数のコンテナ情報を含む。送信端末機1は、受信端末機2へMM情報リストのMM情報を送信する(111)。受信端末機2は、MM情報リストを受信・表示する。
【0044】
受信端末機2の利用者は、コンテナ情報より検索指定を行い、受信端末機2は、管理端末機4へ検索要求をする(113)。検索要求では、コンテナ情報を検索コンテントとしたMM情報を生成、又は、コンテナ情報からMM情報の識別情報を取得し、そのMM情報を検索する。なお、ここでいっている検索は、必ずMM情報がある場合であるが、ユーザサービスにより、提供できるMM情報の部分が変化する。つぎに、管理端末機4は、ユーザの利用条件のチェックをする。ユーザの利用条件が満たされると、管理端末機4は、送信端末機1へ指定MM情報の配送条件の問い合わせをし(115)、さらに、送信端末機1は、受信端末機2へ指定MM情報の配送条件の問い合わせをする(117)。受信端末機2は、配送条件の問い合わせを受信すると、管理端末機4へ利用者の配送条件の送信(MM情報内の振舞情報に記述し、MM情報として送信)をする(119)。管理端末機4は、利用者の配送条件に基づき、ユーザの利用条件のチェックをする。
【0045】
ユーザの利用条件が満たされると、管理端末機4は、送信端末機1へ確認情報を送信し(121)、さらに、送信端末機1は、受信端末機2へ確認情報の送信をする(123)。つぎに、受信端末機2は、管理端末機4へ配送確認を送信する(125)。管理端末機4は、さらに、ユーザの利用条件のチェックを行い、配送確認等が得られると、必要に応じて、管理端末機4が管理しているMM情報の場所を指定する。なお、これの指定がない場合は検索処理が必要となる。ユーザの利用条件が満たされると、管理端末機4は、送信端末機1へ指定MM情報の送信要求(指定MM情報の検索要求)をする(127)。送信端末機1は、この送信要求に応じて、データベースから指定MM情報の取得(指定MM情報の検索)をして、受信端末機2へ指定MM情報を送信する(129)。受信端末機2は、指定されたMM情報を受信すると、管理端末機4へ終了指示をする(131)。管理端末機4は、送信端末機1へ受信端末との切断要求をする(133)。
【0046】
なお、上述の説明において、データ伝送情報の形式は、すべてMM情報である。また、ステップ101〜109等において、各データ伝送情報は、例えば、MM情報内の振舞情報、コンテナ情報(階層的MM情報)又は、コンテント情報を含んだMM情報全体により実現することができる。
【0047】
つぎに、図6に、コンテント情報によるMM情報の検索及び入手についてのシーケンス図を示す。
この図は、コンテント情報からの検索についてシーケンスで、もともと受信側で持っているMM情報に基づき、検索要求を行うものに関する。この場合、例えば、受信端末機2から検索要求(コンテント情報)が、管理端末機4を経由して送信端末機1に送られ、そこで検索処理が行われ、その検索結果がMM情報として、受信端末機2へ返送される手順を示す。
【0048】
まず、受信端末機2は、アプリケーションを起動し(MM情報ブラウザ)、管理端末機4へ利用者の利用開始指定或は自動問い合わせをする(101)。管理端末機4は、その利用者についてユーザ登録確認(管理端末機4に登録されているユーザかどうかの確認)をする。管理端末機4は、ユーザ登録が確認されると、送信端末機1へユーザのアクセス許可を送信する(103)。送信端末機1は、受信端末機2へアクセスを許可(送信端末機1から情報を受け取る準備が完了)する(105)。
【0049】
受信端末機2は、利用者のコンテント情報により検索指定をする。受信端末機2は、管理端末機4へ検索要求をする(151)。コンテント情報を検索コンテントとしたMM情報を生成、又は、コンテント情報からMM情報の識別情報を取得し、そのMM情報を検索する。なお、ここの検索は、必ずMM情報がある場合であるが、ユーザサービスにより、提供できるMM情報の部分が変化する。管理端末機4は、ユーザの利用条件のチェックをする。管理端末機4は、ユーザの利用条件が満たされると、送信端末機1へ検索要求する(153)。送信端末機1は、検索要求に基づき、検索エンジンを起動し、検索エンジンによる検索結果をMM情報として生成し、受信端末機2へ、その検索結果を返送する(155)。受信端末機2の利用者は、コンテント情報より検索指定を行い、管理端末機4に対し、情報の選択を指示する(157)。以下の動作は、図5のステップ115以降と同様である。
【0050】
このようなコンテント情報による検索に関する具体例としては、例えば、以下のように画像検索を行っている場合を想定することができる。デジタルカメラでとったコンテント情報を含むMM情報が受信端末機2にあり、画像情報(ここでは、イメージの特徴量(数値情報))は、管理端末機4を経由して送信端末機1へ送られる。送信端末機1では、この数値情報キーにより検索エンジンを動作させ、データベースを検索する。ここで、検索結果として、例えば、一枚の写真から、その写真の詳細情報、美術館の絵から画家やその歴史的背景を知るとか、さらに、一枚の静止画像から映像のシーンを取ってくる場合がある。ある野球選手のバッターボックスに立っている写真から、本日の全打席のシーンを取っている場合等が、これに相当する。このように、部分情報から詳細情報を取り出すことを検索エンジンが行う。
【0051】
これらの実施の形態の一般的な効果としては、次の点が挙げられる。
・情報の共通利用
・著作権保護機能
・ブラウジング機能
・情報検索機能
【0052】
さらに、この実施形態における固有の効果としては、例えば、以下の点が挙げられる。
管理端末機4には、各利用者毎の受信能力が登録されているので、例えばある利用者が高い受信能力を持ち、高品質のMM情報を得たいときはすべてのMM情報の配送を受けて、高品質のMM情報を利用することができる。一方、低い受信能力しか持っていない利用者または、高い受信能力をもっていても迅速に内容を知りたいときはその旨要求することによって、MM情報の一部のみの配送を受ける。これによって、配送系に無駄な負荷をかけず、受信側の蓄積容量を無駄に使用することなく、利用者の便宜に合わせたMM情報の配送を行うことができる。
【0053】
この実施形態において、送信端末機1は1つのMM情報ファイルを持つこととして説明した。さらに、他の実施の形態として、送信端末機が多数ある場合、相互の送信端末機間でコンテント情報を交換しておくことが可能である。利用者Aは送信端末機1にあるMM情報のみならず、他の送信端末機にあるMM情報もあわせて検索することができ、検索の対象範囲が広くなって送信端末機1以外の送信端末機に必要な情報がある場合にそれを知ることができる。これによって受信側の利用者は複数の送信端末機のMM情報の有無を迅速に知ることができ、利便性が高くなる。また、配送側の利用者(MM情報の提供者)は、自分の保有するMM情報以外のMM情報を示すことによってサービスの質を高めることができ利用者が増加できる利便性がある。
【0054】
コンテナ情報は、コンテント情報や振舞情報を含んだ最上位の階層にあたることをアプリケーションソフトウエア10で規定する。アプリケーションソフト10は、必ずコンテナ情報を最初に見て、著作権など必要条件を満たす操作以外は禁止の処理を行う。アプリケショーンソフト10以外にMMPコントローラ12にその機能を持たせることもできる。
【0055】
MM情報の配送にあたっては、例えば、時系列に符号化されたビットストリームを用いるのがよい。このとき送信側のアプリケーションソフト10は、コンテント情報を第1に配送するようにする。これによって、受信側のアプリケーションソフト10又はMMPコントローラ12が、最初に送られたコンテント情報をみて、必要条件の判断を確実に行うことができる。
【0056】
(実施の形態2:記事サービスの例)
ここでは、新聞記事のなかから必要な情報を検索してファックス、メイル等により配送される例について説明する。記事サービスでは、本発明のMM情報システムを用いて、品質の高いMM情報の配送サービスを受けることができる。
【0057】
図1のMM情報システムにおいて、受信端末機2の利用者A、受信端末機3の利用者Bはそれぞれに必要なMM情報を持つ送信端末機1(またはその他の送信端末機)と、作成されたMM情報の検索条件を管理端末機4に予め登録しておく。管理端末機4のアプリケーションソフトは、登録された対象となる送信端末機において、例えば、毎朝作成されたMM情報中から、コンテナ情報にアクセスして検索を行う。検索条件に適合するMM情報があった場合には、そのMM情報全体を各利用者に配送する。
【0058】
図7は、記事サービスにおける処理手順を示すフローチャートである。
このフローチャートに従って、各利用者毎の受信端末機にあるアプリケーションソフトの処理手順を説明する。このフローチャートは、例えば、情報が自動的に届いた場合の情報処理手順(例、情報削除)を示す。検索し配送されたMM情報が受信端末機に存在する場合、このMM情報の経過時間を監視する処理部が備えられる。この処理部が自動的に起動され、保管時間の経置に従い、(1時間、1日、1ヶ月等)適宜の情報を削除する。
【0059】
また、図8は、記事サービスにおけるMMパッケージの構成を示す説明図である。
ここでMM情報は、図8(a)に示すように、コンテナ情報(メディアプロファイル)に見出し情報(文字情報)が含まれ、コンテント情報として記事文章の文字情報と圧縮された静止画像情報とが含まれ、また、振舞情報には、例えば、登録された利用者ごとの受信後の振舞条件が記録されている。各パッケージの振舞情報には、利用者が行ったそのパッケージ情報についての操作内容が記録される。なお、メディアプロファイル(内容プロファイル)コンテント情報のヘッダ部分に記述され、その機能情報が振舞情報に記述される。
【0060】
利用者が旅行中などで、配送当日にアプリケーションソフトが起動されなかった場合、配送されたMM情報が受信端末機に存在する場合等が指定される。ここで、検索結果に基づくMM情報が配送される時、又は、適宜の時間経過等によりアプリケーションソフトは自動的に起動して、まだ利用者によって操作されていないMMパッケージを検出する(S301)。つぎに、MMパッケージ内の振舞情報を抽出し(S303)、それに記述された指示等に基づき、(各コンテント情報の保管日数)・時間等を解析する(S304)。解析された保管日数・時間等に基づき、先に配送されて、例えば、3日以上経過している画像情報を消す(S307、S309)(図8(b)参照)。さらに保管日数・時間等が経過し、例えば10日経つと記事文章情報を消す(S311、S313)。最後にはコンテナ情報に基づく見出し情報、文字のみが残る(図8(c)参照)。ユーザの指定によりこれらの処理を繰り返し又は終了することができる(S315)。
【0061】
一般に、画像情報は文書情報に比べて共に圧縮されているといっても、画像情報の方が大きな容量を持っている。アプリケーションソフトがこの様にデータ処理することによって、多量の検索結果が配送されたとき、利用者の受信端末機のMM情報の蓄積容量に限界がある場合でも、当面利用されないコンテナ情報が削除されるので、利用者の端末機側で記憶容量が利用限度に達して、受信が不能になることがなく、受信側の蓄積容量を有効に利用することができる。なお、さらに、所定の保管日数・時間等により、音声情報等の他の情報を削除する処理を追加することもできる。
【0062】
つぎに、図9に、情報閲覧時に不足情報が生じた場合の処理についてのフローチャートを示す。
例えば、旅行から帰った利用者は、各MMパッケージの振舞記録された操作情報に基づいて、まだ見ていない見だし情報を点検することができる。さらに、記事文章ないし画像内容を見たいときは、配送センターに再度請求することができる。以下に、このフローチャートについて説明する。
【0063】
利用者によってアプリケーションソフトが、起動された場合(例えば、毎日)、配送されたMMパッケージを検出したアプリケーションソフトは(S401)、コンテナ情報に含まれる見出し情報を利用者に表示する(S403)。利用者は見出し情報をみて、それが重要な情報である場合、さらにその内容(記事文章)・画像(静止画像)を見るかどうかが判断できる。ここで、Nは、一例として、MMパッケージが配送された日と、利用者によってアプリケーションソフトが起動された日の日差を示す。利用者は、内容情報が必要と判断すると(S405)、例えば10日以上経過していなければ(S409)、まだ、その情報は上述のような削除する処理により消去されていないので、MM情報の内容情報が表示される(S411)。一方、10日以上経過していると、MM情報の内容情報は削除されているので、内容情報を再請求し(S409)、その後内容を表示する(S411)。
【0064】
同様に画像情報についても、それが必要と判断すると(S413)、例えば3日以上経過していなければ(S409)、MM情報の内容情報が表示される(S415)。一方、3日以上経過していると、MM情報の内容情報は削除されているので、内容情報を再請求し(S417)、その後内容を表示する(S419)。このようにして、全パッケージについて処理を繰り返す(S421)。
【0065】
この実施の形態の一般的な効果として、以下の点が挙げられる。
・ブラウジング機能;見出しをコンテナから得るので要否判断が早くできる。
・操作情報の記録
・パッケージ単位受信;リアルタイム伝送不要。伝送遅延の補償が可能。
また、この実施形態に固有な効果としては、例えば、受信側端末機の蓄積容量に限度があっても、その蓄積容量を有効に利用できることである。
【0066】
上述の実施の形態では、配送日以降の経過日数で、画像・文章情報の順で消去処理する例を示した。さらに、ある種の受信端末機において好ましい例として、規定された記事サービスの蓄積可能な最大容量を規定し、この占有状態に応じて消去する日数を変更するようにしてもよい。このとき、比較的小さな蓄積容量の端末機でも、すくなくともコンテナ情報における見出し情報をもれなく迅速に引き出すことができ、利用者の利便性が向上する。
【0067】
(内容の重要度に合わせて、情報の移動端末へ転送する使い方;秘書機能)
上述の第2の実施の形態で述べた記事情報で検索されたものについて、さらに重要度をつけることが可能である。本発明のMM情報は、振舞情報を持っている。管理端末機は、検索情報が特に重要なものであるとの定義がされたものである場合、送信端末機1は、振舞情報に、情報の重要度を受信側での振舞方として記述する。振舞情報が、スケーラビリティ構造を使って、コンテント情報のうち文書情報を取りだす。
【0068】
重要データの振舞情報があるMM情報が配送されたとき、受信端末機のアプリケーションソフトは、着信次第すぐに見出し情報を表示する。受信端末機1の利用者Aが端末機側に不在であるとき、予め転送先を設定しておく。利用者に受信端末機と別のモバイル系の端末機があり、受信側端末機からモバイル系端末機に転送できるときは、見出しと文書部分のコンテンツ情報をモバイル系の端末に送信する。この実施形態に固有の効果は、例えば、重要情報を時期を逃がさずに利用できることである。
【0069】
(実施の形態3:利用者間の交信の例)
つぎに、スケーラビリティを用いて、利用者間でMM情報を相互に利用して交信する場合の本発明の実施の形態の一例を説明する。
図10は、本発明の利用者間の相互交信を示す説明図である。
この実施の形態は、利用者Aが用いる受信端末機2、利用者Bが用いる受信端末機3、配送系(ネットワーク)4を備える。ここでは、受信端末機2、3が情報送信側及び受信側となる。
【0070】
まずステップS501では、利用者Aは、送信画像情報を作成する。そして、その画像を空間スケーラビリティにもとづいて、低解像度情報TBと高解像度情報TEからなるコンテント情報として符号化する。ステップS502では、利用者Aは受信端末機2から配送系4を経由して受信端末機3にMM情報を配送する。ステップS503では、利用者Bは、配送されたMM情報を低解像度・高解像度情報TB・TEないし両方を用いて再生する。ステップS504では、利用者Bは、返送する新たな画像情報を作成する。この例では、フレームを4分割し、配送された低解像度情報TBを1/4画面の情報として(1フレーム)、また、新たに作成した低解像度の画面を分割3フレームとして独立して使用している。作成されたMM情報には、その振舞情報に編集の元になった低解像度情報TB、高解像度情報TEの名称情報が含まれている。ステップS505では、利用者Bは、作成した画像情報を利用者Aへ返信する。ステップS506では、利用者Aは、返信された画像情報のうち低解像度の分割3フレームのうちいずれかを選択して再生・利用することができる(いずれも類似の内容である)。利用者Aは、自分で送信した元になった画像情報を持っているので、返送された低解像度情報TBよりも高分解能の高解像度情報TEで画像を表示することもできる。さらに利用者Aは、同様に4分割された画像に新たな低分解能画像(1/4画面分)を付加した返信情報を作成し(S507)、利用者Bに送信する(S508)。利用者Bは、再びこの画像を再生する(S509)。
【0071】
このように利用者間で送付された画像情報を自由に再利用して、MM情報を交換することができる。利用者A、B間で相互に交信している間は、図1における送信端末機1や管理端末機4は作用しない。しかし、利用者A、Bのいずれかが、相互に作成したMM情報を一般公開することを希望し、公開の条件(著作権など)を設定をしようとする場合、公開条件登録を行う管理端末機4に意思表示を行い、手続を経ることによって、送信端末機1にMM情報を送信して他の人が利用できるように保管することができる。
【0072】
この実施の形態の共通な効果として、以下の点が挙げられる。
・情報の再利用
・プロセッサブルな情報構成
【0073】
(実施の形態4;遠隔教育における本発明の実施形態)(プレゼンテーションの例を含む)
つぎに、第4の実施の形態として、遠隔教育に本発明を適用する場合の一例を示す。
図11は、遠隔教育の利用者と使用機能を示す説明図である。この図では、利用者/使用機能に対するコンテナ・コンテント・振舞・その他の各情報が記憶されている。
【0074】
図11の最初の行にあげた、MM情報の利用者である教師は、遠隔教育用のMM情報からなる教材の作成にあたって、第1の実施の形態にあげた電子図書館の機能を使って、図1における送信端末機1に蓄積された多数のMM情報を検索して必要なMM情報(画像・音声・文字・図表など)を集めることができる。教師は、第3の実施の形態にあげた編集機能を用いて、MM情報を編集し、一つのパッケージ化された遠隔教育教材を作成することができる。また教師は、監修者と交信して、教材の内容を相互に調整することができる。作成された遠隔教育教材は、コンテナ情報に概要情報を含めた上で、送信端末機1に教材メニューの一つとして登録される。管理端末はこの教材の利用条件を管理する。
【0075】
図11の第2行にあげた、MM情報の利用者である生徒は、図1における受信端末機2、3を用いて、送信端末機1に教材の問い合せを行う。生徒は、送信端末機1に登録された多数の遠隔教育用教材を検索して、自分に必要な教材をメニューから選択することができる。生徒は、受講する教材が決まったら、図1における管理端末機4に申請して、各自の受信端末機2、3に各自が選択した教材の配送を受ける。生徒は、コンテント情報のスケーラビリティを用いて、自分の好むMM情報の表示形態を選択することができる。例えば、画像に興味を持つ生徒はすべての画像情報を用いて質の高い画像で学習することができるし、文書のみで内容が理解できる生徒は、低品質画像のみを用いて早く要点のみを点検することができる。
【0076】
遠隔教材のMM情報の構成を、章や節単位に構成しておけば、生徒は、受信端末機2、3のアプリケーションソフトの機能を用いて、自分の知識に合わせて、章や節単位でスキップすることができるので、利用性を高めることができる。生徒及び/又は教師が使用する受信端末機は、質問事項が発生して、後日教師が回答するための送信機能を持たせることが好ましい。
【0077】
図11の最後の行にあげた、MM情報の利用者である管理者は、生徒別に遠隔教育教材の利用状況を、振舞情報によって知ることができる。これは、メニューにおけるその教材の利用状況の把握や、生徒の興味をもって見た内容、スキップした内容などの情報を含んでいる。このため、遠隔教育教材のその後の改良や、利用度の把握に有効となる。生徒と教師の質問・回答状況も遠隔教育教材の質を高めるために有効となる。
【0078】
このような実施の形態の一般的な効果としては、以下の点が挙げられる。
・教師は、再利用、編集、再加工、著作権保護、ブラウジングの各機能を有する。
・生徒は、検索、ブックマーク、操作情報、パッケージ単位の構成の各構成を有する。
・管理者は、操作情報の記録の機能を有する。
この実施の形態に固有な効果としては、MM情報はパッケージ化されているので、生徒は遠隔教育教材の選択が容易となる。さらに、コンテント情報を章・節単位にパッケージ化しておくことによって、生徒の理解状況・これまでの知識に合わせたスキップ操作が、受信端末機側で可能となり、利用の利便性がさらに向上する。
【0079】
(実施の形態5:プレゼンテーションへの応用)
図11の遠隔教育への応用機能の大部分は、講演会などで行う発表にも適用することができる。
図11で遠隔教育の場合の教師にあたる発表者は、事前に発表内容をMM情報として編集して、発表場所の端末(受信端末機2)に配送しておく。発表者は、動画像・静画像・音声・文章・図表の情報を自由に組み合わせて、発表を有効に表現することができる。また、発表時間の変更などがあった場合には、コース内のレベル選択やスキップ操作を組み合わせて発表内容の延長・短縮を行うことができる。
【0080】
発表における質疑応答などで、予め使用する予定のないMM情報が必要になった場合には、発表者は送信端末機1に要求して、必要な情報を検索して配送することができる、または受信しながら回答の説明に使用することができる。
【0081】
本発明のマルチメディア情報利用方法は、マルチメディア情報利用プログラムを記録したコンピュータ読み取り可能な記録媒体、マルチメディア情報利用プログラムを含みコンピュータの内部メモリにロード可能なプログラム製品、マルチメディア情報利用プログラムを含みコンピュータが使用可能な記録媒体にストアされたプログラム製品等により提供されることができる。
【0082】
【発明の効果】
(1)情報の共通利用性・互換性・再利用性
メディア間で共通に利用できる。既存メディアとの互換性:受信したパッケージ情報を再度送信などに利用できる。このため、利用者は、情報の加工や、加工した情報の返信が容易となる。
(2)編集機能、プロセッサブルな情報構成
利用者は、個々のメディア情報を自由に編集・合成・加工して、新たなメディア情報を構成できる。このため、MM情報の編集が容易で、再利用が容易となる。
(3)著作権保護機能
表現の著作権や情報利用に関する許可情報が取り扱える。個人情報としてのセキュリティ保護が可能。このため、管理者・利用者は、情報の管理が容易となる。
(4)ブラウジング機能、
利用者が表現内容を簡易に点検することができる。このため、利用者が情報の有意性を迅速に判断できる。有意な情報に対する課金システムの構築が可能。
(5)情報検索機能
・目次、索引に相当する情報検索機能をもつ。このため、大きな情報・複雑な情報であっても利用者が容易に受信した情報の検索ができる。
・コンテント情報とコンテナ情報で記述されているので、画像検索の際、xxの図書館へいって、yyのマークのある、xxコンテント情報を取ってくるという検索が可能になる。
(6)ブックマーク機能
情報取得者がMPにブックマークの張りつけ・取り外しができる。このため、大きな情報・複雑な情報であっても利用者が容易に情報の整理ができる。
(7)個々のメディア情報間で関連記述されている
例えば電子カタログでは、カタログ内のある机を選んだとき、その机に関する概観図、寸法表、型番、料金などの情報が容易に一覧できる。
(8)操作情報の記録
自動情報再生できる。このため、利用者は、情報の取扱いが容易となる。
(9)パッケージ単位での独立再生を保証
・利用者がリアルタイムに受信することが必ずしも必要でなくなる。
・利用者が必要な情報を識別しやすくなり、データ保存が容易となる。
・大容量のデータを事前に伝送して蓄積しておくことができる。このため、利用することが予め分っている情報を事前に伝送して、利用側の端末に蓄積しておけば、利用時(再生など)の伝送遅延を吸収できる。
共通のパッケージフォーマットを用いれば、さまざまなサービス間で統一的な情報の利用が可能となる。
(10)端末機の復号処理および表示処理を軽減
表示装置の小型化、高詳細化に代表される高品質化と表示速度
標準化されたコンテント様式が使われている。
スケーラビリティを画像圧縮に使っている。
【図面の簡単な説明】
【図1】本発明に関するMM情報システムの構成図。
【図2】本発明のMM情報システムの他の構成図。
【図3】データ処理階層モデルの説明図。
【図4】本発明のデータ構造(MMP)のマルチメディアサービスへの適用例の説明図。
【図5】コンテナ情報によるMM情報の検索及び入手についてのシーケンス図。
【図6】コンテント情報によるMM情報の検索及び入手についてのシーケンス図。
【図7】記事サービスにおける処理手順を示すフローチャート。
【図8】記事サービスにおけるMMパッケージの構成を示す説明図。
【図9】情報閲覧時に不足情報が生じた場合の処理についてのフローチャート。
【図10】本発明の利用者間の相互交信を示す説明図。
【図11】遠隔教育の利用者と使用機能を示す説明図。
【図12】デジタルビデオディスクのシステムを説明する図。
【符号の説明】
1 送信端末機
2、3 受信端末機
4 管理端末機
5 配送器
6 配送系
7 送信器
8 受信器
9 通信衛星
10 データベース
Claims (17)
- 多数のマルチメディア(MM)情報が蓄積された送信端末機と、利用者がMM情報を送信又は受信するための受信端末機と、情報の配送管理を行う管理端末機とを備え、前記送信端末機と前記受信端末機との間で、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムを利用するためのマルチメディア情報利用方法であって、
受信端末機が、管理端末機へ利用者のMM情報リストを要求するステップと、管理端末機が、ユーザが利用できるサービスクラスを確認すると、送信端末機へMM情報リストの作成を要求するステップと、
送信端末機が、管理端末機からの要求に応じて、MM情報内のコンテナ情報を収集してMM情報リストを作成し、受信端末機へMM情報リストを送信するステップと、
受信端末機が、MM情報リストを受信及び表示し、コンテナ情報により検索又は編集・加工指定を行い、管理端末機へ検索又は編集・加工要求をするステップと、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求するステップと、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信するステップと、
受信端末機が、指定されたMM情報を受信するステップと
を含むマルチメディア情報利用方法。 - 検索又は編集・加工要求は、コンテナ情報を検索又は編集・加工コンテントとしたMM情報、又は、コンテナ情報から取得した識別情報のMM情報を送信することを特徴とする請求項1に記載のマルチメディア情報利用方法。
- 多数のマルチメディア(MM)情報が蓄積された送信端末機と、利用者がMM情報を送信又は受信するための受信端末機と、情報の配送管理を行う管理端末機とを備え、前記送信端末機と前記受信端末機との間で、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムを利用するためのマルチメディア情報利用方法であって、
受信端末機が、自端末機が有するMM情報のコンテント情報により管理端末機へ検索又は編集・加工要求をするステップと、
管理端末機が、ユーザの利用条件が満たされると、送信端末機へ検索又は編集・加工要求するステップと、
送信端末機が、検索又は編集・加工要求に基づき、検索又は編集・加工結果をMM情報として生成し、受信端末機へ検索又は編集・加工結果を返送するステップと、
受信端末機が、コンテント情報より検索又は編集・加工指定を行い、管理端末機に対し、情報の選択を指示するステップと、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求するステップと、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信するステップと、
受信端末機が、指定されたMM情報を受信するステップと
を含むマルチメディア情報利用方法。 - 検索又は編集・加工要求は、コンテント情報を検索又は編集・加工コンテントとしたMM情報、又は、コンテント情報から取得した識別情報のMM情報を送信することを特徴とする請求項3に記載のマルチメディア情報利用方法。
- MM情報は、MM情報の識別を行うための概要情報を含むコンテナ情報と、メディア情報自体で構成されるコンテント情報と、コンテント情報を操作するための振舞情報とを含む請求項1乃至4のいずれかに記載のマルチメディア情報利用方法。
- 前記振舞情報は、コンテント情報の再生・検索・編集・加工等の利用者による操作情報、利用者が過去に行った操作の履歴情報、又は、送信者が設定した受信側での振舞に関する情報を含むことを特徴とする請求項1乃至5のいずれかに記載のマルチメディア情報利用方法。
- データ伝送形式は、MM情報内の振舞情報、コンテナ情報、又は、コンテント情報を含んだMM情報全体等のいずれかのMM情報であることを特徴とする請求項1乃至6のいずれかに記載のマルチメディア情報利用方法。
- 管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックする際に、
管理端末機が、ユーザの利用条件をチェックして、ユーザの利用条件が満たされると、送信端末機1へ指定されたMM情報の配送条件を問い合わせるステップと、
送信端末機が、受信端末機へ指定されたMM情報の配送条件を問い合わせるステップと、
受信端末機が、配送条件の問い合わせを受信すると、管理端末機へ利用者の配送条件の送信をするステップと、
管理端末機が、利用者の配送条件に基づき、ユーザの利用条件をチェックし、ユーザの利用条件が満たされると、送信端末機へ確認情報を送信するステップと、
送信端末機が、受信端末機へ確認情報の送信をするステップと、
受信端末機が、管理端末機へ配送確認を送信するステップと、
管理端末機が、ユーザの利用条件のチェックを行い、配送確認が得られると、送信端末機へ指定されたMM情報の送信要求及び/又は検索又は編集・加工要求をするステップと
を含むようにした請求項1乃至7のいずれかに記載のマルチメディア情報利用方法。 - 受信端末機は、指定されたMM情報を受信した後、管理端末機へ終了指示をするステップと、
管理端末機が、送信端末機へ受信端末との切断要求をするステップと
をさらび含む請求項1乃至8のいずれかに記載のマルチメディア情報利用方法。 - 受信端末機が、MM情報が配送された当日又は配送された時間から予め定められた一定時間に起動されなかった場合、
自動的に起動されて、まだ利用者によって操作されていないMM情報を検出するステップと、
検出されたMM情報の振舞情報を抽出するステップと、
抽出された振舞情報に含まれた各コンテント情報の保管日数又は時間に基づき、先に配送されて第1の所定期間以上経過した第1の内容情報をMM情報のコンテント情報から消去するステップと、
第1の所定期間より長い第2の所定期間以上経過した第2の内容情報をMM情報のコンテント情報から消去するステップと
をさらに含む請求項1乃至9のいずれかに記載のマルチメディア情報利用方法。 - 受信端末機が、自端末機に蓄積されたMM情報を検出するステップと、
MM情報のコンテナ情報を表示又は検索又は編集・加工し、所望のMM情報を選択し、
選択されたMM情報のコンテント情報の第1の内容情報が必要な場合、振舞情報に含まれた各コンテント情報の保管日数又は時間に基づき、先に配送されて第1の所定期間以上経過していないときは、該第1の内容情報を表示し、一方、先に配送されて第1の所定期間以上経過しているときは、該第1の内容情報を送信端末機に再請求するステップと、
選択されたMMパッケージのコンテント情報の第2の内容情報が必要な場合、振舞情報に含まれた各コンテント情報の保管日数又は時間に基づき、先に配送されて第2の所定期間以上経過していないときは、該第2の内容情報を表示し、一方、先に配送されて第2の所定期間以上経過しているときは、該第2の内容情報を送信端末機に再請求するステップと
をさらに含む請求項1乃至10のいずれかに記載のマルチメディア情報利用方法。 - 受信端末機が、管理端末機へ利用者の利用開始指定又は自動問い合わせをするステップと、
管理端末機が、利用者についてのユーザ登録を確認すると、送信端末機へユーザのアクセス許可を送信するステップと、
送信端末機が、管理端末機からのアクセス許可に応じて、受信端末機へアクセスを許可するステップと
をさらに含む請求項1乃至11のいずれかに記載のマルチメディア情報利用方法。 - 多数のマルチメディア(MM)情報が蓄積された送信端末機と、利用者がMM情報を送信又は受信するための受信端末機と、情報の配送管理を行う管理端末機とを備え、前記送信端末機と前記受信端末機との間で、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムを利用するためのマルチメディア情報利用プログラムを記録した記録媒体であって、
受信端末機が、管理端末機へ利用者のMM情報リストを要求するステップと、管理端末機が、ユーザが利用できるサービスクラスを確認すると、送信端末機へMM情報リストの作成を要求するステップと、
送信端末機が、管理端末機からの要求に応じて、MM情報内のコンテナ情報を収集してMM情報リストを作成し、受信端末機へMM情報リストを送信するステップと、
受信端末機が、MM情報リストを受信及び表示し、コンテナ情報により検索又は編集・加工指定を行い、管理端末機へ検索又は編集・加工要求をするステップと、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求するステップと、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信するステップと、
受信端末機が、指定されたMM情報を受信するステップと
を含むマルチメディア情報利用プログラムを記録した記録媒体。 - 多数のマルチメディア(MM)情報が蓄積された送信端末機と、利用者がMM情報を送信又は受信するための受信端末機と、情報の配送管理を行う管理端末機とを備え、前記送信端末機と前記受信端末機との間で、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムを利用するためのマルチメディア情報利用プログラムを記録した記録媒体であって、
受信端末機が、自端末機が有するMM情報のコンテント情報により管理端末機へ検索又は編集・加工要求をするステップと、
管理端末機が、ユーザの利用条件が満たされると、送信端末機へ検索又は編集・加工要求するステップと、
送信端末機が、検索又は編集・加工要求に基づき、検索又は編集・加工結果をMM情報として生成し、受信端末機へ検索又は編集・加工結果を返送するステップと、
受信端末機が、コンテント情報より検索又は編集・加工指定を行い、管理端末機に対し、情報の選択を指示するステップと、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求するステップと、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信するステップと、
受信端末機が、指定されたMM情報を受信するステップと
を含むマルチメディア情報利用プログラムを記録した記録媒体。 - 多数のMM情報が蓄積されたデータベースを有する送信端末機と、
利用者がMM情報を送信又は受信するための受信端末機と、
情報の配送管理を行う管理端末機と、
前記送信端末機及び前記受信端末機がそれぞれ接続される配送系を備え、
前記送信端末機と前記受信端末機との間で、前記配送系を介して、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムであって、
受信端末機が、管理端末機へ利用者のMM情報リストを要求し、
管理端末機が、ユーザが利用できるサービスクラスを確認すると、送信端末機へMM情報リストの作成を要求し、
送信端末機が、管理端末機からの要求に応じて、MM情報内のコンテナ情報を収集してMM情報リストを作成し、受信端末機へMM情報リストを送信し、
受信端末機が、MM情報リストを受信及び表示し、コンテナ情報により検索又は編集・加工指定を行い、管理端末機へ検索又は編集・加工要求し、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求し、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信し、
受信端末機が、指定されたMM情報を受信する
ことを特徴とするマルチメディア情報システム。 - 多数のMM情報が蓄積されたデータベースを有する送信端末機と、
利用者がMM情報を送信又は受信するための受信端末機と、
情報の配送管理を行う管理端末機と、
前記送信端末機及び前記受信端末機がそれぞれ接続される配送系を備え、
前記送信端末機と前記受信端末機との間で、前記配送系を介して、複数のマルチメディア情報が配送、蓄積及び/又は利用されるマルチメディア情報システムであって、
受信端末機が、自端末機が有するMM情報のコンテント情報により管理端末機へ検索又は編集・加工要求し、
管理端末機が、ユーザの利用条件が満たされると、送信端末機へ検索又は編集・加工要求し、
送信端末機が、検索又は編集・加工要求に基づき、検索又は編集・加工結果をMM情報として生成し、受信端末機へ検索又は編集・加工結果を返送し、
受信端末機が、コンテント情報より検索又は編集・加工指定を行い、管理端末機に対し、情報の選択を指示し、
管理端末機が、ユーザの利用条件及び指定されたMM情報の配送条件をチェックして、条件が満たされると、送信端末機へ指定されたMM情報の検索又は編集・加工及び送信を要求し、
送信端末機が、この要求に応じて、データベースから指定されたMM情報を検索又は編集・加工及び取得して、受信端末機へ指定されたMM情報を送信し、
受信端末機が、指定されたMM情報を受信する
ことを特徴とするマルチメディア情報システム。 - 前記配送系は、
MM情報の配送を、送信用の第1の共用配送系と、
制御信号の送受信を主に行う第2の共用配送系とを
備えたことを特徴とする請求項16又は17に記載のマルチメディア情報システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000169459A JP3555756B2 (ja) | 2000-06-06 | 2000-06-06 | マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム |
EP01936836A EP1306776A4 (en) | 2000-06-06 | 2001-06-01 | METHOD FOR USING MULTIMEDIA INFORMATION, SYSTEM AND PROGRAMMING MEDIUM THEREFOR |
US10/296,224 US7035875B2 (en) | 2000-06-06 | 2001-06-01 | Method of using multi-media information, system and program recording medium therefor |
PCT/JP2001/004674 WO2001095150A1 (fr) | 2000-06-06 | 2001-06-01 | Procede d'utilisation d'informations multimedia et systeme et support d'enregistrement de programmes associes |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000169459A JP3555756B2 (ja) | 2000-06-06 | 2000-06-06 | マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001350766A JP2001350766A (ja) | 2001-12-21 |
JP3555756B2 true JP3555756B2 (ja) | 2004-08-18 |
Family
ID=18672318
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000169459A Expired - Fee Related JP3555756B2 (ja) | 2000-06-06 | 2000-06-06 | マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US7035875B2 (ja) |
EP (1) | EP1306776A4 (ja) |
JP (1) | JP3555756B2 (ja) |
WO (1) | WO2001095150A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
NL1025098C2 (nl) * | 2003-12-22 | 2005-07-04 | Xelion B V | Inrichting, werkwijze, programmatuur en datadrager omvattende programmatuur voor het weergeven van informatie op een beeldscherm. |
US9275052B2 (en) | 2005-01-19 | 2016-03-01 | Amazon Technologies, Inc. | Providing annotations of a digital work |
US8725565B1 (en) | 2006-09-29 | 2014-05-13 | Amazon Technologies, Inc. | Expedited acquisition of a digital item following a sample presentation of the item |
US9672533B1 (en) | 2006-09-29 | 2017-06-06 | Amazon Technologies, Inc. | Acquisition of an item based on a catalog presentation of items |
US7865817B2 (en) | 2006-12-29 | 2011-01-04 | Amazon Technologies, Inc. | Invariant referencing in digital works |
US7716224B2 (en) | 2007-03-29 | 2010-05-11 | Amazon Technologies, Inc. | Search and indexing on a user device |
US9665529B1 (en) | 2007-03-29 | 2017-05-30 | Amazon Technologies, Inc. | Relative progress and event indicators |
US8341513B1 (en) | 2007-05-21 | 2012-12-25 | Amazon.Com Inc. | Incremental updates of items |
US8549441B2 (en) * | 2007-06-15 | 2013-10-01 | Microsoft Corporation | Presenting and navigating content having varying properties |
US9087032B1 (en) | 2009-01-26 | 2015-07-21 | Amazon Technologies, Inc. | Aggregation of highlights |
US8832584B1 (en) | 2009-03-31 | 2014-09-09 | Amazon Technologies, Inc. | Questions on highlighted passages |
US8692763B1 (en) | 2009-09-28 | 2014-04-08 | John T. Kim | Last screen rendering for electronic book reader |
US9495322B1 (en) | 2010-09-21 | 2016-11-15 | Amazon Technologies, Inc. | Cover display |
US9158741B1 (en) | 2011-10-28 | 2015-10-13 | Amazon Technologies, Inc. | Indicators for navigating digital works |
US9258747B2 (en) * | 2013-09-17 | 2016-02-09 | Intel IP Corporation | User equipment and methods for fast handover failure recovery in 3GPP LTE network |
JP7027864B2 (ja) * | 2017-12-15 | 2022-03-02 | トヨタ自動車株式会社 | 情報処理装置、情報処理方法、情報処理プログラム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4899299A (en) * | 1987-12-23 | 1990-02-06 | International Business Machines Corporation | Method for managing the retention of electronic documents in an interactive information handling system |
JP3520378B2 (ja) * | 1994-07-05 | 2004-04-19 | 日本電信電話株式会社 | マルチメディアサービス提供システム及びサービス管理方法 |
JPH0926965A (ja) | 1995-07-10 | 1997-01-28 | Nippon Telegr & Teleph Corp <Ntt> | 映像情報検索方法及びシステム |
US5751672A (en) * | 1995-07-26 | 1998-05-12 | Sony Corporation | Compact disc changer utilizing disc database |
US5752244A (en) * | 1996-07-15 | 1998-05-12 | Andersen Consulting Llp | Computerized multimedia asset management system |
US6055566A (en) * | 1998-01-12 | 2000-04-25 | Lextron Systems, Inc. | Customizable media player with online/offline capabilities |
US6314466B1 (en) * | 1998-10-06 | 2001-11-06 | Realnetworks, Inc. | System and method for providing random access to a multimedia object over a network |
US6487663B1 (en) * | 1998-10-19 | 2002-11-26 | Realnetworks, Inc. | System and method for regulating the transmission of media data |
US6581103B1 (en) * | 1999-10-22 | 2003-06-17 | Dedicated Radio, Llc | Method for internet radio broadcasting including listener requests of audio and/or video files with input dedications |
US6731312B2 (en) * | 2001-01-08 | 2004-05-04 | Apple Computer, Inc. | Media player interface |
-
2000
- 2000-06-06 JP JP2000169459A patent/JP3555756B2/ja not_active Expired - Fee Related
-
2001
- 2001-06-01 WO PCT/JP2001/004674 patent/WO2001095150A1/ja active Application Filing
- 2001-06-01 EP EP01936836A patent/EP1306776A4/en not_active Withdrawn
- 2001-06-01 US US10/296,224 patent/US7035875B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
US7035875B2 (en) | 2006-04-25 |
US20030126123A1 (en) | 2003-07-03 |
EP1306776A1 (en) | 2003-05-02 |
WO2001095150A1 (fr) | 2001-12-13 |
EP1306776A4 (en) | 2008-05-28 |
JP2001350766A (ja) | 2001-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3555756B2 (ja) | マルチメディア情報利用方法、マルチメディア情報利用プログラムを記録した記録媒体及びマルチメディア情報システム | |
Mauthe et al. | Professional content management systems: handling digital media assets | |
US6546405B2 (en) | Annotating temporally-dimensioned multimedia content | |
EP1367502B1 (en) | Multimedia Cooperative Work System and Method | |
KR100641848B1 (ko) | 디지탈 영상 콘텐츠의 배신 시스템 및 재생 방법 및 그 재생 프로그램을 기록한 기록 매체 | |
Chang et al. | Next-generation content representation, creation, and searching for new-media applications in education | |
Miller et al. | News on-demand for multimedia networks | |
JP2005244524A (ja) | 議事録ファイル生成方法、議事録ファイル管理方法、会議サーバおよびネットワーク会議システム | |
KR100849900B1 (ko) | 컨텐츠 송신방법, 시나리오 데이터, 기록매체 및 시나리오 데이터 생성방법 | |
JP7438486B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US20070260742A1 (en) | Media Storage and distribution in a Local Area Network | |
JP2004266578A (ja) | 動画像編集方法および装置 | |
KR20080082192A (ko) | 파일 포맷을 구성하는 방법과 상기 파일 포맷을 가지는파일을 포함한 방송 신호를 처리하는 장치 및 방법 | |
Bulick | Future prospects for network‐based multimedia information retrieval | |
Steinmetz et al. | e-Seminar lecture recording and distribution system | |
WO2006030995A9 (en) | Index-based authoring and editing system for video contents | |
JP2009058835A (ja) | コンテンツ受信装置 | |
Gay et al. | Conception of a multimedia electronic mail based on standards | |
JPWO2005002231A1 (ja) | 映像編集装置 | |
JP2001320691A (ja) | 映像視聴装置、映像ファイル提供装置及びこれらからなるインターネット放送システム | |
Yates et al. | WWW Television News in Context: Organizational Practices and Media Products | |
JP2003242155A (ja) | フレックスセミナーサービスシステム | |
JP2009060469A (ja) | コンテンツ受信装置 | |
Yates et al. | WWW Television News in www | |
JP2003259263A (ja) | テレビ番組録画装置と、ネットワークを利用したテレビ番組の録画方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20031210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040427 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040506 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090521 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110521 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110521 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120521 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 9 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |