JP2001119653A - Multimedia information processing unit and image information processing unit - Google Patents
Multimedia information processing unit and image information processing unitInfo
- Publication number
- JP2001119653A JP2001119653A JP29563599A JP29563599A JP2001119653A JP 2001119653 A JP2001119653 A JP 2001119653A JP 29563599 A JP29563599 A JP 29563599A JP 29563599 A JP29563599 A JP 29563599A JP 2001119653 A JP2001119653 A JP 2001119653A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- image information
- acquiring
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】この発明は、静止画または動
画の画像情報を獲得して提示するマルチメディア情報処
理装置および画像情報処理装置に係り、特に、獲得した
時刻や位置により画像情報を自動的に整理して提示する
ことのできるマルチメディア情報処理装置および画像処
理装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multimedia information processing apparatus and an image information processing apparatus for acquiring and presenting image information of a still image or a moving image. TECHNICAL FIELD The present invention relates to a multimedia information processing apparatus and an image processing apparatus that can be arranged and presented.
【０００２】[0002]
【従来の技術】近年の半導体製造技術および画像処理技
術の向上に伴ない、被写体像をＣＣＤ上に結像すること
により静止画または動画像の画像情報を獲得する、いわ
ゆるデジタルスチルカメラやデジタルムービーカムが種
々開発されてきている。2. Description of the Related Art With the recent improvement of semiconductor manufacturing technology and image processing technology, a so-called digital still camera or digital movie that acquires image information of a still image or a moving image by forming a subject image on a CCD. Various cams have been developed.
【０００３】また、最近のデジタルスチルカメラでは、
静止画を記録するだけでなく、静止画に対して記録日時
やサウンドなどの注釈を付けられるものがある。一方、
デジタルムービーカムも、動画とサウンドを記録するだ
けでなく、記録日時やタイトルなどの注釈を付けられる
ものがある。そして、これらのデジタルスチルカメラや
デジタルムービーカムには、記録した静止画または動画
と注釈とを管理しやすいように整理する方法が備わって
いるのが通常である。In recent digital still cameras,
In addition to recording still images, some still images can be annotated such as recording date and time and sound. on the other hand,
Some digital movie cams not only record moving images and sounds, but also have annotations such as recording date and title. These digital still cameras and digital movie cams usually have a method of organizing recorded still images or moving images and annotations so that they can be easily managed.
【０００４】ここでは、例として、注釈付加機能を持っ
たデジタルスチルカメラやデジタルムービーカムにおけ
る従来の整理方法について取り上げる。この整理方法
は、以下のように分類できる。Here, as an example, a conventional organizing method in a digital still camera or a digital movie cam having an annotation adding function will be described. This sorting method can be classified as follows.
【０００５】（１）ページめくり型 （２）一覧表示型 （３）ディレクトリ型 （４）アルバム型 （１）のページめくり型は、例えば、液晶ディスプレイ
がついているデジタルスチルカメラで、カメラ本体に記
録されている静止画を、最初に記録した静止画からペー
ジをめくるように順に表示して、サウンドボタンを押し
て表示された静止画に付加されたサウンドの注釈を再生
したり、日付ボタンを押して表示された静止画を記録し
た日時を液晶ディスプレイ上に表示したりする方法であ
る。(1) Page turning type (2) List display type (3) Directory type (4) Album type The page turning type of (1) is, for example, a digital still camera equipped with a liquid crystal display and recorded on the camera body. The displayed still images are displayed in turn from the first recorded still image to the next page.Press the sound button to play the annotation of the sound added to the displayed still image, or press the date button to display This is a method of displaying the date and time when the recorded still image was recorded on a liquid crystal display.
【０００６】デジタルムービーカムの場合は、記録ボタ
ンを押してから記録を停止するまでの間の動画を１つの
動画として区切り、区切られた動画の最初の画像を代表
画像として液晶ディスプレイに表示し、この代表画像を
ページめくりする。静止画または動画の記録と再生と
は、モード切り替えボタンで設定し、静止画の順送り表
示は、ページめくりボタンを押して行なう。[0006] In the case of a digital movie cam, a moving image from when the recording button is pressed to when recording is stopped is divided as one moving image, and the first image of the separated moving image is displayed on the liquid crystal display as a representative image. Turn the page of the representative image. Recording and reproduction of a still image or a moving image are set by a mode switching button, and the sequential display of a still image is performed by pressing a page turning button.
【０００７】このページめくり型では、カメラ本体内に
記録された静止画を簡単に確認することができ、注釈の
再生あるいは表示も簡単である。しかし、１枚毎にしか
ページめくりできないため、膨大な数の静止画や動画を
記録した場合には、探している静止画が見つかるまで何
度も繰り返しページめくりをする必要があるため、検索
に時間がかかるという問題があった。In this page turning type, a still image recorded in the camera body can be easily confirmed, and reproduction or display of an annotation is also easy. However, since you can only turn pages one by one, if you record a huge number of still images and moving images, you need to turn the page over and over until you find the still image you are looking for. There was a problem that it took time.
【０００８】（２）の一覧表示型は、例えば、デジタル
スチルカメラで記録した静止画と注釈とをパーソナルコ
ンピュータに転送し、転送された静止画をパーソナルコ
ンピュータのディスプレイ上にサムネイル画像（縮小画
像）を一覧表示して、各サムネイル画像の下に記録した
日時などの注釈を表示する方法である。サウンドの注釈
の再生は、一覧表示されたサムネイル画像のうちの１つ
をマウスでクリックして選択し、サウンド再生ボタンを
押して行なう。また、デジタルムービーカムの場合は、
代表画像のサムネイル画像を一覧表示に用いる。In the list display type (2), for example, a still image and an annotation recorded by a digital still camera are transferred to a personal computer, and the transferred still image is displayed as a thumbnail image (reduced image) on a display of the personal computer. Is displayed as a list, and annotations such as the date and time of recording are displayed below each thumbnail image. Reproduction of the sound annotation is performed by clicking one of the thumbnail images displayed in the list with the mouse to select it and pressing the sound reproduction button. In the case of a digital movie cam,
The thumbnail image of the representative image is used for list display.
【０００９】この一覧表示型では、一覧表示されたサム
ネイル画像から、探している静止画あるいは動画を簡単
に特定することができる。しかし、注釈付加機能付きデ
ジタルカメラやデジタルムービーカムを、例えば長期間
使用して膨大な数の静止画や動画を記録してパソコンに
転送した場合、膨大な数の一覧表示の中から探している
静止画または動画を見つけなければならず、ユーザの負
担は大きかった。In this list display type, a still image or a moving image to be searched can be easily specified from the thumbnail images displayed in a list. However, when a digital camera or digital movie cam with an annotation function is used for a long time to record and transfer a huge number of still images and videos to a personal computer, for example, a huge number of list displays are searched. Users had to find still or moving images, which placed a heavy burden on the user.
【００１０】また、一覧表示型の別の例として、たとえ
ば特開平１０−９１５８５号（携帯用情報処理装置およ
びその情報処理方法）がある。この装置は、スケジュー
ル内容を、カメラで静止画として取り込んで、その静止
画上にスケジュールの日時などの情報を含むアイコン
（明細書中ではスケジュールスタンプ）を配置すること
により、１ヶ月のカレンダにスケジュールの有無を示す
マークを表示して一覧表示するとともに、このマークを
選択することにより取り込んだ静止画を含むスケジュー
ル内容を表示するものであり、取り込んだ静止画を整理
する方法の１つと見なせる。As another example of the list display type, there is Japanese Patent Application Laid-Open No. Hei 10-91585 (portable information processing apparatus and its information processing method). This apparatus captures the contents of a schedule as a still image with a camera, and arranges an icon (schedule stamp in the specification) including information such as the date and time of the schedule on the still image, so that the schedule is stored in a one-month calendar. In addition to displaying a mark indicating the presence / absence of a still image, a list is displayed, and by selecting this mark, the contents of the schedule including the captured still images are displayed.
【００１１】この装置では、カレンダ状のスケジュール
表に、個々のスケジュールを表すマークを一覧表示し
て、このうちの１つのマークを選択することによって、
簡単にそのスケジュールの内容を表す静止画を検索する
ことができる。しかし、この装置では、スケジュールか
ら静止画を検索するのであって、スケジュールのない静
止画を検索することはできない。In this device, marks representing individual schedules are displayed in a list in a calendar-like schedule table, and by selecting one of the marks, the mark is displayed.
It is possible to easily search for a still image representing the contents of the schedule. However, in this apparatus, a still image is searched from a schedule, and a still image without a schedule cannot be searched.
【００１２】（３）のディレクトリ型は、一覧表示型で
静止画や動画をパソコンに転送する際に、その静止画や
動画を代表する名前を付けたディレクトリに転送するも
のである。一覧表示型は、すべての静止画または動画が
１つのディレクトリに転送されるものとみなすことがで
きる。どのディレクトリ内に転送された静止画または動
画を一覧表示するかを選択した後に一覧表示する。In the directory type (3), when a still image or a moving image is transferred to a personal computer in a list display type, the still image or the moving image is transferred to a directory named after the still image or the moving image. The list display type can be considered that all still images or moving images are transferred to one directory. A list is displayed after selecting a directory in which a list of still images or moving images transferred is to be displayed.
【００１３】このディレクトリ型では、関連する画像が
１つのディレクトリ内に配置されるため、一覧表示型の
ように一覧表示される静止画あるいは動画の数が膨大に
なりにくい。しかし、転送時には、毎回適切なディレク
トリ名を付ける必要があり、ユーザは負担を強いられ
る。また、検索時には、適切なディレクトリ名が付けら
れていない場合や、ユーザがどのようなディレクトリ名
を付けたかを忘れてしまった場合には、ディレクトリ名
の一覧表示の中からどれを選択すれば良いかが困難にな
るという問題があった。In this directory type, since related images are arranged in one directory, the number of still images or moving images displayed in a list as in a list display type is unlikely to be enormous. However, at the time of transfer, it is necessary to give an appropriate directory name every time, and the user is burdened. When searching, if an appropriate directory name is not assigned, or if the user has forgotten what directory name was assigned, which one should be selected from the directory name list display There is a problem that it becomes difficult.
【００１４】（４）のアルバム型は、銀塩写真を台紙に
張りつけて整理するのと同様に、パーソナルコンピュー
タに転送された静止画または動画を、例えばワードプロ
セッサで作成するページに張りつける方法である。ペー
ジに張りつける際に、付加された日時を画像の下に書き
込んだり、静止画をクリックすると付加されたサウンド
を自動的に再生するよう設定することもできる。The album type (4) is a method in which a still image or a moving image transferred to a personal computer is attached to a page created by, for example, a word processor in the same manner as attaching and organizing silver halide photographs on a mount. When pasting to a page, you can write the added date and time below the image, or click the still image to automatically play the added sound.
【００１５】このアルバム型では、ページに張りつける
静止画または動画の取捨選択や順序を任意に決めること
ができる。しかし、ユーザは、取捨選択や順序を決める
必要があり、膨大な数の静止画または動画を整理する際
には、ユーザに強いる作業量が膨大になるという問題が
あった。In this album type, the selection and order of still images or moving images to be attached to a page can be arbitrarily determined. However, it is necessary for the user to select and determine the order, and when arranging a huge number of still images or moving images, there is a problem that the amount of work imposed on the user becomes enormous.
【００１６】[0016]
【発明が解決しようとする課題】以上のように、従来の
整理方法では、注釈つきの画像情報など、獲得したマル
チメディア情報を、ユーザに負担をかけることなく、整
理することと検索することとを両立することができなか
った。As described above, in the conventional arrangement method, it is necessary to arrange and retrieve acquired multimedia information such as annotated image information without imposing a burden on a user. I couldn't be compatible.
【００１７】この発明はこのような事情を考慮してなさ
れたものであり、獲得した時刻や位置により画像情報を
自動的に整理して提示することのできるマルチメディア
情報処理装置および画像処理装置を提供することを目的
とする。The present invention has been made in view of such circumstances, and provides a multimedia information processing apparatus and an image processing apparatus that can automatically arrange and present image information according to the acquired time and position. The purpose is to provide.
【００１８】[0018]
【課題を解決するための手段】前述の目的を達成するた
めに、この発明は、画像情報の獲得時刻を取得し、この
取得した時刻を画像情報および注釈と対応づけて記憶し
ておき、この記憶した時刻により画像情報および注釈を
整理して提示するようにしたものである。In order to achieve the above object, the present invention obtains the acquisition time of image information, and stores the obtained time in association with the image information and the annotation. The image information and the annotation are arranged and presented according to the stored time.
【００１９】この発明においては、たとえば画像を撮影
するのみで、各画像が撮影時刻に応じて自動的に整理さ
れて提示されるため、ユーザに負担をかけることなく、
適切な画像整理が行なわれることになる。In the present invention, for example, only images are photographed, and the images are automatically arranged and presented according to the photographing time, so that no burden is imposed on the user.
Appropriate image organization is performed.
【００２０】また、この発明は、画像情報の獲得位置を
取得し、この取得した位置を画像情報および注釈と対応
づけて記憶しておき、この記憶した位置により画像情報
および注釈を整理して提示するようにしたものである。Further, according to the present invention, the acquired position of the image information is acquired, the acquired position is stored in association with the image information and the annotation, and the image information and the annotation are arranged and presented based on the stored position. It is something to do.
【００２１】この発明においては、たとえば画像を撮影
するのみで、各画像が撮影位置に応じて自動的に整理さ
れて提示されるため、ユーザに負担をかけることなく、
適切な画像整理が行なわれることになる。In the present invention, for example, only images are photographed, and each image is automatically arranged and presented according to the photographing position, so that no burden is imposed on the user.
Appropriate image organization is performed.
【００２２】また、この発明は、画像情報の獲得時刻と
獲得位置とを取得し、この取得した時刻および位置を画
像情報および注釈と対応づけて記憶しておき、この記憶
した時刻および位置により画像情報および注釈を整理し
て提示するようにしたものである。According to the present invention, an acquisition time and an acquisition position of image information are acquired, and the acquired time and position are stored in association with the image information and the annotation, and the acquired time and position are used to store the image. Information and annotations are arranged and presented.
【００２３】この発明においては、たとえば画像を撮影
するのみで、各画像が撮影時刻および撮影位置に応じて
自動的に整理されて提示されるため、ユーザに負担をか
けることなく、適切な画像整理が行なわれることにな
る。In the present invention, for example, only images are photographed, and the images are automatically arranged and presented according to the photographing time and the photographing position. Will be performed.
【００２４】また、この発明は、個人またはグループの
スケジュール情報を管理し、この管理するスケジュール
情報の中から選択されたスケジュール情報をさらに画像
情報および注釈に対応づけて記憶しておき、このスケジ
ュール情報により画像情報および注釈を整理して提示す
ることが好ましい。According to the present invention, schedule information of an individual or a group is managed, and schedule information selected from the managed schedule information is further stored in association with image information and annotations. It is preferable that the image information and the annotations are arranged and presented.
【００２５】この発明においては、さらに、たとえば個
人またはグループのスケジュール上の適切な箇所に画像
を自動的に整理して提示することなどが可能になる。According to the present invention, for example, it is possible to automatically arrange and present images at an appropriate place on an individual or group schedule.
【００２６】[0026]
【発明の実施の形態】以下、図面を参照してこの発明の
実施形態を説明する。Embodiments of the present invention will be described below with reference to the drawings.
【００２７】（第１実施形態）まず、この発明の第１実
施形態について説明する。(First Embodiment) First, a first embodiment of the present invention will be described.
【００２８】図１は、この発明の第１実施形態に係るマ
ルチメディア情報処理装置の概略構成を示す図であり、
図２は、この第１実施形態のマルチメディア情報処理装
置の外観の一例を示す図である。FIG. 1 is a diagram showing a schematic configuration of a multimedia information processing apparatus according to a first embodiment of the present invention.
FIG. 2 is a diagram illustrating an example of an appearance of the multimedia information processing apparatus according to the first embodiment.
【００２９】図１に示すように、この第１実施形態のマ
ルチメディア情報処理装置は、静止画または動画などの
画像情報を獲得する画像獲得部１と、画像獲得部１が獲
得した画像情報に対して注釈を付ける注釈部２と、画像
情報を獲得した時刻を計数する時刻計数部３と、画像獲
得部１で獲得した静止画または動画と、注釈部２で付加
した注釈と、時刻計数部３で計数した時刻とを対応させ
て記憶するマルチメディア対応記憶部４と、マルチメデ
ィア対応記憶部４に記憶された情報を時刻計数部３で計
数した時刻により整理して提示する整理提示部５と、マ
ルチメディア情報（図形、サウンド、手書きメモなどの
注釈（以下、メディア情報と呼ぶ）が付された画像情
報）を獲得するのか、マルチメディア対応記憶部４に記
憶されたマルチメディア情報を提示するのかを選択する
記録／提示切り替え部６とから構成される。以下、図２
との対応を含めて各部を説明する。As shown in FIG. 1, the multimedia information processing apparatus according to the first embodiment includes an image acquiring section 1 for acquiring image information such as a still image or a moving image, and an image acquiring section 1 for acquiring image information. An annotation unit 2 for annotating the image information, a time counting unit 3 for counting the time at which the image information is acquired, a still image or a moving image acquired by the image acquiring unit 1, an annotation added by the annotation unit 2, a time counting unit A multimedia storage unit 4 for storing the times counted by the time counter 3 in association with each other, and an organizing and presenting unit 5 for presenting information stored in the multimedia correspondence storage unit 4 by organizing the information by the time counted by the time counter 3. And multimedia information (image information with annotations (hereinafter, referred to as media information) such as figures, sounds, and handwritten memos) obtained from the multimedia information stored in the multimedia-compatible storage unit 4. Composed of recording / presentation switching unit 6 for selecting whether to present the A information. Hereinafter, FIG.
Each part will be described including the correspondence with the above.
【００３０】画像獲得部１は、静止画や動画などの画像
情報を獲得する。例えば、カメラ、テレビ受信機、ビデ
オ再生機等で構成される。図２の例では、本体に取り付
けられたカメラ１ａと、静止画を獲得する場合に静止画
を取り込むタイミングを指定するシャッターボタン１ｂ
とから構成される。The image acquiring section 1 acquires image information such as a still image and a moving image. For example, it comprises a camera, a television receiver, a video player, and the like. In the example of FIG. 2, a camera 1a attached to the main body and a shutter button 1b for designating a timing for capturing a still image when acquiring a still image
It is composed of
【００３１】注釈部２は、画像獲得部１が獲得した画像
に対して、図形、サウンド、手書きメモなどの注釈を入
力する。図２の例では、図形を入力するためのカーソル
２ａとボタン２ｂとポインタ２ｃとから構成される図形
入力手段と、サウンドを入力するためのマイク２ｄから
構成されるサウンド入力手段とからなる。図形入力手段
を構成するカーソル２ａを上下左右に傾けることによ
り、ポインタ２ｃを液晶ディスプレイで構成される整理
提示部５ａ上で移動する。ボタン２ｂは、クリックする
ことにより画面上でのポインタ２ｃの位置を指定する。
マイク２ｄは音声や周囲の音を入力する。The annotation unit 2 inputs annotations such as figures, sounds, and handwritten memos to the image acquired by the image acquisition unit 1. In the example shown in FIG. 2, the input device includes a graphic input device including a cursor 2a for inputting a graphic, a button 2b, and a pointer 2c, and a sound input device including a microphone 2d for inputting a sound. By tilting the cursor 2a constituting the figure input means up, down, left and right, the pointer 2c is moved on the organizing and presenting unit 5a formed of a liquid crystal display. The button 2b specifies the position of the pointer 2c on the screen by clicking.
The microphone 2d inputs voice and surrounding sounds.
【００３２】時刻計数部３は、画像獲得部１が獲得した
画像情報がいつ獲得されたのかを識別するために日付と
時刻とを計数する。例えば、デジタル時計で構成され
る。The time counting unit 3 counts the date and time to identify when the image information acquired by the image acquiring unit 1 has been acquired. For example, it is composed of a digital clock.
【００３３】マルチメディア対応記憶部４は、画像獲得
部１が獲得した画像情報と、注釈部２がその画像情報に
対して入力したメディア情報と、時刻計数部３が計数し
た、画像獲得部１が画像情報を獲得した時刻をセットに
して対応づけて記憶する。例えば、ファイルシステムを
持つハードディスクで構成される。The multimedia correspondence storage unit 4 stores the image information acquired by the image acquisition unit 1, the media information input to the image information by the annotation unit 2, and the image acquisition unit 1 counted by the time counting unit 3. Sets the time at which the image information was acquired and stores it in association with the time. For example, it is composed of a hard disk having a file system.
【００３４】整理提示部５は、マルチメディア対応記憶
部４に記憶された情報を、時刻計数部３が計数した時刻
を用いて整理して提示する。図２の例では、画像情報や
メディア情報を提示するための液晶ディスプレイ５ａ
と、サウンドを提示するためのスピーカ５ｂとから構成
される。The organizing and presenting unit 5 organizes and presents the information stored in the multimedia correspondence storing unit 4 using the time counted by the time counting unit 3. In the example of FIG. 2, a liquid crystal display 5a for presenting image information and media information
And a speaker 5b for presenting a sound.
【００３５】記録／提示切り替え部６は、マルチメディ
ア情報を記録するのか、マルチメディア対応記憶部４に
記憶された情報を提示するのかを選択する。図２の例で
は、スライドスイッチ６ａにより構成され、左にスライ
ドした状態ではマルチメディア情報の獲得を行ない、右
にスライドした状態では情報の提示を行なう。The recording / presentation switching unit 6 selects whether to record the multimedia information or to present the information stored in the multimedia correspondence storage unit 4. In the example of FIG. 2, the slide switch 6a is configured to acquire multimedia information in a state of sliding to the left, and to present information in a state of sliding to the right.
【００３６】以下、画像獲得部１が獲得する画像として
静止画を、注釈部２が入力するメディア情報として図形
とサウンドを例にとり説明する。Hereinafter, a still image will be described as an example of an image obtained by the image obtaining unit 1, and figures and sounds will be described as examples of media information input by the annotation unit 2.
【００３７】スライドスイッチ６ａを左にスライドさせ
ると、このマルチメディア情報処理装置は、マルチメデ
ィア情報を獲得し、マルチメディア対応記憶部４に記憶
する記録状態になる。When the slide switch 6a is slid to the left, the multimedia information processing apparatus acquires multimedia information and enters a recording state in which the multimedia information is stored in the multimedia corresponding storage unit 4.
【００３８】まず、カメラ１ａを用いて静止画を獲得す
る。この静止画の獲得は、シャッターボタン１ｂを押し
たときに行なわれる。獲得された静止画は、マルチメデ
ィア対応記憶部４に記憶され、記憶された静止画が液晶
ディスプレイ５ａに表示される。図３は、マルチメディ
ア対応記憶部４において、静止画と図形と時刻とを記憶
する様子を示すもので、ここでは静止画の記憶について
のみ説明する。静止画は、白黒画像として取り込み、例
えばａ２に示すように、０と１の行列に変換してファイ
ルに保存する。このファイルに保存された静止画を液晶
ディスプレイ５ａに表示する。First, a still image is obtained using the camera 1a. The acquisition of the still image is performed when the shutter button 1b is pressed. The obtained still image is stored in the multimedia-compatible storage unit 4, and the stored still image is displayed on the liquid crystal display 5a. FIG. 3 shows a state in which a still image, a figure, and a time are stored in the multimedia correspondence storage unit 4. Here, only the storage of the still image will be described. The still image is captured as a black and white image, converted into a matrix of 0s and 1s, and stored in a file, for example, as indicated by a2. The still image stored in this file is displayed on the liquid crystal display 5a.
【００３９】時刻計数部３は、カメラ１ａで静止画を獲
得した時刻を計数する。時刻は、例えば、「１９９９年
７月７日１８時２８分３５秒」のように日時と時刻とを
計数する。The time counting section 3 counts the time when a still image is obtained by the camera 1a. The time counts the date and time, for example, “18:28:35 on July 7, 1999”.
【００４０】次に、注釈部２により液晶ディスプレイ５
ａ上に表示された画像の上に図形の注釈を入力する。こ
こでは、円形の図形を入力する例を取り上げて説明す
る。図４は、円形の図形を入力する様子を示すものであ
り、以下、この図４にしたがって説明する。カーソル２
ａを上下左右に傾けて表示されたポインタ２ｃを液晶デ
ィスプレイ５ａ上で移動させて、所望の座標でボタン２
ｂを押すことにより、円形の中心をＰ０に決定する。ボ
タン２ｂを押したままカーソル２ａを傾けてポインタ２
ｃを移動させると、図４に示すように、Ｐ０を円形の中
心とし、Ｐ０とポインタの座標Ｐ１とを結ぶ線分を半径
ｒとする円形が液晶ディスプレイ５ａ上に表示される。
この円形を見ながら半径ｒを調節して、円形を固定した
いときにボタン２ｂを離すと、円の半径が固定されて図
形の入力が完了する。図形は同じ静止画上に複数入力し
ても良い。Next, the annotation unit 2 uses the liquid crystal display 5
Input an annotation of a figure on the image displayed on a. Here, an example in which a circular figure is input will be described. FIG. 4 shows a state of inputting a circular figure, which will be described below with reference to FIG. Cursor 2
is moved on the liquid crystal display 5a by tilting the pointer 2c up, down, left and right on the liquid crystal display 5a.
By pressing b, the center of the circle is determined to be P0. Hold down the button 2b and tilt the cursor 2a to move the pointer 2
When c is moved, a circle having P0 as the center of the circle and a radius r as a line segment connecting P0 and the coordinates P1 of the pointer is displayed on the liquid crystal display 5a as shown in FIG.
When the user adjusts the radius r while watching the circle and releases the button 2b to fix the circle, the radius of the circle is fixed and the input of the figure is completed. A plurality of figures may be input on the same still image.
【００４１】図形を入力している間に、マイク２ｄから
サウンドをメディア情報として獲得する。図５は、図形
を入力しながらサウンドを入力する様子を示すもので、
整理提示部５に表示された静止画の注目している箇所に
円ｂ１を描いて示し、さらに円を描いている間に「ここ
にカメラが付いています。」というサウンドｂ２をマイ
ク２ｄに向かって発声し、注釈として入力する。サウン
ドの記録開始は、例えば、円形の中心Ｐ０を決定したと
きに開始し、サウンドの記録終了は円の半径が固定され
たときに終了する。図形が複数入力された場合は、サウ
ンドも複数入力される。While inputting a graphic, a sound is obtained from the microphone 2d as media information. FIG. 5 shows how sound is input while inputting a figure.
A circle b1 is drawn at a point of interest in the still image displayed on the organizing and presenting unit 5, and a sound b2 saying "the camera is attached here" is directed to the microphone 2d while drawing the circle. And input as a comment. The start of sound recording starts when the center P0 of the circle is determined, for example, and the end of sound recording ends when the radius of the circle is fixed. When a plurality of figures are input, a plurality of sounds are also input.
【００４２】マルチメディア対応記憶部４は、以上のよ
うにして獲得された静止画、図形、サウンド、時刻の各
データを対応付けて記憶する。図３では、ファイルシス
テムを持つハードディスクａ１に、静止画、図形、サウ
ンド、時刻をファイルとして記憶する様子を表してい
る。また、この図３では、静止画、図形、サウンド、時
刻の内容の一例が示されている。The multimedia correspondence storage unit 4 stores the data of the still picture, figure, sound, and time acquired as described above in association with each other. FIG. 3 shows a state in which still images, graphics, sounds, and times are stored as files on a hard disk a1 having a file system. FIG. 3 shows an example of the contents of a still image, a figure, a sound, and time.
【００４３】マルチメディア対応記憶部４は、静止画が
獲得されると、ファイルシステムにユニーク（一意）な
データ名を生成する。データ名の生成は、例えば、「Ｄ
ａｔａ」という文字列に、データ名カウンタの値を３桁
にして接続し、データ名生成後にカウンタをインクリメ
ントすることで行なう。対応付けは、静止画、図形、サ
ウンド、時刻の各データを、同じデータ名を持ち拡張子
が異なるファイルとして記憶することによって行なう。
図３の例では、Ｄａｔａ００１、Ｄａｔａ００２、Ｄａ
ｔａ００４の３つのデータ名があり、３つの静止画を獲
得した場合を表している。When a still image is obtained, the multimedia correspondence storage unit 4 generates a unique data name in the file system. The generation of the data name is performed by, for example, “D
The data name counter is connected to the character string "ata" by setting the value of the data name counter to three digits, and the counter is incremented after the data name is generated. The association is performed by storing the data of the still image, the graphic, the sound, and the time as files having the same data name and different extensions.
In the example of FIG. 3, Data001, Data002, and Da
There are three data names of “ta004”, which represents a case where three still images are obtained.
【００４４】このうち、データ名Ｄａｔａ００２を持つ
データは、静止画ファイルＤａｔａ００２．ｐｉｃと、
図形ファイルＤａｔａ００２．ｓｈｐと、サウンドファ
イルＤａｔａ００２．ｓｎｄと、時刻ファイルＤａｔａ
００２．ｄａｔがある。拡張子「ｐｉｃ」は静止画を、
「ｓｈｐ」は図形を、「ｓｎｄ」はサウンドを、そし
て、「ｄａｔ」は時刻を表す拡張子である。The data having the data name Data002 is a still image file Data002. pic and
Figure file Data002. http and the sound file Data002. snd and time file Data
002. There is dat. The extension "pic" indicates a still image,
“Shp” is an extension representing a figure, “snd” is a sound, and “dat” is an extension representing time.
【００４５】各データファイルの内容を説明すると、静
止画ファイルＤａｔａ００２．ｐｉｃは、前述のよう
に、ａ２に示すように０と１の行列で表されたデータと
して記憶される。図形ファイルＤａｔａ００２．ｓｈｐ
は、ａ３に示すように、円形の中心座標Ｐ０（１３８，
４３８）と半径ｒ（３７）を組みにして（１３８，４３
８，３７）という数値列として記憶する。図形が複数あ
る場合は、ａ２に示すように図形の個数だけ数値列を後
ろに追加する。サウンドファイルＤａｔａ００２．ｓｎ
ｄは、ａ４に示すように、マイク２ｄから入力されたサ
ウンドをＡ／Ｄ変換した−２５４から２５６の整数値を
羅列して記憶する。図形が複数入力された場合には、例
えばデータとしては現れない値−２５５を区切り記号と
して追加した後に、サウンドをＡ／Ｄ変換した値を追加
する。時刻ファイルＤａｔａ００２．ｄａｔは、例えば
ａ５に示すように「１９９９年７月７日１８時２８分３
５秒」というように、日付と時刻を表す文字列として保
存する。時刻は静止画が獲得されたとき１度だけなの
で、１つのデータ名について１つしか存在しない。The contents of each data file will be described. Still image files Data002. As described above, pic is stored as data represented by a matrix of 0s and 1s as indicated by a2. Figure file Data002. shp
Is, as shown at a3, the center coordinate P0 of the circle (138,
438) and the radius r (37) as a set (138, 43).
8, 37). When there are a plurality of figures, a numerical value sequence is added at the end by the number of figures as shown in a2. Sound file Data002. sn
As indicated by a4, d stores the integer values from -254 to 256 obtained by A / D converting the sound input from the microphone 2d. When a plurality of figures are input, for example, after adding a value -255 that does not appear as data as a delimiter, a value obtained by A / D converting the sound is added. Time file Data002. For example, as shown in a5, dat is "18:28:03, July 7, 1999.
For example, "5 seconds" is stored as a character string representing the date and time. Since the time is only once when the still image is acquired, there is only one for one data name.
【００４６】一方、スライドスイッチ６ａを右にスライ
ドさせると、このマルチメディア情報処理装置は、マル
チメディア対応記憶部４に記憶した情報を提示する提示
状態になる。On the other hand, when the slide switch 6a is slid to the right, the multimedia information processing apparatus enters a presentation state for presenting information stored in the multimedia correspondence storage unit 4.
【００４７】提示状態になると、整理提示部５は、マル
チメディア対応記憶部４に記憶された情報を、時刻を用
いて整理し、液晶ディスプレイ５ａ上に提示する。図６
は、この一例を示すものであり、画像獲得部１が獲得し
た静止画のサムネイルが、１ヶ月のカレンダに表示され
る様子を示している。サムネイルが表示される欄は、時
刻計数部３によって計数された日付と同じ欄に表示され
る。同一日に複数の静止画を獲得した場合は、獲得した
時刻が早い順に上から表示される。例えば、図６のサム
ネイル画像ｃ１は、図３のデータ名Ｄａｔａ００２に対
応するもので、Ｄａｔａ００２は７月７日に獲得された
ので、図６のカレンダ一覧表の７月７日の欄に表示され
る。In the presentation state, the organizing and presenting unit 5 arranges the information stored in the multimedia correspondence storage unit 4 using the time and presents it on the liquid crystal display 5a. FIG.
Shows an example of this, and shows a state in which thumbnails of still images acquired by the image acquiring unit 1 are displayed on a one-month calendar. The column in which the thumbnails are displayed is displayed in the same column as the date counted by the time counter 3. When a plurality of still images are acquired on the same day, the acquired times are displayed from the top in the order of the acquired time. For example, the thumbnail image c1 in FIG. 6 corresponds to the data name Data002 in FIG. 3, and since Data002 was acquired on July 7, it is displayed in the column of July 7 in the calendar list in FIG. You.
【００４８】一覧表示の生成には、まず提示状態になっ
た月の、１から月末までの日数について、時刻ファイル
に記憶された日時をすべて読み取って、早く記憶した順
に並べてテーブルを作る。テーブルは、マルチメディア
対応記憶部４にＴａｂｌｅ．ｔａｌというファイル名で
記憶される。図７は、並べ替えの様子を示すものであ
り、３つの時刻ファイル名が上から順に記憶された時刻
の早い順に並んでいる様子を示している。同一の日付を
記憶した時刻ファイルは、時刻の早い順に上から並べら
れる。To generate the list display, first, for the number of days from 1 to the end of the month in the presentation state, all the dates and times stored in the time file are read and arranged in the order of early storage to form a table. The table is stored in the multimedia-compatible storage unit 4 as Table. tal is stored as a file name. FIG. 7 shows a state of rearrangement, and shows a state in which three time file names are arranged in the order of earlier stored time from the top. The time files storing the same date are arranged from the top in the order of time.
【００４９】次に、先頭から時刻ファイル名を読み取っ
て、同じデータ名を持つ静止画ファイルを、マルチメデ
ィア対応記憶部から検索し、サムネイル画像を生成し
て、カレンダの同じ日付の欄に表示する。サムネイル画
像の生成時には、単に静止画を縮小するだけでなく、そ
の静止画と対応付けられた図形も一緒に縮小して表示す
る。静止画と対応付けられた図形の検索は、静止画ファ
イルと同一のデータ名を持つ図形ファイルを検索して、
記憶された図形情報を復元して静止画上に描画する。例
えば、Ｄａｔａ００２．ｐｉｃと対応付けられた図形フ
ァイルは、Ｄａｔａ００２．ｓｈｐである。また、同一
の日付に既に表示した場合は、図６のＣ２に示すよう
に、それまでに表示したサムネイル画像の下に追加して
表示する。Next, the time file name is read from the top, a still image file having the same data name is searched from the multimedia-compatible storage unit, a thumbnail image is generated, and displayed in the same date column of the calendar. . When generating a thumbnail image, not only is the still image reduced, but also the graphic associated with the still image is reduced and displayed together. To search for a figure associated with a still image, search for a figure file with the same data name as the still image file,
The stored graphic information is restored and drawn on a still image. For example, Data002. pic002 is associated with the data file Data002. shp. In addition, when the thumbnail image is already displayed on the same date, as shown at C2 in FIG. 6, it is additionally displayed below the thumbnail images displayed so far.
【００５０】このように、ユーザはどのようなデータを
いつ獲得したかを、静止画のサムネイル画像を一覧する
ことにより、容易に識別できる。また、一覧表示は、静
止画を獲得した時刻に基づいて自動的に生成されるた
め、ユーザにはなんら負担がかからない。As described above, the user can easily identify what data has been obtained and when, by listing the thumbnail images of the still images. In addition, since the list display is automatically generated based on the time at which the still image is obtained, no burden is imposed on the user.
【００５１】提示状態では、カーソル２ａとボタン２ｂ
とポインタ２ｃは、液晶ディスプレイ５ａに表示された
サムネイルを指定するために使われる。図６を例にとっ
て説明すると、７月７日の欄に表示されたサムネイル画
像をクリックすると、図８に示す画像が表示される。こ
の表示では、静止画だけでなく、図形も表示する。静止
画ファイルに対応付けられた図形ファイルの検索方法
は、縮小画像を生成するときと同じである。In the presentation state, the cursor 2a and the button 2b
And the pointer 2c are used to designate a thumbnail displayed on the liquid crystal display 5a. Taking FIG. 6 as an example, when the thumbnail image displayed in the column on July 7 is clicked, the image shown in FIG. 8 is displayed. In this display, not only a still image but also a figure is displayed. The method of searching for a graphic file associated with a still image file is the same as that for generating a reduced image.
【００５２】さらに、図８に表示された静止画上に表示
された円形の図形ｅ１の内側をクリックすると、その静
止画と対応付けられたサウンドｅ２が再生される。静止
画と対応付けられたサウンドの検索方法を、Ｄａｔａ０
０２．ｐｉｃを例にとって説明すると、同じデータ名Ｄ
ａｔａ００２を持ち、拡張子がｓｎｄのファイル、すな
わちＤａｔａ００２．ｓｎｄを検索することにより行な
う。また、図形が複数あり、例えば２番目の図形が選択
されたときは、Ｄａｔａ００２．ｓｎｄファイルを先頭
から検索して、区切り記号−２５５で区切られた２番目
のサウンド領域を再生する。When the user clicks inside the circular graphic e1 displayed on the still image shown in FIG. 8, the sound e2 associated with the still image is reproduced. The search method of the sound associated with the still image is defined as Data0.
02. pic as an example, the same data name D
data002 and a file having the extension “snd”, that is, Data002. This is done by searching for snd. When there are a plurality of figures, for example, when the second figure is selected, Data002. The snd file is searched from the beginning, and the second sound area delimited by the delimiter -255 is reproduced.
【００５３】このように、ユーザは静止画上に描画され
た図形を見ることにより、静止画中のどこに注目したの
かを認識したり、さらに図形と関連付けられているサウ
ンドを聞くことにより、より詳しい注釈を得ることがで
き、ただ単に静止画を見るよりも豊かな情報を得ること
ができる。As described above, the user sees the figure drawn on the still image, recognizes where in the still image the attention has been paid, and further hears the sound associated with the figure, thereby providing more detailed information. You can get annotations and get richer information than just looking at still images.
【００５４】図９は、以上の動作をまとめたフローチャ
ートである。以下にこのフローチャートにしたがって、
処理の流れを説明する。FIG. 9 is a flowchart summarizing the above operation. Following this flowchart,
The processing flow will be described.
【００５５】まず、スライドスイッチ６ａの状態から、
このマルチメディア情報処理装置が記録状態かどうかを
調べ、記録状態の場合はステップＡ２に進み、そうでな
い提示状態の場合はステップＡ６に進む（ステップＡ
１）。First, from the state of the slide switch 6a,
It is checked whether or not the multimedia information processing apparatus is in a recording state. If the multimedia information processing apparatus is in a recording state, the process proceeds to step A2.
1).
【００５６】記録状態の場合は、静止画を獲得するため
にシャッターボタン１ｂが押されるのを待機し、シャッ
ターボタン１ｂが押されると、静止画をカメラ１ａから
取り込んで、マルチメディア対応記憶部４に記憶し、液
晶ディスプレイ５ａに提示する（ステップＡ２）。In the recording state, it waits for the shutter button 1b to be pressed in order to obtain a still image. When the shutter button 1b is pressed, the still image is fetched from the camera 1a and stored in the multimedia-compatible storage unit 4. And present it on the liquid crystal display 5a (step A2).
【００５７】次に、ステップＡ３でシャッターボタン７
が押されたかどうかを調べ、押されなかった場合は、ス
テップＡ２に戻ってプレビュー画像の獲得を継続し、押
された場合は、ステップＡ４に進んで最後に獲得した静
止画をそのままマルチメディア対応記憶部４に記憶す
る。このとき、時刻計数部３は、この静止画が獲得され
た時刻を計数する（ステップＡ４）。Next, in step A3, the shutter button 7
It is checked whether or not the button has been pressed. If the button has not been pressed, the process returns to step A2 to continue acquiring the preview image. If the button has been pressed, the process proceeds to step A4, and the still image acquired last has multimedia support. The information is stored in the storage unit 4. At this time, the time counting unit 3 counts the time at which the still image was obtained (step A4).
【００５８】すると、獲得した静止画の上に注釈を入力
できる状態になり、ステップＡ５でシャッターボタン１
ｂが押されたかどうかを判定し、押された場合は注釈の
入力を停止してステップＡ１に戻り、押されなかった場
合はステップＡ１３に進んで図形やサウンドなどのメデ
ィア情報を注釈として入力する。Then, it becomes possible to input an annotation on the obtained still image.
It is determined whether or not b is pressed. If pressed, the input of the annotation is stopped and the process returns to step A1. If not pressed, the process proceeds to step A13 to input media information such as figures and sounds as an annotation. .
【００５９】そして、この図形やサウンドなどのメディ
ア情報の入力があった場合は、これらをマルチメディア
対応記憶部４に記憶し、継続して注釈の入力をするため
にステップＡ５に戻る。When media information such as graphics and sounds is input, these are stored in the multimedia-compatible storage unit 4, and the process returns to step A5 to continue inputting annotations.
【００６０】なお、記憶状態でスライドスイッチ６ａに
より提示状態に切り替えた場合、すぐには状態は切り替
わらず、ステップＡ５でシャッターボタン１ｂがクリッ
クされた後に、ステップＡで提示状態に切り替わる。When the presentation state is switched by the slide switch 6a in the memorized state, the state is not switched immediately. After the shutter button 1b is clicked in step A5, the state is switched to the presentation state in step A.
【００６１】一方、ステップＡ１で提示状態の場合、時
刻計数部３で計数した時刻の早い順にテーブルを作成し
（ステップＡ６）、液晶ディスプレイ５ａにカレンダ一
覧を表示する。このカレンダ一覧には、マルチメディア
対応記憶部４に記憶された静止画のサムネイル画像が、
静止画を獲得した日付の欄に表示される（ステップＡ
７）。On the other hand, in the case of the presentation state in step A1, a table is created in the order of earliest time counted by the time counter 3 (step A6), and a calendar list is displayed on the liquid crystal display 5a. In the calendar list, thumbnail images of still images stored in the multimedia-compatible storage unit 4 are displayed.
It is displayed in the column of the date when the still image was obtained (step A
7).
【００６２】すると、サムネイル画像をクリックできる
状態になり、クリックされた場合には、ステップＡ９に
進んでクリックされた画像を拡大表示し、そうでない場
合はステップＡ１に戻ってカレンダ表示を継続する（ス
テップＡ８）。Then, the thumbnail image can be clicked. If clicked, the process proceeds to step A9 to enlarge and display the clicked image. Otherwise, the process returns to step A1 to continue the calendar display ( Step A8).
【００６３】また、ステップＡ９で拡大表示中にクリッ
クされたかどうかを調べ、クリックされた場合はステッ
プＡ１１に進み、そうでない場合はステップＡ９に戻っ
て拡大表示を継続する（ステップＡ１０）。In step A9, it is checked whether or not a click has been made during the enlarged display. If it has been clicked, the flow proceeds to step A11. If not, the flow returns to step A9 to continue the enlarged display (step A10).
【００６４】ステップＡ１１に進んだ場合、クリックが
図形上で起こったかどうかを調べ、図形上でない場合は
ステップＡ１に戻ってカレンダ一覧表示に戻り、図形上
の場合は図形に対応付けられたサウンドを再生し（ステ
ップＡ１２）、再生が終わるとステップＡ９に戻って拡
大表示を継続する。When the process proceeds to step A11, it is checked whether or not a click has occurred on the figure. If not, the process returns to step A1 to return to the calendar list display. Playback is performed (step A12). When the playback is completed, the process returns to step A9 to continue the enlarged display.
【００６５】このように、この第１実施形態のマルチメ
ディア情報処理装置によれば、静止画だけではない多様
な構造を持ったマルチメディア情報を簡単に獲得できる
のみならず、時刻により自動的に整理して検索するビュ
ーを作成することにより、ユーザに煩雑なビュー作成手
順を強いることなく、日々蓄積されるデータの有効活用
が図られることになる。As described above, according to the multimedia information processing apparatus of the first embodiment, not only the multimedia information having various structures other than the still image can be easily obtained, but also the automatic By creating a view to be organized and searched, data accumulated every day can be effectively used without forcing the user to perform a complicated view creation procedure.
【００６６】また、以下に、この第１実施形態のマルチ
メディア情報処理装置に施すことのできる変形例を示
す。Further, a modified example which can be applied to the multimedia information processing apparatus of the first embodiment will be described below.
【００６７】まず、この第１実施形態で獲得した画像情
報は静止画であったが、これに限定されず動画でも良
い。First, the image information obtained in the first embodiment is a still image, but is not limited to this, and may be a moving image.
【００６８】また、この第１実施形態で静止画を獲得す
るときには、画面上に何も表示されなかったが、どのよ
うな画像を取り込むのかを分かりやすくするために、液
晶ディスプレイ５ａ上にプレビュー画像を表示したり、
専用のファインダーを設けても良い。When a still image is obtained in the first embodiment, nothing is displayed on the screen. However, in order to make it easy to understand what image is to be captured, a preview image is displayed on the liquid crystal display 5a. , Or
A dedicated finder may be provided.
【００６９】また、この第１実施形態で注釈部２が入力
するメディア情報は、円形の図形とサウンドであった
が、メディア情報はこれに限定するものではなく、静止
画の特定部分を説明するものであればなんでも良い。例
えば、図形の形は円形だけでなく、長方形や矢印などを
用いても良い。図形以外のメディア情報の例としては、
テキストや手書きメモでも良い。テキストの場合は、例
えば装置にキーボードを付けて、テキストを入力する静
止画上での位置をポインタで指定してから入力すれば良
い。手書きメモを入力する場合は、例えば液晶ディスプ
レイ５ａの上に透明な感圧式タブレットを張りつけ、そ
の上をペンでなぞって入力すれば良い。In the first embodiment, the media information input by the annotation unit 2 is a circular graphic and a sound. However, the media information is not limited to this, and a specific portion of a still image will be described. Anything is fine. For example, the shape of the figure may be not only a circle but also a rectangle or an arrow. Examples of media information other than graphics include
It can be text or handwritten notes. In the case of text, for example, a keyboard may be attached to the apparatus, and the position on the still image where the text is to be input may be designated by a pointer before input. When inputting a handwritten memo, for example, a transparent pressure-sensitive tablet may be attached on the liquid crystal display 5a, and the input may be performed by tracing the tablet with a pen.
【００７０】また、この第１実施形態で入力したサウン
ドは、円形の図形と一緒に対応付けて入力したが、一緒
に入力するメディア情報は円形の図形に限らない。ま
た、サウンドは必ずしも必要ではなく、図形などを単独
で入力しても良い。サウンドは静止画全体に対して対応
付けて入力しても良い。Although the sound input in the first embodiment is input in association with a circular graphic, the media information input together is not limited to a circular graphic. The sound is not always necessary, and a figure or the like may be input alone. The sound may be input in association with the entire still image.
【００７１】また、この第１実施形態で入力したメディ
ア情報は、リンクであっても良い。例えば、図形をクリ
ックすると他の静止画を表示するよう、図形と他の静止
画とを関連付けても良い。リンクの入力は、リンクの入
力をボタンなどで指定したあと、第１の実施形態と同様
に図形を入力し、入力が完了するとただちに静止画の獲
得を開始して、静止画の獲得が完了したときに、図形と
静止画をマルチメディア対応記憶部に記憶されたファイ
ル名を使って関連付ける。関連付けは、図形ファイルに
リンク先の静止画のファイル名を書き込んで行なわれ
る。The media information input in the first embodiment may be a link. For example, a figure may be associated with another still image so that clicking on the figure displays another still image. After inputting the link with a button or the like, the user inputs a graphic as in the first embodiment. Immediately after the input is completed, the acquisition of a still image is started, and the acquisition of a still image is completed. At times, the figure and the still image are associated using the file name stored in the multimedia-compatible storage unit. The association is performed by writing the file name of the linked still image in the graphic file.
【００７２】また、この第１実施形態のカレンダ一覧表
示では、１つのサムネイル画像が１つの静止画に対応し
ていたが、記録状態から提示状態になるまでに記憶した
静止画を１つの単位（セッション）としてまとめ、サム
ネイル画像として、例えば最初に獲得した静止画を、セ
ッションを代表する画像として用いても良い。この場合
に、拡大表示するときは、クリックされた静止画に対応
する静止画とメディア情報を表示して、カーソル２ａで
ページめくりして２枚目以降の静止画とメディア情報を
表示しても良い。In the calendar list display of the first embodiment, one thumbnail image corresponds to one still image. However, the still images stored from the recording state to the presentation state are stored in one unit ( Session), and a still image acquired first, for example, may be used as a representative image of the session. In this case, when the enlarged image is displayed, the still image and the media information corresponding to the clicked still image are displayed, and the page is turned with the cursor 2a to display the second and subsequent still images and the media information. good.
【００７３】また、このセッションを用いたサムネイル
表示では、最初に獲得した静止画を代表画面として用い
たが、これに限るものではなく、例えば５枚毎にサムネ
イル画像を表示しても良い。この場合、提示状態で例え
ば５枚目のサムネイル画像が指定された場合、自動的に
５枚目の静止画を拡大表示しても良い。In the thumbnail display using this session, the first acquired still image is used as the representative screen. However, the present invention is not limited to this. For example, thumbnail images may be displayed every five images. In this case, for example, when the fifth thumbnail image is designated in the presentation state, the fifth still image may be automatically enlarged and displayed.
【００７４】また、この第１実施形態で表示したカレン
ダ一覧表示は、静止画とその上に入力された注釈のサム
ネイル画像を用いたが、情報があることが分かるもので
あればこれに限らずなんでも良い。例えば、静止画があ
ることを示すアイコンを表示しても良いし、あるいは、
ファイル名を表示しても良い。The calendar list displayed in the first embodiment uses a still image and a thumbnail image of the annotation input thereon, but the present invention is not limited to this as long as it is understood that there is information. anything is fine. For example, an icon indicating that there is a still image may be displayed, or
The file name may be displayed.
【００７５】また、この第１実施形態で表示したカレン
ダ一覧表示は、１ヶ月単位であったが、マルチメディア
対応記憶部４に記憶された画像情報とメディア情報と
を、時刻を用いて整理して提示する方法であればなんで
も良い。例えば、スケジュールソフトのように、１日単
位や一週間単位で時刻順に表示しても良い。あるいは、
同じタイトルを持つ静止画だけを、記録した時刻順に一
覧しても良い。これにより、顧客名簿などにも対応でき
る。また、メディア情報としてテキストが入力された場
合は、ユーザが指定した文字列を含む静止画のみを、記
録した時刻順に一覧表示しても良い。Although the calendar list displayed in the first embodiment is displayed on a monthly basis, the image information and the media information stored in the multimedia correspondence storage unit 4 are arranged using time. Any method can be used as long as it is presented. For example, as in the case of schedule software, it may be displayed in the order of time on a daily or weekly basis. Or,
Only still images having the same title may be listed in the order of recording time. As a result, it is possible to deal with a customer list and the like. When text is input as media information, only still images including a character string specified by the user may be displayed in a list in the order of recording time.
【００７６】また、この第１実施形態の整理提示部５
は、装置本体に装着した液晶ディスプレイ５ａ上にカレ
ンダ一覧を表示したが、マルチメディア対応記憶部４に
記憶したファイルを、例えばパーソナルコンピュータに
転送し、ＨＴＭＬ形式に変換して、パーソナルコンピュ
ータ上で一覧表示しても良い。パーソナルコンピュータ
は、ＨＴＭＬ形式に変換されたデータを提示するブラウ
ザを具備する。このように、ＨＴＭＬに変換することに
よって、広く普及しているＨＴＭＬブラウザを使用でき
るため、ユーザは新たに専用のブラウザをインストール
することなく、カレンダ一覧表示を見ることができる。Also, the organizing and presenting unit 5 of the first embodiment
Displays a calendar list on the liquid crystal display 5a attached to the main body of the apparatus, but transfers the file stored in the multimedia-compatible storage unit 4 to, for example, a personal computer, converts the file into HTML format, and displays the list on the personal computer. It may be displayed. The personal computer includes a browser that presents the data converted into the HTML format. As described above, by converting to HTML, a widely used HTML browser can be used, so that the user can view the calendar list display without newly installing a dedicated browser.
【００７７】また、この第１実施形態の拡大表示は、静
止画とメディア情報を液晶ディスプレイ５ａ上に１ペー
ジずつ表示したが、タイトルなども同時に表示しても良
い。図１０は拡大表示の一例を示し、タイトル、フォン
ト、背景の画像、記録日時が指定されている。この例で
は、メディア情報としてテキストも入力されており、静
止画の横に表示されている。タイトル、フォント、背景
の画像の選択は、例えば、記録状態から提示状態に切り
替えたときに、新規に獲得した静止画についてユーザに
問い合わせる。このように、タイトルなどを入力するこ
とにより、整理されたデータの一覧性がさらに高まる。In the enlarged display of the first embodiment, a still image and media information are displayed one page at a time on the liquid crystal display 5a, but a title or the like may be displayed at the same time. FIG. 10 shows an example of an enlarged display, in which a title, font, background image, and recording date and time are specified. In this example, text is also input as media information and is displayed beside a still image. For selection of a title, font, and background image, for example, when switching from the recording state to the presentation state, the user is inquired about a newly acquired still image. As described above, by inputting a title or the like, the listability of sorted data is further improved.
【００７８】また、この第１実施形態の拡大表示でタイ
トルを表示する場合、静止画やテキストなどのレイアウ
トは固定であったが、タイトルなどに依存してレイアウ
トを変更しても良い。例えば、展覧会や博覧会で展示物
などを記録する場内、主に静止画を多数獲得し、テキス
トは短い見出し程度のものを入力する傾向がある。その
ため、タイトルを選択するときに、「展覧会、博覧会」
のカテゴリを選択した場合、これらを見やすく整理して
提示するために、図１１に示すように、テキストを静止
画の下に配置したレイアウトを自動的に選択して用い
る。あるいは、会議を記録する場合、獲得する静止画を
補足する大量のテキストを入力する傾向がある。そのた
め、タイトルを選択するときに、「会議」というカテゴ
リを選択した場合、これらを見やすく整理して提示する
ために、図１２に示すように、静止画とテキストを対応
付けたレイアウトを自動的に選択して用いる。その他に
も「旅行日記」や「来賓者」などのカテゴリがあっても
良い。また、背景の画像が内容にふさわしくなるよう変
えても良い。また、静止画を記録した季節によって、そ
の季節にふさわしい背景の画像を自動的に選択しても良
い。また、ワンポイントの画像をランダムに選択して配
置しても良い。これにより、オリジナリティのある拡大
表示画面を自動生成することができる。Further, when the title is displayed in the enlarged display according to the first embodiment, the layout of the still image and the text is fixed, but the layout may be changed depending on the title and the like. For example, in a place where an exhibit or the like is recorded at an exhibition or an exposition, a large number of still images are mainly obtained, and a text having a short heading or the like tends to be input. Therefore, when selecting a title, select "Exhibition, Expo"
When the category is selected, a layout in which text is arranged below a still image is automatically selected and used as shown in FIG. Alternatively, when recording a meeting, there is a tendency to enter a large amount of text that supplements the still images to be acquired. For this reason, when selecting a category of “meeting” when selecting a title, a layout in which a still image is associated with a text is automatically set as shown in FIG. Select and use. In addition, there may be categories such as "travel diary" and "guests". Further, the background image may be changed so as to be suitable for the content. Further, an image of a background suitable for the season may be automatically selected depending on the season in which the still image was recorded. Alternatively, one-point images may be randomly selected and arranged. This makes it possible to automatically generate an original enlarged display screen.
【００７９】カテゴリとレイアウトの対応付けは、例え
ばカテゴリとレイアウトを１対１で対応づけたテーブル
を用意しておいて、カテゴリが指定された際に、それに
対応するレイアウトを用いて拡大表示を生成すれば良
い。これにより、記録するデータの種類によって、最適
な拡大表示を自動生成することが可能になる。For the correspondence between the category and the layout, for example, a table in which the category and the layout are associated on a one-to-one basis is prepared, and when a category is specified, an enlarged display is generated using the layout corresponding to the category. Just do it. This makes it possible to automatically generate an optimal enlarged display according to the type of data to be recorded.
【００８０】また、この第１実施形態の拡大表示での図
形の選択は、円形の図形内部をクリックしたが、図形を
選択できる方法であれば、これに限らずなんでも良い。
例えば、図形を構成する線分や円弧の上をクリックして
選択しても良い。In the enlarged display of the first embodiment, the figure is selected by clicking inside the circular figure. However, the method is not limited to this as long as the figure can be selected.
For example, you may select by clicking on a line or an arc that forms the figure.
【００８１】（第２実施形態）次に、この発明の第２実
施形態について説明する。(Second Embodiment) Next, a second embodiment of the present invention will be described.
【００８２】図１３は、この発明の第２実施形態に係る
マルチメディア情報処理装置の概略構成を示す図であ
り、図１４は、この第２実施形態のマルチメディア情報
処理装置の外観の一例を示す図である。FIG. 13 is a diagram showing a schematic configuration of a multimedia information processing apparatus according to a second embodiment of the present invention, and FIG. 14 is an example of an appearance of the multimedia information processing apparatus of the second embodiment. FIG.
【００８３】この第２実施形態のマルチメディア情報処
理装置は、ＧＰＳ（ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎ
ｇ Ｓｙｓｔｅｍ）などを用いて、画像情報を獲得した
位置を取得し、獲得したマルチメディア情報を、位置に
より整理して提示するものである。The multimedia information processing apparatus according to the second embodiment uses a GPS (Global Positionin).
g System) or the like, the position at which the image information was acquired is acquired, and the acquired multimedia information is arranged and presented according to the position.
【００８４】すなわち、前述の第１実施形態では、獲得
したマルチメディア情報を、画像情報を獲得した時刻に
より整理提示したが、この第２実施形態は、整理提示す
るために用いる情報として、時刻ではなく位置を用いる
ことを特徴とする。That is, in the above-described first embodiment, the obtained multimedia information is arranged and presented according to the time when the image information is acquired. However, in the second embodiment, the information used for organizing and presenting the multimedia information is not the time. It is characterized by using a position instead of a position.
【００８５】図１３は、図１と同一構成要素には同一符
号を付し、異なる構成要素にのみ新規に符号を付したも
のである。図１３では、図１の時刻計数部３がなく、Ｇ
ＰＳなどで構成される位置計数部７を追加した構成を示
している。位置計数部７以外の構成は、第１の実施形態
と同一構成なので、ここでは異なる部分、すなわち位置
計数部７についてのみ図１４との対応を含めて説明す
る。In FIG. 13, the same components as those in FIG. 1 are denoted by the same reference numerals, and only the different components are newly denoted by the reference numerals. In FIG. 13, the time counter 3 of FIG.
This shows a configuration in which a position counting unit 7 composed of a PS or the like is added. Since the configuration other than the position counting unit 7 is the same as that of the first embodiment, only the different part, that is, the position counting unit 7 will be described including the correspondence with FIG.
【００８６】位置計数部７は、画像獲得部１が獲得した
画像情報がどの場所で獲得されたのかを識別するために
位置を計数する。図１４の例では、ＧＰＳ７ａで構成さ
れる。The position counting section 7 counts positions in order to identify where the image information obtained by the image obtaining section 1 is obtained. In the example of FIG. 14, it is configured by the GPS 7a.
【００８７】以下、第１実施形態と同様に、画像獲得部
１が獲得する画像として静止画を、注釈部２が入力する
メディア情報として図形とサウンドを例にとり説明す
る。Hereinafter, similarly to the first embodiment, a still image will be described as an image obtained by the image obtaining unit 1, and a graphic and a sound will be described as media information input by the annotation unit 2 as an example.
【００８８】まず、第１の実施形態と同様に、カメラ１
ａを用いて静止画を獲得する。獲得された静止画は、マ
ルチメディア対応記憶部４に記憶され、記憶された静止
画が液晶ディスプレイ５ａに表示される。First, as in the first embodiment, the camera 1
A still image is acquired using a. The obtained still image is stored in the multimedia-compatible storage unit 4, and the stored still image is displayed on the liquid crystal display 5a.
【００８９】位置計数部７は、画像獲得部１が静止画を
獲得した位置を計数する。位置は、ＧＰＳによって得ら
れた経度と緯度を用いて、例えば、「北緯３５度３２分
４５秒、東経１３９度４１分４２秒」のように計数す
る。The position counting section 7 counts the position at which the image obtaining section 1 has obtained a still image. The position is counted using the longitude and latitude obtained by the GPS, for example, as follows: "35 ° 32 '45” N, 139 ° 41' 42 'E.
【００９０】マルチメディア対応記憶部４は、静止画、
図形、サウンド、位置の各データを対応付けて記憶す
る。図１５は、マルチメディア対応記憶部４において、
静止画と図形と位置を記憶する様子を示すもので、第１
実施形態と同一部分には同一符号を付し、異なる部分に
は新規符号を付したものである。静止画、図形、サウン
ド、位置の各データは、第１実施形態と同様にファイル
システムを持つハードディスクａ１にファイルとして記
憶される。The multimedia-compatible storage unit 4 stores a still image,
The figure, sound, and position data are stored in association with each other. FIG. 15 shows that the multimedia-compatible storage unit 4
This figure shows how to store still images, figures, and positions.
The same portions as those of the embodiment are denoted by the same reference numerals, and different portions are denoted by new reference numerals. Each data of a still image, a graphic, a sound, and a position is stored as a file on a hard disk a1 having a file system as in the first embodiment.
【００９１】位置ファイルのファイル名は、他の情報と
同様に「Ｄａｔａ００２」などのデータ名に、位置を表
す拡張子である「ｐｏｓ」を接続して生成する。位置フ
ァイルのファイル名に他の情報と同じデータ名を付ける
ことによって、他の情報と対応づける。位置ファイルＤ
ａｔａ００２．ｐｏｓの内容は、ｆ１に示すように、
「北緯３５度３２分４５秒、東経１３９度４１分４２
秒」という文字列で格納する。記憶状態のその他の動作
は、第１実施形態と同一である。The file name of the position file is generated by connecting a data name such as “Data002” to an extension “pos” indicating the position, similarly to other information. By assigning the same data name as the other information to the file name of the position file, it is associated with other information. Position file D
ata002. The contents of pos are as shown in f1,
"35 ° 32'45” N, 139 ° 41'42'E
Seconds ". Other operations in the storage state are the same as in the first embodiment.
【００９２】次に、指示状態のときの第２実施形態の動
作について、第１実施形態と異なる部分のみを説明す
る。Next, with respect to the operation of the second embodiment in the instructed state, only the parts different from the first embodiment will be described.
【００９３】提示状態になると、整理提示部５は、マル
チメディア対応記憶部４に記憶された情報を、位置を用
いて整理し、液晶ディスプレイ５ａ上に提示する。図１
６は、この一例を示すものであり、画像獲得部１が獲得
した静止画と注釈部２が入力したメディア情報とのサム
ネイル画像が、地図の上に表示される様子を示してい
る。When the presentation state is established, the organizing and presenting unit 5 organizes the information stored in the multimedia correspondence storage unit 4 using the position and presents the information on the liquid crystal display 5a. FIG.
6 shows an example of this, in which a thumbnail image of the still image obtained by the image obtaining unit 1 and the media information input by the annotation unit 2 is displayed on a map.
【００９４】地図の表示は、マルチメディア対応記憶部
４に、予め地図情報の格納された地図ファイル「ｍａ
ｐ．ｐｉｃ」が記憶されており、これを表示する。地図
ファイルには、地図の位置の範囲を示す位置情報が対応
付けるための位置ファイル「ｍａｐ．ｐｏｓ」があり、
図１６中の点Ｐ２と点Ｐ３の位置、例えば「北緯３５度
３３分０５秒、東経１３９度４１分０９秒」と「北緯３
５度３２分３３秒、東経１３９度４２分０５秒」が記憶
されている。The display of the map is performed by using the map file “ma” in which the map information is stored in advance in the multimedia storage unit 4.
p. pic "is stored and displayed. The map file includes a position file “map.pos” for associating position information indicating a range of the position of the map,
The positions of points P2 and P3 in FIG. 16, for example, “35 ° 33: 05 north latitude, 139 ° 41: 09 second east longitude” and “3 latitude north
5 degrees 32 minutes 33 seconds, 139 degrees 42 minutes 05 seconds east longitude "is stored.
【００９５】サムネイル画像を液晶ディスプレイ５ａ上
のどこに表示するかは、以下のようにして求める。図１
７は、Ｐ２（Ｘ２，Ｙ２）、Ｐ３（Ｘ３，Ｙ３）および
位置位置計数部７で計数した位置Ｐ４（Ｘ４，Ｙ４）
が、液晶ディスプレイ５ａ上で表示される位置を示すも
のである。このＰ２、Ｐ３、Ｐ４の液晶ディスプレイ５
ａ上での座標値を、ｐ２（ｘ２，ｙ２）、ｐ３（ｘ３，
ｙ３）、ｐ４（ｘ４，ｙ４）とすると、Ｐ４の座標値は
以下の（１）〜（２）式で求められる。Where the thumbnail image is to be displayed on the liquid crystal display 5a is determined as follows. FIG.
7 is P2 (X2, Y2), P3 (X3, Y3) and the position P4 (X4, Y4) counted by the position / position counting unit 7
Indicates a position displayed on the liquid crystal display 5a. The liquid crystal display 5 of P2, P3, P4
The coordinate values on a are represented by p2 (x2, y2), p3 (x3,
y3) and p4 (x4, y4), the coordinate value of P4 is obtained by the following equations (1) and (2).
【００９６】 ｘ４＝（ｘ３−ｘ２）＊（Ｘ３−Ｘ４）／（Ｘ３−Ｘ２） …（１）式 ｙ４＝（ｙ３−ｙ２）＊（Ｙ３−Ｙ４）／（Ｙ３−Ｙ２） …（２）式 サムネイル画像を第１実施形態と同様の方法でクリック
すると、サムネイル画像に対応する静止画およびその上
に描かれたメディア情報が拡大表示される。提示状態の
その他の動作は、第１実施形態と同一である。X4 = (x3-x2) * (X3-X4) / (X3-X2) (1) Expression y4 = (y3-y2) * (Y3-Y4) / (Y3-Y2) (2) Expression When the thumbnail image is clicked in the same manner as in the first embodiment, the still image corresponding to the thumbnail image and the media information drawn thereon are enlarged and displayed. Other operations in the presentation state are the same as those in the first embodiment.
【００９７】図１８は、以上の動作をまとめたフローチ
ャートであり、以下にこのフローチャートにしたがっ
て、処理の流れを説明する。この図１８は、第１実施形
態のフローチャートである図９と同一部分には同一符号
を付し、異なる部分にのみ新規に符号を付したものであ
り、ここでは、第１実施形態と異なる部分のみを説明す
る。FIG. 18 is a flowchart summarizing the above operation, and the flow of processing will be described below with reference to this flowchart. In FIG. 18, the same portions as those in FIG. 9 which is the flowchart of the first embodiment are denoted by the same reference numerals, and only the different portions are newly denoted by the same reference numerals. Only the explanation will be given.
【００９８】ステップＡ３でシャッターボタン１ｂが押
されて静止画が取り込まれると、位置計数部７で、静止
画が獲得された位置をＧＰＳなどを使って計数する（ス
テップＢ１）。記憶状態時の残りの処理動作は第１実施
形態と同様である。When the shutter button 1b is pressed in step A3 and a still image is captured, the position where the still image is obtained is counted by the position counting unit 7 using GPS or the like (step B1). The remaining processing operations in the storage state are the same as in the first embodiment.
【００９９】提示状態でステップＢ２に進んだ場合、整
理提示部５に表示された地図上に、画像獲得部１で獲得
した静止画と注釈部によって入力されたメディア情報と
のサムネイル画像を、静止画が獲得された位置に対応す
る座標に表示する。提示状態時の残りの処理動作は第１
実施形態と同様である。When the process proceeds to step B2 in the presentation state, a thumbnail image of the still image acquired by the image acquisition unit 1 and the media information input by the annotation unit is displayed on the map displayed on the organizing / presenting unit 5. The image is displayed at the coordinates corresponding to the acquired position. The remaining processing operation in the presentation state is the first
This is the same as the embodiment.
【０１００】このように、この第２実施形態のマルチメ
ディア情報処理装置によれば、静止画だけではない多様
な構造を持ったマルチメディア情報を簡単に獲得できる
のみならず、位置により自動的に整理して検索するビュ
ーを作成することにより、ユーザに煩雑なビュー作成手
順を強いることなく、日々蓄積されるデータの有効活用
が図られることになる。As described above, according to the multimedia information processing apparatus of the second embodiment, it is possible not only to easily obtain multimedia information having various structures other than a still image but also to automatically obtain multimedia information according to a position. By creating a view to be organized and searched, data accumulated every day can be effectively used without forcing the user to perform a complicated view creation procedure.
【０１０１】また、以下に、この第２実施形態のマルチ
メディア情報処理装置に施すことのできる変形例を示
す。In the following, a modified example which can be applied to the multimedia information processing apparatus of the second embodiment will be described.
【０１０２】まず、この第２実施形態の位置計数部７
は、ＧＰＳを使った地球上での緯度および経度を計数し
たが、位置が分かるものであれば、これに限定されず、
なんでも良い。例えば、電波ビーコンを使って、基地局
から一定の距離内で静止画を獲得したことを計数しても
良い。この他にも、赤外線ビーコン、地磁気センサ、高
度計などを用いても良いし、あるいは、ユーザーが壁に
張られたバーコードを読み取って位置を計数しても良
い。プレビュー画面に映し出された画像を文字認識して
部屋番号を獲得して、これを位置としても良い。First, the position counting section 7 of the second embodiment
Has counted the latitude and longitude on the earth using GPS, but is not limited to this as long as the position can be determined.
anything is fine. For example, a radio beacon may be used to count that still images have been acquired within a certain distance from the base station. In addition, an infrared beacon, a geomagnetic sensor, an altimeter, or the like may be used, or a user may read a barcode on a wall to count the position. A room number may be obtained by character recognition of the image projected on the preview screen, and this may be used as the position.
【０１０３】また、この第２実施形態で整理提示部５が
提示する画像は地図であったが、位置計数部７で計数し
た位置を利用できるものであれば、なんでも良い。例え
ば、工場の図面や鉄道路線図などでもよい。あるいは、
会議室別で一覧表示しても良い。例えば、Ａ会議室で獲
得された過去のすべてのデータを時刻の早い順に並べて
一覧表示しても良い。Although the image presented by the organizing and presenting unit 5 in the second embodiment is a map, any image can be used as long as the position counted by the position counting unit 7 can be used. For example, a drawing of a factory or a railway line map may be used. Or,
A list may be displayed for each conference room. For example, all the past data acquired in the conference room A may be displayed in a list in order of earlier time.
【０１０４】また、この第２実施形態では、位置計数部
７は位置を計数し、整理提示部５は位置によって整理し
て提示したが、第１実施形態のように、時刻計数部を設
けて時刻を計数し、整理提示部５が時刻でも整理して提
示してもよい。この場合、例えば、位置によって提示す
るのか、時刻によって提示するのかを指定するスイッチ
を設ける。In the second embodiment, the position counting section 7 counts the position, and the organizing and presenting section 5 presents the information arranged according to the position. However, as in the first embodiment, a time counting section is provided. The time may be counted, and the organizing and presenting unit 5 may arrange and present the time. In this case, for example, a switch is provided to specify whether to present the information by position or by time.
【０１０５】（第３実施形態）次に、この発明の第３実
施形態について説明する。(Third Embodiment) Next, a third embodiment of the present invention will be described.
【０１０６】図１９は、この発明の第３実施形態に係る
マルチメディア情報処理装置の概略構成を示す図であ
り、図２０は、この第３実施形態のマルチメディア情報
処理装置の一例を示す図である。FIG. 19 is a diagram showing a schematic configuration of a multimedia information processing apparatus according to the third embodiment of the present invention, and FIG. 20 is a view showing an example of the multimedia information processing apparatus of the third embodiment. It is.
【０１０７】この第３実施形態のマルチメディア情報処
理装置は、個人またはグループのスケジュールソフトに
入力された情報により整理して提示するものである。The multimedia information processing apparatus according to the third embodiment is arranged and presented based on information input to schedule software for an individual or a group.
【０１０８】すなわち、前述の第１実施形態および第２
実施形態では、獲得したマルチメディア情報を、画像情
報を獲得した時刻や位置により整理提示したが、この第
３実施形態は、整理提示するために用いる情報として、
さらに個人またはグループのスケジュールを用いること
を特徴とする。That is, the first embodiment and the second embodiment
In the embodiment, the acquired multimedia information is arranged and presented according to the time and position at which the image information is acquired. In the third embodiment, as information used for organizing and presenting,
In addition, an individual or group schedule is used.
【０１０９】図１９は、図１と同一構成要素には同一符
号を付し、異なる構成要素にのみ新規に符号を付したも
のである。図１９では、図１の構成要素に、スケジュー
ル管理部８とスケジュール選択部９とを追加した構成を
示しており、ここでは第１実施形態と異なる部分、すな
わちスケジュール管理部８とスケジュール選択部９とに
ついてのみ説明する。In FIG. 19, the same components as those in FIG. 1 are denoted by the same reference numerals, and only the different components are newly denoted by the reference numerals. FIG. 19 shows a configuration in which a schedule management unit 8 and a schedule selection unit 9 are added to the components of FIG. 1, and here, the different parts from the first embodiment, that is, the schedule management unit 8 and the schedule selection unit 9 are shown. Only will be described.
【０１１０】スケジュール管理部８は、ハードディスク
とファイルシステムで構成され、例えば「８月２日１０
時〜１２時まで会議」、といったスケジュール要素を１
つのファイルとして管理する。The schedule management section 8 is composed of a hard disk and a file system.
Schedule from 10:00 to 12:00 ”
Manage as one file.
【０１１１】スケジュール選択部９は、スケジュール管
理部８で管理されるスケジュール要素の中から、時刻計
数部３で計数した時刻が含まれる要素を選択する。The schedule selecting section 9 selects an element including the time counted by the time counting section 3 from the schedule elements managed by the schedule managing section 8.
【０１１２】以下、第１実施形態と同様に、画像獲得部
１が獲得する画像として静止画を、注釈部２が入力する
メディア情報として図形とサウンドを例にとり説明す
る。Hereinafter, similarly to the first embodiment, a still image will be described as an example of an image acquired by the image acquiring unit 1, and a graphic and a sound will be described as examples of media information input by the annotation unit 2.
【０１１３】まず、第１実施形態と同様に、カメラ１ａ
を用いて静止画を獲得する。獲得された静止画は、マル
チメディア対応記憶部４に記憶され、記憶された静止画
が液晶ディスプレイ５ａに表示され、時刻計数部３は、
静止画が獲得された時刻を計数する。First, as in the first embodiment, the camera 1a
To obtain a still image. The acquired still image is stored in the multimedia-compatible storage unit 4, the stored still image is displayed on the liquid crystal display 5a, and the time counting unit 3
The time at which the still image was acquired is counted.
【０１１４】スケジュール管理部８は、図２１に示すよ
うに、１つのスケジュール要素を１つのファイルとして
個人またはグループのスケジュールが管理する。スケジ
ュール要素とは、日付、時刻、スケジュール名の組のこ
とで、図２１の例では、「Ｓｃｈｅｄｕｌｅ．００１」
というファイルに「７月７日、１０時−１２時、会議」
が記憶されている。新たなスケジュール要素を生成した
際には、ファイル名が重複しないように、ファイル名の
拡張子をインクリメントしてスケジュール要素を生成す
る。As shown in FIG. 21, the schedule management unit 8 manages an individual or group schedule as one file of one schedule element. The schedule element is a set of date, time, and schedule name. In the example of FIG. 21, “Schedule.001” is used.
File "July 7, 10: 00-12: 00, meeting"
Is stored. When a new schedule element is generated, the schedule element is generated by incrementing the extension of the file name so that the file name does not overlap.
【０１１５】スケジュールの生成するタイミングは、例
えば、記録／指示切り替え部６のスライドスイッチを３
連式とし、「Ｓｃｈｅｄｕｌｅ」を選択すると図２２に
示すスケジュール生成画面に切り替わるようにする。こ
の例の場合、切り替わった最初には、ポインタが日時の
ところにあり、カーソル２ａを上下させて日付を変更し
て、「１９９９年７月７日」の日付を設定する。カーソ
ル２ａを右に倒すとポインタが次の設定に移動して、ス
ケジュール開始時刻を設定できるようになり、「１０時
００分−１２時００分」を設定する。スケジュール名は
あらかじめ用意されたリストの中からカーソル２ａを上
下させて選択する。すべての設定が終わると、ボタン２
ａを押してスケジュールを確定させて「会議」を設定し
て、スケジュール管理部８は新規にファイルを生成して
これらの内容を記憶する。The schedule is generated by, for example, setting the slide switch of the recording / instruction switching unit 6 to three.
When "Schedule" is selected, the screen is switched to the schedule generation screen shown in FIG. In the case of this example, at the beginning of the switching, the pointer is at the date and time, and the date is changed by moving the cursor 2a up and down to set the date of "July 7, 1999". When the cursor 2a is tilted to the right, the pointer moves to the next setting so that the schedule start time can be set, and "10: 00-12: 00" is set. The schedule name is selected by moving the cursor 2a up and down from a list prepared in advance. When all settings are completed, press button 2
Press a to confirm the schedule and set “meeting”, and the schedule management unit 8 generates a new file and stores these contents.
【０１１６】スケジュール選択部９は、スケジュール管
理部８で管理されるスケジュール要素の中から時刻計数
部３が計数した時刻を含むものを選択する。図２２の例
で、時刻計数部３が「１９９９年７月７日１０時４２分
５６秒」を計測した場合、この時刻は「Ｓｃｈｅｄｕｌ
ｅ．００１」に記憶された「１９９９年７月７日１０時
００分」から「１９９９年７月７日１２時００分」のス
ケジュールに含まれるので、このスケジュール要素が選
択される。The schedule selecting section 9 selects a schedule element including the time counted by the time counting section 3 from schedule elements managed by the schedule managing section 8. In the example of FIG. 22, when the time counting unit 3 measures “10:42:56 on July 7, 1999”, this time is “Schedul
e. 001 ”is included in the schedule from“ 10:00 on July 7, 1999 ”to“ 12:00 on July 7, 1999 ”, so that this schedule element is selected.
【０１１７】マルチメディア対応記憶部４は、第１実施
形態と同様に、静止画、図形、サウンド、時刻を記憶す
るとともに、スケジュール要素も対応づけて記憶する。
スケジュール要素の対応づけは、第１実施形態と同様
に、同じデータ名を持ち拡張子が「．ｓｃｄ」を持つフ
ァイルを生成し、このファイルにスケジュール管理部８
で記憶したファイル名を記憶する。静止画ファイル名が
「Ｄａｔａ００２．ｐｉｃ」の場合、スケジュール要素
のファイル名は「Ｄａｔａ００２．ｓｃｄ」になり、そ
のファイルに「Ｓｃｈｅｄｕｌｅ．００１」が書き込ま
れて記憶される。記憶状態のその他の動作は、第１実施
形態と同一である。As in the first embodiment, the multimedia correspondence storage section 4 stores a still image, a figure, a sound, and a time, and also stores a schedule element in association therewith.
Similar to the first embodiment, a file having the same data name and an extension of “.scd” is generated, and the schedule management unit 8 associates the file with this file.
Store the file name stored in. When the still image file name is “Data002.pic”, the file name of the schedule element is “Data002.scd”, and “Schedule.001” is written and stored in the file. Other operations in the storage state are the same as in the first embodiment.
【０１１８】次に、提示状態のときの第３実施形態の動
作について、第１実施形態と異なる部分のみを説明す
る。Next, with respect to the operation of the third embodiment in the presentation state, only the parts different from the first embodiment will be described.
【０１１９】提示状態では、図６と同様、あるいは図２
３に示すようなカレンダ表示を行ない、サムネイル画像
をクリックすると、例えば図８に示す拡大表示をする。
拡大表示を作成する際に、静止画を獲得した時刻を含む
スケジュールがある場合は、拡大表示のタイトルにスケ
ジュールのタイトル、その他、日時、場所なども表示す
る。In the presentation state, the same as FIG. 6 or FIG.
When the calendar display as shown in FIG. 3 is performed and the thumbnail image is clicked, for example, an enlarged display as shown in FIG. 8 is performed.
When creating an enlarged display, if there is a schedule including the time at which the still image was acquired, the title of the enlarged display also displays the title of the schedule, the date and time, the location, and the like.
【０１２０】静止画を獲得した時刻を含むスケジュール
の有無の判定は、この例では、データ名Ｄａｔａ００２
の表示は、まずファイルＤａｔａ００１．ｓｃｄ中に書
き込まれたＳｃｈｅｄｕｌｅ．００１というファイル名
を読み取った後、スケジュール管理部９に記憶されたフ
ァイルＳｃｈｅｄｕｌｅ．００１のスケジュールを読み
取り、Ｄａｔａ００２が１９９９年７月７日１０時００
分から１２時のスケジュールに対応付けられていること
を検知する。提示状態のその他の動作は、第１実施形態
と同一である。In this example, the determination as to whether or not there is a schedule including the time at which the still image was obtained is performed in the data name Data002.
Is displayed first in the file Data001. Schedule. After reading the file name “001”, the file Schedule. 001 schedule is read, and Data002 is 10:00 on July 7, 1999.
It detects that it is associated with the schedule from minute to 12 o'clock. Other operations in the presentation state are the same as those in the first embodiment.
【０１２１】図２４は、以上の動作をまとめたフローチ
ャートであり、以下にこのフローチャートにしたがっ
て、処理の流れを説明する。この図２４は、第１実施形
態のフローチャートである図９と同一部分には同一符号
を付し、異なる部分にのみ新規に符号を付したものであ
り、ここでは、第１実施形態と異なる部分のみを説明す
る。FIG. 24 is a flowchart summarizing the above operations, and the flow of processing will be described below with reference to this flowchart. In FIG. 24, the same portions as those in FIG. 9 which is the flowchart of the first embodiment are denoted by the same reference numerals, and only the different portions are newly denoted by the same reference numerals. Only the explanation will be given.
【０１２２】まず、スライドスイッチ６ａの状態を調
べ、記録、提示、スケジュール入力の３つのうちどの状
態かを検出し、記録状態の場合はステップＡ２に進み、
提示状態の場合はステップＡ３に進み、スケジュール入
力状態の場合はステップＣ４に進む（ステップＣ１）。First, the state of the slide switch 6a is checked to detect which of the three states of recording, presentation, and schedule input. If the state is the recording state, the process proceeds to step A2.
In the case of the presentation state, the process proceeds to step A3, and in the case of the schedule input state, the process proceeds to step C4 (step C1).
【０１２３】スケジュール入力状態の場合、スケジュー
ルを入力してステップＣ１に戻る（ステップＣ４）。In the case of the schedule input state, the user inputs a schedule and returns to step C1 (step C4).
【０１２４】記録状態の場合、第１実施形態と同様に、
静止画を取り込んで注釈を入力し、ステップＡ５でシャ
ッターボタン１ｂが押されて注釈の入力が終了すると、
スケジュール選択部９が静止画を記録した時刻を含むス
ケジュールをスケジュール管理部８から選択して、マル
チメディア対応記憶部４に記憶し、ステップＣ１に戻る
（ステップＡ２）。また、提示状態の場合は、第１実施
形態と同一の動作をする。In the recording state, as in the first embodiment,
When a still image is captured and an annotation is input, and the shutter button 1b is pressed in step A5 to complete the input of the annotation,
The schedule including the time at which the still image was recorded by the schedule selection unit 9 is selected from the schedule management unit 8, stored in the multimedia correspondence storage unit 4, and the process returns to step C1 (step A2). In the presentation state, the same operation as in the first embodiment is performed.
【０１２５】このように、この第３実施形態のマルチメ
ディア情報処理装置によれば、静止画だけではない多様
な構造を持ったマルチメディア情報を簡単に獲得できる
のみならず、スケジュール形式に整理したビューを自動
的に作成することにより、ユーザに煩雑なビュー作成手
順を強いることなく、日々蓄積されるデータを効率的に
検索できることになる。As described above, according to the multimedia information processing apparatus of the third embodiment, not only a still image but also multimedia information having various structures can be easily obtained, and the multimedia information is arranged in a schedule format. By automatically creating a view, data accumulated every day can be efficiently searched without forcing the user to perform a complicated view creation procedure.
【０１２６】また、以下に、この第３実施形態のマルチ
メディア情報処理装置に施すことのできる変形例を示
す。The following describes a modification that can be applied to the multimedia information processing apparatus according to the third embodiment.
【０１２７】まず、この第３実施形態では、静止画を獲
得した時刻と、スケジュールの時刻との関連によって整
理提示したが、これに限らず、静止画に付けられた注釈
情報と、スケジュールの要素との関連によるものならば
なんでも良い。例えば第２実施形態のように、静止画を
記録した位置を獲得し、スケジュールに場所が記述され
た場合、静止画を記録した位置とスケジュールの位置が
同一の場合にサムネイル画像を表示するようにしても良
い。First, in the third embodiment, the still images are arranged and presented in relation to the time at which the still image was obtained and the time of the schedule. However, the present invention is not limited to this. Anything that is related to is acceptable. For example, as in the second embodiment, a position where a still image is recorded is acquired, and when a location is described in a schedule, a thumbnail image is displayed when the position where the still image is recorded and the position of the schedule are the same. May be.
【０１２８】[0128]
【発明の効果】以上詳述したように、この発明のマルチ
メディア情報処理装置を用いれば、構造を持ったマルチ
メディア情報を簡単に獲得できるだけでなく、時刻や位
置やスケジュールにより自動的に整理して検索するビュ
ーを作成することにより、ユーザに煩雑なビュー作成手
順を強いることがないため、ユーザはどのようにデータ
を蓄積するのかを意識することなくデータを有効に蓄積
し検索することができるようになる。As described in detail above, using the multimedia information processing apparatus of the present invention not only makes it possible to easily obtain multimedia information having a structure, but also automatically organizes multimedia information according to time, position, and schedule. By creating a view to search by, the user does not have to complicate the view creation procedure, and the user can effectively store and search data without being conscious of how to store the data. Become like
【図１】この発明の第１実施形態に係るマルチメディア
情報処理装置の概略構成を示す図。FIG. 1 is an exemplary view showing a schematic configuration of a multimedia information processing apparatus according to a first embodiment of the present invention.
【図２】同第１実施形態のマルチメディア情報処理装置
の外観の一例を示す図。FIG. 2 is an exemplary view showing an example of the appearance of the multimedia information processing apparatus according to the first embodiment.
【図３】同第１実施形態のマルチメディア対応記憶部４
が静止画と図形と時刻とを記憶する様子を示す図。FIG. 3 is a multimedia-compatible storage unit 4 of the first embodiment.
FIG. 3 is a diagram showing a state in which a still image, a figure, and a time are stored.
【図４】同第１実施形態の円形の図形を入力する様子を
示す図。FIG. 4 is an exemplary view showing a state of inputting a circular figure according to the first embodiment;
【図５】同第１実施形態の図形を入力しながらサウンド
を入力する様子を示す図。FIG. 5 is an exemplary view showing a state of inputting a sound while inputting the graphic according to the first embodiment;
【図６】同第１実施形態の整理提示部がマルチメディア
対応記憶部に記憶された情報を時刻を用いて整理して提
示する例を示す図。FIG. 6 is an exemplary diagram illustrating an example in which the organizing and presenting unit of the first embodiment organizes and presents information stored in the multimedia correspondence storage unit using time.
【図７】同第１実施形態の時刻ファイルテーブルの並べ
替えの様子を示す図。FIG. 7 is an exemplary view showing how the time file table is rearranged in the first embodiment;
【図８】同第１実施形態のサムネイル画像のクリックに
より表示される拡大画像の例を示す図。FIG. 8 is a view showing an example of an enlarged image displayed by clicking a thumbnail image according to the first embodiment.
【図９】同第１実施形態のマルチメディア情報処理装置
の動作をまとめたフローチャート。FIG. 9 is an exemplary flowchart summarizing the operation of the multimedia information processing apparatus according to the first embodiment;
【図１０】同第１実施形態の変形例における拡大画像の
表示例を示す図。FIG. 10 is a view showing a display example of an enlarged image in a modification of the first embodiment.
【図１１】同第１実施形態の変形例における整理提示部
がマルチメディア対応記憶部に記憶された情報を時刻を
用いて整理して提示する第１の例を示す図。FIG. 11 is a diagram showing a first example in which the arrangement presenting unit according to the modification of the first embodiment arranges and presents information stored in the multimedia correspondence storage unit using time.
【図１２】同第１実施形態の変形例における整理提示部
がマルチメディア対応記憶部に記憶された情報を時刻を
用いて整理して提示する第２の例を示す図。FIG. 12 is a diagram showing a second example in which the arrangement presenting unit according to the modification of the first embodiment arranges and presents information stored in the multimedia correspondence storage unit using time.
【図１３】この発明の第２実施形態に係るマルチメディ
ア情報処理装置の概略構成を示す図。FIG. 13 is a diagram showing a schematic configuration of a multimedia information processing apparatus according to a second embodiment of the present invention.
【図１４】同第２実施形態のマルチメディア情報処理装
置の外観の一例を示す図。FIG. 14 is an exemplary view showing an example of the appearance of the multimedia information processing apparatus according to the second embodiment.
【図１５】同第２実施形態のマルチメディア対応記憶部
４が静止画と図形と位置を記憶する様子を示す図。FIG. 15 is a diagram showing a state in which the multimedia-compatible storage unit 4 of the second embodiment stores a still image, a figure, and a position.
【図１６】同第２実施形態の整理提示部がマルチメディ
ア対応記憶部に記憶された情報を位置を用いて整理して
提示する第２の例を示す図。FIG. 16 is a view showing a second example in which the organizing and presenting unit according to the second embodiment arranges and presents information stored in the multimedia-compatible storage unit using a position.
【図１７】同第２実施形態におけるサムネイル画像の表
示座標値の算出方法を説明するための図。FIG. 17 is an exemplary view for explaining a method of calculating display coordinate values of thumbnail images in the second embodiment.
【図１８】同第２実施形態のマルチメディア情報処理装
置の動作をまとめたフローチャート。FIG. 18 is a flowchart summarizing the operation of the multimedia information processing apparatus according to the second embodiment;
【図１９】この発明の第３実施形態に係るマルチメディ
ア情報処理装置の概略構成を示す図。FIG. 19 is a diagram showing a schematic configuration of a multimedia information processing apparatus according to a third embodiment of the present invention.
【図２０】同第３実施形態のマルチメディア情報処理装
置の一例を示す図。FIG. 20 is an exemplary view showing an example of a multimedia information processing apparatus according to the third embodiment.
【図２１】同第３実施形態のスケジュール管理部が個人
またはグループのスケジュールを管理する様子を示す
図。FIG. 21 is a view showing a manner in which a schedule management unit of the third embodiment manages a schedule of an individual or a group.
【図２２】同第３実施形態のスケジュール生成画面を示
す図。FIG. 22 is a view showing a schedule generation screen according to the third embodiment;
【図２３】同第３実施形態のカレンダ表示を示す図。FIG. 23 is a view showing a calendar display according to the third embodiment.
【図２４】同第３実施形態のマルチメディア情報処理装
置の動作をまとめたフローチャート。FIG. 24 is a flowchart summarizing the operation of the multimedia information processing apparatus according to the third embodiment;
１…画像獲得部 ２…注釈部 ３…時刻計数部 ４…マルチメディア対応記憶部 ５…整理提示部 ６…記録／提示切り替え部 ７…位置計数部 ８…スケジュール管理部 ９…スケジュール選択部 DESCRIPTION OF SYMBOLS 1 ... Image acquisition part 2 ... Annotation part 3 ... Time counting part 4 ... Multimedia correspondence storage part 5 ... Organizing and presentation part 6 ... Recording / presentation switching part 7 ... Position counting part 8 ... Schedule management part 9 ... Schedule selection part
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/76 Ｇ０６Ｆ 15/401 ３２０Ｂ 5/91 Ｈ０４Ｎ 5/781 ５１０Ｆ 5/92 5/91 Ｌ Ｎ Ｊ 5/92 Ｈ Ｇ１１Ｂ 27/00 Ａ (72)発明者 土井 美和子 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 Ｆターム(参考） 5B075 ND16 NK10 NK25 NR03 NR15 PQ02 PQ48 PQ76 5C023 AA02 AA14 AA18 AA31 AA34 AA37 AA38 BA11 CA01 CA04 CA06 DA04 EA03 5C052 AA01 AA16 AB10 AC08 CC01 DD04 DD10 EE02 EE03 5C053 FA06 FA08 FA10 FA14 FA23 GB06 GB09 GB11 GB12 HA30 JA16 JA22 JA23 JA30 KA04 LA02 LA04 LA06 5D110 AA29 DA17 DC16 DE04 DE06 FA02 FA05 FA08 ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme coat ゛ (Reference) H04N 5/76 G06F 15/401 320B 5/91 H04N 5/781 510F 5/92 5/91 L N J 5 / 92 H G11B 27/00 A (72) Inventor Miwako Doi 1 Tokoba-Toshiba-cho, Koyuki-ku, Kawasaki-shi, Kanagawa F-term in the Toshiba R & D Center (Reference) AA02 AA14 AA18 AA31 AA34 AA37 AA38 BA11 CA01 CA04 CA06 DA04 EA03 5C052 AA01 AA16 AB10 AC08 CC01 DD04 DD10 EE02 EE03 5C053 FA06 FA08 FA10 FA14 FA23 GB06 GB09 GB11 GB12 HA30 JA16 JA22 JA23 JA04 KA04 LA110 FA08
Claims (14)
画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段により獲得された画像情報に対して他
の情報により注釈を付加する注釈手段と、 前記画像獲得手段により獲得された画像情報および前記
注釈手段により付加された注釈と前記時刻取得手段によ
り取得された時刻とを対応づけて記憶するマルチメディ
ア情報記憶手段と、 前記マルチメディア情報記憶手段に記憶された画像情報
および注釈を、その画像情報および注釈に対応づけて記
憶された時刻により整理して提示する整理提示手段と、 を具備したことを特徴とするマルチメディア情報処理装
置。An image acquisition unit that acquires image information of a still image or a moving image; a time acquisition unit that acquires a time at which the image acquisition unit acquires the image information; and an image acquisition unit that acquires image information acquired by the image acquisition unit. Annotating means for adding an annotation based on other information, and storing the image information acquired by the image acquiring means, the annotation added by the annotation means, and the time acquired by the time acquiring means in association with each other. Multimedia information storage means; and arrangement presentation means for organizing and presenting the image information and the annotations stored in the multimedia information storage means according to the stored times in association with the image information and the annotations. A multimedia information processing apparatus characterized by the above-mentioned.
画像獲得手段と、 前記画像獲得手段が画像情報を獲得した位置を取得する
位置取得手段と、 前記画像獲得手段により獲得された画像情報に対して他
の情報により注釈を付加する注釈手段と、 前記画像獲得手段により獲得された画像情報および前記
注釈手段により付加された注釈と前記位置取得手段によ
り取得された位置とを対応づけて記憶するマルチメディ
ア情報記憶手段と、 前記マルチメディア情報記憶手段に記憶された画像情報
および注釈を、その画像情報および注釈に対応づけて記
憶された位置により整理して提示する整理提示手段と、 を具備したことを特徴とするマルチメディア情報処理装
置。2. An image acquisition unit for acquiring image information of a still image or a moving image; a position acquisition unit for acquiring a position at which the image acquisition unit has acquired the image information; Annotation means for adding an annotation based on other information, image information acquired by the image acquisition means, the annotation added by the annotation means, and the position acquired by the position acquisition means are stored in association with each other. Multimedia information storage means; and arrangement presentation means for organizing and presenting the image information and annotations stored in the multimedia information storage means according to the positions stored in association with the image information and annotations. A multimedia information processing apparatus characterized by the above-mentioned.
画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段が画像情報を獲得した位置を取得する
位置取得手段と、 前記画像獲得手段により獲得された画像情報に対して他
の情報により注釈を付加する注釈手段と、 前記画像獲得手段により獲得された画像情報および前記
注釈手段により付加された注釈と、前記時刻取得手段に
より取得された時刻と、前記位置取得手段により取得さ
れた位置とを対応づけて記憶するマルチメディア情報記
憶手段と、 前記マルチメディア情報記憶手段に記憶された画像情報
および注釈を、その画像情報および注釈に対応づけて記
憶された時刻および位置により整理して提示する整理提
示手段と、 を具備したことを特徴とするマルチメディア情報処理装
置。3. An image acquiring unit for acquiring image information of a still image or a moving image; a time acquiring unit for acquiring a time when the image acquiring unit acquires the image information; and a position where the image acquiring unit acquires the image information. Position acquiring means for acquiring the image information acquired by the image acquiring means, annotating means for annotating the image information acquired by the other information with the image information, and image information acquired by the image acquiring means and added by the annotation means. Multimedia information storage means for storing the annotations, the time acquired by the time acquisition means, and the position acquired by the position acquisition means in association with each other; and image information stored in the multimedia information storage means. And presentation means for organizing and presenting the annotations according to the time and position stored in association with the image information and the annotations. A multimedia information processing apparatus, characterized in that:
画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段により獲得された画像情報に対して他
の情報により注釈を付加する注釈手段と、 個人またはグループのスケジュール情報を管理するスケ
ジュール管理手段と、 前記スケジュール管理手段により管理されるスケジュー
ル情報の中からいずれかのスケジュール情報を選択する
スケジュール選択手段と、 前記画像獲得手段により獲得された画像情報および前記
注釈手段により付加された注釈と、前記時刻取得手段に
より取得された時刻と、前記スケジュール選択手段によ
り選択されたスケジュール情報とを対応づけて記憶する
マルチメディア情報記憶手段と、 前記マルチメディア情報記憶手段に記憶された画像情報
および注釈を、その画像情報および注釈に対応づけて記
憶された時刻およびスケジュール情報により整理して提
示する整理提示手段と、 を具備したことを特徴とするマルチメディア情報処理装
置。4. An image acquisition unit for acquiring image information of a still image or a moving image, a time acquisition unit for acquiring a time at which the image acquisition unit acquires the image information, and an image acquisition unit for acquiring the image information acquired by the image acquisition unit. Annotation means for adding annotations to other information, schedule management means for managing individual or group schedule information, and schedule for selecting any schedule information from the schedule information managed by the schedule management means Selecting means, associating the image information acquired by the image acquiring means and the annotation added by the annotation means, the time acquired by the time acquiring means, and the schedule information selected by the schedule selecting means. Multimedia information storage means for storing and storing the multimedia information Multimedia presentation means for organizing and presenting the image information and the annotations stored in the information storage means according to the time and schedule information stored in association with the image information and the annotations. Information processing device.
画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段が画像情報を獲得した位置を取得する
位置取得手段と、 前記画像獲得手段により獲得された画像情報に対して他
の情報により注釈を付加する注釈手段と、 個人またはグループのスケジュール情報を管理するスケ
ジュール管理手段と、 前記スケジュール管理手段により管理されるスケジュー
ル情報の中からいずれかのスケジュール情報を選択する
スケジュール選択手段と、 前記画像獲得手段により獲得された画像情報および前記
注釈手段により付加された注釈と、前記時刻取得手段に
より取得された時刻と、前記位置取得手段により取得さ
れた位置と、前記スケジュール選択手段により選択され
たスケジュール情報とを対応づけて記憶するマルチメデ
ィア情報記憶手段と、 前記マルチメディア情報記憶手段に記憶された画像情報
および注釈を、その画像情報および注釈に対応づけて記
憶された時刻、位置およびスケジュール情報により整理
して提示する整理提示手段と、 を具備したことを特徴とするマルチメディア情報処理装
置。5. An image acquiring unit for acquiring image information of a still image or a moving image; a time acquiring unit for acquiring a time when the image acquiring unit acquires the image information; and a position where the image acquiring unit acquires the image information. Position acquiring means for acquiring an image information acquired by the image acquiring means, annotating means for adding an annotation with other information to the image information acquired by the image acquiring means, schedule managing means for managing individual or group schedule information, Schedule selecting means for selecting any one of schedule information managed by the means, image information acquired by the image acquiring means and an annotation added by the annotation means, acquired by the time acquiring means Time, the position obtained by the position obtaining means, Multimedia information storage means for storing the schedule information selected by the stage in association with the image information; and the time at which the image information and the annotation stored in the multimedia information storage means are stored in association with the image information and the annotation. And an arrangement / presentation unit that arranges and presents the information based on the position and schedule information.
により取得された時刻間の変化により、複数の画像情報
の中から提示する画像情報を選択する選択手段を有する
ことを特徴とする請求項１、３、４または５記載のマル
チメディア情報処理装置。6. The system according to claim 1, wherein the organizing and presenting means has a selecting means for selecting image information to be presented from a plurality of pieces of image information based on a change between times acquired by the time acquiring means. The multimedia information processing apparatus according to 1, 3, 4, or 5.
により取得された位置間の変化により、複数の画像情報
の中から提示する画像情報を選択する選択手段を有する
ことを特徴とする請求項２、３、または５記載のマルチ
メディア情報処理装置。7. The system according to claim 1, wherein said organizing and presenting means has a selecting means for selecting image information to be presented from a plurality of pieces of image information based on a change between the positions acquired by said position acquiring means. The multimedia information processing apparatus according to 2, 3, or 5.
により取得された時刻間の変化および前記位置取得手段
により取得された位置間の変化の少なくとも一方によ
り、複数の画像情報の中から提示する画像情報を選択す
る選択手段を有することを特徴とする請求項３または５
記載のマルチメディア情報処理装置。8. The arrangement presenting means presents from among a plurality of pieces of image information by at least one of a change between times obtained by the time obtaining means and a change between positions obtained by the position obtaining means. 6. The image processing apparatus according to claim 3, further comprising a selection unit for selecting image information.
A multimedia information processing apparatus according to claim 1.
時、前記マルチメディア情報記憶手段による画像情報お
よび注釈の保存時または当該整理提示手段による画像情
報および注釈の提示時に指定された分野に応じて、画像
情報および注釈の提示形式を切り替える提示形式切替手
段を有することを特徴とする請求項１、２、３、４、
５、６、７または８記載のマルチメディア情報処理装
置。9. The organizing and presenting means according to a field designated when the apparatus is started, when the multimedia information storage means stores image information and annotations, or when the organizing and presenting means presents image information and annotations. And a presentation format switching means for switching between presentation formats of image information and annotations.
The multimedia information processing apparatus according to 5, 6, 7, or 8.
テキスト情報または手書き情報を前記画像獲得手段によ
り獲得された画像情報上に記入するように入力するため
の上書き手段を有し、 前記整理提示手段は、提示する画像情報に上書きしない
形式で前記注釈手段の上書き手段により入力されたテキ
スト情報または手書き情報を提示する注釈提示手段を具
備したことを特徴とする請求項１、２、３、４、５、
６、７、８または９記載のマルチメディア情報処理装
置。10. The annotating means includes an overwriting means for inputting text information or handwritten information to be added as an annotation so as to be written on the image information acquired by the image acquiring means. 5. The apparatus according to claim 1, further comprising: an annotation presenting unit that presents text information or handwritten information input by the overwriting unit of the annotation unit in a format that does not overwrite the image information to be presented. 5,
10. The multimedia information processing apparatus according to 6, 7, 8 or 9.
ル選択手段により選択されたスケジュール情報により、
複数の画像情報の中から提示する画像情報を選択する選
択手段を有することを特徴とする請求項４または５記載
のマルチメディア情報処理装置。11. The arrangement presenting means according to schedule information selected by the schedule selecting means,
6. The multimedia information processing apparatus according to claim 4, further comprising a selection unit that selects image information to be presented from a plurality of pieces of image information.
る画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段により獲得された画像情報と前記時刻
取得手段により取得された時刻とを対応づけて記憶する
画像情報記憶手段と、 前記画像情報記憶手段に記憶された画像情報をその画像
情報に対応づけて記憶された時刻により整理して提示す
る画像情報提示手段と、 を具備したことを特徴とする画像情報処理装置。12. An image acquisition unit for acquiring image information of a still image or a moving image, a time acquisition unit for acquiring a time at which the image acquisition unit acquires the image information, and an image information acquired by the image acquisition unit. Image information storage means for storing the time acquired by the time acquisition means in association with the image information; and image information stored in the image information storage means arranged and presented by the time stored in association with the image information An image information presenting apparatus comprising:
る画像獲得手段と、 前記画像獲得手段が画像情報を獲得した位置を取得する
位置取得手段と、 前記画像獲得手段により獲得された画像情報と前記位置
取得手段により取得された位置とを対応づけて記憶する
画像情報記憶手段と、 前記画像情報記憶手段に記憶された画像情報をその画像
情報に対応づけて記憶された位置により整理して提示す
る画像情報提示手段と、 を具備したことを特徴とする画像情報処理装置。13. An image acquisition unit for acquiring image information of a still image or a moving image; a position acquisition unit for acquiring a position where the image acquisition unit has acquired the image information; and an image information acquired by the image acquisition unit. Image information storage means for storing the position acquired by the position acquisition means in association with the image information; and image information stored in the image information storage means arranged and presented by the position stored in association with the image information An image information presenting apparatus comprising:
る画像獲得手段と、 前記画像獲得手段が画像情報を獲得した時刻を取得する
時刻取得手段と、 前記画像獲得手段が画像情報を獲得した位置を取得する
位置取得手段と、 前記画像獲得手段により獲得された画像情報と前記時刻
取得手段により取得された時刻および前記位置取得手段
により取得された位置とを対応づけて記憶する画像情報
記憶手段と、 前記画像情報記憶手段に記憶された画像情報をその画像
情報に対応づけて記憶された時刻および位置により整理
して提示する画像情報提示手段と、 を具備したことを特徴とする画像情報処理装置。14. An image acquisition unit for acquiring image information of a still image or a moving image; a time acquisition unit for acquiring a time when the image acquisition unit acquires the image information; and a position where the image acquisition unit acquires the image information. Position acquisition means for acquiring the image information acquired by the image acquisition means, the time acquired by the time acquisition means, and the position acquired by the position acquisition means in association with the image information storage means, An image information presenting apparatus, comprising: image information presenting means for organizing and presenting the image information stored in the image information storing means in accordance with the time and position stored in association with the image information. .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29563599A JP2001119653A (en) | 1999-10-18 | 1999-10-18 | Multimedia information processing unit and image information processing unit |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29563599A JP2001119653A (en) | 1999-10-18 | 1999-10-18 | Multimedia information processing unit and image information processing unit |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001119653A true JP2001119653A (en) | 2001-04-27 |
Family
ID=17823211
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29563599A Pending JP2001119653A (en) | 1999-10-18 | 1999-10-18 | Multimedia information processing unit and image information processing unit |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001119653A (en) |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003006107A (en) * | 2001-06-19 | 2003-01-10 | Daisuke Seto | System for summoning participant for preparation of pet dog/pet cat calendar |
| JP2004032131A (en) * | 2002-06-24 | 2004-01-29 | Canon Inc | Imaging apparatus and image processing apparatus |
| JP2004110599A (en) * | 2002-09-20 | 2004-04-08 | Seiko Epson Corp | Display of image file |
| JP2004266831A (en) * | 2003-02-28 | 2004-09-24 | Fuji Xerox Co Ltd | System and method for bookmarking live and recorded multimedia documents |
| JP2004265015A (en) * | 2003-02-28 | 2004-09-24 | Toyota Motor Corp | Content-retrieving index generation device |
| WO2004091201A1 (en) * | 2003-04-03 | 2004-10-21 | Matsushita Electric Industrial Co., Ltd. | Moving picture processing device, information processing device, and program thereof |
| JP2005346440A (en) * | 2004-06-03 | 2005-12-15 | Ntt Docomo Inc | Metadata application support system, controller, and metadata application support method |
| JP2006173767A (en) * | 2004-12-13 | 2006-06-29 | Casio Comput Co Ltd | Electronic camera |
| JP2007156758A (en) * | 2005-12-02 | 2007-06-21 | Nihon Computer Graphic Co Ltd | File management device, file management method and file management program |
| JP2007163568A (en) * | 2005-12-09 | 2007-06-28 | Nippon Telegr & Teleph Corp <Ntt> | Input apparatus for digest scene, input method therefor, program for this method, and recording medium recorded with this program |
| JP2007181150A (en) * | 2005-12-28 | 2007-07-12 | Sony Corp | Image recording apparatus, image recording method and program |
| JP2007280406A (en) * | 2007-05-01 | 2007-10-25 | Sony Corp | Information processor, display control method and program |
| US7782373B2 (en) | 2002-11-25 | 2010-08-24 | Samsung Electronics Co., Ltd. | Apparatus and method for displaying pictures in a mobile terminal |
| US7810046B2 (en) | 2006-05-01 | 2010-10-05 | Sony Ericsson Mobile Communications Japan, Inc. | Information processing apparatus, information processing method, information processing program, and mobile terminal device |
| US8010579B2 (en) | 2003-11-17 | 2011-08-30 | Nokia Corporation | Bookmarking and annotating in a media diary application |
| US8026970B2 (en) | 2003-02-27 | 2011-09-27 | Casio Computer Co., Ltd. | Image reproduction apparatus capable of simultaneously reproducing plurality of images |
| KR20120063270A (en) * | 2010-12-07 | 2012-06-15 | 삼성전자주식회사 | Method and apparatus for utilizing image |
| US8990255B2 (en) | 2003-11-17 | 2015-03-24 | Nokia Corporation | Time bar navigation in a media diary application |
-
1999
- 1999-10-18 JP JP29563599A patent/JP2001119653A/en active Pending
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003006107A (en) * | 2001-06-19 | 2003-01-10 | Daisuke Seto | System for summoning participant for preparation of pet dog/pet cat calendar |
| JP2004032131A (en) * | 2002-06-24 | 2004-01-29 | Canon Inc | Imaging apparatus and image processing apparatus |
| JP2004110599A (en) * | 2002-09-20 | 2004-04-08 | Seiko Epson Corp | Display of image file |
| US7782373B2 (en) | 2002-11-25 | 2010-08-24 | Samsung Electronics Co., Ltd. | Apparatus and method for displaying pictures in a mobile terminal |
| US8026970B2 (en) | 2003-02-27 | 2011-09-27 | Casio Computer Co., Ltd. | Image reproduction apparatus capable of simultaneously reproducing plurality of images |
| JP2004266831A (en) * | 2003-02-28 | 2004-09-24 | Fuji Xerox Co Ltd | System and method for bookmarking live and recorded multimedia documents |
| JP2004265015A (en) * | 2003-02-28 | 2004-09-24 | Toyota Motor Corp | Content-retrieving index generation device |
| JPWO2004091201A1 (en) * | 2003-04-03 | 2006-07-06 | 松下電器産業株式会社 | Movie processing apparatus, information processing apparatus and program thereof |
| JP4600279B2 (en) * | 2003-04-03 | 2010-12-15 | パナソニック株式会社 | Movie display device |
| CN100466697C (en) * | 2003-04-03 | 2009-03-04 | 松下电器产业株式会社 | Moving picture processing device, information processing device, and program thereof |
| US7765461B2 (en) | 2003-04-03 | 2010-07-27 | Panasonic Corporation | Moving picture processing device, information processing device, and program thereof |
| WO2004091201A1 (en) * | 2003-04-03 | 2004-10-21 | Matsushita Electric Industrial Co., Ltd. | Moving picture processing device, information processing device, and program thereof |
| US8990255B2 (en) | 2003-11-17 | 2015-03-24 | Nokia Corporation | Time bar navigation in a media diary application |
| US8010579B2 (en) | 2003-11-17 | 2011-08-30 | Nokia Corporation | Bookmarking and annotating in a media diary application |
| JP2005346440A (en) * | 2004-06-03 | 2005-12-15 | Ntt Docomo Inc | Metadata application support system, controller, and metadata application support method |
| JP2006173767A (en) * | 2004-12-13 | 2006-06-29 | Casio Comput Co Ltd | Electronic camera |
| JP2007156758A (en) * | 2005-12-02 | 2007-06-21 | Nihon Computer Graphic Co Ltd | File management device, file management method and file management program |
| JP4627717B2 (en) * | 2005-12-09 | 2011-02-09 | 日本電信電話株式会社 | Digest scene information input device, input method, program for the method, and recording medium recording the program |
| JP2007163568A (en) * | 2005-12-09 | 2007-06-28 | Nippon Telegr & Teleph Corp <Ntt> | Input apparatus for digest scene, input method therefor, program for this method, and recording medium recorded with this program |
| JP2007181150A (en) * | 2005-12-28 | 2007-07-12 | Sony Corp | Image recording apparatus, image recording method and program |
| US9066016B2 (en) | 2005-12-28 | 2015-06-23 | Sony Corporation | Apparatus, method, and program for selecting image data using a display |
| US9807307B2 (en) | 2005-12-28 | 2017-10-31 | Sony Corporation | Apparatus, method, and program for selecting image data using a display |
| US7810046B2 (en) | 2006-05-01 | 2010-10-05 | Sony Ericsson Mobile Communications Japan, Inc. | Information processing apparatus, information processing method, information processing program, and mobile terminal device |
| JP2007280406A (en) * | 2007-05-01 | 2007-10-25 | Sony Corp | Information processor, display control method and program |
| KR20120063270A (en) * | 2010-12-07 | 2012-06-15 | 삼성전자주식회사 | Method and apparatus for utilizing image |
| KR101724713B1 (en) * | 2010-12-07 | 2017-04-07 | 삼성전자주식회사 | Method and apparatus for utilizing image |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP1716510B1 (en) | Representation of media items in a media file management application for use with a digital device | |
| JP2001119653A (en) | Multimedia information processing unit and image information processing unit | |
| US8234565B2 (en) | Information presentation method, information processing apparatus, and recording medium | |
| JP3387183B2 (en) | Image display method and apparatus | |
| US6332147B1 (en) | Computer controlled display system using a graphical replay device to control playback of temporal data representing collaborative activities | |
| US5717869A (en) | Computer controlled display system using a timeline to control playback of temporal data representing collaborative activities | |
| JP4453738B2 (en) | File transfer method, apparatus, and program | |
| US7647555B1 (en) | System and method for video access from notes or summaries | |
| US8010579B2 (en) | Bookmarking and annotating in a media diary application | |
| US5786814A (en) | Computer controlled display system activities using correlated graphical and timeline interfaces for controlling replay of temporal data representing collaborative activities | |
| US6590608B2 (en) | Method and apparatus for managing a plurality of images by classifying them into groups | |
| US8028249B2 (en) | Method and system for browsing large digital multimedia object collections | |
| US5717879A (en) | System for the capture and replay of temporal data representing collaborative activities | |
| JP5611829B2 (en) | Operation control system and operation control method for information processing apparatus | |
| US20050125717A1 (en) | System and method for off-line synchronized capturing and reviewing notes and presentations | |
| EP1443424A1 (en) | Generating a document augmented with notes | |
| US20110199511A1 (en) | Image photographing system and image photographing method | |
| JP2005202944A (en) | Time bar navigation in media diary application | |
| JP2006146415A (en) | Conference support system | |
| KR101441220B1 (en) | Association of information entities along a time line | |
| JP2001100887A (en) | Object processor | |
| JPH09212331A (en) | Portable information collector and its information managing method | |
| JP2003196318A (en) | Method and device for displaying image | |
| JP3737710B2 (en) | File management method and apparatus | |
| JP2000004419A (en) | Electronic album preparing device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040817 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041018 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050308 |