JP2008004083A - Device and method for image control, program therefor and recording medium recorded the same - Google Patents
Device and method for image control, program therefor and recording medium recorded the same Download PDFInfo
- Publication number
- JP2008004083A JP2008004083A JP2007132243A JP2007132243A JP2008004083A JP 2008004083 A JP2008004083 A JP 2008004083A JP 2007132243 A JP2007132243 A JP 2007132243A JP 2007132243 A JP2007132243 A JP 2007132243A JP 2008004083 A JP2008004083 A JP 2008004083A
- Authority
- JP
- Japan
- Prior art keywords
- image information
- switching
- image
- priority
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は画像制御装置に関し、特に、それによる画像情報の切り換え方法に関する。 The present invention relates to an image control apparatus, and more particularly to a method for switching image information.
近年の情報技術の発達に伴い、テレビジョン受像器等のＡＶ機器や、携帯電話やＰＤＡ等の携帯用電子機器に表示可能な情報（特に画像情報）の種類が増大し続けている。例えばテレビジョン受像器では、デジタル放送等、テレビジョン放送のチャネル数が増加し続けているだけでなく、操作画面や電子番組表等、アプリケーションによって生成される画像情報、並びに、外部記録媒体（例えば、ＤＶＤやＨＤＤ）、ホームネットワーク、及びインターネット等、新たな情報源からの画像情報も表示可能になりつつある。逆に、携帯用電子機器では、アプリケーションの生成する画像情報、及び、携帯電話網やインターネットからの画像情報に加え、テレビジョン放送の番組も表示可能になっている。 With the development of information technology in recent years, the types of information (particularly image information) that can be displayed on AV devices such as television receivers and portable electronic devices such as mobile phones and PDAs continue to increase. For example, in a television receiver, not only the number of channels for television broadcasting such as digital broadcasting continues to increase, but also image information generated by applications such as operation screens and electronic program guides, and external recording media (for example, , DVDs, HDDs), home networks, and the Internet, image information from new information sources is also being displayed. Conversely, in portable electronic devices, television broadcast programs can be displayed in addition to image information generated by an application and image information from a mobile phone network or the Internet.
このように表示可能な画像情報の種類が増えるにつれ、それらの中から実際に表示されるべき画像情報を選択する技術が重要になっている。特に携帯用電子機器、更にウェアラブルコンピュータでは、状況に応じて適切な画像情報を自動的に切り換えられる技術が望まれている。 As the types of image information that can be displayed increase in this way, a technique for selecting image information to be actually displayed from them becomes important. In particular, for portable electronic devices and wearable computers, a technique that can automatically switch appropriate image information according to the situation is desired.
そのような技術としては、例えば次のような表示制御装置が知られている（例えば、特許文献１参照）。その表示制御装置はテレビジョン受像器に搭載され、テレビジョン放送の番組と別の画像情報との間での表示の切り換えを次のように制御する。
まず、表示中の番組と、新たに表示が要求された画像情報との間で優先度を比較する。次に、その比較結果に基づき、新たな画像情報の表示サイズや、画像情報を実際に切り換えるタイミング等を決定する。続いて、その決定結果に従い、表示中の番組が表示されているウィンドウとは別のウィンドウに新たな画像情報を表示する。例えば緊急のメール等、優先度の高い画像情報は、番組の表示サイズに対して大きな表示サイズで、かつ即座に表示する。一方、優先度の低い画像情報は、その表示サイズを番組の表示サイズに対して十分に小さく抑え、又は、番組が終わるまで表示を遅らせる。
このように、表示中の番組と新たな画像情報との間での優先度の差に応じ、新たな画像情報の表示態様が制御される。それにより、新たな画像情報の割り込みに対する視聴者の不快感の軽減が図られている。
First, priorities are compared between the program being displayed and the image information that is newly requested to be displayed. Next, based on the comparison result, the display size of new image information, the timing for actually switching the image information, and the like are determined. Subsequently, according to the determination result, new image information is displayed in a window different from the window in which the program being displayed is displayed. For example, image information with a high priority, such as an urgent mail, is displayed immediately with a display size larger than the display size of the program. On the other hand, image information with a low priority is displayed with a display size that is sufficiently smaller than the display size of the program, or is delayed until the program ends.
As described above, the display mode of the new image information is controlled according to the difference in priority between the program being displayed and the new image information. Thereby, the viewer's discomfort with respect to interruption of new image information is reduced.
しかし、上記のような従来の表示制御装置では、番組が単独で表示されている画面が、番組と新たな画像情報との両方が表示されている画面へ、突然に、かつ瞬時に切り換えられる。従って、画面が切り換えられた瞬間では、視聴者が新たな画像情報の重要度を識別できない。その結果、たとえ、新たな画像情報の優先度が表示中の番組の優先度より高くても、画面の瞬間的な切り換えから視聴者の受ける不快感を十分に抑えることが困難である。一方、新たな画像情報の優先度が表示中の番組の優先度より低く、切り換え前後での画面の変化自体が小さくても、その切り換えが瞬間的であるので、視聴者には画面の変化が強く印象づけられやすい。それも、視聴者の受ける不快感の抑制を困難にする。特に、視聴中の番組に対する視聴者の興味が高いほど、上記の不快感は強い。
本発明は、画像情報の切り換えから視聴者の受ける不快感を更に抑制できる画像制御装置の提供を目的とする。
However, in the conventional display control apparatus as described above, the screen on which the program is displayed alone is suddenly and instantaneously switched to the screen on which both the program and new image information are displayed. Therefore, at the moment when the screen is switched, the viewer cannot identify the importance of the new image information. As a result, even if the priority of the new image information is higher than the priority of the program being displayed, it is difficult to sufficiently suppress the discomfort experienced by the viewer from the instantaneous switching of the screen. On the other hand, even if the priority of the new image information is lower than the priority of the program being displayed and the screen change itself before and after the change is small, the change is instantaneous. It is easy to get a strong impression. It also makes it difficult to suppress discomfort experienced by viewers. In particular, the higher the viewer's interest in the program being viewed, the stronger the above-mentioned discomfort.
It is an object of the present invention to provide an image control apparatus that can further suppress discomfort experienced by a viewer from switching of image information.
本発明による画像制御装置は次のような切換部を有する。その切換部は、まず、モニタの画面への表示に対する優先度を画像情報ごとに設定する。次に、画面に表示中の第１画像情報と、次に表示されるべき第２画像情報との間で優先度を比較し、その比較結果に応じて切換時間を決定する。続いて、第１画像情報と第２画像情報とのそれぞれの画面上での表示態様を切換時間内に連続的に又は段階的に変更する。ここで、表示態様を表すパラメータとしては好ましくは、画面上でのサイズ、位置、フォーマット、表示時間率、透明度、又はレイヤの階層が利用される。すなわち、第１画像情報と第２画像情報とのそれぞれのサイズ、位置、フォーマット、表示時間率、透明度、又はレイヤの階層が切換時間内に連続的に又は段階的に変更される。画像情報に音声情報が付随している場合、画像情報の切り換えと共に、再生される音声の大きさが連続的に又は段階的に変更されても良い。 The image control apparatus according to the present invention has the following switching unit. The switching unit first sets the priority for display on the monitor screen for each piece of image information. Next, the priority is compared between the first image information being displayed on the screen and the second image information to be displayed next, and the switching time is determined according to the comparison result. Subsequently, the display mode of each of the first image information and the second image information on the screen is changed continuously or stepwise within the switching time. Here, as a parameter representing the display mode, a size, position, format, display time rate, transparency, or layer hierarchy on the screen is preferably used. That is, the size, position, format, display time rate, transparency, or layer hierarchy of each of the first image information and the second image information is changed continuously or stepwise within the switching time. When audio information is attached to the image information, the volume of the reproduced audio may be changed continuously or stepwise as the image information is switched.
本発明によるこの画像制御装置は画像情報の切り換えを、瞬時ではなく、適切な時間（切換時間）をかけて行う。それにより、視聴者に画像情報の切り換えを前もって気付かせることができる。更に、切り換え前後の画像情報の優先度に応じて切換時間が調節される。好ましくは、新たに表示されるべき画像情報の優先度が高いほど切換時間が短縮され、その画像情報への切り換えが速く進行する。従って、切り換えの速さから、新たに表示される画像情報の優先度を視聴者が予測できる。 The image control apparatus according to the present invention switches image information over an appropriate time (switching time), not instantaneously. As a result, the viewer can be made aware of the switching of the image information in advance. Furthermore, the switching time is adjusted according to the priority of the image information before and after switching. Preferably, the higher the priority of the image information to be displayed is, the shorter the switching time is, and the switching to the image information proceeds faster. Therefore, the viewer can predict the priority of newly displayed image information based on the switching speed.
ここで、表示態様を表すパラメータの、切換部による時間的変化が非線形な関数で表されるようにしても良い。その場合、切換時間の伸縮に伴い、画像情報の切り換えの速さだけでなく、表示態様の変更パターンから視聴者の受ける印象も変化し得る。このような印象の変化からも、新たに表示される画像情報の優先度を視聴者が予測できる。 Here, the time change by the switching unit of the parameter representing the display mode may be represented by a non-linear function. In this case, not only the switching speed of the image information but also the impression received by the viewer can be changed from the display mode change pattern as the switching time expands and contracts. Even from such a change in impression, the viewer can predict the priority of newly displayed image information.
本発明による画像制御装置は好ましくは、画像情報の優先度を次のように自動的に設定する。
本発明による画像制御装置が携帯用電子機器、特にウェアラブルコンピュータに搭載される場合、その画像制御装置が視聴状況取得部を有しても良い。視聴状況取得部は好ましくはアイカメラによって視聴者の眼球運動を検知し、その眼球運動に基づき、モニタの画面に表示された画像情報のそれぞれに対する視聴者の注視状況を監視する。更に、切換部が、視聴状況取得部によって取得された注視状況に基づき、モニタの画面に表示された画像情報の優先度を設定する。好ましくは、視聴状況取得部が、画面に表示された画像情報のそれぞれに対する視聴者の注視時間、又は注視回数を測定し、切換部が、注視時間の長い、又は注視回数の多い画像情報ほどその優先度を高く設定する。注視時間や注視回数は各画像情報に対する視聴者の重要度や関心度を表す、とみなせるので、視聴者の重要度や関心度の高い画像情報に高い優先度を自動的に割り当てることができる。
The image control apparatus according to the present invention preferably automatically sets the priority of image information as follows.
When the image control apparatus according to the present invention is mounted on a portable electronic device, particularly a wearable computer, the image control apparatus may include a viewing status acquisition unit. The viewing status acquisition unit preferably detects the viewer's eye movement with an eye camera, and monitors the viewer's gaze status for each piece of image information displayed on the monitor screen based on the eye movement. Further, the switching unit sets the priority of the image information displayed on the monitor screen based on the gaze situation acquired by the viewing status acquisition unit. Preferably, the viewing status acquisition unit measures the viewer's gaze time or the number of times of gaze for each of the image information displayed on the screen, and the switching unit determines the image information with a longer gaze time or a greater number of gazes Set a higher priority. Since the gaze time and the number of gazes can be regarded as representing the importance level and interest level of the viewer for each piece of image information, high priority can be automatically assigned to image information with high importance level and interest level of the viewer.
本発明による画像制御装置が、モニタの画面に表示された画像情報の履歴を管理する視聴履歴取得部、を有しても良い。その場合、切換部が、視聴履歴取得部によって保持されている履歴に基づき、モニタの画面に表示された画像情報の優先度を設定する。
好ましくは、視聴履歴取得部が、履歴に含まれている画像情報をそれぞれの属性ごとに分類し、切換部が、その履歴の中で分類された画像情報の数が多い属性を示す画像情報ほどその優先度を高く設定する。ここで、画像情報の属性には、タイトル、形式（例えば、映像、メール、音楽）、ジャンルや種類（例えば、映画、教育、ニュース）、及び、情報源の種類（例えば、放送局名、メールの送信者名、ＵＲＬ）が含まれる。画像情報の属性は通常、付加情報としてその画像情報と共に伝送される。履歴の中での属性別の画像情報の数は各属性に対する視聴者の重要度や関心度を表す、とみなせるので、視聴者の重要度や関心度の高い画像情報に高い優先度を自動的に割り当てることができる。
The image control apparatus according to the present invention may include a viewing history acquisition unit that manages a history of image information displayed on a monitor screen. In this case, the switching unit sets the priority of the image information displayed on the monitor screen based on the history held by the viewing history acquisition unit.
Preferably, the viewing history acquisition unit classifies the image information included in the history for each attribute, and the switching unit displays image information indicating an attribute having a large number of image information classified in the history. Set the priority higher. Here, the attributes of the image information include title, format (for example, video, mail, music), genre and type (for example, movie, education, news), and type of information source (for example, broadcast station name, mail). Sender name, URL). The attribute of the image information is usually transmitted as additional information together with the image information. Since the number of image information for each attribute in the history can be regarded as representing the importance and interest of the viewer for each attribute, high priority is automatically assigned to the image information with high importance and interest of the viewer. Can be assigned to.
その他に、視聴履歴取得部が、履歴に含まれている画像情報をそれぞれの情報源ごとに分類し、切換部が、その履歴の中で分類された画像情報の数が多い情報源からの画像情報ほどその優先度を高く設定しても良い。ここで、画像情報の情報源には、送信元（例えば、放送局名、メールの送信者名、ＵＲＬ）、再生装置（例えば、ＤＶＤプレーヤ、次世代ディスクプレーヤ）、及び記録媒体の種類（例えば、ＤＶＤ、ＨＤＤ）が含まれる。画像制御装置は一般に、各画像情報の情報源を、その画像情報の属性からではなくても識別可能である。履歴の中での情報源別の画像情報の数は各情報源に対する視聴者の重要度や関心度を表す、とみなせるので、視聴者の重要度や関心度の高い画像情報に高い優先度を自動的に割り当てることができる。 In addition, the viewing history acquisition unit classifies the image information included in the history for each information source, and the switching unit images from the information source having a large number of image information classified in the history The priority may be set higher for information. Here, the information source of the image information includes a transmission source (for example, broadcast station name, mail sender name, URL), a playback device (for example, a DVD player, a next-generation disc player), and a type of recording medium (for example, , DVD, HDD). In general, the image control apparatus can identify the information source of each image information without using the attribute of the image information. Since the number of image information for each information source in the history can be regarded as representing the importance and interest of the viewer for each information source, high priority is given to the image information with high importance and interest of the viewer. Can be assigned automatically.
本発明による画像制御装置は画像情報の優先度を次のように、視聴者から入力された情報に基づいて設定しても良い。
本発明による画像制御装置は好ましくは、視聴者からの情報を受け付けるユーザプロファイル管理部、を更に有する。その場合、切換部が、視聴者からの情報に基づいて画像情報の優先度を設定する。視聴者からの情報は好ましくは、画像情報の属性、又は情報源を示すデータを含む。視聴者からの情報はその他に、画像情報の優先度を直接的に、又は間接的に設定するデータであっても良い。その場合、視聴者は、重要度、関心度、緊急度、人気度、安全度等、様々な尺度に応じ、画像情報の優先度を属性別又は情報源別等に自由に設定できる。
The image control apparatus according to the present invention may set the priority of image information based on information input from a viewer as follows.
The image control apparatus according to the present invention preferably further includes a user profile management unit that receives information from a viewer. In that case, the switching unit sets the priority of the image information based on information from the viewer. The information from the viewer preferably includes image information attributes or data indicating the information source. In addition, the information from the viewer may be data for setting the priority of the image information directly or indirectly. In this case, the viewer can freely set the priority of the image information for each attribute or information source according to various scales such as importance, interest, urgency, popularity, and safety.
本発明による画像制御装置は上記のとおり、画像情報の切り換えを有限の切換時間内に連続的に又は段階的に行う。それにより、視聴者に画像情報の切り換えを前もって気付かせることができる。更に、切り換え前後の画像情報の優先度に応じて切換時間を調節することにより、切り換えの速さや表示態様の変更パターンを変化させ、視聴者の受ける印象を変化させる。それらの変化から、新たに表示される画像情報の優先度を視聴者が予測できる。その結果、画像情報の切り換えから視聴者の受ける不快感が更に抑制される。従って、本発明による画像制御装置を搭載したＡＶ機器や携帯用電子機器（特にウェアラブルコンピュータ）は、従来の画像制御装置を搭載したものより、操作性が高い。 As described above, the image control apparatus according to the present invention performs switching of image information continuously or stepwise within a finite switching time. As a result, the viewer can be made aware of the switching of the image information in advance. Furthermore, by adjusting the switching time according to the priority of the image information before and after the switching, the switching speed and the display pattern change pattern are changed to change the impression received by the viewer. From these changes, the viewer can predict the priority of newly displayed image information. As a result, the discomfort experienced by the viewer from the switching of the image information is further suppressed. Therefore, AV equipment and portable electronic devices (particularly wearable computers) equipped with the image control apparatus according to the present invention have higher operability than those equipped with a conventional image control apparatus.
以下、本発明の最良の実施形態について、図面を参照しながら説明する。
本発明の実施形態による画像制御装置は好ましくは、携帯用電子機器（特に、携帯電話やウェアラブルコンピュータ）に搭載される。画像制御装置はその他に、テレビジョン受像器やパーソナルコンピュータに内蔵されても良い。画像制御装置は、外部の画像情報提供装置から提供される画像情報を搭載機器のモニタへ出力し、その画面にその画像情報を表示する。画像制御装置は更に、制御対象のモニタを搭載する電子機器とは独立に構成されても良い。特に画像制御装置が、単独のサーバに構築され、又は複数の電子機器やサーバの集合によって構成され、ネットワークを介してユーザ端末のモニタの画面表示を制御しても良い。
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of the invention will be described with reference to the drawings.
The image control apparatus according to the embodiment of the present invention is preferably mounted on a portable electronic device (particularly, a mobile phone or a wearable computer). In addition, the image control apparatus may be incorporated in a television receiver or a personal computer. The image control apparatus outputs the image information provided from the external image information providing apparatus to the monitor of the mounted device, and displays the image information on the screen. Further, the image control apparatus may be configured independently of an electronic device on which a monitor to be controlled is mounted. In particular, the image control apparatus may be constructed on a single server, or may be configured by a collection of a plurality of electronic devices or servers, and may control the screen display on the monitor of the user terminal via the network.
本発明の実施形態による画像制御装置は好ましくは、携帯用電子機器等に内蔵のコンピュータに所定のプログラムを実行させることにより、ソフトウェア的に実現される。ここで、そのプログラムは好ましくは、コンピュータ読み取り可能な記録媒体（フレキシブルディスク、ハードディスク、ＭＯ、ＣＤ、ＤＶＤ、ブルーレイディスク（Blue−ray Disc）等の次世代ディスク、又は半導体メモリ）に記録され、実行時に携帯用電子機器等によってその記録媒体から読み出される。そのプログラムはその他に、電気通信回線（無線でも有線でも良い）、特にＬＡＮやインターネット等のネットワークを経由して携帯用電子機器等に伝送されても良い。
その他に、本発明の実施形態による画像制御装置が、半導体集積回路（ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩ）、専用回路、又は汎用プロセッサによってハードウェア的に実現されても良い。特に、ＦＰＧＡ（Field Programmable Gate Array）やリコンフィギュラブル・プロセッサが利用されても良い。
The image control apparatus according to the embodiment of the present invention is preferably realized by software by causing a computer built in a portable electronic device or the like to execute a predetermined program. Here, the program is preferably recorded on a computer-readable recording medium (next-generation disc such as a flexible disc, hard disk, MO, CD, DVD, or Blu-ray Disc, or semiconductor memory) and executed. Sometimes it is read from the recording medium by a portable electronic device or the like. In addition, the program may be transmitted to a portable electronic device or the like via a telecommunication line (which may be wireless or wired), particularly a network such as a LAN or the Internet.
In addition, the image control apparatus according to the embodiment of the present invention may be realized in hardware by a semiconductor integrated circuit (IC, system LSI, super LSI, ultra LSI), a dedicated circuit, or a general-purpose processor. In particular, an FPGA (Field Programmable Gate Array) or a reconfigurable processor may be used.
図1に、本発明の実施形態による画像制御装置のブロック図を示す。画像制御装置100は、画像情報記憶部1、ユーザプロファイル管理部5、視聴状況取得部7、視聴履歴取得部9、切換部10、及び出力部19を有する。
以下、画像制御装置100の各構成要素について順に説明する。
FIG. 1 shows a block diagram of an image control apparatus according to an embodiment of the present invention. The
Hereinafter, each component of the
画像情報記憶部1は好ましくは、チューナ等の受信部とＨＤＤ等の記録部とを含み、外部の画像情報提供装置200から画像情報を取得して記憶する。
画像情報記憶部1は、好ましくは外部の画像情報提供装置200から画像情報を受信して記憶する。ここで、画像情報提供装置200は好ましくは、放送局、又はネットワーク（ＬＡＮ若しくはインターネット）上のサーバである。画像情報提供装置200から画像制御装置100に提供される画像情報の種類には、好ましくは、テレビジョン放送の番組、テキストデータやＨＴＭＬ（HyperText Markup Language）データ（例えば、Ｗｅｂページ、メール）、及び、映像と音声とから成るマルチメディア形式のデータストリームが含まれる。画像情報記憶部1がネットワーク上のサーバから画像情報を取得する場合、好ましくは、ＰＯＰ３・ＩＭＰ（Post Office Protocol 3 Interface Message Processor）等の電子メールプロトコル、ＨＴＴＰ（HyperText Transfer Protocol）、ＨＴＴＰＳ（Hypertext Transfer Protocol Security）、及びＲＴＰ（Real time Transport Protocol）が利用される。
The image
The image
画像情報記憶部1は好ましくは、画像情報と共に、その画像情報に関する付加情報も合わせて取得して記憶する。付加情報は好ましくはメタデータを含む。メタデータは好ましくはＭＰＥＧ７又はＲＤＦ（Resource Description Framework）で記述されている。付加情報は好ましくは、字幕、画像情報の属性、及び、画像情報の視聴状況に関する情報を含む。ここで、画像情報の属性には、タイトル、形式（例えば、映像、メール、音楽）、ジャンルや種類（例えば、映画、教育、ニュース）、及び、情報源の種類（例えば、放送局名、メールの送信者名、ＵＲＬ）が含まれる。画像情報の視聴状況に関する情報には、画像情報に対する視聴者の注視時間や注視回数、画像情報のモニタへの出力状態、及び、画像情報のモニタの画面への表示態様（例えば、画面全体に対する表示サイズの比率（すなわち、表示比率））を示す情報が含まれる。画像情報の視聴状況に関する情報は、後述の視聴状況取得部7及び視聴履歴取得部9により利用される。
図2に、画像情報記憶部1によって記憶されている付加情報の一例を示す。付加情報の１レコードには、画像情報のタイトル、形式、種類、送信元、注視時間、出力状態、及び表示比率が記載されている。
The image
FIG. 2 shows an example of additional information stored in the image
ユーザプロファイル管理部5は好ましくは、視聴者から予め入力されたユーザプロファイルを管理している。ユーザプロファイルには好ましくは、視聴者の性別、年齢、趣味、嗜好、及び職業が含まれている。ユーザプロファイル管理部5は更に好ましくは、制御対象のモニタを含む電子機器のユーザに加えてその家族等、複数のユーザのユーザプロファイルを、所定のユーザＩＤに対応づけて管理する。その場合、ユーザプロファイル管理部5は好ましくは、その電子機器を画像情報の視聴に使用するユーザから事前に、又はその視聴の開始時に、ユーザＩＤを取得し、そのユーザＩＤに対応するユーザプロファイルを切換部10（特に、優先度テーブル管理部3）に送信する。
The user
視聴状況取得部7は、モニタの画面に表示中の画像情報のそれぞれの視聴状況を検知して切換部10に送信する。視聴状況には好ましくは、「視聴者が現在、画像情報を視聴しているか否か」、及び「現在表示中の画像情報をどれくらいの時間視聴しているか」を示す情報が含まれる。視聴状況取得部7は好ましくはカメラを含む。図5に、カメラの設置態様の一例を示す。図5では、モニタ30の縁にカメラ32が設置されている。視聴状況取得部7はカメラ32を通して視聴者の位置や姿勢を検知する。更に、その結果に基づき、「視聴者が現在、画像情報を視聴しているか否か」を判断し、又は、現在表示中の画像情報を視聴者が視聴し続けている時間を測定する。カメラ32は更に好ましくは、アイカメラである。その場合、視聴状況取得部7はアイカメラ32を通して視聴者の眼球運動を検知する。更に、その眼球運動に基づき、モニタ30の画面に表示された画像情報のそれぞれに対する視聴者の注視状況を監視する。具体的には、視聴状況取得部7は、視聴者がモニタ30のどの位置を注視しているのかを特定し、「特定された位置に表示されている画像情報を視聴者が現在視聴中である」と判断する。視聴状況取得部7はそのような判断を、連続的に、定期的に、又は注視位置の移動量が所定値を超えるごとに繰り返す。それにより、表示中の各画像情報について、（所定時間当たり、又はタイトルごとの）視聴者の注視時間又は注視回数を測定する。こうして得られた視聴状況は、視聴状況取得部7から切換部10（特に、優先度テーブル管理部3と関心度判定部13）及び画像情報記憶部1に、連続的に、定期的に、又は、視聴状況の変化が検出されるごとに送信される。画像情報記憶部1は、視聴状況取得部7から受信した視聴状況（特に注視時間）を付加情報として、画像情報ごとに記憶している（図2参照）。
The viewing status acquisition unit 7 detects the viewing status of each piece of image information being displayed on the monitor screen and transmits it to the
視聴履歴取得部9は、各画像情報のモニタへの出力状態、及びモニタの画面上での表示態様（特に表示比率）を監視する。視聴履歴取得部9により取得された出力状態と表示態様とは画像情報記憶部1に、連続的に、定期的に、又は、出力状態と表示態様との各変化が検出されるごとに送信される。画像情報記憶部1は、視聴履歴取得部9から受信した出力状態及び表示態様（特に表示比率）を付加情報として、画像情報ごとに記憶している（図2参照）。
The viewing history acquisition unit 9 monitors the output state of each image information to the monitor and the display mode (particularly the display ratio) on the monitor screen. The output state and display mode acquired by the viewing history acquisition unit 9 are transmitted to the image
視聴履歴取得部9は更に、モニタに表示された画像情報の履歴を管理する。視聴履歴取得部9は好ましくは、履歴に含まれている画像情報をそれぞれの属性、又は情報源ごとに分類する。ここで、画像情報の情報源には、送信元（例えば、放送局名、メールの送信者名、ＵＲＬ）、再生装置（例えば、ＤＶＤプレーヤ、次世代ディスクプレーヤ）、及び記録媒体の種類（例えば、ＤＶＤ、ＨＤＤ）が含まれる。視聴履歴取得部9は一般に、各画像情報の情報源を、その画像情報の属性からではなくても識別可能である。視聴履歴取得部9は好ましくは、モニタに表示される画像情報が切り換えられるごとに履歴を更新し、更新された履歴を切換部10（特に、優先度テーブル管理部3）に送信する。 The viewing history acquisition unit 9 further manages the history of image information displayed on the monitor. The viewing history acquisition unit 9 preferably classifies the image information included in the history for each attribute or information source. Here, the information source of the image information includes a transmission source (for example, broadcast station name, mail sender name, URL), a playback device (for example, a DVD player, a next-generation disc player), and a type of recording medium (for example, , DVD, HDD). The viewing history acquisition unit 9 can generally identify the information source of each image information without using the attribute of the image information. The viewing history acquisition unit 9 preferably updates the history each time the image information displayed on the monitor is switched, and transmits the updated history to the switching unit 10 (particularly, the priority table management unit 3).
切換部10は、ユーザプロファイル管理部5、視聴状況取得部7、及び視聴履歴取得部9のそれぞれから得られた情報に基づき、モニタの画面への表示に対する優先度を画像情報ごとに設定する。切換部10は更に、画像情報記憶部1から出力部19への画像情報の出力を管理する。特に、画面に第１画像情報が表示されている期間中に画像情報記憶部1から新たな第２画像情報の表示を要求された場合、切換部10は、まず、第１画像情報と第２画像情報との間で優先度を比較し、その比較結果に応じて切換時間を決定する。切換部10は次に、出力部19に対し、第１画像情報から第２画像情報への切り換え方法、すなわち各画像情報の表示態様の切換時間内での変更方法を指定する。
Based on information obtained from each of the user
出力部19はモニタを制御し、画像情報記憶部1から提供される画像情報をモニタに出力する。出力部19は特に、切換部10によって指定された画像情報の切り換え方法に従い、モニタの画面に表示中の第１画像情報と、新たに表示されるべき第２画像情報との各表示態様を、切換時間内に連続的に又は段階的に変更する。
The
以下、切換部10の詳細について説明する。
図1に示されているように、切換部10は好ましくは、優先度テーブル管理部3、重要度判定部11、関心度判定部13、画像情報選択部15、及び切換方法決定部17を含む。
優先度テーブル管理部3は優先度テーブルを管理する。優先度テーブルには、画像情報とその優先度との間の関係が、好ましくは画像情報に対応する付加情報の内容ごとに規定されている。優先度テーブルは好ましくは、ユーザプロファイル管理部5、視聴状況取得部7、及び視聴履歴取得部9のそれぞれから得られた情報に基づいて更新される。優先度テーブルは後述の切換方法決定部17により、画像情報の切り換え方法の決定に利用される。
Details of the switching
As shown in FIG. 1, the switching
The priority table management unit 3 manages the priority table. In the priority table, the relationship between the image information and the priority is preferably defined for each content of the additional information corresponding to the image information. The priority table is preferably updated based on information obtained from each of the user
優先度としては、好ましくは画像情報の重要度と関心度とが設定される。重要度と関心度とは好ましくは、次のように、視聴者のユーザプロファイル、各画像情報に対する視聴状況、及び、モニタの画面に表示された画像情報の履歴に基づき、自動的に設定される。 As the priority, preferably, importance and interest of image information are set. The importance level and the interest level are preferably automatically set based on the viewer's user profile, the viewing status of each image information, and the history of the image information displayed on the monitor screen as follows: .
図3(a)に、優先度テーブルの一例を示す。この優先度テーブルでは、画像情報の種類と重要度との間の関係が規定されている。図3(b)に、優先度テーブルの別の例を示す。この優先度テーブルでは、画像情報の送信元と重要度との間の関係が規定されている。
優先度テーブル管理部3は例えば、視聴者のユーザプロファイルに基づき、視聴者の職業に関連する画像情報の種類を「仕事」に割り当てる。一般的な価値観として、種類「仕事」に属する画像情報の重要度は高いとみなせる。従って、優先度テーブルでは、図3(a)に示されているように、種類「仕事」に属する画像情報の重要度が高く設定される。優先度テーブル管理部3はその他に、視聴者の嗜好に合った種類の画像情報に対し、重要度を高く設定しても良い。このように、視聴者のユーザプロファイルの各項目から一般に重要度や関心度が高いと期待される種類の画像情報に対しては、優先度テーブルでの重要度又は関心度が高く設定される。それにより、それらの画像情報に高い優先度を自動的に割り当てることができる。
FIG. 3 (a) shows an example of the priority table. In this priority table, a relationship between the type of image information and the importance is defined. FIG. 3B shows another example of the priority table. In this priority table, a relationship between the transmission source of image information and the importance is defined.
For example, the priority table management unit 3 assigns the type of image information related to the occupation of the viewer to “work” based on the user profile of the viewer. As general values, the importance of image information belonging to the type “work” can be considered high. Therefore, in the priority table, as shown in FIG. 3A, the importance of the image information belonging to the type “work” is set high. In addition, the priority table management unit 3 may set a higher importance level for image information of a type that suits the viewer's preference. In this way, for each type of image information that is generally expected to have a high importance or interest level from each item of the viewer's user profile, the importance or interest level in the priority table is set high. Thereby, a high priority can be automatically assigned to the image information.
視聴履歴取得部9が、履歴に含まれている画像情報をそれぞれの属性ごとに分類している場合、優先度テーブル管理部3は好ましくは、その履歴の中で分類された画像情報の数が多い属性を示す画像情報ほどその優先度を高く設定する。
例えば、特定のユーザがモニタに、種類「英会話」に属する画像情報を頻繁に表示させている場合、視聴履歴取得部9の管理する履歴では、種類「英会話」に分類された画像情報の数が多い。従って、優先度テーブルでは、図3(a)に示されているように、種類「英会話」に属する画像情報の重要度が高く設定される。
When the viewing history acquisition unit 9 classifies image information included in the history for each attribute, the priority table management unit 3 preferably has the number of image information classified in the history. The priority is set higher for image information indicating more attributes.
For example, when a specific user frequently displays image information belonging to the type “English conversation” on the monitor, the history managed by the viewing history acquisition unit 9 indicates that the number of image information classified into the type “English conversation” is Many. Therefore, in the priority table, as shown in FIG. 3A, the importance of the image information belonging to the type “English conversation” is set high.
視聴履歴取得部9が、履歴に含まれている画像情報をそれぞれの情報源ごとに分類している場合、優先度テーブル管理部3は好ましくは、その履歴の中で分類された画像情報の数が多い情報源からの画像情報ほどその優先度を高く設定する。
例えば、特定のユーザがモニタに、会社の上司や取引先からの画像情報を頻繁に表示させている場合、視聴履歴取得部9の管理する履歴では、送信元が上司やその取引先に分類された画像情報の数が多い。従って、優先度テーブルでは、図3(b)に示されているように、送信元が「上司」や取引先の会社名である画像情報の重要度が高く設定される。
When the viewing history acquisition unit 9 classifies the image information included in the history for each information source, the priority table management unit 3 preferably counts the number of image information classified in the history The higher the priority is, the higher the image information from the information source.
For example, when a specific user frequently displays image information from a company boss or business partner on the monitor, the sender managed by the viewing history acquisition unit 9 is classified as the boss or the business partner. There is a lot of image information. Therefore, in the priority table, as shown in FIG. 3B, the importance of the image information whose sender is “boss” or the company name of the supplier is set high.
画像情報の履歴の中での属性別、又は情報源別の画像情報の数は、各属性や各情報源に対する視聴者の重要度や関心度を表す、とみなせる。従って、視聴者の重要度や関心度の高い画像情報に高い優先度を自動的に割り当てることができる。
尚、優先度テーブル管理部3が更に、ニューラルネットワークやベイジアンネットワークを用いて画像情報の履歴（画像情報がメールである場合はその送受信履歴でも良い）に基づく優先度テーブルの設定を学習し、優先度テーブルを随時最適化しても良い。それにより、画像情報の履歴に基づく優先度の推定精度を更に向上できる。
The number of image information by attribute or information source in the history of image information can be regarded as representing the importance and interest of the viewer for each attribute and each information source. Therefore, a high priority can be automatically assigned to image information having a high degree of importance and interest of the viewer.
The priority table management unit 3 further learns the priority table setting based on the history of image information (if the image information is mail, the transmission / reception history may be used) using a neural network or a Bayesian network. The degree table may be optimized at any time. Thereby, the estimation accuracy of the priority based on the history of image information can be further improved.
優先度テーブル管理部3はその他に、サーバや携帯用電子機器などに保持されているユーザのスケジュールやタスクリストなどに基づき、各種類の画像情報や、各送信元からの画像情報の優先度を設定しても良い。特に、スケジュールに合わせて各画像情報の優先度を経時的に変更しても良い。例えば、種類「仕事」に属する画像情報の重要度が、平日では高く、休日では低く設定されても良い。 In addition, the priority table management unit 3 determines the priority of each type of image information and image information from each transmission source based on the user's schedule and task list held in the server or portable electronic device. May be set. In particular, the priority of each piece of image information may be changed over time according to the schedule. For example, the importance of image information belonging to the type “work” may be set high on weekdays and low on holidays.
図4に、優先度テーブルの更に別の例を示す。この優先度テーブルでは、視聴者の注視時間と関心度との間の関係が規定されている。図4に示されているとおり、優先度テーブル管理部3は、注視時間の長い画像情報ほどその関心度（すなわち、優先度）を高く設定する。画像情報に対する視聴者の注視時間や注視回数は、その画像情報に対する視聴者の重要度や関心度を表す、とみなせるので、視聴者の重要度や関心度の高い画像情報に高い優先度を自動的に割り当てることができる。 FIG. 4 shows still another example of the priority table. In this priority table, a relationship between the viewer's gaze time and the interest level is defined. As shown in FIG. 4, the priority table management unit 3 sets the degree of interest (that is, priority) higher for image information with a longer gaze time. The viewer's gaze time and number of gazes on the image information can be regarded as representing the importance and interest of the viewer on the image information, so a high priority is automatically assigned to the image information with high viewer importance and interest. Can be assigned automatically.
尚、注視時間や注視回数が同じ画像情報の間でも、実際の関心度は視聴者によって一般に異なる。そこで、優先度テーブル管理部3は好ましくは、視聴者ごとに関心度と注視時間（又は注視回数）との間の関係を規定する。すなわち、図4に示されているような優先度テーブルが、ユーザプロファイル管理部5に登録されているユーザごとに設定される。更に、視聴状況取得部7が視聴者の視聴状況の変化を検知するごとに、優先度テーブルが随時更新される。
Note that the actual interest level generally differs depending on the viewer even between image information having the same gaze time and number of gazes. Therefore, the priority table management unit 3 preferably defines the relationship between the interest level and the gaze time (or the number of gazes) for each viewer. That is, a priority table as shown in FIG. 4 is set for each user registered in the user
画像情報の重要度と関心度とは、上記のような自動的な設定の他に、ユーザプロファイル管理部5を通して視聴者により直接的に、又は間接的に設定されても良い。その場合、視聴者は、画像情報の重要度及び関心度を、一般的な価値観、又は、視聴者の職業との関連性若しくは嗜好などに応じて設定できる。更に、重要度と関心度との他に、緊急度、人気度、又は安全度が優先度として設定され得る。ここで、緊急度は画像情報の提供の緊急性を示し、人気度は視聴者又は世間の人々の示す興味の高さを示し、安全度は画像情報に含まれている有害情報（例えば、アダルト情報や暴力情報）の割合を示す。視聴者はその他にも、様々な尺度に応じて画像情報の優先度を属性別又は情報源別等に自由に設定できる。
In addition to the automatic setting as described above, the importance level and the interest level of the image information may be set directly or indirectly by the viewer through the user
重要度判定部11は、画像情報記憶部1に格納されている個々の画像情報について、優先度テーブルに基づいて重要度を判定する。ここで、重要度の判定には、好ましくは、図2に示されている付加情報のうち、タイトル、形式、種類、及び送信元が利用される。
以下、重要度の判定方法の詳細について、画像情報の種類と送信元とに基づく場合を例に挙げて説明する。
The importance determination unit 11 determines the importance of each piece of image information stored in the image
Hereinafter, the details of the importance determination method will be described by taking as an example a case based on the type of image information and the transmission source.
（i）画像情報の種類に基づいた重要度の判定
図3(a)に示されている優先度テーブルでは、画像情報の種類ごとに重要度が設定されている。重要度判定部11は、画像情報記憶部1に格納されている画像情報のそれぞれについて、図3(a)の優先度テーブルを用いて重要度を決定する。例えば図2に示されている、タイトルが「洋画劇場」である画像情報はその種類が映画であるので、重要度が“0”と判定される。同様に、タイトル「英会話」の画像情報の重要度は“30”と判定され、タイトル「日程通知」の画像情報の重要度は“10”と判定され、タイトル「お買い得情報」の画像情報の重要度は“0”と判定される。
(I) Determination of Importance Based on Type of Image Information In the priority table shown in FIG. 3 (a), importance is set for each type of image information. The importance level determination unit 11 determines the importance level for each piece of image information stored in the image
（ii）画像情報の送信元に基づいた重要度の判定
画像情報の送信元は好ましくは、その画像情報を送信した者又は装置の識別子である。例えば、画像情報がテレビジョン放送の番組である場合、その送信元は一般には放送局名である。画像情報がメールである場合、その送信元は、そのメールの「From」ヘッダに示されている送信者名である。画像情報がＷｅｂページに含まれている場合、その送信元はそのサイトのＵＲＬである。
一方、図3(b)に示されている優先度テーブルでは、画像情報の送信元ごとに重要度が設定されている。重要度判定部11は、画像情報記憶部1に格納されている画像情報のそれぞれについて、図3(b)の優先度テーブルを用いて重要度を決定する。例えば図2に示されている、タイトル「洋画劇場」の画像情報はその送信元がＸＸＴＶ（放送局名）であるので、重要度が“10”と判定される。同様に、タイトル「英会話」の画像情報の重要度は“10”と判定され、タイトル「日程通知」の画像情報の重要度は“20”と判定され、タイトル「お買い得情報」の画像情報の重要度は“0”と判定される。
(Ii) Determination of Importance Based on Image Information Transmission Source The image information transmission source is preferably the identifier of the person or apparatus that transmitted the image information. For example, when the image information is a television broadcast program, the transmission source is generally a broadcast station name. When the image information is mail, the sender is the sender name indicated in the “From” header of the mail. When the image information is included in the Web page, the transmission source is the URL of the site.
On the other hand, in the priority table shown in FIG. 3B, importance is set for each transmission source of image information. The importance level determination unit 11 determines the importance level for each piece of image information stored in the image
（iii）重要度の合計
重要度判定部11は好ましくは、上記（i）及び（ii）の両方の判定を行い、それぞれで得られた重要度の合計を各画像情報の重要度として算定する。図6に、そのようにして算定された重要度をテーブルで示す。図6に示されている例の場合、タイトル「英会話」の画像情報の重要度が最も高い。
重要度判定部11は、以上のように判定した重要度を切り換え方法決定部17及び画像情報選択部15に出力する。
(Iii) Total importance level The importance level determination unit 11 preferably performs both determinations (i) and (ii) above, and calculates the total importance level obtained as each level as the importance level of each piece of image information. . FIG. 6 shows the importance calculated in this way in a table. In the example shown in FIG. 6, the image information of the title “English conversation” has the highest importance.
The importance determination unit 11 outputs the importance determined as described above to the switching
関心度判定部13は、画像情報記憶部1に格納されている個々の画像情報について、図4に示されている優先度テーブルに基づいて関心度を判定する。ここで、関心度の判定には、好ましくは、図2に示されている付加情報のうち、注視時間が利用される。図2では、タイトル「洋画劇場」の画像情報に対する視聴者の注視時間が10分であるので、関心度が“30”と判定される。同様に、タイトルが「英会話」、「日程通知」、及び「お買い得情報」である画像情報のそれぞれに対する視聴者の注視時間がいずれも0分であるので、いずれの画像情報の関心度も“0”と判定される。
関心度判定部13は、以上のように判定した関心度を切り換え方法決定部17に出力する。
The interest level determination unit 13 determines the interest level of each piece of image information stored in the image
The interest level determination unit 13 outputs the interest level determined as described above to the switching
画像情報選択部15はまず、重要度判定部11によって算定された各画像情報の重要度に基づき、「出力部19からモニタに現在出力されている画像情報を、別の画像情報に切り換えるべきか否か」を判断する。ここで、その判断は、定期的に行われても、各画像情報の重要度が更新されるごとに行われても、画像情報記憶部1から新たな画像情報の割り込みが要求されるごとに行われても良い。画像情報選択部15は次に、「画像情報の切り換えが必要である」と判断した場合、出力部19からモニタへ現在出力中の画像情報を切り換え対象に決定し、かつ、その画像情報に代わって新たに出力されるべき画像情報を画像情報記憶部1の中から検索する。
First, based on the importance of each piece of image information calculated by the importance determination unit 11, the image information selection unit 15 determines whether the image information currently output from the
画像情報選択部15は好ましくは、まず、画像情報記憶部1に格納されている画像情報のうち、出力待ちの画像情報の中に、出力部19からモニタへ現在出力されている画像情報より重要度の高いものを検索する。そのような画像情報が見つかれば、画像情報選択部15は「画像情報の切り換えの必要がある」と判断し、検索された画像情報の中から最も重要度の高い画像情報を新たな出力対象として選択する。
更に具体的には、次のとおりである。画像情報選択部15はまず、画像情報記憶部1にアクセスし、各画像情報の付加情報に含まれている出力状態を調べる。図2に示されている例では、出力部19からモニタには現在、タイトル「洋画劇場」の画像情報が出力中であり、その他の画像情報は出力待ちである。画像情報選択部15は次に、重要度判定部11から受け取った重要度の判定結果に基づき、現在出力中のタイトル「洋画劇場」の画像情報とその他の画像情報との間で重要度を比較する。図6に示されている例では、タイトル「洋画劇場」の画像情報の重要度は“10”である。一方、タイトル「英会話」の画像情報の重要度は“40”であり、タイトル「洋画劇場」の画像情報はもとより、その他の出力待ちの画像情報のいずれよりも重要度が高い。従って、画像情報選択部15は「画像情報の切り換えが必要である」と判断し、タイトル「洋画劇場」の画像情報を切り換え対象に決定し、かつ、タイトル「英会話」の画像情報を新たな出力対象として選択する。
The image information selection unit 15 is preferably more important than the image information currently output from the
More specifically, it is as follows. The image information selection unit 15 first accesses the image
画像情報選択部15は続いて、切り換え対象の画像情報と新たな出力対象の画像情報とのそれぞれを特定するための情報を出力部19に出力する。尚、出力部19がモニタの画面にマルチウィンドウで複数の画像情報を出力可能である場合、切り換え対象の画像情報、及び新たな出力対象の画像情報はいずれも一つに限定されず、複数であっても良い。
Subsequently, the image information selection unit 15 outputs information for specifying each of the switching target image information and the new output target image information to the
切り換え方法決定部17は、切り換え対象の画像情報（以下、第１画像情報という）から新たな出力対象の画像情報（以下、第２画像情報という）への切り換え方法を決定する。好ましくは、第１画像情報から第２画像情報への切り換え方法は、切換時間Δt、及び、その切換時間Δt内での各画像情報の表示態様の変更パターン（以下、切り換えの種類という）で決まる。ここで、表示態様を表すパラメータ（以下、出力パラメータという）としては、モニタの画面上での表示サイズ、位置、フォーマット、表示時間率、透明度、レイヤの階層、及び音量が利用される。
The switching
（i）切換時間Δt
切り換え方法決定部17は、第１画像情報及び第２画像情報のそれぞれについて、重要度及び関心度に基づいて切換時間Δtを以下のように算定する。
切り換え方法決定部17は予め、関心度及び重要度のそれぞれについて切換時間テーブルを設定する。図7(a)の切換時間テーブルでは、関心度と切換時間Δtとの間の対応関係が設定されている。図7(b)の切換時間テーブルでは、第１画像情報と第２画像情報との間での重要度の差ごとに切換時間Δtが設定されている。
(I) Switching time Δt
The switching
The switching
（a）関心度に基づく切換時間Δtの決定
切り換え方法決定部17はまず、第１画像情報の関心度に基づいて切換時間Δtを決定する。図6によると、第１画像情報（タイトル「洋画劇場」の画像情報）は関心度が“30”である。従って、切り換え方法決定部17は図7(a)の切換時間テーブルに基づき、切換時間Δtを120秒と算定する。
視聴者が高い関心を持って第１画像情報を視聴している場合、第１画像情報が即座に第２画像情報に切り換えられると、視聴者が強い不快感を抱きかねない。しかし、本発明の上記の実施形態では、注視時間の長さから、第１画像情報に対する視聴者の高い関心が推定される場合には関心度が高く設定され、かつ関心度に応じて切換時間Δtが長く設定される。第１画像情報は後述のように、切換時間Δtをかけて第２画像情報に切り換えられるので、その切り換えから視聴者の受ける不快感が緩和される。
(A) Determination of switching time Δt based on interest level First, the switching
When the viewer is watching the first image information with high interest, if the first image information is immediately switched to the second image information, the viewer may have a strong discomfort. However, in the above embodiment of the present invention, when the viewer's high interest in the first image information is estimated from the length of the gaze time, the interest level is set high, and the switching time is set according to the interest level. Δt is set long. As described later, since the first image information is switched to the second image information over a switching time Δt, the discomfort experienced by the viewer is mitigated.
（b）重要度に基づく切換時間Δtの決定
切り換え方法決定部17は次に、第１画像情報と第２画像情報との間で重要度の差を計算し、その差に基づいて切換時間Δtを決定する。図6によると、第１画像情報（タイトル「洋画劇場」の画像情報）は重要度が“10”であり、第２画像情報（タイトル「英会話」の画像情報）は重要度が“40”である。従って、それらの間の重要度の差は“30”である。従って、切り換え方法決定部17は図7(b)の切換時間テーブルに基づき、切換時間Δtを60秒と算定する。
第１画像情報の重要度より第２画像情報の重要度が高いほど、第１画像情報が第２画像情報に速く切り換えられるべきである。本発明の上記の実施形態では、第１画像情報より第２画像情報が視聴者にとって重要であることが推定される場合には、第１画像情報と第２画像情報との間での重要度の差が大きく設定され、かつその差に応じて切換時間Δtが短く設定される。第１画像情報は後述のように、切換時間Δtをかけて第２画像情報に切り換えられるので、その切り換えの速さから視聴者が第２画像情報の重要度を容易に識別できる。その結果、その切り換えから視聴者の受ける不快感が緩和される。
(B) Determination of Switching Time Δt Based on Importance Next, the switching
The higher the importance of the second image information than the importance of the first image information, the faster the first image information should be switched to the second image information. In the above embodiment of the present invention, when it is estimated that the second image information is important to the viewer from the first image information, the importance between the first image information and the second image information is Is set large, and the switching time Δt is set short according to the difference. As described later, since the first image information is switched to the second image information over a switching time Δt, the viewer can easily identify the importance of the second image information from the switching speed. As a result, the discomfort experienced by the viewer from the switching is alleviated.
（c）平均による最終的な切換時間の決定
切り換え方法決定部17は続いて、上記（a）で算出された関心度に基づく切換時間Δt＝120秒と、上記（b）で算出された重要度に基づく切換時間Δt＝60秒とを平均する。それにより、最終的な切換時間Δtを平均値90秒に決定する。
(C) Determining the final switching time by averaging The switching
尚、上記（b）では、第１画像情報及び第２画像情報の間での重要度の差に代え、上記（a）と同様に、各画像情報の重要度そのものと切換時間Δtとの間の対応関係に基づいて切換時間Δtが決定されても良い。
更に、上記（c）では、関心度及び重要度のそれぞれから算定された切換時間の平均値に代え、それらのいずれか一方が最終的な切換時間Δtとして決定されても良い。
In (b) above, instead of the difference in importance between the first image information and the second image information, as in (a) above, between the importance itself of each image information and the switching time Δt. The switching time Δt may be determined based on the corresponding relationship.
Furthermore, in the above (c), instead of the average value of the switching times calculated from the interest level and the importance level, any one of them may be determined as the final switching time Δt.
優先度としては上記の重要度と関心度との他にも、例えば、緊急度、人気度、又は安全度が利用されても良い。すなわち、画像情報記憶部1に格納されている各画像情報に対して緊急度、人気度、又は安全度が予め設定され、第１画像情報と第２画像情報との間でそれらが上記と同様に比較される。それにより、第１画像情報と第２画像情報との間での緊急度、人気度、及び安全度の相違に基づき、切換時間が決定される。例えば、第１画像情報の緊急度が第２画像情報の緊急度より低いほど、緊急度の差が大きくなる。その場合、切換時間Δtが上記のように短く設定される。その結果、本発明の上記の実施形態による画像制御装置は例えば、緊急性の高い画像情報を、視聴中の画像情報の重要度や関心度に関わらず、視聴者に即座に伝えることもできる。
As the priority, in addition to the above-described importance and interest, for example, urgency, popularity, or safety may be used. That is, the degree of urgency, popularity, or safety is set in advance for each piece of image information stored in the image
尚、第１画像情報と第２画像情報との各優先度、又はそれらの差が所定の範囲に収まっている場合、切換時間Δtが一定に設定されても良い。その場合でも、後述のように、切換時間Δt内で各画像情報の表示態様が連続的に又は段階的に変更されることにより、切り換えから視聴者の受ける不快感を和らげることができる。 Note that when the priorities of the first image information and the second image information or the difference between them is within a predetermined range, the switching time Δt may be set to be constant. Even in such a case, the discomfort experienced by the viewer from the switching can be eased by changing the display mode of each image information continuously or stepwise within the switching time Δt, as will be described later.
第１画像情報から第２画像情報への切り換えの種類としては好ましくは、以下の（ii）〜（v）が設定される。
（ii）表示サイズの変更
切り換え方法決定部17は、第１画像情報及び第２画像情報のそれぞれの表示サイズを、以下に示すように、切換時間Δt内での時間の経過に応じて連続的に又は段階的に変更しても良い。図8(a)に、切換時間Δt内で第１画像情報A及び第２画像情報Bのそれぞれの表示サイズが変化する様子を示す。図8(a)に示されているように、最終的な切換時間Δt＝90秒内では時間が30秒経過するごとに、第１画像情報（タイトル「洋画劇場」）Aの表示サイズが、100％、70％、30％、0％というように段階的に縮小される。一方、第２画像情報（タイトル「英会話」）Bの表示サイズが、0％、30％、70％、100％というように段階的に拡大される。その結果、モニタの画面表示が切換時間Δt＝90秒をかけて、第１画像情報Aから第２画像情報Bに段階的に切り換えられる。従って、視聴者が第１画像情報Aを視聴しながらも、その関心を第２画像情報Bへ徐々に移すことが可能である。こうして、第１画像情報から第２画像情報への切り換えから視聴者の受ける不快感を緩和できる。
As types of switching from the first image information to the second image information, the following (ii) to (v) are preferably set.
(Ii) Change of display size The switching
切り換え方法決定部17では好ましくは、切換時間Δt内での各画像情報の表示サイズの時間的変化が予め関数で表されている。すなわち、切り換え方法決定部17は、その関数を用いた演算により、与えられた切換時間Δtから表示サイズの時間的変化を決定する。ここで、その関数は線形関数であっても良い。好ましくは、その関数が図9の実線又は破線で示されているような非線形な関数であっても良い。実線で表されている関数が利用される場合、表示サイズが切換時間の初期では急速に縮小し、その後は緩やかに縮小する。一方、破線で表されている関数が利用される場合、表示サイズが切換時間の前半では緩やかに縮小し、後半では急速に縮小する。その関数は更に、経験的に又は実験的に求められたものでも良い。その上、その関数形（例えば、図9に実線及び破線で示されている各曲線の形状、又は上記の0％、30％、70％、100％というようなステップ）が、重要度や関心度に関わらず一定であっても、それらに応じて変更されても良い。例えば、重要度や関心度の上昇に応じ、0％、50％、90％、100％というように表示サイズの変化を急峻にしても良い。特に第２画像情報の重要度が第１画像情報の重要度より高い場合、切換時間Δtの早い段階で第２画像情報の表示サイズが十分に拡大されれば、第２画像情報が視聴者の注意を引きやすい。その他に、表示サイズの段階的な変更の時間間隔が更に細かく、例えば10秒ごとに、0％、10％、20％、…、100％というように設定されても良い。その変更の時間間隔が重要度や関心度に応じて変更されても良い。
In the switching
（iii）フォーマットの変更
切り換え方法決定部17は、第１画像情報及び第２画像情報のそれぞれのフォーマットを、以下に示すように、切換時間Δt内での時間の経過に応じて連続的に又は段階的に変更しても良い。図8(b)に、切換時間Δt内での第１画像情報A及び第２画像情報Bのそれぞれのフォーマットが変化する様子を示す。図8(b)に示されているように、最終的な切換時間Δt＝90秒内では時間が30秒経過するごとに、第１画像情報（タイトル「洋画劇場」）Aのフォーマットが、動画、静止画、字幕（テキスト）というように変更される。この変更は、画面に表示される第１画像情報Aの情報量の段階的な縮小に相当する。一方、第２画像情報（タイトル「英会話」）Bのフォーマットは、テキスト、静止画、動画というように、情報量が段階的に大きくなるように変更される。従って、切換時間Δt内では視聴者が、第１画像情報Aの視聴を続けながら、第２画像情報Bから受ける情報量を徐々に増やすことができる。こうして、第１画像情報から第２画像情報への切り換えから視聴者の受ける不快感を緩和できる。
(Iii) Format change The switching
フォーマットの変更は、テキスト、静止画、及び動画の３ステップの他に、静止画及び動画の２ステップ（又はその他の組み合わせ）だけでも良い。更に、ステップ数や組み合わせが重要度や関心度に応じて変更されても良い。その上、同じ動画でも精細度が連続的に又は段階的に変更されても良い。その他に、フォーマットの段階的な変更の時間間隔が更に細かく設定されても、重要度や関心度に応じて変更されても良い。例えば、第２画像情報の重要度が第１画像情報の重要度より十分に高い場合、図8(b)とは異なり、第２画像情報が、切り換え開始から20秒後にはテキストで表示され、40秒後には静止画で表示されても良い。それにより、切換時間Δtの早い段階で、第２画像情報が情報量の多いフォーマットで表示されるので、第２画像情報が視聴者の注意を引きやすい。
尚、第１画像情報及び第２画像情報の両方のフォーマットの変更に代え、第２画像情報のフォーマットのみが変更されても良い。
The format change may be only two steps (or other combinations) of still images and moving images, in addition to the three steps of text, still images, and moving images. Furthermore, the number of steps and the combination may be changed according to importance and interest. In addition, the definition may be changed continuously or stepwise even in the same moving image. In addition, the time interval of the stepwise change of the format may be set more finely or may be changed according to the importance level and the interest level. For example, when the importance of the second image information is sufficiently higher than the importance of the first image information, unlike FIG. 8B, the second image information is displayed as
Note that instead of changing the format of both the first image information and the second image information, only the format of the second image information may be changed.
（iv）表示時間率の変更
切り換え方法決定部17は、切換時間Δtを所定の間隔で複数の区間に分割し、第１画像情報及び第２画像情報のそれぞれの表示時間率（一区間当たりの表示時間をその区間の長さに対する比率で表したもの）を区間ごとに変更する。図8(c)に、切換時間Δt内の各区間T1、T2、T3、T4ごとに、第１画像情報A及び第２画像情報Bの表示時間を示す。図8(c)に示されているように、各区間の長さは一律に30秒である。一区間当たりの第１画像情報（タイトル「洋画劇場」）Aの表示時間は、先頭の区間T1から順に、30秒、20秒、10秒、0秒というように段階的に短くなる。一方、一区間当たりの第２画像情報（タイトル「英会話」）Bの表示時間は、先頭の区間T1から順に、10秒、20秒、30秒というように段階的に長くなる。従って、視聴者が第１画像情報Aを視聴しながらも、その関心を第２画像情報Bへ徐々に移すことが可能である。こうして、第１画像情報から第２画像情報への切り換えから視聴者の受ける不快感を緩和できる。
(Iv) Change of display time ratio The switching
一区間当たりの表示時間の伸縮量は、上記の10秒という一定値に代え、切換時間Δt内で変更されても良い。例えば、第１画像情報の表示時間が、30秒、15秒、5秒、0秒というように変更され、第２画像情報の表示時間が、0秒、15秒、25秒、30秒というように変更されても良い。更に、表示時間が重要度や関心度に応じて変更されても良い。例えば、第２画像情報の重要度が第１画像情報の重要度より十分に高い場合、第２区間T2や第３区間T3での第２画像情報の表示時間を長くしても良い。それにより、切換時間Δtの早い段階で、第２画像情報が視聴者の注意を引きやすい。その他に、各区間の長さが、一定値30秒に代え、重要度や関心度に応じて変更されても良い。
尚、図8(c)は次のように、各画像情報の表示サイズが0％と100％との二値間で変更される場合ともみなせる。例えば、第２画像情報Bの表示サイズは、第１区間T1では0％であり、第２区間T2のうち、最初の10秒間では100％であり、続く20秒間では0％である。
The amount of expansion / contraction of the display time per section may be changed within the switching time Δt instead of the constant value of 10 seconds. For example, the display time of the first image information is changed to 30 seconds, 15 seconds, 5 seconds, 0 seconds, and the display time of the second image information is changed to 0 seconds, 15 seconds, 25 seconds, 30 seconds, etc. It may be changed to. Furthermore, the display time may be changed according to the importance level and the interest level. For example, when the importance of the second image information is sufficiently higher than the importance of the first image information, the display time of the second image information in the second section T2 or the third section T3 may be lengthened. Thereby, the second image information can easily draw the viewer's attention at an early stage of the switching time Δt. In addition, the length of each section may be changed according to the importance level or the interest level instead of the fixed value of 30 seconds.
Note that FIG. 8C can be regarded as a case where the display size of each image information is changed between two values of 0% and 100% as follows. For example, the display size of the second image information B is 0% in the first section T1, and is 100% in the first 10 seconds in the second section T2, and 0% in the following 20 seconds.
図8(a)、(b)、(c)では、第１画像情報Aと第２画像情報Bとの各表示が画面上で空間的にも時間的にも重ならない。その他に、第１画像情報Aと第２画像情報Bとが画面上で重ねられても良い。その場合、好ましくは、各画像情報の透明度が切換時間Δt内で連続的に又は段階的に変更される。例えば、切換時間の前半では第２画像情報が第１画像情報の上に薄く表示され、後半ではその逆になる。その他に、各画像情報の表示レイヤの階層が切換時間Δt内で連続的に若しくは段階的に変更されても良い。それにより、二つの表示レイヤの上下が切換時間内で反転を繰り返し、更に、一方の表示レイヤが他方の表示レイヤの上に維持される時間が、連続的に又は段階的に変更されても良い。例えば、切換時間の前半では第１画像情報が第２画像情報より上に表示されている時間が長く、後半では短い。 In FIGS. 8A, 8B, and 8C, the displays of the first image information A and the second image information B do not overlap spatially and temporally on the screen. In addition, the first image information A and the second image information B may be superimposed on the screen. In that case, preferably, the transparency of each piece of image information is changed continuously or stepwise within the switching time Δt. For example, the second image information is displayed lightly on the first image information in the first half of the switching time, and vice versa in the second half. In addition, the display layer hierarchy of each image information may be changed continuously or stepwise within the switching time Δt. Thereby, the upper and lower sides of the two display layers are repeatedly inverted within the switching time, and the time during which one display layer is maintained on the other display layer may be changed continuously or stepwise. . For example, the time during which the first image information is displayed above the second image information is long in the first half of the switching time, and short in the second half.
（v）音量の変更
第１画像情報と第２画像情報とのそれぞれに音声情報が付随している場合、切り換え方法決定部17は、以上の（i）〜（iv）の切り換え方法に加え、第１画像情報及び第２画像情報のそれぞれの表示に伴って再生される音量を、切換時間Δt内での時間の経過に応じて連続的に又は段階的に変更しても良い。図8(d)に、切換時間Δt内で第１画像情報A及び第２画像情報Bのそれぞれの表示に伴う再生音量が変化する様子を示す。図8(d)に示されているように、切換時間Δt内での時間の経過に応じ、第１画像情報（タイトル「洋画劇場」）Aの表示に伴う再生音量が段階的に低減し、第２画像情報（タイトル「英会話」）の表示に伴う再生音量が段階的に増大する。尚、音量の変化速度が重要度や関心度に応じて変更されても良い。
(V) Change of volume When audio information is attached to each of the first image information and the second image information, the switching
切り換え方法決定部17は、第１画像情報から第２画像情報への切り換えの種類を、上記（ii）〜（v）の中から次のように選択する。図10に、切り換えパターンと使用フラグとの間の対応関係を示す。ここで、切り換えパターンとは、第１画像情報と第２画像情報との間での形式の組み合わせをいう。使用フラグとは、切り換えの種類ごとに選択／非選択を示すフラグをいう。図10では、第１使用フラグaが「切換時間Δtを画像情報ごとに変化させるか否か」を示す。第１使用フラグaが“1”の場合は切換時間Δtが画像情報ごとに変化し、“0”の場合は切換時間Δtが画像情報に関わらず所定値に固定される。第２使用フラグb〜第５使用フラグeも同様に、各値が“0”であるか“1”であるかにより、表示サイズ、フォーマット、表示時間率、及び音量の変更の可否を示す。
The switching
図10のテーブルの第１行に示されている切り換えパターン、すなわち、形式「映像（文字データ有り）」に属する第１画像情報が形式「映像（文字データ有り）」に属する第２画像情報へ切り換えられる場合について、更に具体的に説明する。図10のテーブルの第１行に示されているとおり、その切り換えパターンに対しては、第１使用フラグaが“1”である。従って、その切り換えでは、切換時間Δtが、第１画像情報と第２画像情報とのそれぞれの重要度及び関心度に応じて変更される。更に、第４使用フラグdが“1”であるので、切換時間Δt内の区間T1、T2、…ごとに、各画像情報の表示時間率が調節される。その上、第５使用フラグeが“1”であるので、各画像情報に伴う再生音量が切換時間Δt内で段階的に増減される。一方、第２使用フラグbと第３使用フラグcとがいずれも“0”であるので、各画像情報の表示サイズとフォーマットとはいずれも固定される。 The switching pattern shown in the first row of the table of FIG. 10, that is, the first image information belonging to the format “video (with character data)” is changed to the second image information belonging to the format “video (with character data)”. The case of switching will be described more specifically. As shown in the first row of the table of FIG. 10, the first use flag a is “1” for the switching pattern. Therefore, in the switching, the switching time Δt is changed in accordance with the importance level and the interest level of the first image information and the second image information. Further, since the fourth use flag d is “1”, the display time rate of each image information is adjusted for each of the sections T1, T2,... Within the switching time Δt. In addition, since the fifth use flag e is “1”, the playback volume associated with each piece of image information is increased or decreased stepwise within the switching time Δt. On the other hand, since both the second use flag b and the third use flag c are “0”, the display size and the format of each image information are both fixed.
尚、フォーマットの種類や表示時間率の変更パターンが複数種類設定されている場合、対応する使用フラグの取り得る値が“1”、“0”の他にも設定されても良い。例えば、形式「映像（文字データ有り）」の第１画像情報から形式「映像（文字データ有り）」の第２画像情報への切り換えの場合、フォーマットが「動画、静止画、及びテキスト」という３ステップで変化し、形式「映像（文字データ無し）」の第１画像情報から形式「映像（文字データ無し）」の第２画像情報への切り換えの場合、フォーマットが「静止画及びテキスト」という２ステップで変化しても良い。 When a plurality of types of format and display time rate change patterns are set, the values that the corresponding use flag can take may be set in addition to “1” and “0”. For example, in the case of switching from the first image information of the format “video (with character data)” to the second image information of the format “video (with character data)”, the format is “video, still image, and text”. In the case of switching from the first image information of the format “video (no character data)” to the second image information of the format “video (no character data)”, the format changes to “still image and text”. It may change in steps.
以上のように、画像情報の切り換えパターンごとに使用フラグを予め設定しておく。それにより、切り換え方法決定部17が切り換えの種類を容易に選択できる。
切り換え方法決定部17は最後に、選択された切り換えの種類に従い、出力部19に対して設定される出力パラメータの値を、切換時間Δt内に連続的に又は段階的に変更する。
As described above, the use flag is set in advance for each switching pattern of the image information. Thereby, the switching
Finally, the switching
本発明の上記の実施形態による画像制御装置は、以下のように画像情報の切り換えを行う。図11に、画像情報の切り換え処理のフローチャートを示す。
ステップS1：画像情報記憶部1に格納されている画像情報のそれぞれについて、重要度判定部11が重要度の優先度テーブル（図3参照）を用いて重要度を判定し、関心度判定部13が関心度の優先度テーブル（図4参照）を用いて関心度を判定する。
ステップS2：ステップS1で判定された重要度に基づき、画像情報選択部15が「出力部19からモニタへ現在出力されている画像情報を別の画像情報に切り換えることが必要であるか否か」を判断する。
ステップS3：出力されていない画像情報の中に、現在出力中の画像情報（第１画像情報）より重要度の高い画像情報があれば、画像情報選択部15は「切り換えの必要がある」と判断し、処理をステップS4へ進める。それ以外の場合は、切り換え処理が終了する。
ステップS4：画像情報選択部15が、モニタには出力されていない画像情報の中から重要度が最も高い画像情報を第２画像情報として選択する。
ステップS5：切り換え方法決定部17が、重要度及び関心度に基づき、第１画像情報から第２画像情報への切り換えについて、切換時間Δt及び切り換えの種類を決定する。
ステップS6：切り換え方法決定部17により決定された切り換え方法に従い、出力部19が第１画像情報を第２画像情報に切り換える。
The image control apparatus according to the above-described embodiment of the present invention switches image information as follows. FIG. 11 shows a flowchart of the image information switching process.
Step S1: For each piece of image information stored in the image
Step S2: Based on the importance determined in step S1, the image information selection unit 15 “whether it is necessary to switch the image information currently output from the
Step S3: If there is image information that is more important than the currently output image information (first image information) in the image information that has not been output, the image information selection unit 15 indicates that “switching is necessary”. Judge and proceed to step S4. In other cases, the switching process ends.
Step S4: The image information selection unit 15 selects the image information having the highest importance from the image information not output to the monitor as the second image information.
Step S5: The switching
Step S6: According to the switching method determined by the switching
上記の実施形態では、画像情報選択部15が、出力待ちの画像情報の中から重要度の最も高い画像情報を第２画像情報として選択する。その他に、画像情報選択部15が、重要度及び関心度の両方を比較考量し、又はその他の優先度を用い、第２画像情報を選択しても良い。例えば、出力部19がマルチウィンドウなどにより、複数の画像情報をモニタへ同時に出力可能である場合、画像情報選択部15は好ましくは次のように、第１画像情報と第２画像情報とを選択する。まず、モニタに出力中の各画像情報の重要度を優先度テーブルに基づいて決定する。次に、重要度が最も低い画像情報を、表示の中断／中止対象の画像情報（すなわち、第１画像情報）として選択する。ここで、重要度が最も低い画像情報が複数ある場合、それぞれの関心度を優先度テーブルに基づいて決定し、それらの中で関心度が最も低い画像情報を第１画像情報として選択する。一方、出力待ちの画像情報の中に、重要度が最も高い画像情報が複数ある場合、それぞれの関心度を優先度テーブルに基づいて決定し、それらの中で関心度が最も高い画像情報を第２画像情報として選択する。
In the above embodiment, the image information selection unit 15 selects the image information having the highest importance as the second image information from the image information waiting for output. In addition, the image information selection unit 15 may select the second image information by comparing and considering both importance and interest, or using other priorities. For example, when the
上記の実施形態では、切り換え方法決定部17が、第１画像情報から第２画像情報への切換時間Δtを、関心度及び重要度に基づいて決定する。その他に、切り換え方法決定部17が関心度又は重要度のいずれかのみに基づいて切換時間Δtを決定しても良い。また、その他の優先度（例えば、緊急度、安全度）を用いて切換時間Δtを決定しても良い。
In the above embodiment, the switching
上記の実施形態では、図8(a)に示されているように、第１画像情報（タイトル「洋画劇場」）Aがモニタの画面全体に表示されている状態から、第２画像情報（タイトル「英会話」）Bが画面全体に表示されている状態に変更される。その他に、本発明による画像情報の切り換え方法が次のようにマルチウィンドウに適用されても良い。例えば、モニタの画面が４つの領域（ウィンドウ）に分割され、４種類の画像情報が異なるウィンドウに表示されている状況を想定する。いずれか一つのウィンドウに現在表示されている画像情報（第１画像情報）を別の画像情報（第２画像情報）に切り換える場合、画像制御装置は切換時間Δt内に、第１画像情報のそのウィンドウ内での表示サイズを100％から0％に段階的に縮小し、第２画像情報のそのウィンドウ内での表示サイズを0％から100％に段階的に拡大する。 In the above embodiment, as shown in FIG. 8 (a), the first image information (title “Western Theater”) A is displayed on the entire screen of the monitor, and the second image information (title) is displayed. “English conversation”) B is displayed on the entire screen. In addition, the image information switching method according to the present invention may be applied to a multi-window as follows. For example, it is assumed that the monitor screen is divided into four areas (windows) and four types of image information are displayed in different windows. When the image information (first image information) currently displayed in any one window is switched to another image information (second image information), the image control device does not change that of the first image information within the switching time Δt. The display size in the window is gradually reduced from 100% to 0%, and the display size of the second image information in the window is gradually increased from 0% to 100%.
本発明は画像制御装置に関し、上記のとおり、モニタを通して視聴者に提示される画像情報を有限の時間内に連続的に又は段階的に変更する。このように、本発明は明らかに産業上利用可能である。 The present invention relates to an image control apparatus, and as described above, changes image information presented to a viewer through a monitor continuously or stepwise within a finite time. Thus, the present invention is clearly industrially applicable.
1 画像情報記憶部
3 優先度テーブル管理部
5 ユーザプロファイル管理部
7 視聴状況取得部
9 視聴履歴取得部
11 重要度判定部
13 関心度判定部
15 画像情報選択部
17 切り換え方法決定部
19 出力部
100 画像制御装置
200 画像情報提供装置
1 Image information storage
3 Priority table manager
5 User Profile Management Department
7 Viewing Status Acquisition Department
9 Viewing history acquisition unit
11 Importance judgment part
13 Interest determination section
15 Image information selector
17 Switching method decision section
19 Output section
100 Image controller
200 Image information provision device
Claims (15)
前記画面に表示中の第１画像情報と、次に表示されるべき第２画像情報との間で優先度を比較してその比較結果に応じて切換時間を決定し、
前記第１画像情報と前記第２画像情報とのそれぞれの前記画面上での表示態様を前記切換時間内に連続的に又は段階的に変更する切換部、
を有する画像制御装置。 Set the priority for display on the monitor screen for each image information,
The priority is compared between the first image information being displayed on the screen and the second image information to be displayed next, and the switching time is determined according to the comparison result,
A switching unit that changes a display mode of each of the first image information and the second image information on the screen continuously or stepwise within the switching time;
An image control apparatus.
前記切換部が、前記視聴状況取得部によって取得された注視状況に基づき、前記画面に表示された画像情報の優先度を設定する、
請求項１に記載の画像制御装置。 The image control device further includes a viewing status acquisition unit that detects a viewer's eye movement and monitors the viewer's gaze status for each of the image information displayed on the screen based on the eye movement.
The switching unit sets the priority of the image information displayed on the screen based on the gaze situation acquired by the viewing status acquisition unit;
The image control apparatus according to claim 1.
前記切換部が、前記視聴状況取得部によって測定された注視時間が長い画像情報ほどその優先度を高く設定する、
請求項２に記載の画像制御装置。 The viewing status acquisition unit measures the viewer's gaze time for each of the image information displayed on the screen,
The switching unit sets a higher priority for image information with a longer gaze time measured by the viewing status acquisition unit,
The image control apparatus according to claim 2.
前記切換部が、前記視聴状況取得部によって測定された注視回数が多い画像情報ほどその優先度を高く設定する、
請求項２に記載の画像制御装置。 The viewing status acquisition unit measures the viewer's gaze count for each of the image information displayed on the screen;
The switching unit sets a higher priority for image information having a larger number of gazes measured by the viewing status acquisition unit,
The image control apparatus according to claim 2.
前記切換部が、前記視聴履歴取得部によって保持されている履歴に基づき、前記画面に表示された画像情報の優先度を設定する、
請求項１に記載の画像制御装置。 The image control apparatus further includes a viewing history acquisition unit that manages a history of image information displayed on the screen,
The switching unit sets the priority of the image information displayed on the screen based on the history held by the viewing history acquisition unit;
The image control apparatus according to claim 1.
前記切換部が、前記履歴の中で分類された画像情報の数が多い属性を示す画像情報ほどその優先度を高く設定する、
請求項５に記載の画像制御装置。 The viewing history acquisition unit classifies image information included in the history for each attribute,
The switching unit sets a higher priority for image information indicating an attribute having a larger number of image information classified in the history,
The image control apparatus according to claim 5.
前記切換部が、前記履歴の中で分類された画像情報の数が多い情報源からの画像情報ほどその優先度を高く設定する、
請求項５に記載の画像制御装置。 The viewing history acquisition unit classifies the image information included in the history for each information source,
The switching unit sets a higher priority for image information from an information source having a larger number of image information classified in the history.
The image control apparatus according to claim 5.
前記切換部が、前記視聴者からの情報に基づいて画像情報の優先度を設定する、
請求項１に記載の画像制御装置。 The image control apparatus further includes a user profile management unit that receives information from a viewer,
The switching unit sets the priority of image information based on information from the viewer;
The image control apparatus according to claim 1.
前記画面に表示中の第１画像情報と、次に表示されるべき第２画像情報との間で優先度を比較してその比較結果に応じて切換時間を決定するステップ、及び、
前記第１画像情報と前記第２画像情報とのそれぞれの前記画面上での表示態様を前記切換時間内に連続的に又は段階的に変更するステップ、
を有する画像制御方法。 Setting the priority for display on the monitor screen for each image information;
Comparing the priority between the first image information being displayed on the screen and the second image information to be displayed next, and determining the switching time according to the comparison result; and
Changing the display mode of each of the first image information and the second image information on the screen continuously or stepwise within the switching time;
An image control method comprising:
前記画面に表示中の第１画像情報と、次に表示されるべき第２画像情報との間で優先度を比較してその比較結果に応じて切換時間を決定し、
前記第１画像情報と前記第２画像情報とのそれぞれの前記画面上での表示態様を前記切換時間内に連続的に又は段階的に変更する切換部、
としてコンピュータを機能させるための画像制御プログラム。 Set the priority for display on the monitor screen for each image information,
The priority is compared between the first image information being displayed on the screen and the second image information to be displayed next, and the switching time is determined according to the comparison result,
A switching unit that changes a display mode of each of the first image information and the second image information on the screen continuously or stepwise within the switching time;
As an image control program for causing a computer to function.
前記画面に表示中の第１画像情報と、次に表示されるべき第２画像情報との間で優先度を比較してその比較結果に応じて切換時間を決定し、
前記第１画像情報と前記第２画像情報とのそれぞれの前記画面上での表示態様を前記切換時間内に連続的に又は段階的に変更する切換部、
としてコンピュータを機能させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体。 Set the priority for display on the monitor screen for each image information,
The priority is compared between the first image information being displayed on the screen and the second image information to be displayed next, and the switching time is determined according to the comparison result,
A switching unit that changes a display mode of each of the first image information and the second image information on the screen continuously or stepwise within the switching time;
A computer-readable recording medium on which a program for causing a computer to function is recorded.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007132243A JP4977525B2 (en) | 2006-05-25 | 2007-05-18 | Image control apparatus and method, program thereof, and recording medium recording the same |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006145425 | 2006-05-25 | ||
| JP2006145425 | 2006-05-25 | ||
| JP2007132243A JP4977525B2 (en) | 2006-05-25 | 2007-05-18 | Image control apparatus and method, program thereof, and recording medium recording the same |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008004083A true JP2008004083A (en) | 2008-01-10 |
| JP4977525B2 JP4977525B2 (en) | 2012-07-18 |
Family
ID=39008371
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007132243A Expired - Fee Related JP4977525B2 (en) | 2006-05-25 | 2007-05-18 | Image control apparatus and method, program thereof, and recording medium recording the same |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4977525B2 (en) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009184470A (en) * | 2008-02-05 | 2009-08-20 | Honda Motor Co Ltd | Vehicular information display device |
| JP2010118024A (en) * | 2008-11-14 | 2010-05-27 | Aisin Aw Co Ltd | Display control system, display control method and display control program |
| JP2011097438A (en) * | 2009-10-30 | 2011-05-12 | Toshiba Corp | Video receiver and display output method |
| JP2013035546A (en) * | 2012-09-03 | 2013-02-21 | Honda Motor Co Ltd | Information display device for vehicle |
| JP2014219486A (en) * | 2013-05-02 | 2014-11-20 | 株式会社リコー | Display device, display system, and display program |
| JP2015009656A (en) * | 2013-06-28 | 2015-01-19 | 日産自動車株式会社 | Vehicular display device and method |
| JP2016020212A (en) * | 2015-10-21 | 2016-02-04 | 株式会社Ｊｖｃケンウッド | Vehicle information display apparatus, vehicle information display method, and program |
| JPWO2015125626A1 (en) * | 2014-02-20 | 2017-03-30 | ソニー株式会社 | Display control apparatus, display control method, and computer program |
| WO2017077791A1 (en) * | 2015-11-02 | 2017-05-11 | ソニー株式会社 | Notification control device, detection device, notification control system, notification control method, and detection method |
| JP2019128872A (en) * | 2018-01-26 | 2019-08-01 | 富士通株式会社 | Interest level evaluation program, device and method |
| JP2019531019A (en) * | 2016-09-30 | 2019-10-24 | Ｌｉｎｅ株式会社 | Content providing method and system |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0865613A (en) * | 1994-08-23 | 1996-03-08 | Olympus Optical Co Ltd | Electronic alubum system |
| JPH09182062A (en) * | 1995-12-26 | 1997-07-11 | Sigmax Kk | Monitoring device |
| JPH11215498A (en) * | 1998-01-27 | 1999-08-06 | Canon Inc | Image processor, image processing method and program storage medium thereof |
| JP2002305695A (en) * | 2001-04-03 | 2002-10-18 | Canon Inc | Display controller |
| JP2003271274A (en) * | 2002-03-13 | 2003-09-26 | Nissan Motor Co Ltd | Method, system, and device for information presentation |
| JP2005322046A (en) * | 2004-05-10 | 2005-11-17 | Toshiba Corp | Information display device with scroll function |
| JP2005348371A (en) * | 2004-06-07 | 2005-12-15 | Fuji Photo Film Co Ltd | Electronic album display system, electronic album display method, and electronic album display program |
| JP2006260029A (en) * | 2005-03-16 | 2006-09-28 | Casio Comput Co Ltd | Image processor and program |
-
2007
- 2007-05-18 JP JP2007132243A patent/JP4977525B2/en not_active Expired - Fee Related
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0865613A (en) * | 1994-08-23 | 1996-03-08 | Olympus Optical Co Ltd | Electronic alubum system |
| JPH09182062A (en) * | 1995-12-26 | 1997-07-11 | Sigmax Kk | Monitoring device |
| JPH11215498A (en) * | 1998-01-27 | 1999-08-06 | Canon Inc | Image processor, image processing method and program storage medium thereof |
| JP2002305695A (en) * | 2001-04-03 | 2002-10-18 | Canon Inc | Display controller |
| JP2003271274A (en) * | 2002-03-13 | 2003-09-26 | Nissan Motor Co Ltd | Method, system, and device for information presentation |
| JP2005322046A (en) * | 2004-05-10 | 2005-11-17 | Toshiba Corp | Information display device with scroll function |
| JP2005348371A (en) * | 2004-06-07 | 2005-12-15 | Fuji Photo Film Co Ltd | Electronic album display system, electronic album display method, and electronic album display program |
| JP2006260029A (en) * | 2005-03-16 | 2006-09-28 | Casio Comput Co Ltd | Image processor and program |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009184470A (en) * | 2008-02-05 | 2009-08-20 | Honda Motor Co Ltd | Vehicular information display device |
| JP2010118024A (en) * | 2008-11-14 | 2010-05-27 | Aisin Aw Co Ltd | Display control system, display control method and display control program |
| JP2011097438A (en) * | 2009-10-30 | 2011-05-12 | Toshiba Corp | Video receiver and display output method |
| JP2013035546A (en) * | 2012-09-03 | 2013-02-21 | Honda Motor Co Ltd | Information display device for vehicle |
| JP2014219486A (en) * | 2013-05-02 | 2014-11-20 | 株式会社リコー | Display device, display system, and display program |
| JP2015009656A (en) * | 2013-06-28 | 2015-01-19 | 日産自動車株式会社 | Vehicular display device and method |
| US10324294B2 (en) | 2014-02-20 | 2019-06-18 | Sony Corporation | Display control device, display control method, and computer program |
| JPWO2015125626A1 (en) * | 2014-02-20 | 2017-03-30 | ソニー株式会社 | Display control apparatus, display control method, and computer program |
| US10437069B2 (en) | 2014-02-20 | 2019-10-08 | Sony Corporation | Display control device, display control method, and computer program |
| JP2016020212A (en) * | 2015-10-21 | 2016-02-04 | 株式会社Ｊｖｃケンウッド | Vehicle information display apparatus, vehicle information display method, and program |
| WO2017077791A1 (en) * | 2015-11-02 | 2017-05-11 | ソニー株式会社 | Notification control device, detection device, notification control system, notification control method, and detection method |
| US11133952B2 (en) | 2015-11-02 | 2021-09-28 | Sony Corporation | Notification control apparatus, detection apparatus, notification control system, notification control method, and detection method |
| JP2019531019A (en) * | 2016-09-30 | 2019-10-24 | Ｌｉｎｅ株式会社 | Content providing method and system |
| JP2019128872A (en) * | 2018-01-26 | 2019-08-01 | 富士通株式会社 | Interest level evaluation program, device and method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4977525B2 (en) | 2012-07-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4977525B2 (en) | Image control apparatus and method, program thereof, and recording medium recording the same | |
| US20070273926A1 (en) | Device and method for switching between image data objects | |
| US10136187B2 (en) | Methods, systems, and media for presenting a suggestion to watch videos | |
| EP2792156B1 (en) | Supporting multiple attention-based, user-interaction modes | |
| US8368818B2 (en) | Contents read-ahead control device and read-ahead control method | |
| US9461955B1 (en) | Transmission of information during low-bandwidth network service | |
| KR101750337B1 (en) | Method for providing information and apparatus therefor | |
| WO2015136584A1 (en) | Recommended image display system, recommended image output device, and recommended image output method | |
| US20080155602A1 (en) | Method and system for preferred content identification | |
| JP5863661B2 (en) | Assembling stream content for on-demand presentations | |
| JP2005020757A (en) | Context-sensitive television tag | |
| WO2017222589A1 (en) | Methods, systems, and media for recommending content based on network conditions | |
| CN105359479A (en) | Apparatus and method for controlling adaptive streaming of media | |
| US20060161854A1 (en) | Method and apparatus for controlling operation of screen saver during reproduction of content | |
| JP7354411B2 (en) | Predictive-based drop frame handling logic in video playback | |
| WO2012033660A2 (en) | Remote control of television displays | |
| US20110074820A1 (en) | Information displaying device and information displaying method | |
| WO2011051959A1 (en) | Method and apparatus for use with video sequences | |
| US20140115032A1 (en) | Preserving a consumption context for a user session | |
| US11477504B2 (en) | Method and apparatus for redirecting portions of content to alternate communication channels | |
| CN117121463A (en) | Switching between delivery of customizable content and pre-authored media content | |
| JP5792516B2 (en) | Information reproducing terminal, information reproducing method, and program | |
| US10250918B2 (en) | Systems and methods for presenting ambient content on a television display | |
| JP2012015643A (en) | Display device and notification information display system | |
| US20240214641A1 (en) | Modular user interface for video delivery system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100112 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110729 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110809 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111004 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120327 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120416 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150420 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |