JP4628305B2 - Display device selection method, display device selection system, and display device selection program - Google Patents
Display device selection method, display device selection system, and display device selection program Download PDFInfo
- Publication number
- JP4628305B2 JP4628305B2 JP2006130153A JP2006130153A JP4628305B2 JP 4628305 B2 JP4628305 B2 JP 4628305B2 JP 2006130153 A JP2006130153 A JP 2006130153A JP 2006130153 A JP2006130153 A JP 2006130153A JP 4628305 B2 JP4628305 B2 JP 4628305B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- display
- display device
- image
- voice call
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Selective Calling Equipment (AREA)
- Details Of Television Systems (AREA)
Description
本発明は、ネットワークを利用した遠隔制御技術に関し、特に、ネットワークを利用して制御可能な表示機器を選択する技術に関する。 The present invention relates to a remote control technique using a network, and more particularly to a technique for selecting a display device that can be controlled using a network.
ネットワークを利用した遠隔制御システムにおいては制御可能な遠隔機器をユーザに指定させる必要がある。従来の遠隔制御システムでは制御可能な機器の一覧をユーザに対して表示し、その一覧の中から所望の機器を選択させるようにしていた。 In a remote control system using a network, it is necessary for a user to designate a remote device that can be controlled. In the conventional remote control system, a list of devices that can be controlled is displayed to the user, and a desired device is selected from the list.
また、機器単独の操作のみならず、複数の機器による連係動作の一覧をユーザに対して表示し、その一覧の中から所望の連係動作を選択させることで、複数の機器による連係動作を可能にする技術も開示されている(例えば、特許文献1を参照)。
しかしながら、制御可能な機器の一覧をユーザに対して示す場合、その一覧に記載されている機器が実際にどの機器であるのか、ユーザは知ることができない。例えば、電話中に相手の画像を、複数の表示機器の中から目の前にあるテレビに表示したいとユーザが思ったときに、表示機器の一覧にテレビの型番などといった機器の固有番号が複数列挙されていた場合、所望のテレビがどれに当たるのかわからないためにユーザは選択することができないという問題がある。 However, when a list of controllable devices is shown to the user, the user cannot know which device is actually listed in the list. For example, when the user wants to display the other party's image on the television in front of the display device during a phone call, the device list has multiple device-specific numbers such as the TV model number. If it is listed, there is a problem that the user cannot select because the user does not know which TV is desired.
また、複数機器による連係動作の一覧をユーザに対して示す場合も同様に、例えば、2台のテレビにおいて一方のテレビで表示されている映像を他方のテレビに表示させたいとユーザが思ったときに、連係動作の一覧に記載された連係動作と実際の機器とを結びつける情報がユーザに提供されないためにユーザは選択することができないという問題がある。 Similarly, when a list of linked operations by a plurality of devices is shown to the user, for example, when the user wants to display the video displayed on one TV in two TVs on the other TV. In addition, there is a problem that the user cannot select the information because the user is not provided with information that links the linked operation described in the linked operation list with the actual device.
上記のような問題に対し、一覧表示をする際にユーザが予め機器に識別可能な名前を付けておくことも考えられるが、ユーザ自身がこの名前と実際の機器を関連付けて記憶しなければならず、ユーザにとって負担となるという問題がある。 For the above problems, it is conceivable that the user assigns a name that can identify the device in advance when displaying the list. However, the user must store the name in association with the actual device. However, there is a problem that it is a burden on the user.
本発明は、上記問題点に鑑み、ユーザの煩雑な手続きを軽減し、複数の表示機器の中から表示機器の表示能力に合わせて画像を表示させることを課題とする。 In view of the above problems, an object of the present invention is to reduce a user's complicated procedure and display an image in accordance with the display capability of a display device from among a plurality of display devices.
第1の本発明に係る表示機器選択方法は、複数の表示機器とネットワークを介して接続された表示機器選択装置により画像を表示させる表示機器を選択する表示機器選択方法であって、前記表示機器選択装置においては、ユーザ操作受付手段により、操作用のユーザインターフェース(以下、操作UI)を介してユーザからの画像表示の要求を受け付けるステップと、状態管理手段により、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納するステップと、表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納するステップと、操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御するステップと、操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信するステップとを有し、前記表示機器においては、操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納するステップと、操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示するステップと、を有することを特徴とする。 A display device selection method according to a first aspect of the present invention is a display device selection method for selecting a display device for displaying an image by a display device selection device connected to a plurality of display devices via a network, the display device in the selection device, the user operation receiving unit, a user interface for operation (hereinafter, the operation UI) monitoring an image display request Ru accepting step of the user through the state management program, the state of the voice call function When the state of the voice call function is changed as a result of accepting the image display request in conjunction with the voice call operation by the user, information on the image display is displayed along with the current state of the voice call . The step of storing in the storage means and the display device information management means make it possible to display a table of each display device from a plurality of display devices via the network. Receive information about the capability stores the information about the display capability in the second storing means, the display state by receiving information about whether or not the display state is being displayed the image in the respective display devices And a display capability capable of displaying the requested image by referring to the information related to the image display and the information related to the display capability by the operation UI information generation unit. A display device is extracted, operation UI allocation information to which the operation UI of the user operation accepting unit is allocated corresponding to the extracted display device is generated, the operation UI allocation information is stored in a third storage unit, and the extraction is performed. when, and controlling so as to view information about the display state to exclude the display device in the displayed image, the operation UI information transmission unit And transmitting the operation UI allocation information to a corresponding display device. In the display device, the operation UI information reception unit receives the operation UI allocation information transmitted by the operation UI information transmission unit. Storing the operation UI assignment information in a fourth storage means, and displaying the operation UI assigned based on the operation UI assignment information by the operation UI information display means. And
本発明にあっては、表示機器選択装置側では複数の表示機器から表示能力に関する情報を集約して管理しておき、操作UIを介してユーザからの画像表示の要求を受け付けた場合にはその画像表示に関する情報と表示能力に関する情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して操作UIを割り当てる。一方で、割り当てた操作UIに対応した表示機器側では割り当てられた操作UIが表示されるので、ユーザは視覚的に画像表示可能な表示機器と共にその表示機器を選択するための操作UIを認識でき、所望の表示機器を容易に選択することができる。 In the present invention, the display device selection device side collects and manages information related to display capability from a plurality of display devices, and when an image display request is received from the user via the operation UI, A display device having a display capability capable of displaying the requested image is extracted with reference to information relating to image display and information relating to display capability, and an operation UI is assigned to the extracted display device. On the other hand, since the assigned operation UI is displayed on the display device side corresponding to the assigned operation UI, the user can recognize the operation UI for selecting the display device together with the display device capable of visually displaying an image. The desired display device can be easily selected.
本発明にあっては、上記表示機器選択装置において、複数の表示機器からネットワークを介してそれぞれの表示能力に関する情報の他に、その表示機器において画像を表示中であるか否かの表示状態に関する情報を受信し、画像表示に関する情報と表示能力に関する情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御することで、ユーザが所望の表示機器を選択する際に既に画像を表示中の表示機器を誤って選択することが防止できる。 In the present invention, in the display device selection device, in addition to information regarding display capabilities from a plurality of display devices via a network, the display device also relates to a display state indicating whether an image is being displayed on the display device. When information is received and a display device having a display capability capable of displaying the requested image is extracted by referring to the information related to the image display and the information related to the display capability, the image display is referred to based on the information related to the display state. By controlling to exclude the display devices in the middle, it is possible to prevent the user from erroneously selecting a display device that is already displaying an image when selecting a desired display device.
第2の本発明に係る表示機器選択方法は、複数の表示機器とネットワークを介して接続された音声通話端末と通信端末により画像を表示させる表示機器を選択する表示機器選択方法であって、前記音声通話端末においては、ユーザ操作受付手段により、操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付けるステップと、音声通話手段により、音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信するステップとを有し、前記通信端末においては、状態管理手段により、前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納するステップと、表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納するステップと、操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御するステップと、操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信するステップとを有し、前記表示機器においては、操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納するステップと、操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示するステップと、を有することを特徴とする。 A display device selection method according to a second aspect of the present invention is a display device selection method for selecting a display device for displaying an image by a voice call terminal and a communication terminal connected to a plurality of display devices via a network, In the voice call terminal, the user operation accepting means accepts an image display request in conjunction with the voice call operation by the user via the operation UI, and the voice call means accepts the voice according to the voice call operation. information relating to the said image display request performs a call, and a step of transmitting over the network to the communication terminal, in the communication terminal, the state management program, via a network from the voice communication terminal receiving information about the image display, it monitors the state of the voice call function, the image display in conjunction with the operation of the voice call by the user Result of receiving the request, if the state of the voice call function is shifted, and storing along with the current state of the voice information on the image displayed on the first storage means by the display device information management unit, Information on the display capability of each display device is received from a plurality of display devices via the network, and the information on the display capability is stored in the second storage means, and an image is being displayed on each of the display devices. Receiving the information about the display state of whether or not and storing the information about the display state in the second storage means, and the operation UI information generation means refer to the information about the image display and the information about the display capability Then, a display device having a display capability capable of displaying the requested image is extracted, and the user corresponding to the extracted display device is extracted. And generates an operation UI allocation information assigned to the operation UI of work receiving means stores the operation UI assignment information to the third storing means, when the extracted image display in by referring to the information about the display state And a step of transmitting the operation UI allocation information to a corresponding display device by an operation UI information transmitting unit. In the display device, an operation UI information receiving unit is included. Receiving the operation UI allocation information transmitted by the operation UI information transmitting means and storing the operation UI allocation information in a fourth storage means, and the operation UI information display means based on the operation UI allocation information. And displaying the assigned operation UI.
本発明にあっては、音声通話端末において操作UIを介してユーザによる音声通話の操作に連動して画像表示の要求を受け付ける一方で、通信端末において音声端末からネットワークを介して画像表示に関する情報を受信するようにすると共に、複数の表示機器からネットワークを介して表示能力に関する情報を集約して管理しておき、操作UIを介してユーザからの画像表示の要求を受け付けた場合にはその画像表示に関する情報と表示能力に関する情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して操作UIを割り当てる。 According to the present invention, while a voice call terminal accepts an image display request in conjunction with a voice call operation by a user via an operation UI, the communication terminal receives information related to image display from the voice terminal via the network. When receiving a request for image display from the user via the operation UI, the information about the display capability is collected and managed from a plurality of display devices via the network. The display device having the display capability capable of displaying the requested image is extracted with reference to the information on the display capability and the information on the display capability, and an operation UI is assigned to the extracted display device.
一方で、割り当てた操作UIに対応した表示機器側では割り当てられた操作UIが表示されるので、ユーザは視覚的に画像表示可能な表示機器と共にその表示機器を選択するための操作UIを認識でき、所望の表示機器を容易に選択することができる。これにより、例えば通信端末にはネットワーク機器がインターネットに接続するためのゲートウェイ装置を使用し、音声通話端末にはゲートウェイ装置に接続する携帯電話端末を使用して本システムをホームネットワークに応用することができる。 On the other hand, since the assigned operation UI is displayed on the display device side corresponding to the assigned operation UI, the user can recognize the operation UI for selecting the display device together with the display device capable of visually displaying an image. The desired display device can be easily selected. As a result, for example, a communication device uses a gateway device for network equipment to connect to the Internet, and a voice call terminal uses a mobile phone terminal connected to the gateway device to apply this system to a home network. it can.
本発明にあっては、上記通信端末において複数の表示機器からネットワークを介してそれぞれの表示能力に関する情報の他に、その表示機器において画像を表示中であるか否かの表示状態に関する情報を受信し、画像表示に関する情報と表示能力に関する情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御することで、ユーザが所望の表示機器を選択する際に既に画像を表示中の表示機器を誤って選択することが防止できる。 In the present invention, in the communication terminal, in addition to information related to each display capability from a plurality of display devices via a network, information related to a display state indicating whether an image is being displayed on the display device is received. Then, when extracting a display device having a display capability capable of displaying the requested image with reference to the information related to the image display and the information related to the display capability, the image being displayed with reference to the information related to the display state By controlling to exclude the display device, it is possible to prevent the user from erroneously selecting a display device that is already displaying an image when selecting a desired display device.
第3の本発明に係る表示機器選択システムは、複数の表示機器とネットワークを介して接続された表示機器選択装置により画像を表示させる表示機器を選択する表示機器選択システムであって、前記表示機器選択装置は、操作UIを介してユーザからの画像表示の要求を受け付けるユーザ操作受付手段と、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する状態管理手段と、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する表示機器情報管理手段と、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する操作UI情報生成手段と、前記操作UI割り当て情報を対応する表示機器に送信する操作UI情報送信手段とを有し、前記表示機器は、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する操作UI情報受信手段と、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する操作UI情報表示手段と、を有することを特徴とする。 A display device selection system according to a third aspect of the present invention is a display device selection system for selecting a display device for displaying an image by a display device selection device connected to a plurality of display devices via a network, the display device The selection device monitors the status of the voice call function by a user operation accepting unit that accepts an image display request from the user via the operation UI, and accepts the image display request in conjunction with the voice call operation by the user. As a result, when the state of the voice call function transitions, a state management unit that stores information on the image display together with the current state of the voice call in the first storage unit, and a plurality of display devices via the network The information regarding the display capability of each display device is received, the information regarding the display capability is stored in the second storage means, Display device information management means for receiving information relating to the display state whether or not an image is being displayed on the display device and storing the information relating to the display state in the second storage means; information relating to the image display; and Operation UI allocation information in which information relating to display capability is referred to, a display device having a display capability capable of displaying a requested image is extracted, and an operation UI of the user operation reception means is allocated to the extracted display device The operation UI information is generated by storing the operation UI allocation information in the third storage unit and performing the extraction so as to exclude the display device that is displaying the image by referring to the information related to the display state. Generating means, and operation UI information transmitting means for transmitting the operation UI allocation information to a corresponding display device. The display device includes the operation UI information transmitting means. An operation UI information receiving unit that receives the received operation UI allocation information and stores the operation UI allocation information in a fourth storage unit, and an operation UI that displays an operation UI allocated based on the operation UI allocation information And an information display means .
第4の本発明に係る表示機器選択システムは、複数の表示機器とネットワークを介して接続された音声通話端末と通信端末により画像を表示させる表示機器を選択する表示機器選択システムであって、前記音声通話端末は、操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付けるユーザ操作受付手段と、音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信する音声通話手段とを有し、前記通信端末は、前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する状態管理手段と、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する表示機器情報管理手段と、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する操作UI情報生成手段と、前記操作UI割り当て情報を対応する表示機器に送信する操作UI情報送信手段とを有し、前記表示機器は、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する操作UI情報受信手段と、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する操作UI情報表示手段と、を有することを特徴とする。A display device selection system according to a fourth aspect of the present invention is a display device selection system for selecting a display device for displaying an image by a voice call terminal and a communication terminal connected to a plurality of display devices via a network, The voice call terminal performs a voice call in response to the voice call operation and a user operation accepting unit that accepts an image display request in conjunction with the voice call operation by the user via the operation UI. Voice communication means for transmitting information relating to display to the communication terminal via a network, wherein the communication terminal receives information relating to image display from the voice call terminal via the network, and the state of the voice call function When the state of the voice call function is changed as a result of accepting the image display request in conjunction with the voice call operation by the user In addition, status management means for storing information relating to the image display together with the current status of the voice call in the first storage means, and information relating to the display capability of each display device from a plurality of display devices via the network Information relating to the display capability is stored in the second storage means, and information relating to a display state indicating whether an image is being displayed on each display device is received, and information relating to the display state is received in the second storage unit. Display device information management means stored in storage means, information relating to the image display and information relating to the display capability are referred to, a display device having a display capability capable of displaying the requested image is extracted, and the extracted display device The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated corresponding to the operation UI is generated, and the operation UI allocation information is stored in the third storage. Operation UI information generating means for controlling to exclude a display device that is displaying an image by referring to information on the display state when stored in the stage and extracting, and a display device corresponding to the operation UI allocation information An operation UI information transmitting unit that transmits the operation UI information, and the display device receives the operation UI allocation information transmitted by the operation UI information transmission unit and stores the operation UI allocation information in a fourth storage unit. UI information receiving means; and operation UI information display means for displaying an operation UI assigned based on the operation UI assignment information.
第5の本発明に係る表示機器選択プログラムは、複数の表示機器とネットワークを介して接続された表示機器選択装置により画像を表示させる表示機器を選択する表示機器選択プログラムであって、前記表示機器選択装置に、ユーザ操作受付手段により、操作UIを介してユーザからの画像表示の要求を受け付ける処理と、状態管理手段により、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する処理と、表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する処理と、操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する処理と、操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信する処理とを実行させ、前記表示機器に、操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する処理と、操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する処理と、を実行させることを特徴とする。 A display device selection program according to a fifth aspect of the present invention is a display device selection program for selecting a display device for displaying an image by a display device selection device connected to a plurality of display devices via a network, the display device selecting program A process for receiving a request for image display from the user via the operation UI by the user operation accepting means in the selection device, and a state management means for monitoring the state of the voice call function and interlocking with the voice call operation by the user. When the state of the voice call function is changed as a result of receiving the image display request, a process for storing information relating to the image display together with the current state of the voice call in the first storage means, and display device information The management means receives information about the display capability of each display device from a plurality of display devices via the network, and relates to the display capability. Is stored in the second storage means, and information regarding the display state indicating whether an image is being displayed on each display device is received, and the information regarding the display state is stored in the second storage means. A display device having a display capability capable of displaying the requested image is extracted by referring to the information relating to the image display and the information relating to the display capability by the process of storing and the operation UI information generation unit, and the extracted display device The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated is generated in response to the information, and the operation UI allocation information is stored in the third storage unit. The process of controlling to exclude the display device that is displaying an image by referring to the operation UI information transmission means, and the operation UI allocation information is sent to the corresponding display device. And receiving the operation UI allocation information transmitted from the operation UI information transmitting unit by the operation UI information receiving unit, and storing the operation UI allocation information in the fourth storage unit. And a process of displaying an operation UI assigned based on the operation UI assignment information by the operation UI information display means.
第6の本発明に係る表示機器選択プログラムは、複数の表示機器とネットワークを介して接続された音声通話端末と通信端末により画像を表示させる表示機器を選択する表示機器選択プログラムであって、前記音声通話端末に、ユーザ操作受付手段により、操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付ける処理と、音声通話手段により、音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信する処理とを実行させ、前記通信端末に、状態管理手段により、前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する処理と、表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する処理と、操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する処理と、操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信する処理とを実行させ、前記表示機器に、操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する処理と、操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する処理と、を実行させることを特徴とする。A display device selection program according to a sixth aspect of the present invention is a display device selection program for selecting a display device for displaying an image by a voice call terminal and a communication terminal connected to a plurality of display devices via a network. A process for accepting an image display request in conjunction with a voice call operation by the user via the operation UI by the user operation accepting means to the voice call terminal, and a voice call according to the voice call operation by the voice call means. And processing for transmitting the requested information related to the image display to the communication terminal via the network, and causing the communication terminal to display the image from the voice call terminal via the network by the state management unit. The information on the image is received, the state of the voice call function is monitored, and the image display request is linked with the voice call operation by the user. As a result of the reception, when the state of the voice call function is transitioned, a process for storing information related to the image display together with the current state of the voice call in the first storage unit, and a display device information management unit Whether information about the display capability of each display device is received from the device via the network, the information about the display capability is stored in the second storage means, and whether an image is being displayed on each of the display devices A process of receiving information on the display state of the image and storing the information on the display state in the second storage means, and by referring to the information on the image display and the information on the display capability by the operation UI information generation means, A display device having a display capability capable of displaying an image is extracted, and the operation of the user operation accepting unit is performed corresponding to the extracted display device. Operation UI assignment information to which a UI has been assigned is generated, the operation UI assignment information is stored in a third storage unit, and when the extraction is performed, a display device that is displaying an image is excluded by referring to the information regarding the display state And a process of transmitting the operation UI allocation information to a corresponding display device by the operation UI information transmitting unit, and causing the display device to execute the operation UI information by the operation UI information receiving unit. A process of receiving the operation UI allocation information transmitted by the transmission unit and storing the operation UI allocation information in the fourth storage unit, and an operation allocated based on the operation UI allocation information by the operation UI information display unit And a process of displaying a UI.
本発明によれば、ユーザの煩雑な手続きを軽減し、複数の表示機器の中から表示機器の表示能力に合わせて画像を表示させることが可能になる。 ADVANTAGE OF THE INVENTION According to this invention, it becomes possible to reduce a user's complicated procedure and to display an image according to the display capability of a display apparatus among several display apparatuses.
以下、本発明の一実施の形態について、図面を用いて説明する。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
[第1の実施の形態]
図1は、第1の実施の形態に係る表示機器選択システムの全体構成図である。同図に示すように、表示機器選択システムは、表示機器選択装置100としての携帯情報端末と、ネットワークを介して接続された表示機器200としてのテレビ、PC端末、ノートPCを備える。ユーザは表示機器選択装置100により画像を表示させる表示機器を選択する。
[First Embodiment]
FIG. 1 is an overall configuration diagram of a display device selection system according to a first embodiment. As shown in the figure, the display device selection system includes a portable information terminal as the display
以下では、表示機器選択装置100が音声通話機能を備え、各表示機器200が音声通話機能と連動してテレビ電話機能や音声通話中の資料共有を行うための表示アプリケーションを備えた場合の各装置の内部構成について図2のブロック図を用いて説明する。同図に示すように、表示機器選択装置100は、ユーザ操作受付部110と、状態管理部120と、第1の格納部130と、表示機器情報管理部140と、第2の格納部150と、操作UI情報生成部160と、第3の格納部170と、表示機器制御部180とを備える。
In the following, each device when the display
ユーザ操作受付部110は、操作用のユーザインターフェース(以下、操作UIと称する)を介してユーザからの画像表示の要求を受け付ける。ここではユーザに対して操作UIを提供し、ユーザによる音声通話の操作に連動した画像表示の要求などの操作に対応した制御コマンドを発行する。
The user
状態管理部120は、ユーザ操作受付部110が発行する制御コマンドにより制御される音声通話の機能の状態を監視し、ユーザ操作受付部110が画像表示の要求を受け付けた場合には音声通話の現在の状態と共に画像表示に関する情報を含んだ状態情報を生成し、生成した状態情報を管理する。
The
第1の格納部130は、ユーザ操作受付部110が受け付けた画像表示に関する情報を格納しておく。ここでは状態管理部120が生成した状態情報を格納しておく。状態情報は、「待機中」、「通話中」などの音声通話の状態に加え、「WEBページの表示要求」、「テレビ電話開始要求」などの画像表示の要求を受けた場合には、「WEBページの表示要求」に対しては「接続先のURL」、「テレビ電話開始要求」に対しては通話相手のIPアドレス、UDPポート番号、映像コーデックなど画像表示に関する情報を含む。
The
表示機器情報管理部140は、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信する。ここではネットワークを介して接続する3つの表示機器200から表示能力に関する情報として表示機器に実装されている表示アプリケーションの種別を示す表示機器情報を受信し、受信した表示機器情報を管理する。
The display device
第2の格納部150は、表示機器情報管理部140が受信した表示能力に関する情報を格納しておく。ここでは表示機器毎に実装されている表示アプリケーション種別をまとめた表示機器情報リストを格納しておく。
The
操作UI情報生成部160は、画像表示に関する情報及び表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応してユーザ操作受付部110の操作UIを割り当てた操作UI割り当て情報を生成する。ここでは画像表示に関する情報を含んだ状態情報と、表示機器に実装されている表示アプリケーションの種別が記載された表示機器情報リストを参照して、要求された画像表示が可能な表示アプリケーションが実装された表示機器を抽出し、抽出した表示機器に対応してユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成する。
The operation UI
第3の格納部170は、操作UI情報生成部160が生成した操作UI割り当て情報を格納しておく。ここでは操作UI割り当て情報として、抽出された表示機器に実装されたアプリケーションに対応して割り当てられた操作UIが格納される。
The
表示機器制御部180は、操作UI割り当て情報を対応する表示機器に送信する操作UI情報送信手段として機能する。ここでは操作UI割り当て情報に基づいて、表示機器毎にどの操作UIが割り当てられたかを示す操作UI割り当て命令を生成し、ユーザ操作受付部110が発行する制御コマンドに操作UI割り当て命令を追加して対応する表示機器に送信する。
The display
表示機器200は、制御信号受信部210と、第4の格納部220と、出力部230と、表示機器情報送信部240とを備える。
The
制御信号受信部210は、表示機器制御部180が送信した操作UI割り当て情報を受信する操作UI情報受信手段として機能する。ここでは操作UI割り当て情報に基づいた操作UI割り当て命令を含んだ制御コマンドを受信し、受信した操作UI割り当て命令に従ってどの表示アプリケーションがどの操作UIに割り当てられたかを示す操作UI通知情報を生成し、操作UI通知情報を管理する。
The control
第4の格納部220は、制御信号受信部210が受信した操作UI割り当て情報を格納しておく。ここでは受信した操作UI割り当て命令に従って生成された操作UI通知情報を格納しておく。
The
出力部230は、操作UI割り当て情報を基にして割り当てられた操作UIを表示する操作UI情報表示手段として機能する。ここでは操作UI通知情報を基にして、その表示機器においてどの表示アプリケーションがどの操作UIに割り当てられたのかを表示する。
The
表示機器情報送信部240は、表示機器の表示能力に関する情報として表示機器に実装されている表示アプリケーションの種別を示す表示機器情報を送信する。ここで表示アプリケーションは例えばWEBブラウザや動画プレイヤ、テレビ電話用の映像デコーダなど表示機器の出力部230を介して画像データを表示するアプリケーションとする。
The display device
次に、上記構成の表示機器選択システムの動作について図3のシーケンス図を用いて説明する。ここでは表示機器選択装置100により音声通話中のユーザが、表示機器200としてのテレビ、パソコン端末、ノートPCのうちのいずれかにWEBページの画像を表示させる場合について説明する。
Next, the operation of the display device selection system having the above configuration will be described with reference to the sequence diagram of FIG. Here, a case where a user who is making a voice call using the display
ステップ101:表示機器選択装置100側では、ユーザ操作受付部110により、操作UIを介してユーザからの画像表示の要求を受け付けてその画像表示に関する情報を第1の格納部130に格納する。ここでは状態管理部120において音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動してWEBページの画像表示の要求を受け付けた結果、音声通話機能の状態が遷移した場合には状態遷移に応じて状態情報を生成し、生成した状態情報を第1の格納部に格納すると共に操作UI情報生成部160に送信する。このとき、状態情報は、音声通話状態「通話中」、画像表示要求「WEBページの表示要求」に応じた画像表示に関する情報として「接続先のURL」を含んでいる。
Step 101: On the display
ステップ102:ステップ101と同時に、表示機器情報管理部140は、表示機器200から送信される表示機器情報を監視する。
Step 102: Simultaneously with
ステップ103〜105:表示機器情報管理部140により、複数の表示機器200からネットワークを介してそれぞれの表示機器の表示能力に関する表示機器情報を受信してその表示能力に関する情報を第2の格納部150に格納する。ここではテレビ、パソコン端末、ノートPCから表示機器情報として表示機器毎に実装されている表示アプリケーションの種別に関する情報を受信すると、検出された表示機器毎に対応した表示機器情報リストを更新し、更新した表示機器情報リストを操作UI情報生成部160に送信する。
Steps 103 to 105: Display device
図4は、表示機器情報管理部140により生成された表示機器情報リストの一例を示す図である。同図に示すように、テレビには表示アプリケーションとしてWEBブラウザとMPEG2プレイヤが実装され、PC端末にはWEBブラウザとMPEG4デコーダが実装され、ノートPCにはWEBブラウザが実装されている。このようにしてそれぞれの表示機器から送信される表示機器情報を解析し、検出された表示機器と表示アプリケーションを対応付けた形式で表示機器情報リストを生成する。新たな表示機器から表示機器情報を受信した場合には、その内容をすでに生成した表示機器リストに追加する形で更新する。
FIG. 4 is a diagram illustrating an example of the display device information list generated by the display device
ステップ106:操作UI情報生成部160により、画像表示に関する状態情報及び表示能力に関する表示機器情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応してユーザ操作受付部110の操作UIを割り当てた操作UI割り当て情報を生成してその操作UI割り当て情報を第3の格納部170に格納する。ここで操作UI情報生成部が操作UI割り当て情報を生成する処理について図5のフローチャートも参照しながら具体的に説明する。
Step 106: The operation UI
ステップ201〜202:操作UI情報生成部160は、画像表示に関する情報を含んだ音声通話機能の状態情報の受信を待機し、状態管理部120から状態情報を受信した場合には、新たに受信した状態情報を一時記憶する。
ステップ203〜204:一方で、表示機器情報リストの受信を待機し、表示機器情報管理部140から表示機器情報リストを受信した場合には新たに受信した表示器情報リストを一時記憶する。
Steps 203 to 204: On the other hand, the display device information list is awaited to be received, and when the display device information list is received from the display device
ステップ205:状態情報又は表示機器情報リストのうちの少なくともいずれか一方が新たに一時記憶されたかどうかを判定する。いずれも新たに一時記憶されなかった場合には最初のステップ(ステップ201)に戻る。 Step 205: It is determined whether or not at least one of the status information and the display device information list is newly temporarily stored. If neither is temporarily stored, the process returns to the first step (step 201).
ステップ206:状態情報又は表示機器情報リストのうちの少なくともいずれか一方が新たに一時記憶された場合には状態情報に含まれる画像表示に関する情報を参照して、その画像を表示可能な表示機器が実装された表示アプリケーションを表示機器情報リストの中から抽出する。ここでは画像表示に関する情報であるWEBページのURLを示す情報を参照して、WEBページを表示可能なWEBブラウザを表示機器情報リストから抽出する。 Step 206: When at least one of the state information and the display device information list is newly temporarily stored, a display device that can display the image by referring to the information related to the image display included in the state information. The installed display application is extracted from the display device information list. Here, the WEB browser capable of displaying the WEB page is extracted from the display device information list with reference to information indicating the URL of the WEB page, which is information relating to image display.
ステップ207〜208:抽出した表示アプリケーション毎に操作UIを割り当てて、操作UI割り当て情報を生成する。ここでは抽出したWEBブラウザを実装している表示機器と対応付けて操作UIを割り当てる。
ステップ209:ステップ208を実行した後に、再び状態情報と表示機器情報リストを待機する。
Step 209: After executing
図6は、操作UI情報生成部により生成された操作UI割り当て情報の一例を示す図である。同図に示すように、図4の表示機器情報リストからWEBページを表示可能な表示アプリケーションとしてWEBブラウザを抽出し、ここではテレビ、PC端末、ノートPCのいずれの表示機器においても抽出したWEBブラウザが実装されているので、それぞれの表示機器に異なる操作UIとしてボタン1、ボタン2、ボタン3を割り当てている。このように抽出した表示アプリケーションを、表示機器と対応付けた上で、それぞれ別の操作UIに割り当てる。
FIG. 6 is a diagram illustrating an example of operation UI allocation information generated by the operation UI information generation unit. As shown in FIG. 4, a WEB browser is extracted from the display device information list of FIG. 4 as a display application capable of displaying a WEB page. Here, the WEB browser is extracted from any display device of a television, a PC terminal, or a notebook PC. Therefore, button 1,
このように、表示機器選択装置100側では複数の表示機器200から表示機器情報を集約して管理しておき、操作UIを介してユーザからの画像表示の要求を受け付けた場合にはその画像表示に関する状態情報と表示機器情報とを参照して、要求された画像表示が可能な表示アプリケーションを備えた表示機器を抽出し、抽出した表示機器に対応して操作UIを割り当てる。
In this way, the display
次に、再び図3のシーケンス図に戻り、表示機器選択システムにおいて表示機器の動作を中心に説明する。 Next, returning to the sequence diagram of FIG. 3 again, the operation of the display device in the display device selection system will be mainly described.
ステップ107〜109:表示機器選択装置100側の表示機器制御部180により、操作UI情報生成部160が生成した操作UI割り当て情報を対応する表示機器に送信する。ここでは操作UI割り当て情報に基づいて、表示機器毎にどの操作UIを割り当てられたかを示す操作UI割り当て命令を生成し、操作UI割り当て命令を含んだ制御コマンドを対応する表示機器200の制御信号受信部210に送信する。
一方、表示機器200側では、制御信号受信部210により、表示機器制御部180が送信した操作UI割り当て情報を受信して、その操作UI割り当て情報を第4の格納部220に格納する。ここでは操作UI割り当て情報に基づいた操作UI割り当て命令を含んだ制御コマンドを受信し、受信した操作UI割り当て命令に従ってどの表示アプリケーションがどの操作UIに割り当てられたかを示す操作UI通知情報を生成し、操作UI通知情報を第4の格納部220に格納すると共に出力部230に送信する。
On the other hand, on the
ステップ110〜112:出力部230により、操作UI割り当て情報を基にして割り当てられた操作UIを表示する。ここでは受信した操作UI通知情報を基にして、その表示機器におけるどの表示アプリケーションがどの操作UIに割り当てられたのかを出力する。
図7は、図6の操作UI割り当て情報を基に生成された操作UI通知情報を表示機器200において表示した場合の一例である。同図に示すように、操作UIとして「ボタン1」が割り当てられたテレビ画面上に『このテレビにWEBページを表示する場合には「ボタン1」を押してください』の文字が表示される。また、操作UI通知情報はテレビ画面上に限られず、テレビが表示可能な別の表示画面を備えている場合にはそちらの画面に表示させるようにしてもよい。
FIG. 7 is an example when the operation UI notification information generated based on the operation UI allocation information of FIG. 6 is displayed on the
更に、ここでは図示していないが、操作UIとして「ボタン2」が割り当てられたPC端末、「ボタン3」が割り当てられたノートPCにおいても図6の操作UI割り当て情報を基にして同様な操作UI通知情報が表示される。
Further, although not shown here, the same operation is performed on the PC terminal to which “
以上のように、割り当てた操作UIに対応した表示機器200側では割り当てられた操作UIが表示されるので、ユーザは視覚的に画像表示可能な表示機器と共にその表示機器を選択するための操作UIを認識でき、表示機器選択装置100の操作UIを介して所望の表示機器200を容易に選択することができる。
As described above, since the assigned operation UI is displayed on the
以下では表示機器選択システムにおいて所望の表示機器に画像を表示させる動作について引き続き図3のシーケンス図を用いて説明する。 Hereinafter, the operation of displaying an image on a desired display device in the display device selection system will be described with reference to the sequence diagram of FIG.
ステップ113:ユーザが表示機器200に出力された操作UI通知情報を見て表示機器選択装置100の操作UIを操作すると、ユーザ操作受付部110は対応する制御コマンドを発行する。ここではユーザがテレビ、PC端末、ノートPCのそれぞれに表示された操作UI通知情報を見て、テレビにWEBページを表示させるために表示機器選択装置100の「ボタン1」を押すと、ユーザ操作受付部110は選択された操作UIである「ボタン1」に対応した制御コマンドを発行する。
Step 113: When the user looks at the operation UI notification information output to the
ステップ114:表示機器制御部180により、ユーザ操作受付部110が発行した制御コマンドを受信し、選択された操作UIに対応する表示アプリケーションを備えた表示機器に表示命令を送信する。ここでは選択された「ボタン1」に対応したWEBページを表示可能なWEBブラウザを実装したテレビに表示命令を送信する。表示命令には、起動すべき表示アプリケーションの種別としてWEBブラウザ、WEBページの表示に関する情報として接続先のURLが含まれる。
Step 114: The display
ステップ115:ステップ114で表示命令を受信した表示機器は、その表示命令に指定される表示アプリケーションを起動し、所定の画像を出力部230により表示する。ここではテレビにおいてWEBブラウザを起動して、接続先のURLを参照してWEBページを表示する。表示する画像がテレビ電話の場合には映像デコーダを起動してメディア情報を映像デコーダに渡して、相手先から送信される映像データを取得して表示する。
Step 115: The display device that has received the display command in
このようにユーザは煩雑な手続きを必要とすることなく、複数の表示機器の中から表示機器の表示能力に合わせて画像を表示させることができる。 In this way, the user can display an image in accordance with the display capability of the display device from among a plurality of display devices without requiring a complicated procedure.
したがって、第1の実施の形態によれば、表示機器選択装置100側では複数の表示機器から表示能力に関する情報を集約して管理しておき、操作UIを介してユーザからの画像表示の要求を受け付けた場合にはその画像表示に関する情報と表示能力に関する情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して操作UIを割り当てる。一方で、割り当てた操作UIに対応した表示機器200側では割り当てられた操作UIが表示されるので、ユーザは視覚的に画像表示可能な表示機器と共にその表示機器を選択するための操作UIを認識でき、所望の表示機器を容易に選択することができる。
Therefore, according to the first embodiment, the display
例えば、ユーザが電話中に相手の画像を目の前にあるテレビに表示したいと思った場合に、表示可能なテレビ画面に操作すべきユーザインターフェースが表示されるので、ユーザは表示させるテレビを直感的に認識できる。よって、ユーザの煩雑な手続きを軽減し、複数の表示機器の中から表示機器の表示能力に合わせて画像を表示させることが可能になる。 For example, when the user wants to display the other party's image on the TV in front of the user during a phone call, the user interface to be operated is displayed on the TV screen that can be displayed. Can be recognized. Therefore, it is possible to reduce complicated procedures for the user and display an image in accordance with the display capability of the display device from among a plurality of display devices.
また、本実施の形態では、ステップ106において操作UI情報生成部160により操作UI割り当て情報を生成した後に、直ちにステップ107〜109において表示機器制御部180により、操作UI割り当て情報を対応する表示機器に送信するようにしたが、これに限定されるものではなく、例えば、操作UI割り当て情報を対応する表示機器に送信する前に、ユーザに対して操作UI割り当て情報を送信するかどうかを選択させるようにして、ユーザが操作UI割り当て情報の送信を許諾した場合にのみS107以降の処理をさせるようにしてもよい。
In this embodiment, after the operation UI allocation information is generated by the operation UI
[第2の実施の形態]
以下、第2の実施の形態に係る表示機器選択システムについて説明する。
[Second Embodiment]
Hereinafter, a display device selection system according to the second embodiment will be described.
本実施の形態に係る表示機器選択システムの構成は、第1の実施の形態で説明したものと基本的な構成は同様である。第1の実施の形態と異なる点は、図8のブロック図に示すように、表示機器200においては、その表示機器が画像を表示中であるか否かの表示状態に関する表示機器状態情報を送信する表示機器状態送信部250を備えている点である。一方で、表示機器選択装置100においては、表示機器情報管理部140が、複数の表示機器からネットワークを介してそれぞれの表示機器情報の他に、表示機器状態送信部250が送信した表示機器状態情報を受信し、操作UI情報生成部160が、画像表示に関する状態情報及び表示機器情報を参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示機器状態情報を参照して画像表示中の表示機器を除外するように制御する点である。
The basic configuration of the display device selection system according to the present embodiment is the same as that described in the first embodiment. The difference from the first embodiment is that, as shown in the block diagram of FIG. 8, the
以下、表示機器選択システムの動作について図9のシーケンス図を用いて説明する。ここでも第1の実施の形態と同様に、表示機器選択装置100により音声通話中のユーザが、表示機器200としてのテレビ、パソコン端末、ノートPCのうちのいずれかにWEBページの画像を表示させる場合について説明する。
Hereinafter, the operation of the display device selection system will be described with reference to the sequence diagram of FIG. Here, as in the first embodiment, the user who is making a voice call by using the display
ステップ101〜105:第1の実施の形態における図3で説明したものと同様な処理を行う。すなわち、状態管理部120において音声通話の状態を監視し、ユーザ操作受付部110によりユーザからの画像表示の要求を受け付けた場合には画像表示に関する情報を含んだ状態情報を生成し、操作UI情報生成部160に送信する。一方で、表示機器情報管理部140により、ネットワークを介して表示機器200の表示機器情報を受信した場合には表示機器情報リストを更新し、更新した表示機器情報リストを操作UI情報生成部160に送信する。
ステップ301〜304:表示機器選択装置100の表示機器情報管理部140により、複数の表示機器からネットワークを介してそれぞれの表示機器において画像を表示中であるか否かの表示状態に関する表示機器状態情報を受信して第2の格納部150に格納する。ここでは表示機器200の表示機器状態送信部250において表示アプリケーションからの表示機器状態情報を表示機器選択装置100に送信する。一方で、表示機器情報管理部140により、ネットワークを介して表示機器200の表示機器状態情報を受信した場合には表示機器情報リストに表示機器状態情報を追加し、更新した表示機器情報リストを操作UI情報生成部160に送信する。
Steps 301 to 304: Display device state information related to a display state of whether or not an image is being displayed on each display device from a plurality of display devices via the network by the display device
図10は、表示機器状態情報を追加した表示機器情報リストの一例を示す図である。同図に示すように、テレビではWEBブラウザにより画像が表示中であるのに対してMPEG2プレイヤによる画像表示は行われていない。PC端末ではWEBブラウザによる画像表示が行われていないのに対してMPEG4デコーダにより画像が表示中である。ノートPCではWEBブラウザにより画像が表示中である。このように表示機器情報リストにおいてそれぞれの表示機器に実装された表示アプリケーションによる画像の表示状態を示す表示機器状態情報を追加する。 FIG. 10 is a diagram illustrating an example of a display device information list to which display device state information is added. As shown in the figure, on the television, an image is being displayed by the WEB browser, whereas an image is not displayed by the MPEG2 player. While the PC terminal does not display an image with a WEB browser, an image is being displayed with an MPEG4 decoder. In the notebook PC, an image is being displayed by the WEB browser. In this way, display device state information indicating the display state of an image by the display application installed in each display device is added to the display device information list.
ステップ305:操作UI情報生成部160により、画像表示に関する状態情報及び表示能力に関する表示機器情報を参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示状態に関する表示機器状態情報を参照して画像表示中の表示機器を除外するように制御する。ここでは状態情報又は表示機器情報リストのうち少なくとも一方を受信した場合には、状態情報に含まれる画像表示に関する情報を参照して、その画像を表示可能な表示機器が実装された表示アプリケーションを図10の表示機器情報リストの中から抽出する際に、表示機器状態情報を参照して画像表示中であるテレビのWEBブラウザ、PC端末のMPEG4デコーダ、ノートPCのWEBブラウザを除外する。この結果、WEBブラウザが実装されているテレビとPC端末のうち画像表示されていないPC端末のWEBブラウザのみを抽出し、例えば操作UI「ボタン1」を割り当てて操作UI割り当て情報を生成する。
Step 305: When the operation UI
ステップ107〜115:第1の実施の形態における図3で説明したものと同様な処理を行う。
このように表示機器選択装置100において、表示アプリケーションの状態を把握するようにしたことで、予め画像表示中のテレビを対象から外すなどの処理が可能になるので、ユーザが所望の表示機器を選択する際に既に画像を表示中の表示機器を誤って選択することが防止できる。
As described above, since the display
したがって、第2の実施の形態によれば、表示機器選択装置100において、複数の表示機器200からネットワークを介してそれぞれの表示能力に関する表示機器情報の他に、その表示機器において画像を表示中であるか否かの表示状態に関する表示機器状態情報を受信し、画像表示に関する状態情報と表示能力に関する表示機器情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示状態に関する表示機器状態情報を参照して画像表示中の表示機器を除外するように制御することで、第1の実施の形態に加えて、ユーザが所望の表示機器を選択する際に既に画像を表示中の表示機器を誤って選択することが防止できる。
Therefore, according to the second embodiment, the display
[第3の実施の形態]
以下、第3の実施の形態に係る表示機器選択システムについて説明する。
[Third Embodiment]
Hereinafter, a display device selection system according to the third embodiment will be described.
本実施の形態に係る表示機器選択システムの構成は、第1の実施の形態で説明したものと基本的な構成は同様である。図11のシステムの全体構成図に示すように、表示機器選択システムは、音声通話端末100aとしての携帯電話端末と、通信端末100bとしてブロードバンドルータやADSLモデム、ターミナルアダプタなどのゲートウェイ装置と、ネットワークを介して接続された表示機器200としてのテレビ、パソコン端末、ノートPCを備えており、第1の実施の形態と異なる点は、ユーザは第1の実施の形態で示した表示機器選択装置100を音声通話端末100aと通信端末100bで構成し、両端末により表示機器を選択するようにした点である。
The basic configuration of the display device selection system according to the present embodiment is the same as that described in the first embodiment. As shown in the overall configuration diagram of the system in FIG. 11, the display device selection system includes a mobile phone terminal as a
以下では、音声通話端末100aと通信端末100bの構成について図12のブロック図を用いて説明する。同図に示すように、音声通話端末100aは、第1の実施の形態と同様な、ユーザ操作受付部110と、音声通話機能とを備える。
Below, the structure of the
通信端末100bは、第1の実施の形態と同様な、状態管理部120と、第1の格納部130と、表示機器情報管理部140と、第2の格納部150と、操作UI情報生成部160と、第3の格納部170と、表示機器制御部180とを備える。
The
ここで音声通話端末100aと通信端末100bはネットワークを介して接続されており、音声通話端末100aにおける音声通話機能の状態はネットワークを介して通信端末100bの状態管理部120へ送信されると共に、表示機器200を制御するための制御コマンドはユーザ操作受付部110からネットワークを介して通信端末100bの表示機器制御部180へ送信される。
Here, the
表示機器選択システムを上記のような構成としたことで、音声通話端末100aにおいては、ユーザ操作受付部110により、操作UIを介してユーザによる音声通話の操作に連動して画像表示の要求を受け付ける処理と、音声通話機能により、音声通話の操作に応じて音声通話を行うと共に要求されたその画像表示に関する情報をネットワークを介して通信端末100bに送信する処理とが実行される。
By configuring the display device selection system as described above, in the
一方で通信端末100bにおいては、状態管理部120により、音声通話端末100aからネットワークを介して画像表示に関する情報を受信して第1の格納部130に格納する処理が実行される。それ以降の処理については、第1の実施の形態で説明した処理と同様であるので説明を省略する。
On the other hand, in the
したがって、第3の実施の形態によれば、通信端末にはネットワーク機器がインターネットに接続するためのゲートウェイ装置を使用し、音声通話端末にはゲートウェイ装置に接続する携帯電話端末を使用して、両端末により表示機器を選択するようにしたことで、第1の実施の形態と同様な効果に加えて、例えば、表示機器選択システムをホームネットワークに応用することができる。 Therefore, according to the third embodiment, the communication device uses a gateway device for connecting the network device to the Internet, and the voice call terminal uses the mobile phone terminal connected to the gateway device. Since the display device is selected by the terminal, in addition to the same effects as those of the first embodiment, for example, the display device selection system can be applied to the home network.
[第4の実施の形態]
以下、第4の実施の形態に係る表示機器選択システムについて説明する。
[Fourth Embodiment]
The display device selection system according to the fourth embodiment will be described below.
本実施の形態に係る表示機器選択システムの構成は、第3の実施の形態で説明したものと基本的な構成は同様であり、ここでも表示機器選択システムは、音声通話端末100aとしての携帯電話端末と、通信端末100bとしてブロードバンドルータやADSLモデム、ターミナルアダプタなどのゲートウェイ装置と、ネットワークを介して接続された表示機器200としてのテレビ、パソコン端末、ノートPCを備えており、音声通話端末100aと通信端末100bにより表示機器を選択する。
The configuration of the display device selection system according to the present embodiment is the same as the basic configuration described in the third embodiment, and here the display device selection system is also a mobile phone as a
第3の実施の形態と異なる点は、図13のブロック図に示すように、表示機器200が、第2の実施の形態と同様にその表示機器が画像を表示中であるか否かの表示状態に関する表示機器状態情報を送信する表示機器状態送信部250を備えている点である。
The difference from the third embodiment is that, as shown in the block diagram of FIG. 13, the
一方で、通信端末100bでは、表示機器情報管理部140が、複数の表示機器からネットワークを介してそれぞれの表示機器情報の他に、表示機器状態送信部250が送信した表示機器状態情報を受信し、操作UI情報生成部160が、画像表示に関する状態情報及び表示機器情報を参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示機器状態情報を参照して画像表示中の表示機器を除外するように制御する点である。
On the other hand, in the
上記構成の通信端末100bにおける表示機器情報管理部140と操作UI情報生成部160の処理の詳細については、第2の実施の形態で説明した表示機器選択装置100における表示機器情報管理部140による処理(ステップ301〜304)と操作UI情報生成部160による処理(ステップ305)と同様であるのでここでは説明を省略する。
Details of the processing of the display device
したがって、第4の実施の形態によれば、通信端末100bにおいて、複数の表示機器200からネットワークを介してそれぞれの表示能力に関する表示機器情報の他に、その表示機器において画像を表示中であるか否かの表示状態に関する表示機器状態情報を受信し、画像表示に関する状態情報と表示能力に関する表示機器情報とを参照して要求された画像表示が可能な表示能力を備えた表示機器を抽出する際に、表示状態に関する表示機器状態情報を参照して画像表示中の表示機器を除外するように制御することで、第3の実施の形態に加えて、ユーザが所望の表示機器を選択する際に既に画像を表示中の表示機器を誤って選択することが防止できる。
Therefore, according to the fourth embodiment, in the
尚、第3及び第4の実施の形態のように、音声通話端末100aを携帯電話端末とした場合には操作UIとしてはダイヤルボタンを想定すればよいが、操作UIが異なる場合には音声通話端末100aから予め通信端末100bに対して音声通話端末100a自身がどのような操作UIを備えているかを示す情報を通知するような構成にしてもよい。
Note that when the
また、上記実施の形態においては、ユーザからの画像の表示要求としてWEBページの表示要求を受け付けた場合の動作について説明をしたが、ユーザからの画像の表示要求はテレビ電話開始要求であってもよい。以下、テレビ電話開始要求を受け付けた場合の処理について上記各実施の形態と異なる点を中心に説明する。 In the above embodiment, the operation when a web page display request is accepted as an image display request from the user has been described, but the image display request from the user may be a videophone start request. Good. In the following, processing when a videophone start request is accepted will be described focusing on differences from the above embodiments.
ステップ101においては、ユーザ操作受付部110により、ユーザによる音声通話の操作に連動してテレビ電話開始要求を受け付けた結果、音声通話機能の状態が遷移した場合には状態遷移に応じて状態情報を生成し、操作UI情報生成部160に送信する。このとき、状態情報は、音声通話状態「通話中」、画像表示要求「テレビ電話開始要求」に応じた画像表示に関する情報として「通話相手のIPアドレスやUDPポート番号、映像コーデックなどのメディア情報など」を含んでいる。ここでは映像コーデックとしてMPEG4デコーダが指定されているとする。
In
ステップ106においては、操作UI情報生成部160により、画像表示に関する状態情報及び表示器情報リストを参照し、要求されたテレビ電話の画像が表示可能な表示アプリケーションを実装した表示機器を抽出し、抽出した表示機器に対応して操作UI割り当て情報を生成する。図14は、操作UI情報生成部が生成した操作UI割り当て情報の第2の例を示す図である。同図に示すように、図4の表示機器情報リストからテレビ電話の画像を表示可能な表示アプリケーションとしてMPEG4デコーダを抽出し、MPEG4デコーダを実装しているPC端末に対して操作UIとしてボタン1を割り当てている。
In step 106, the operation UI
ステップ110〜112においては、出力部230により、操作UI割り当て情報を基にして割り当てられた操作UIを表示する。図15は、表示機器200において図14の操作UI割り当て情報を基に生成された操作UI通知情報をPC端末に表示した例を示している。同図に示すように、操作UIとして「ボタン1」が割り当てられたPC端末のモニタ上には『このパソコンにテレビ電話の画像を表示する場合には「ボタン1」を押してください』の文字が表示されている。
In
このようにして、ネットワークに接続された表示機器にテレビ電話の画像を表示させる場合においても、操作してほしいユーザインターフェースを表示機器自身に表示させることで、実際にどの機器にテレビ電話の画像が表示できのかをユーザが知ることができる。これにより、ユーザが表示機器選択装置1の「ボタン1」を押した場合には、ステップ115においては、PC端末側で受信した表示命令に指定される表示アプリケーションとしてMPEG4デコーダを起動して、メディア情報をMPEG4デコーダに渡し相手先から送信される映像データを取得してテレビ電話の画像を出力部230に表示する。
In this way, even when a videophone image is displayed on a display device connected to the network, by displaying the user interface desired to be operated on the display device itself, the videophone image is actually displayed on which device. The user can know whether it can be displayed. As a result, when the user presses “button 1” of the display device selection device 1, in
また、上記実施の形態の表示機器選択システムにおいては、表示機器200は、テレビ、パソコン端末、ノートPCの3台としたが、1台以上であればこれに限られるものではない。
In the display device selection system of the above embodiment, three
また、本発明の表示機器選択装置は、上記実施の形態に係る表示機器選択装置の機能を実現する表示機器選択プログラムを記録したフレキシブルディスク、CD−ROM、DVD−ROM、CD−R、CD−RW、MO、HDDなどのコンピュータ読み取り可能な記録媒体をコンピュータに供給し、そのコンピュータの演算手段により記録媒体に記録されたプログラムを読み出して実行することによっても実現できる。 In addition, the display device selection apparatus of the present invention is a flexible disk, CD-ROM, DVD-ROM, CD-R, CD-, on which a display device selection program for realizing the function of the display device selection apparatus according to the above embodiment is recorded. It can also be realized by supplying a computer-readable recording medium such as RW, MO, HDD or the like to a computer, and reading and executing the program recorded on the recording medium by the computing means of the computer.
100…表示機器選択装置
100a…音声通話端末
100b…通信端末
110…ユーザ操作受付部
120…状態管理部
130…第1の格納部
140…表示機器情報管理部
150…第2の格納部
160…操作UI情報生成部
170…第3の格納部
180…表示機器制御部
200…表示機器
210…制御信号受信部
220…第4の格納部
230…出力部
240…表示機器情報送信部
250…表示機器状態送信部
DESCRIPTION OF
Claims (6)
前記表示機器選択装置においては、
ユーザ操作受付手段により、操作用のユーザインターフェース(以下、操作UI)を介してユーザからの画像表示の要求を受け付けるステップと、
状態管理手段により、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納するステップと、
表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納するステップと、
操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御するステップと、
操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信するステップとを有し、
前記表示機器においては、
操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納するステップと、
操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示するステップと、
を有することを特徴とする表示機器選択方法。 A display device selection method for selecting a display device for displaying an image by a display device selection device connected to a plurality of display devices via a network,
In the display device selection device,
By the user operation receiving unit, a user interface for operation (hereinafter, the operation UI) comprising the steps of: accepting an image display request from the user via a
The state management means monitors the state of the voice call function, and if the state of the voice call function is changed as a result of accepting the image display request in conjunction with the voice call operation by the user, Storing the information relating to the image display together with the state of the first storage means;
The display device information management means receives information related to the display capability of each display device from a plurality of display devices via the network, stores the information related to the display capability in the second storage means, and each of the display devices Receiving information on a display state indicating whether or not an image is being displayed in step S2 and storing the information on the display state in the second storage means ;
The operation UI information generation means refers to the information related to the image display and the information related to the display capability, extracts a display device having a display capability capable of displaying the requested image, and corresponds to the extracted display device. The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated is generated, the operation UI allocation information is stored in the third storage unit, and the image display is performed with reference to the information on the display state at the time of the extraction. Controlling to exclude display devices inside ;
A step of transmitting the operation UI allocation information to a corresponding display device by an operation UI information transmitting means;
In the display device,
Receiving the operation UI allocation information transmitted by the operation UI information transmitting means by the operation UI information receiving means and storing the operation UI allocation information in a fourth storage means;
Displaying an operation UI assigned based on the operation UI assignment information by an operation UI information display means;
A display device selection method characterized by comprising:
前記音声通話端末においては、
ユーザ操作受付手段により、操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付けるステップと、
音声通話手段により、音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信するステップとを有し、
前記通信端末においては、
状態管理手段により、前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納するステップと、
表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納するステップと、
操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御するステップと、
操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信するステップとを有し、
前記表示機器においては、
操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納するステップと、
操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示するステップと、
を有することを特徴とする表示機器選択方法。 A display device selection method for selecting a display device for displaying an image by a voice call terminal and a communication terminal connected to a plurality of display devices via a network,
In the voice call terminal,
A step of accepting an image display request in conjunction with a voice call operation by a user via an operation UI by a user operation accepting unit;
The voice communications means, and a step of transmitting information relating to the said image display request performs a voice call, to the communication terminal via the network in response to the operation of the voice call,
In the communication terminal,
Result of receiving information about image display from the voice call terminal via the network by the status management means, monitoring the status of the voice call function, and accepting the image display request in conjunction with the voice call operation by the user Storing the information related to the image display in the first storage means together with the current state of the voice call when the state of the voice call function is changed;
The display device information management means receives information related to the display capability of each display device from a plurality of display devices via the network, stores the information related to the display capability in the second storage means, and each of the display devices Receiving information on a display state indicating whether or not an image is being displayed in step S2 and storing the information on the display state in the second storage means ;
The operation UI information generation means refers to the information related to the image display and the information related to the display capability, extracts a display device having a display capability capable of displaying the requested image, and corresponds to the extracted display device. The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated is generated, the operation UI allocation information is stored in the third storage unit, and the image display is performed with reference to the information on the display state at the time of the extraction. Controlling to exclude display devices inside ;
A step of transmitting the operation UI allocation information to a corresponding display device by an operation UI information transmitting means;
In the display device,
Receiving the operation UI allocation information transmitted by the operation UI information transmitting means by the operation UI information receiving means and storing the operation UI allocation information in a fourth storage means;
Displaying an operation UI assigned based on the operation UI assignment information by an operation UI information display means;
A display device selection method characterized by comprising:
前記表示機器選択装置は、The display device selection device includes:
操作UIを介してユーザからの画像表示の要求を受け付けるユーザ操作受付手段と、User operation accepting means for accepting an image display request from the user via the operation UI;
音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する状態管理手段と、When the state of the voice call function is changed as a result of monitoring the state of the voice call function and accepting the image display request in conjunction with the voice call operation by the user, the image is displayed together with the current state of the voice call. State management means for storing information relating to display in the first storage means;
複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する表示機器情報管理手段と、Information on the display capability of each display device is received from a plurality of display devices via the network, and the information on the display capability is stored in the second storage means, and an image is being displayed on each of the display devices. Display device information management means for receiving information relating to whether or not the display state and storing information relating to the display state in the second storage means;
前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する操作UI情報生成手段と、By referring to the information related to the image display and the information related to the display capability, a display device having a display capability capable of displaying the requested image is extracted, and an operation UI of the user operation accepting unit corresponding to the extracted display device Operation UI assignment information is generated, the operation UI assignment information is stored in the third storage means, and when the extraction is performed, the display device that is displaying an image is excluded by referring to the display state information. Operation UI information generating means for controlling
前記操作UI割り当て情報を対応する表示機器に送信する操作UI情報送信手段とを有し、Operation UI information transmission means for transmitting the operation UI allocation information to a corresponding display device,
前記表示機器は、The display device
前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する操作UI情報受信手段と、An operation UI information receiving means for receiving the operation UI allocation information transmitted by the operation UI information transmitting means and storing the operation UI assignment information in a fourth storage means;
前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する操作UI情報表示手段と、An operation UI information display means for displaying an operation UI assigned based on the operation UI assignment information;
を有することを特徴とする表示機器選択システム。A display device selection system comprising:
前記音声通話端末は、The voice call terminal is
操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付けるユーザ操作受付手段と、User operation accepting means for accepting an image display request in conjunction with a voice call operation by the user via the operation UI;
音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信する音声通話手段とを有し、A voice call means for performing a voice call in response to a voice call operation and transmitting the requested information on the image display to the communication terminal via a network;
前記通信端末は、The communication terminal is
前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する状態管理手段と、As a result of receiving information related to image display from the voice call terminal via the network, monitoring the status of the voice call function, and accepting the image display request in conjunction with the voice call operation by the user, the voice call function State management means for storing information related to the image display in the first storage means together with the current state of the voice call when the state of
複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する表示機器情報管理手段と、Information on the display capability of each display device is received from a plurality of display devices via the network, and the information on the display capability is stored in the second storage means, and an image is being displayed on each of the display devices. Display device information management means for receiving information relating to whether or not the display state and storing information relating to the display state in the second storage means;
前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する操作UI情報生成手段と、By referring to the information related to the image display and the information related to the display capability, a display device having a display capability capable of displaying the requested image is extracted, and an operation UI of the user operation accepting unit corresponding to the extracted display device Operation UI assignment information is generated, the operation UI assignment information is stored in the third storage means, and when the extraction is performed, the display device that is displaying an image is excluded by referring to the display state information. Operation UI information generating means for controlling
前記操作UI割り当て情報を対応する表示機器に送信する操作UI情報送信手段とを有し、Operation UI information transmission means for transmitting the operation UI allocation information to a corresponding display device,
前記表示機器は、The display device
前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する操作UI情報受信手段と、An operation UI information receiving means for receiving the operation UI allocation information transmitted by the operation UI information transmitting means and storing the operation UI assignment information in a fourth storage means;
前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する操作UI情報表示手段と、An operation UI information display means for displaying an operation UI assigned based on the operation UI assignment information;
を有することを特徴とする表示機器選択システム。A display device selection system comprising:
前記表示機器選択装置に、In the display device selection device,
ユーザ操作受付手段により、操作UIを介してユーザからの画像表示の要求を受け付ける処理と、A process of accepting an image display request from a user via an operation UI by a user operation accepting unit;
状態管理手段により、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する処理と、The state management means monitors the state of the voice call function, and if the state of the voice call function is changed as a result of accepting the image display request in conjunction with the voice call operation by the user, A process of storing information relating to the image display together with the state of the first storage means;
表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する処理と、The display device information management means receives information related to the display capability of each display device from a plurality of display devices via the network, stores the information related to the display capability in the second storage means, and each of the display devices Receiving information on a display state indicating whether or not an image is being displayed and storing the information on the display state in the second storage means;
操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する処理と、The operation UI information generation means refers to the information related to the image display and the information related to the display capability, extracts a display device having a display capability capable of displaying the requested image, and corresponds to the extracted display device. The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated is generated, the operation UI allocation information is stored in the third storage unit, and the image display is performed by referring to the information regarding the display state when the extraction is performed. Processing to exclude the display device inside,
操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信する処理とを実行させ、A process of transmitting the operation UI allocation information to a corresponding display device by an operation UI information transmitting unit;
前記表示機器に、In the display device,
操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する処理と、A process of receiving the operation UI allocation information transmitted by the operation UI information transmitting unit and storing the operation UI allocation information in a fourth storage unit by an operation UI information receiving unit;
操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する処理と、A process of displaying an operation UI assigned based on the operation UI assignment information by the operation UI information display means;
を実行させることを特徴とする表示機器選択プログラム。A display device selection program characterized in that
前記音声通話端末に、In the voice call terminal,
ユーザ操作受付手段により、操作UIを介して、ユーザによる音声通話の操作に連動して画像表示の要求を受け付ける処理と、A process of accepting an image display request in conjunction with a voice call operation by a user via an operation UI by a user operation accepting unit;
音声通話手段により、音声通話の操作に応じて音声通話を行うと共に要求された当該画像表示に関する情報を、ネットワークを介して前記通信端末に送信する処理とを実行させ、The voice call means performs a voice call in response to a voice call operation and performs processing for transmitting the requested information on the image display to the communication terminal via a network.
前記通信端末に、In the communication terminal,
状態管理手段により、前記音声通話端末からネットワークを介して画像表示に関する情報を受信し、音声通話機能の状態を監視し、ユーザによる音声通話の操作に連動して前記画像表示の要求を受け付けた結果、前記音声通話機能の状態が遷移した場合に、音声通話の現在の状態と共に前記画像表示に関する情報を第1の格納手段に格納する処理と、Result of receiving information about image display from the voice call terminal via the network by the status management means, monitoring the status of the voice call function, and accepting the image display request in conjunction with the voice call operation by the user Storing the information related to the image display in the first storage means together with the current state of the voice call when the state of the voice call function is changed;
表示機器情報管理手段により、複数の表示機器からネットワークを介してそれぞれの表示機器の表示能力に関する情報を受信して当該表示能力に関する情報を第2の格納手段に格納すると共に、前記それぞれの表示機器において画像を表示中であるか否かの表示状態に関する情報を受信して当該表示状態に関する情報を前記第2の格納手段に格納する処理と、The display device information management means receives information related to the display capability of each display device from a plurality of display devices via the network, stores the information related to the display capability in the second storage means, and each of the display devices Receiving information on a display state indicating whether or not an image is being displayed and storing the information on the display state in the second storage means;
操作UI情報生成手段により、前記画像表示に関する情報及び前記表示能力に関する情報を参照し、要求された画像表示が可能な表示能力を備えた表示機器を抽出し、抽出した表示機器に対応して前記ユーザ操作受付手段の操作UIを割り当てた操作UI割り当て情報を生成して当該操作UI割り当て情報を第3の格納手段に格納し、前記抽出する際に、前記表示状態に関する情報を参照して画像表示中の表示機器を除外するように制御する処理と、The operation UI information generation means refers to the information related to the image display and the information related to the display capability, extracts a display device having a display capability capable of displaying the requested image, and corresponds to the extracted display device. The operation UI allocation information to which the operation UI of the user operation accepting unit is allocated is generated, the operation UI allocation information is stored in the third storage unit, and the image display is performed by referring to the information regarding the display state when the extraction is performed. Processing to exclude the display device inside,
操作UI情報送信手段により、前記操作UI割り当て情報を対応する表示機器に送信する処理とを実行させ、A process of transmitting the operation UI allocation information to a corresponding display device by an operation UI information transmitting unit;
前記表示機器に、In the display device,
操作UI情報受信手段により、前記操作UI情報送信手段が送信した操作UI割り当て情報を受信して当該操作UI割り当て情報を第4の格納手段に格納する処理と、A process of receiving the operation UI allocation information transmitted by the operation UI information transmitting unit and storing the operation UI allocation information in a fourth storage unit by an operation UI information receiving unit;
操作UI情報表示手段により、前記操作UI割り当て情報を基にして割り当てられた操作UIを表示する処理と、A process of displaying an operation UI assigned based on the operation UI assignment information by the operation UI information display means;
を実行させることを特徴とする表示機器選択プログラム。A display device selection program characterized in that
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006130153A JP4628305B2 (en) | 2006-05-09 | 2006-05-09 | Display device selection method, display device selection system, and display device selection program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006130153A JP4628305B2 (en) | 2006-05-09 | 2006-05-09 | Display device selection method, display device selection system, and display device selection program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007304693A JP2007304693A (en) | 2007-11-22 |
JP4628305B2 true JP4628305B2 (en) | 2011-02-09 |
Family
ID=38838592
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006130153A Expired - Fee Related JP4628305B2 (en) | 2006-05-09 | 2006-05-09 | Display device selection method, display device selection system, and display device selection program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4628305B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013069214A1 (en) * | 2011-11-08 | 2013-05-16 | 日本電気株式会社 | Content display terminal selection system |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4996551B2 (en) * | 2008-06-12 | 2012-08-08 | 日本電信電話株式会社 | Relay device and operation method thereof |
JP4640487B2 (en) * | 2008-10-16 | 2011-03-02 | ソニー株式会社 | Information processing apparatus and information processing method |
JP2018142997A (en) * | 2018-05-17 | 2018-09-13 | 株式会社ニコン | Electronic apparatus |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005085110A (en) * | 2003-09-10 | 2005-03-31 | Matsushita Electric Ind Co Ltd | Terminal device and terminal program |
JP2005303423A (en) * | 2004-04-07 | 2005-10-27 | Sony Corp | Control system, controller, control method and program, and recording medium |
-
2006
- 2006-05-09 JP JP2006130153A patent/JP4628305B2/en not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005085110A (en) * | 2003-09-10 | 2005-03-31 | Matsushita Electric Ind Co Ltd | Terminal device and terminal program |
JP2005303423A (en) * | 2004-04-07 | 2005-10-27 | Sony Corp | Control system, controller, control method and program, and recording medium |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013069214A1 (en) * | 2011-11-08 | 2013-05-16 | 日本電気株式会社 | Content display terminal selection system |
JPWO2013069214A1 (en) * | 2011-11-08 | 2015-04-02 | 日本電気株式会社 | Content display terminal selection system |
Also Published As
Publication number | Publication date |
---|---|
JP2007304693A (en) | 2007-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9596431B2 (en) | Transmission system and program | |
JP5927900B2 (en) | Electronics | |
JP2018098795A (en) | Transmission terminal, transmission method and program for transmission | |
CA2831023C (en) | Transmission management system, transmission system, program, program supply system, and maintenance system | |
EP2136531B1 (en) | Processing video communication data | |
US20130050392A1 (en) | Surveillance system and controlling method thereof | |
EP2702762A1 (en) | Transmission terminal, image display control method, image display control program, recording medium, and transmission system | |
CN105659588B (en) | Information processing unit and definitive result providing method | |
JP5561079B2 (en) | Call terminal, call system, call terminal program, and communication method | |
WO2012133863A1 (en) | Transmission management system, transmission system, selection method, program product, program supply system, and maintenance system | |
JP4628305B2 (en) | Display device selection method, display device selection system, and display device selection program | |
JP7017155B2 (en) | Transmission system, first transmission terminal, transmission method, display method, and program | |
JP6661915B2 (en) | Communication management system, communication system, relay device control method, and program | |
EP2845375A1 (en) | Communication terminal, communication function starting method, and computer-readable recording medium | |
JP5966349B2 (en) | Electronics | |
CA2909593A1 (en) | Communications management system and communications management method | |
JP5621516B2 (en) | Remote communication terminal and remote communication program | |
JP2010056966A (en) | Server for transmitting image content, image display device, method of transmitting image content, and method of displaying image | |
JP2005277681A (en) | Communication system and its connection method | |
CN112104649A (en) | Multimedia interaction method and device, electronic equipment, server and storage medium | |
JP2016067003A (en) | Transmission terminal, transmission system, display method, and program | |
JP4996551B2 (en) | Relay device and operation method thereof | |
AU2013297417B2 (en) | Transmission management system, transmission system, and recording medium | |
JP2000333143A (en) | Communication device and object containing software program used to the device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080804 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100810 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100930 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101102 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101109 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131119 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4628305 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |