JP2012109857A - Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium - Google Patents

Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium Download PDF

Info

Publication number
JP2012109857A
JP2012109857A JP2010258006A JP2010258006A JP2012109857A JP 2012109857 A JP2012109857 A JP 2012109857A JP 2010258006 A JP2010258006 A JP 2010258006A JP 2010258006 A JP2010258006 A JP 2010258006A JP 2012109857 A JP2012109857 A JP 2012109857A
Authority
JP
Japan
Prior art keywords
call
voice
television
unit
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010258006A
Other languages
Japanese (ja)
Inventor
Mitsuhiro Nakaizumi
光広 中泉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2010258006A priority Critical patent/JP2012109857A/en
Publication of JP2012109857A publication Critical patent/JP2012109857A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Selective Calling Equipment (AREA)
  • Telephone Function (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To operate a call device through an information processor, and to have a telephone conversation through the call device without picking up the call device.SOLUTION: A television 4 includes: a telephone conversation start/end notice reception part 81 for detecting that a mobile phone 5 has started the telephone conversation in a mobile phone operation mode in which the mobile phone 5 can be operated using a remote controller 16; and a television side telephone conversation control part 83 for, after the telephone conversation start/end notice reception part 81 detects the start of the telephone conversation, receiving voice signals received from a call destination by the mobile phone 5 from the mobile phone 5, transmitting them to a voice output part 86 provided in the remote controller 16, and also transmitting the voice signals received from a voice input part 87 provided in the remote controller 16 to the mobile phone 5 as the voice signals to be transmitted to the call destination.

Description

本発明は、通話を行う通話装置と通信して、該通話装置の動作を制御する情報処理装置等に関する。   The present invention relates to an information processing apparatus or the like that communicates with a call device that performs a call and controls the operation of the call device.

近年の通信技術、情報処理技術や電子デバイスの進歩に伴い、携帯電話機やPDA(Personal Digital Assistant)などの携帯端末は多様化している。特に携帯電話機において、通信キャリアにより提供されるサービスを利用することを前提とした一般的な携帯電話機だけではなく、電子メールやウェブサイトなど、PCと同じサービスを利用可能なスマートフォンが開発されている。   With recent advances in communication technology, information processing technology and electronic devices, mobile terminals such as mobile phones and PDAs (Personal Digital Assistants) are diversifying. Especially in mobile phones, smartphones that can use the same services as PCs, such as e-mails and websites, are being developed, as well as general mobile phones that assume the use of services provided by communication carriers. .

携帯端末は、携帯することを前提としていることから、ユーザが持ち運ぶことが容易であることが望ましい。そのため、携帯端末のサイズを小型化することが求められ、携帯端末が出力する情報を表示するためのディスプレイや、端末操作や文字入力を行うためのキー等のサイズが制限される。この結果、携帯端末では、PCやテレビ等の大きなディスプレイを持つ表示装置と比較すると、ディスプレイのサイズが小さくなる。   Since the portable terminal is assumed to be carried, it is desirable that the user can easily carry it. Therefore, it is required to reduce the size of the mobile terminal, and the size of a display for displaying information output from the mobile terminal, a key for performing terminal operation and character input, and the like are limited. As a result, the portable terminal has a smaller display size than a display device having a large display such as a PC or a television.

よって、携帯端末上で、情報を見易いサイズで表示をしようとすると一覧性を犠牲としなければならなり、一方、一覧性を確保するためには、表示する文字や画像のサイズを小さくしなければならない。このように、携帯端末に表示される情報は、PCやテレビ等の表示装置に表示する場合と比べて、ユーザにとって見難いという問題がある。   Therefore, when trying to display information on a portable terminal in a size that allows easy viewing, the listability must be sacrificed. On the other hand, in order to ensure the listability, the size of displayed characters and images must be reduced. Don't be. As described above, there is a problem that the information displayed on the mobile terminal is difficult for the user to see compared to the case where the information is displayed on a display device such as a PC or a television.

この問題を解決する技術として、携帯端末を大きなディスプレイを持つ表示装置に接続し、携帯端末の出力画像を表示装置に送信し、表示装置に携帯端末の出力画像を表示させる技術がすでに開発されている。例えば、特許文献1には、外部ディスプレイ装置と接続ユニットを介して接続する携帯情報通信装置であって、外部ディスプレイ装置から外部ディスプレイ装置の画面解像度に関する情報を受信し、受信した情報に基づいて、外部ディスプレイ装置に出力する画像を作成し、作成した画像を外部ディスプレイに出力する携帯情報通信装置が記載されている。   As a technology for solving this problem, a technology for connecting a mobile terminal to a display device having a large display, transmitting an output image of the mobile terminal to the display device, and displaying the output image of the mobile terminal on the display device has already been developed. Yes. For example, Patent Document 1 is a portable information communication device that is connected to an external display device via a connection unit, receives information about the screen resolution of the external display device from the external display device, and based on the received information, A portable information communication device that creates an image to be output to an external display device and outputs the created image to an external display is described.

しかしながら、上述のような従来技術は、リモートコントローラ等の表示装置を操作するための操作機器によって、表示装置に表示されている携帯端末の出力画像を編集または変更したり、表示装置に表示されている携帯端末の出力画像が示す情報に対して応答したりすることができないという問題がある。   However, the conventional technology as described above edits or changes the output image of the mobile terminal displayed on the display device, or displays it on the display device, using an operation device for operating the display device such as a remote controller. There is a problem that it is impossible to respond to information indicated by an output image of a portable terminal.

具体的には、携帯端末の出力画像を表示装置に表示している場合であっても、表示装置に表示されている携帯端末の出力画像を編集または変更したり、表示装置に表示されている携帯端末の出力画像が示す情報に対して応答したりするためには、ユーザは、携帯端末を操作しなければならない。すなわち、表示装置に表示されている画像のうち、携帯端末の出力画像以外の画像に対しては、表示装置を操作するための操作機器によって応答し、表示装置に表示されている画像のうち、携帯端末の出力画像に対しては、携帯端末を操作することによって応答しなければならない。   Specifically, even when the output image of the mobile terminal is displayed on the display device, the output image of the mobile terminal displayed on the display device is edited or changed, or is displayed on the display device. In order to respond to the information indicated by the output image of the mobile terminal, the user must operate the mobile terminal. That is, among the images displayed on the display device, an image other than the output image of the mobile terminal responds by an operating device for operating the display device, and among the images displayed on the display device, It is necessary to respond to the output image of the mobile terminal by operating the mobile terminal.

そのため、ユーザは、表示装置に表示されている画像に対して、表示装置を操作するための操作機器および携帯端末の操作部の2つの操作手段を操作しなければならず、ユーザにとって操作が非常に煩雑である。   Therefore, the user has to operate two operation means of the operation device for operating the display device and the operation unit of the mobile terminal with respect to the image displayed on the display device. It is complicated.

特許第3872502号公報(登録日:2006年10月27日)Japanese Patent No. 3872502 (Registration date: October 27, 2006)

このような問題点を解決する方法としては、例えば携帯端末の動作制御が可能なように表示装置を構成することが考えられる。より具体的には、表示装置に対して行われた入力操作と、携帯端末の入力操作とを対応付けておき、表示装置が入力操作を検出したときに、その入力操作に対応する、携帯端末の入力操作が行われたことを示す制御信号を、その携帯端末に送信することが考えられる。   As a method for solving such problems, for example, it is conceivable to configure the display device so that the operation of the mobile terminal can be controlled. More specifically, the input operation performed on the display device and the input operation of the mobile terminal are associated with each other, and the mobile device corresponds to the input operation when the display device detects the input operation. It is conceivable that a control signal indicating that the input operation is performed is transmitted to the portable terminal.

このような方法によれば、表示装置を操作するための操作機器を操作することによって、携帯端末を動作させることができて便利である。   According to such a method, it is convenient that the portable terminal can be operated by operating an operating device for operating the display device.

また、このような方法によれば、携帯端末が通話機能を有している場合、携帯端末に着信があったときに、表示装置を操作するための操作機器を操作して、電話を受けることができるように構成することもできる。   Also, according to such a method, when the mobile terminal has a call function, when the mobile terminal receives an incoming call, it operates the operating device for operating the display device to receive a call. It can also be configured to be able to.

しかしながら、携帯端末で通話を行う場合には、ユーザは携帯端末を手に取る必要があるため、表示装置を操作するための操作機器を操作して電話を受けた後、この操作機器を携帯端末に持ち替えるという手間が生じる。   However, when making a call on a mobile terminal, the user needs to pick up the mobile terminal, so after operating the operation device for operating the display device to receive a call, the operation device is connected to the mobile terminal. There is a trouble of changing to a new one.

すなわち、操作機器を操作して携帯端末の操作を行うことを可能にするのみでは、通話時には依然として携帯端末を手に取らなければならず、ユーザに煩雑な動作を強いることになるという問題がある。   That is, there is a problem that only by enabling the operation of the mobile terminal by operating the operating device, the mobile terminal must still be picked up during a call, and the user is forced to perform complicated operations. .

本発明は、上記の問題点に鑑みてなされたものであり、その目的は、自装置を介して携帯端末等の通話装置の操作を行うことができるとともに、通話装置を手に取ることなく、その通話装置を介した通話を可能にする情報処理装置等を提供することにある。   The present invention has been made in view of the above-described problems, and its purpose is to operate a communication device such as a portable terminal via its own device, and without taking the call device. An object of the present invention is to provide an information processing apparatus or the like that enables a telephone call via the communication apparatus.

本発明の情報処理装置は、上記課題を解決するために、遠隔操作装置から受信した制御信号に従って処理を行う通常動作モードと、遠隔操作装置から受信した制御信号に基づき、該制御信号に予め対応付けられた、通話装置の動作を制御するための通話装置制御信号を生成して該通話装置に送信する通話装置制御モードとを有する情報処理装置であって、自装置が上記通話装置制御モードとなっている状態において、上記通話装置が通話を開始したことを検出する通話検出手段と、上記通話検出手段が通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、自装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送手段と、上記通話検出手段が通話の開始を検出した後、自装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送手段とを備えていることを特徴としている。   In order to solve the above problems, the information processing apparatus according to the present invention corresponds in advance to a normal operation mode in which processing is performed according to a control signal received from a remote control device and a control signal received from the remote control device. A communication device control mode for generating a communication device control signal for controlling the operation of the communication device and transmitting the communication device control signal to the communication device. In the state, the call detecting means for detecting that the call device has started a call, and after the call detection means detects the start of the call, the call device receives the voice signal received from the call destination. Received voice transfer means for receiving from the apparatus and transmitting to the voice output apparatus provided in the own apparatus or the remote control apparatus for outputting voice, and the call detection means detects the start of the call. After that, the audio signal received from the audio input device that generates the audio signal corresponding to the input audio provided in the own device or the remote operation device is transmitted to the call device as the audio signal to be transmitted to the call destination. And a transmission voice transfer means.

また、本発明の情報処理装置の制御方法は、上記課題を解決するために、遠隔操作装置から受信した制御信号に従って処理を行う通常動作モードと、遠隔操作装置から受信した制御信号に基づき、該制御信号に予め対応付けられた、通話装置の動作を制御するための通話装置制御信号を生成して該通話装置に送信する通話装置制御モードとを有する情報処理装置の制御方法であって、上記情報処理装置が上記通話装置制御モードとなっている状態において、上記通話装置が通話を開始したことを検出する通話検出ステップと、上記通話検出ステップで通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、上記情報処理装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送ステップと、上記通話検出ステップで通話の開始を検出した後、上記情報処理装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送ステップとを含むことを特徴としている。   Further, in order to solve the above problems, the control method of the information processing apparatus of the present invention is based on the normal operation mode in which processing is performed according to the control signal received from the remote operation device and the control signal received from the remote operation device. A method for controlling an information processing apparatus, comprising: a communication device control mode that generates a communication device control signal that is associated with a control signal in advance and controls the operation of the communication device, and transmits the communication device control signal to the communication device. In a state where the information processing device is in the call device control mode, a call detection step for detecting that the call device has started a call, and after detecting the start of the call in the call detection step, the call device The voice signal received from the call destination is received from the call device and transmitted to the voice output device that outputs the voice provided in the information processing device or the remote control device. The voice received from the voice input device that generates the voice signal corresponding to the input voice provided in the information processing apparatus or the remote control device after detecting the start of the call in the received voice transfer step and the call detection step A transmission voice transfer step of transmitting a signal to the call device as a voice signal to be transmitted to the call destination.

上記の構成によれば、情報処理装置が通話装置制御モードとなっている状態において、通話開始を検出した後、通話装置が通話先から受信した音声信号を受信して、音声出力装置に送信するとともに、音声入力装置から受信した音声信号を、通話先に送信する音声信号として通話装置に送信する。   According to the above configuration, in a state where the information processing device is in the call device control mode, after detecting the start of the call, the call device receives the audio signal received from the call destination and transmits it to the audio output device. At the same time, the voice signal received from the voice input device is transmitted to the call device as a voice signal to be transmitted to the call destination.

つまり、上記の構成によれば、情報処理装置が通話装置制御モードとなっている状態において、通話装置が通話を開始したときには、情報処理装置または遠隔操作装置が備えている音声入力装置が生成した音声信号が通話装置を介して通話先に送信される。また、通話装置が通話先から受信した音声信号は、情報処理装置または遠隔操作装置が備えている音声出力装置に出力される。   That is, according to the above configuration, when the information processing device is in the communication device control mode, when the communication device starts a call, the voice input device included in the information processing device or the remote control device generates An audio signal is transmitted to the call destination via the call device. In addition, the audio signal received by the call device from the call destination is output to a sound output device included in the information processing device or the remote control device.

すなわち、上記の構成によれば、遠隔操作装置を用いて通話装置を操作することのできる通話装置制御モードとなっている状態では、通話装置を用いた通話を、情報処理装置または遠隔操作装置が備えている音声出力装置および音声入力装置を用いて行うことができる。   In other words, according to the above configuration, in the state where the communication device control mode is set in which the communication device can be operated using the remote operation device, the information processing device or the remote operation device can perform a call using the communication device. This can be performed using the voice output device and voice input device provided.

これにより、ユーザは、遠隔操作装置を用いて通話装置を操作することのできる通話装置制御モードにおいて、遠隔操作装置を通話装置に持ち替えることなく、通話装置を介した通話をスムーズに行うことができる。   Accordingly, the user can smoothly perform a call through the call device without changing the remote operation device to the call device in the call device control mode in which the call device can be operated using the remote operation device. .

なお、上記音声入力装置および上記音声出力装置は、遠隔操作装置または情報処理装置に内蔵されていてもよいし、遠隔操作装置または情報処理装置に外付けされていてもよく、外付けの場合には取り外しが可能になっていてもよい。   The voice input device and the voice output device may be incorporated in the remote operation device or the information processing device, or may be externally attached to the remote operation device or the information processing device. May be removable.

また、情報処理装置と、音声入力装置および音声出力装置との間で行われる音声信号の送受信では、情報処理装置と、上記音声入力装置および上記音声出力装置とが直接に音声信号を送受信してもよいし、他の装置を介在させて音声信号を送受信してもよい。要は、情報処理装置が送信した音声信号が音声出力装置に到達し、音声入力装置が生成した音声信号が情報処理装置に到達するようになっていればよい。   Further, in the transmission / reception of audio signals performed between the information processing apparatus and the audio input apparatus and the audio output apparatus, the information processing apparatus, the audio input apparatus, and the audio output apparatus directly transmit / receive audio signals. Alternatively, an audio signal may be transmitted and received via another device. In short, it suffices that the audio signal transmitted by the information processing apparatus reaches the audio output apparatus, and the audio signal generated by the audio input apparatus reaches the information processing apparatus.

また、上記通話検出手段は、上記通話装置が通話を終了したことを検出し、上記受信音声転送手段は、上記通話検出手段が通話の終了を検出したときに、音声信号の上記音声出力装置への送信を停止し、上記送信音声転送手段は、上記通話検出手段が通話の終了を検出したときに、音声信号の上記通話装置への送信を停止することが好ましい。   The call detection unit detects that the call device has ended the call, and the received voice transfer unit detects the end of the call when the call detection unit detects the end of the call. Preferably, the transmission voice transfer means stops the transmission of the voice signal to the call device when the call detection means detects the end of the call.

上記の構成によれば、通話装置が通話を終了したことを検出したときに、音声信号の音声出力装置への送信を停止するとともに、音声信号の通話装置への送信を停止するので、通話終了後に、無駄に音声信号の送信が行われることがなくなる。   According to the above configuration, when the call device detects that the call has ended, the transmission of the audio signal to the audio output device is stopped and the transmission of the audio signal to the call device is stopped. Later, the audio signal is not transmitted unnecessarily.

また、上記音声出力装置及び上記音声入力装置は、上記遠隔操作装置に備えられており、上記受信音声転送手段は、上記遠隔操作装置を介して上記音声出力装置に音声信号を送信し、上記送信音声転送手段は、上記音声入力装置が生成した音声信号を、上記遠隔操作装置を介して受信することが好ましい。   The voice output device and the voice input device are provided in the remote control device, and the received voice transfer means transmits a voice signal to the voice output device via the remote control device and transmits the voice signal. The voice transfer means preferably receives the voice signal generated by the voice input device via the remote control device.

上記の構成によれば、情報処理装置から、遠隔操作装置を介して、該遠隔操作装置が備える音声出力装置に音声信号が送信され、遠隔操作装置が備える音声入力装置が生成した音声信号を、情報処理装置が遠隔操作装置を介して受信する。   According to the above configuration, the audio signal is transmitted from the information processing device to the audio output device included in the remote operation device via the remote operation device, and the audio signal generated by the audio input device included in the remote operation device is The information processing apparatus receives the information via the remote control device.

すなわち、上記の構成によれば、遠隔操作装置が備える音声入力装置と音声出力装置とを用いて、通話装置を介した通話を行うことができる。これにより、ユーザは、遠隔操作装置を用いて通話装置を操作し、通話装置への電話の着信を受けた後、遠隔操作装置を通話装置に持ち替えることなく、スムーズに通話を行うこともできる。   That is, according to the above configuration, a call can be made via the call device using the voice input device and the voice output device provided in the remote control device. As a result, the user can operate the call device using the remote control device, and after receiving an incoming call to the call device, the user can make a call smoothly without changing the remote control device to the call device.

また、上記通話装置は、通話先と音声信号及び画像信号を送受信するテレビ電話機能を備え、上記通話検出手段は、自装置が上記通話装置制御モードとなっている状態において、上記通話装置がテレビ電話による通信を開始したことを検出し、上記通話検出手段が、テレビ電話による通信の開始を検出した後、上記通話装置から送信される、該通話装置が通話先から受信した画像信号を受信して自装置の備える表示装置に表示する画像出力制御手段と、上記通話検出手段が、テレビ電話による通信の開始を検出した後、画像を撮影して画像信号を生成する撮像装置に撮影を開始させるとともに、該撮像装置から受信した画像信号を、上記通話先に送信する画像信号として、上記通話装置に送信する画像入力制御手段とを備えていることが好ましい。   The call device includes a videophone function for transmitting and receiving audio signals and image signals to and from the call destination. The call detection means is configured such that the call device is a TV when the device is in the call device control mode. After detecting the start of communication by telephone, the call detection means detects the start of communication by videophone, and then receives an image signal transmitted from the call apparatus and received by the call apparatus from the call destination. After the image output control means for displaying on the display device included in the apparatus itself and the call detection means detect the start of communication by the videophone, the image pickup apparatus that takes an image and generates an image signal starts to start shooting. And image input control means for transmitting the image signal received from the imaging device to the call device as an image signal to be transmitted to the call destination. There.

上記の構成によれば、情報処理装置が通話装置制御モードとなっている状態において、テレビ電話による通信の開始を検出した後、通話装置が通話先から受信した画像信号を受信して、表示装置に表示するとともに、撮像装置に撮像を開始させ、この撮像装置から受信した画像信号を、通話先に送信する画像信号として通話装置に送信する。   According to the above configuration, in the state where the information processing apparatus is in the communication apparatus control mode, after detecting the start of communication by the videophone, the communication apparatus receives the image signal received from the call destination, and the display apparatus In addition, the image pickup device starts image pickup, and the image signal received from the image pickup device is transmitted to the call device as an image signal to be transmitted to the call destination.

つまり、上記の構成によれば、情報処理装置が通話装置制御モードとなっている状態において、通話装置がテレビ電話による通信を開始したときには、情報処理装置の制御で動作する撮像装置が生成した画像信号が通話装置を介して通話先に送信される。また、通話装置が通話先から受信した画像信号は、情報処理装置が備えている表示装置に表示される。   That is, according to the above configuration, when the information processing device is in the communication device control mode, the image generated by the imaging device that operates under the control of the information processing device when the communication device starts videophone communication. A signal is transmitted to the call destination via the call device. Further, the image signal received by the call device from the call destination is displayed on a display device included in the information processing device.

したがって、ユーザは、遠隔操作装置を用いて通話装置を操作することのできる通話装置制御モードにおいて、情報処理装置の制御で動作する撮像装置に画像を撮影させるとともに、通話先から受信した画像信号に基づく画像を情報処理装置の表示装置に表示させて、通話装置を介したテレビ電話による通話を、遠隔操作装置を通話装置に持ち替えることなく、スムーズに行うことができる。   Therefore, in the call device control mode in which the user can operate the call device using the remote operation device, the user can cause the image pickup device that operates under the control of the information processing device to take an image and the image signal received from the call destination By displaying the image based on the display device of the information processing device, a videophone call via the call device can be smoothly performed without changing the remote control device to the call device.

なお、上記撮像装置および上記表示装置は、情報処理装置に組み込まれていてもよいし、情報処理装置に外付けされていてもよく、外付けの場合には取り外しが可能になっていてもよい。   The imaging device and the display device may be incorporated in the information processing apparatus, may be externally attached to the information processing apparatus, or may be removable when externally attached. .

また、情報処理装置と、表示装置および撮像装置との間で行われる画像信号の送受信では、情報処理装置と、表示装置および撮像装置とが直接に画像信号を送受信してもよいし、他の装置を介在させて画像信号を送受信してもよい。要は、情報処理装置が送信した画像信号が表示装置に到達し、撮像装置が生成した画像信号が情報処理装置に到達するようになっていればよい。   Further, in the transmission / reception of the image signal performed between the information processing device, the display device, and the imaging device, the information processing device, the display device, and the imaging device may directly transmit / receive the image signal. An image signal may be transmitted and received via an apparatus. In short, it is only necessary that the image signal transmitted by the information processing apparatus reaches the display apparatus and the image signal generated by the imaging apparatus reaches the information processing apparatus.

また、本発明の通話装置は、上記課題を解決するために、自装置の操作部に対する入力操作に従って処理を行う通常動作モードと、情報処理装置から受信した通話装置制御信号に従って処理を行う被制御モードとを有する通話装置であって、上記情報処理装置は、該情報処理装置または該情報処理装置を操作する遠隔操作装置が備える音声出力装置に音声信号を送信して音声出力させる機能と、該情報処理装置または上記遠隔操作装置が備える音声入力装置が、該音声入力装置に入力された音声に応じて生成した音声信号を受信する機能とを有するものであり、自装置が上記被制御モードとなっている状態において、自装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、上記情報処理装置に送信する通話開始通知手段と、上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送手段と、上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送手段とを備えていることを特徴としている。   In addition, in order to solve the above-described problem, the communication device of the present invention performs a normal operation mode in which processing is performed according to an input operation to the operation unit of the own device, and a controlled state in which processing is performed according to a communication device control signal received from the information processing device A voice communication device having a mode, wherein the information processing device transmits a voice signal to a voice output device included in the information processing device or a remote control device that operates the information processing device, and outputs the voice. A voice input device included in the information processing device or the remote control device has a function of receiving a voice signal generated according to a voice input to the voice input device. Call start notification means for transmitting, to the information processing apparatus, a call start notification indicating that the call has started when the own apparatus starts a call The call start notification means transmits the call start notification to the information processing apparatus, and then transmits a voice signal received from the call destination to the information processing apparatus. And a communication device-side transmission audio transfer unit configured to transmit an audio signal received from the information processing device to the call destination after the device transmits the call start notification to the information processing device. .

また、本発明の通話装置の制御方法は、上記課題を解決するために、自装置の操作部に対する入力操作に従って処理を行う通常動作モードと、自装置と通信接続された情報処理装置の制御に従って処理を行う被制御モードとを有する通話装置の制御方法であって、上記情報処理装置は、該情報処理装置または該情報処理装置を操作する遠隔操作装置が備える音声出力装置に音声信号を送信して音声出力させる機能と、該情報処理装置または上記遠隔操作装置が備える音声入力装置が、該音声入力装置に入力された音声に応じて生成した音声信号を受信する機能とを有するものであり、上記通話装置が上記被制御モードとなっている状態において、上記通話装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、上記情報処理装置に送信する通話開始通知ステップと、上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送ステップと、上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送ステップとを含むことを特徴としている。   Further, in order to solve the above-described problem, the communication device control method of the present invention is in accordance with a normal operation mode in which processing is performed in accordance with an input operation on the operation unit of the own device, and control of an information processing device that is connected to the own device. The information processing apparatus transmits a voice signal to a voice output device included in the information processing apparatus or a remote control device that operates the information processing apparatus. A voice output function, and a voice input device included in the information processing device or the remote control device has a function of receiving a voice signal generated according to the voice input to the voice input device, When the call device is in the controlled mode, when the call device starts a call, a call start notification indicating that the call has started is sent to the information processing unit. A call start notification step for transmitting to a device, and a call device side reception for transmitting an audio signal received from a call destination to the information processing device after transmitting the call start notification to the information processing device in the call start notification step. A voice transmission step, and a voice transmission side transmitting voice transmission step of transmitting a voice signal received from the information processing apparatus to the call destination after transmitting the call start notice to the information processing apparatus in the call start notification step; It is characterized by including.

上記の構成によれば、通話装置は、被制御モードとなっている状態において、通話開始通知を送信した後、通話先から受信した音声信号を情報処理装置に送信するとともに、情報処理装置から受信した音声信号を通話先に送信する。   According to the above configuration, in a state where the call device is in the controlled mode, after transmitting the call start notification, the call device transmits the voice signal received from the call destination to the information processing device and receives it from the information processing device. Send the audio signal to the other party.

また、上記情報処理装置は、該情報処理装置または該情報処理装置を操作する遠隔操作装置が備える音声出力装置に音声信号を送信して音声出力させる機能と、該情報処理装置または上記遠隔操作装置が備える音声入力装置が、該音声入力装置に入力された音声に応じて生成した音声信号を受信する機能とを有している。   In addition, the information processing apparatus includes a function of transmitting an audio signal to a voice output device included in the information processing apparatus or a remote operation device that operates the information processing apparatus, and outputting the voice signal, and the information processing apparatus or the remote operation device. Has a function of receiving an audio signal generated according to the audio input to the audio input device.

このため、情報処理装置は、通話開始通知の受信をトリガとして、音声入力装置が生成した音声信号を通話装置に送信することができる。また、通話装置から音声信号を受信したときには、その音声信号を音声出力装置に送信して音声出力させることができる。   For this reason, the information processing apparatus can transmit the voice signal generated by the voice input apparatus to the call apparatus with the reception of the call start notification as a trigger. Further, when an audio signal is received from the call device, the audio signal can be transmitted to the audio output device and output as audio.

つまり、上記の構成によれば、通話装置は、被制御モードで通話を開始したときには、情報処理装置に送信することによって、その音声信号に基づく音声を、情報処理装置または遠隔操作装置が備えている音声出力装置から出力させることができるとともに、音声入力装置が生成した音声信号を、情報処理装置を介して受信し、これを通話先に送信することができる。   In other words, according to the above configuration, when the call device starts a call in the controlled mode, the information processing device or the remote control device includes sound based on the sound signal by transmitting to the information processing device. The voice signal generated by the voice input device can be received via the information processing device and transmitted to the callee.

すなわち、上記の構成によれば、情報処理装置の制御に従って処理を行う被制御モードでは、通話装置を用いた通話を、情報処理装置または遠隔操作装置が備えている音声出力装置および音声入力装置を用いて行うことができる。これにより、ユーザは、通話装置を手に取ることなく、通話装置を介した通話をスムーズに行うことができる。   That is, according to the above configuration, in the controlled mode in which processing is performed in accordance with the control of the information processing device, the voice output device and the voice input device provided in the information processing device or the remote control device are used to make a call using the call device. Can be used. As a result, the user can smoothly make a call via the call device without picking up the call device.

なお、上記被制御モードでは、通常モードと同様に、自装置の操作部に対する入力操作も受け付けるようになっていてもよいし、操作部に対する入力操作は受け付けず、情報処理装置の制御のみに従って動作するようになっていてもよい。   In the controlled mode, as in the normal mode, an input operation to the operation unit of the own device may be accepted, or an input operation to the operation unit is not accepted, and only the control of the information processing device is operated. You may come to do.

また、上記情報処理装置と、上記通話装置とを含む音声通話システムであれば、上記情報処理装置および上記通話装置と同様の効果を奏する。   Further, if the voice call system includes the information processing apparatus and the call device, the same effects as the information processing device and the call device can be obtained.

なお、上記情報処理装置および上記通話装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記情報処理装置または上記通話装置の各手段として動作させることにより、上記情報処理装置または上記通話装置をコンピュータにて実現させる制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。   The information processing apparatus and the communication device may be realized by a computer. In this case, the information processing device or the communication device is operated by causing the computer to operate as each unit of the information processing device or the communication device. A control program for realizing the communication device on a computer and a computer-readable recording medium on which the control program is recorded also fall within the scope of the present invention.

以上のように、本発明に係る情報処理装置は、自装置が通話装置制御モードとなっている状態において、通話装置が通話を開始したことを検出する通話検出手段と、上記通話検出手段が通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、自装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送手段と、上記通話検出手段が通話の開始を検出した後、自装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送手段とを備えている構成である。   As described above, the information processing apparatus according to the present invention includes a call detection unit that detects that the call device has started a call in a state where the own device is in the call device control mode, and the call detection unit includes a call Received voice transfer received from the call device after the start of the call is received from the call device and transmitted to the sound output device of the own device or the remote control device that outputs the sound. And the voice signal received from the voice input device that generates the voice signal corresponding to the input voice, provided in the own device or the remote control device, after the call detection means detects the start of the call. The voice signal to be transmitted first includes transmission voice transfer means for transmitting to the telephone device.

また、本発明に係る情報処理装置の制御方法は、情報処理装置が通話装置制御モードとなっている状態において、通話装置が通話を開始したことを検出する通話検出ステップと、上記通話検出ステップで通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、上記情報処理装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送ステップと、上記通話検出ステップで通話の開始を検出した後、上記情報処理装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送ステップとを含む構成である。   The information processing apparatus control method according to the present invention includes a call detection step for detecting that the call apparatus has started a call in a state where the information processing apparatus is in the call apparatus control mode, and the call detection step. After detecting the start of a call, the call device receives the audio signal received from the call destination from the call device and transmits it to the audio output device that outputs the audio provided in the information processing device or the remote control device. The voice received from the voice input device that generates the voice signal corresponding to the input voice provided in the information processing apparatus or the remote control device after detecting the start of the call in the received voice transfer step and the call detection step And a transmission voice transfer step of transmitting a signal to the call device as a voice signal to be transmitted to the call destination.

そして、以上のように、本発明に係る通話装置は、自装置が被制御モードとなっている状態において、自装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、情報処理装置に送信する通話開始通知手段と、上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送手段と、上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送手段とを備えている構成である。   As described above, the call device according to the present invention provides a call start notification indicating that a call has started when the device starts a call when the device is in a controlled mode. Call start notification means for transmitting to the information processing apparatus, and call apparatus for transmitting a voice signal received from the call destination to the information processing apparatus after the call start notification means transmits the call start notification to the information processing apparatus. Side voice transmission means and the call start notification means transmit the call start notice to the information processing apparatus, and then transmit the voice signal received from the information processing apparatus to the call destination side transmission voice transfer And means.

また、本発明に係る通話装置の制御方法は、通話装置が被制御モードとなっている状態において、通話装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、情報処理装置に送信する通話開始通知ステップと、上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送ステップと、上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送ステップとを含む構成である。   Further, the call device control method according to the present invention provides a call start notification indicating that a call is started when the call device starts a call when the call device is in a controlled mode. A call start notification step for transmitting to a device, and a call device side reception for transmitting an audio signal received from a call destination to the information processing device after transmitting the call start notification to the information processing device in the call start notification step. A voice transmission step, and a voice transmission side transmitting voice transmission step of transmitting a voice signal received from the information processing apparatus to the call destination after transmitting the call start notice to the information processing apparatus in the call start notification step; It is the structure containing.

したがって、情報処理装置を介して通話装置の動作を制御可能な状態(通話装置制御モード、被制御モード)において、通話装置を用いた通話を、情報処理装置または遠隔操作装置が備えている音声出力装置および音声入力装置を用いて行うことができる。これにより、ユーザは、通話装置を手に取ることなく、通話装置を介した通話をスムーズに行うことができるという効果を奏する。   Therefore, in a state in which the operation of the call device can be controlled via the information processing device (call device control mode, controlled mode), a voice output that the information processing device or the remote control device has for making a call using the call device This can be done using a device and a voice input device. Accordingly, the user can smoothly perform a call through the call device without picking up the call device.

本発明の実施形態を示すものであり、表示システムに含まれるテレビおよび携帯電話機の要部構成を示すブロック図である。BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1, showing an embodiment of the present invention, is a block diagram illustrating a main configuration of a television and a mobile phone included in a display system. 本実施形態に係る表示システムの概要を示す図である。It is a figure showing the outline of the display system concerning this embodiment. リモートコントローラのキー配置の一例を示す図である。It is a figure which shows an example of key arrangement | positioning of a remote controller. 本実施形態における、テレビが表示する外部入力表示画像の一例を示す図である。It is a figure which shows an example of the external input display image which a television displays in this embodiment. キーガイダンスの表示例を示す図である。It is a figure which shows the example of a display of key guidance. テレビの機種情報の一例を示す図である。It is a figure which shows an example of the model information of a television. キー変換情報の一例を示す図である。It is a figure which shows an example of key conversion information. 携帯電話機の操作部のキー配置の一例を示す図である。It is a figure which shows an example of the key arrangement | positioning of the operation part of a mobile telephone. キー変換情報特定テーブルの一例を示す図である。It is a figure which shows an example of a key conversion information specific table. 表示システムに含まれるテレビ及び携帯電話機の処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a process of the television and mobile telephone which are included in a display system. テレビキー情報解析処理、および、携帯電話機キー情報解析処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a television key information analysis process and a mobile telephone key information analysis process. 携帯電話機の機種情報の一例を示す図である。It is a figure which shows an example of the model information of a mobile telephone. キー変換情報特定テーブルの一例を示す図である。It is a figure which shows an example of a key conversion information specific table. 本発明の他の実施形態に係る表示システムの概要を示す図である。It is a figure which shows the outline | summary of the display system which concerns on other embodiment of this invention. 上記実施形態に係る表示システムに含まれるテレビ、携帯電話機、およびリモートコントローラの要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the television, mobile telephone, and remote controller which are included in the display system which concerns on the said embodiment. 上記実施形態に係る表示システムに含まれるテレビ及び携帯電話機が実行する処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process which the television and mobile telephone which are contained in the display system which concerns on the said embodiment perform. テレビ側音声制御変更処理及び携帯側音声制御変更処理の一例を示すフローチャートである。It is a flowchart which shows an example of a television side audio | voice control change process and a portable side audio | voice control change process. テレビ電話が可能な表示システムに含まれる、テレビ、携帯電話機、およびリモートコントローラの要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of a television, a mobile telephone, and a remote controller contained in the display system in which a videophone is possible. テレビ電話時にテレビが実行するテレビ側テレビ電話処理、およびテレビ電話時に携帯電話機が実行する携帯側テレビ電話処理の一例を示すフローチャートである。It is a flowchart which shows an example of the video-side videophone process which a television performs at the time of a videophone, and the mobile-side videophone process which a mobile telephone performs at the time of a videophone.

〔前提となる第1の実施形態〕
以下、本発明の前提となる第1の実施形態について、図1から図11に基づいて詳細に説明する。
[First Embodiment as Premise]
Hereinafter, a first embodiment as a premise of the present invention will be described in detail with reference to FIGS. 1 to 11.

〔システムの概要〕
本実施形態の表示システム3の概要について、図2に基づいて説明する。図2は、本実施形態に係る表示システム3の概要を示す図である。図示のように、表示システム3は、テレビ(表示装置)1と携帯電話機(端末装置)2とを通信接続してなるシステムである。
[System Overview]
An overview of the display system 3 of the present embodiment will be described with reference to FIG. FIG. 2 is a diagram showing an overview of the display system 3 according to the present embodiment. As shown in the figure, the display system 3 is a system in which a television (display device) 1 and a mobile phone (terminal device) 2 are connected for communication.

テレビ1は、テレビジョン放送の電波を受信して選局し、映像および音声を出力(表示)するものである。本実施形態では、表示システムを構成する表示装置として、テレビ1を適用しているが、これに限るものではない。例えば、表示システムを構成する表示装置として、画像を表示する機能を備える表示装置であればよく、PC等を適用することができる。また、テレビ1は、図2に示すリモートコントローラ15からの信号によって、信号に応じた種々の処理を行う。具体的には、テレビ1は、リモートコントローラ15から送信された信号を受信して、チャンネルを切り替える処理を行ったり、番組表やメニュー画面を表示する処理を行ったりする。   The television 1 receives a television broadcast radio wave, selects a channel, and outputs (displays) video and audio. In the present embodiment, the television 1 is applied as the display device constituting the display system, but the present invention is not limited to this. For example, as a display device constituting the display system, any display device having a function of displaying an image may be used, and a PC or the like can be applied. Further, the television 1 performs various processes according to the signal in accordance with the signal from the remote controller 15 shown in FIG. Specifically, the television 1 receives a signal transmitted from the remote controller 15 and performs a process of switching channels or a process of displaying a program guide or a menu screen.

リモートコントローラ15は、テレビ1に付属されている操作機器であって、ユーザがテレビ1を遠隔操作するために用いられるものである。ユーザがリモートコントローラ15に備えられたキー(ボタン)を押すことによって、リモートコントローラ15は、ユーザに押されたキーに対応する信号を送信するものである。   The remote controller 15 is an operating device attached to the television 1 and is used by a user to remotely operate the television 1. When the user presses a key (button) provided on the remote controller 15, the remote controller 15 transmits a signal corresponding to the key pressed by the user.

本実施形態では、リモートコントローラ15は、一般的な赤外線通信を利用してテレビ1に信号を送信する。なお、リモートコントローラ15とテレビ1との通信方式は、赤外線通信に限るものではなく、赤外線以外の電波による通信など、あらゆる無線通信方式、有線通信方式を適用することができる。   In the present embodiment, the remote controller 15 transmits a signal to the television 1 using general infrared communication. Note that the communication method between the remote controller 15 and the television 1 is not limited to infrared communication, and any wireless communication method or wired communication method such as communication using radio waves other than infrared light can be applied.

また、本実施形態のリモートコントローラ15は、図3に示すように、電源キー、操作切替キー、数字キー(1〜12)、番組表キー、および、メニューキーを備える。電源キーは、テレビ1の電源をオンまたはオフするためのキーである。操作切替キーは、テレビ1の操作モードを切り替えるためのキーである。操作モードについては、詳細は後述する。数字キーは、テレビ1のチャンネルの切り替えや、テレビ1への数字の入力等に使用するためのキーである。番組表キー、メニューキーは、それぞれ、テレビ1に番組表、メニュー画面を表示させるためのキーである。   Further, as shown in FIG. 3, the remote controller 15 of the present embodiment includes a power key, an operation switching key, numeric keys (1 to 12), a program guide key, and a menu key. The power key is a key for turning on or off the power of the television 1. The operation switching key is a key for switching the operation mode of the television 1. Details of the operation mode will be described later. The numeric keys are keys used for switching channels of the television 1, inputting numbers into the television 1, and the like. The program guide key and the menu key are keys for causing the television 1 to display a program guide and a menu screen, respectively.

図3は、リモートコントローラ15のキー配置の一例を示す図である。なお、リモートコントローラ15が、上述のキー以外に、例えば、十字キーや決定キー等を備えていてもよい。また、図3に示すリモートコントローラ15のキー配置はあくまで一例であって、図3に示すキー配置に限るものではなく、キー配置を任意に設計してもよい。   FIG. 3 is a diagram illustrating an example of the key arrangement of the remote controller 15. Note that the remote controller 15 may include, for example, a cross key, a determination key, and the like in addition to the above-described keys. Further, the key arrangement of the remote controller 15 shown in FIG. 3 is merely an example, and is not limited to the key arrangement shown in FIG. 3, and the key arrangement may be arbitrarily designed.

携帯電話機2は、携帯可能な電話機であって、無線通信を利用して、他の携帯電話機や固定電話機と音声通信を行うものである。携帯電話機2は、電話の機能だけではなく、インターネットおよびメール等の機能を備えていてもよい。携帯電話機2は、各機能の処理を実行する際に、その処理の結果を、自装置の表示部に画像として表示するものである。具体的には、ユーザが携帯電話機2を操作して、電話番号を入力すると、携帯電話機2は、表示部に入力された番号を表示する。また、ユーザが音声通話開始キーを押すと、携帯電話機2は、通信先の携帯電話機と接続を開始する旨を表示部に表示する。このように、携帯電話機2は、自身が処理している内容(処理した結果)をユーザに通知するために、自身が処理している内容(処理した結果)を示す画像を生成し、生成した画像を表示部に出力するものである。   The mobile phone 2 is a portable phone and performs voice communication with other mobile phones and fixed phones using wireless communication. The mobile phone 2 may have functions such as the Internet and mail as well as telephone functions. When the mobile phone 2 executes the process of each function, the mobile phone 2 displays the result of the process as an image on the display unit of its own device. Specifically, when the user operates the mobile phone 2 and inputs a telephone number, the mobile phone 2 displays the input number on the display unit. Further, when the user presses the voice call start key, the mobile phone 2 displays on the display unit that the connection with the communication destination mobile phone is started. In this way, the mobile phone 2 generates and generates an image indicating the content (processing result) that the mobile phone 2 is processing in order to notify the user of the content (processing result) that the mobile phone 2 is processing. The image is output to the display unit.

なお、本実施形態では、表示システムを構成する端末装置として、携帯電話機2を適用しているが、これに限るものではない。例えば、表示システムを構成する端末装置として、PDA、デジタルカメラ、デジタルビデオカメラ、携帯ゲーム機等であってもよい。   In the present embodiment, the mobile phone 2 is applied as a terminal device constituting the display system, but the present invention is not limited to this. For example, the terminal device constituting the display system may be a PDA, a digital camera, a digital video camera, a portable game machine, or the like.

本実施形態では、テレビ1と携帯電話機2とは、HDMI(High-Definition Multimedia Interface)ケーブルで接続されているものとする。ただし、テレビ1と携帯電話機2との接続方式は、これに限るものではなく、例えば、USBケーブル等の有線接続方式であってもよいし、無線LAN等の無線接続方式であってもよい。   In the present embodiment, it is assumed that the television 1 and the mobile phone 2 are connected by an HDMI (High-Definition Multimedia Interface) cable. However, the connection method between the television 1 and the mobile phone 2 is not limited to this, and may be, for example, a wired connection method such as a USB cable or a wireless connection method such as a wireless LAN.

さらに、携帯電話機2は、自装置の表示部に出力する画像である出力画像をテレビ1に送信するものである。また、テレビ1は、携帯電話機2の出力画像を受信して、自装置の表示部に、受信した出力画像を含む画像を表示するものである。   Furthermore, the mobile phone 2 transmits an output image, which is an image to be output to the display unit of its own device, to the television 1. The television 1 receives an output image of the mobile phone 2 and displays an image including the received output image on the display unit of the own device.

本発明は、上述の表示システム3において、テレビ1が携帯電話機2の出力画像を含む画像を表示している際に、リモートコントローラ15を操作することによって、携帯電話機2を制御するものである。つまり、テレビ1には、2つの表示モードが存在し、テレビ1が受信したテレビジョン放送の電波に基づく画像(映像)を表示する通常表示モードと、携帯電話機2から受信した携帯電話機2の出力画像を含む画像を表示する外部入力表示モードとが存在する。さらに、テレビ1が外部入力表示モードの場合、2つの操作モードが存在し、ユーザがリモートコントローラ15を操作することによって、テレビ1を操作できる状態であるテレビ操作モードと、ユーザがリモートコントローラ15を操作することによって、携帯電話機2を操作できる状態である携帯電話機操作モード(端末制御モード)とが存在する。   The present invention controls the mobile phone 2 by operating the remote controller 15 when the television 1 displays an image including the output image of the mobile phone 2 in the display system 3 described above. In other words, the television 1 has two display modes, the normal display mode for displaying an image (video) based on the radio wave of the television broadcast received by the television 1, and the output of the mobile phone 2 received from the mobile phone 2. There is an external input display mode for displaying an image including an image. Further, when the television 1 is in the external input display mode, there are two operation modes, and the user operates the remote controller 15, and the user can operate the television 1 by operating the remote controller 15. There is a mobile phone operation mode (terminal control mode) in which the mobile phone 2 can be operated by operation.

上述の、テレビ1が外部入力表示モードの場合に、テレビ1に表示される画像を外部入力表示画像と称する。ここで、テレビ1が表示する外部入力表示画像の一例を図4に基づいて説明する。図4は、本実施形態における、テレビ1が表示する外部入力表示画像の一例を示す図である。   When the television 1 is in the external input display mode, the image displayed on the television 1 is referred to as an external input display image. Here, an example of the external input display image displayed on the television 1 will be described with reference to FIG. FIG. 4 is a diagram illustrating an example of an external input display image displayed on the television 1 in the present embodiment.

図4に示すように、テレビ1の画面に外部入力表示画像71が表示されており、外部入力表示画像71には、テレビ映像表示領域72、携帯電話機出力画像表示領域73、キーガイダンス表示領域74および操作マーク75が含まれる。なお、外部入力表示画像71には、少なくとも携帯電話機出力画像表示領域73が含まれていればよい。換言すると、テレビ1が携帯電話機2から携帯電話機2の出力画像を受信している場合、テレビ1は、携帯電話機2の出力画像を全画面に表示してもよい。   As shown in FIG. 4, an external input display image 71 is displayed on the screen of the television 1. The external input display image 71 includes a television video display area 72, a mobile phone output image display area 73, and a key guidance display area 74. And an operation mark 75 are included. Note that the external input display image 71 only needs to include at least the mobile phone output image display area 73. In other words, when the television 1 receives the output image of the mobile phone 2 from the mobile phone 2, the television 1 may display the output image of the mobile phone 2 on the full screen.

テレビ映像表示領域72は、テレビ1が受信したテレビジョン放送の電波に基づく画像(映像)を表示する領域である。つまり、テレビ1が通常表示モード時に表示する画像を表示する領域である。   The television video display area 72 is an area for displaying an image (video) based on the radio wave of the television broadcast received by the television 1. That is, this is an area for displaying an image that the television 1 displays in the normal display mode.

携帯電話機出力画像表示領域73は、テレビ1が受信した携帯電話機2の出力画像を表示する領域である。   The mobile phone output image display area 73 is an area for displaying an output image of the mobile phone 2 received by the television 1.

キーガイダンス表示領域74は、キーガイダンスを表示する領域である。キーガイダンスとは、テレビ1が携帯電話機操作モード時に、リモートコントローラ15のキーと、携帯電話機2のキーとの対応関係をユーザに通知するものである。キーガイダンスの表示例を図5に示す。   The key guidance display area 74 is an area for displaying key guidance. The key guidance is to notify the user of the correspondence between the keys of the remote controller 15 and the keys of the mobile phone 2 when the television 1 is in the mobile phone operation mode. A display example of key guidance is shown in FIG.

図5に示すように、図3に示すリモートコントローラ15と同じ位置にキー(ボタン)が配置されている。ただし、図3に示すリモートコントローラ15と異なり、各キーのラベルには、対応する携帯電話機2のキーのラベルが表示されている。図示の例では、リモートコントローラ15の「1」キーは、携帯電話機2の「1/あ」キーに対応することが示されている。これによって、ユーザは、リモートコントローラ15のキーが、携帯電話機2のキーのどれにあたるかを直感的に判別し、リモートコントローラ15により携帯電話機2を操作することが可能となる。   As shown in FIG. 5, keys (buttons) are arranged at the same position as the remote controller 15 shown in FIG. However, unlike the remote controller 15 shown in FIG. 3, the key label of the corresponding mobile phone 2 is displayed on the label of each key. In the illustrated example, the “1” key of the remote controller 15 corresponds to the “1 / A” key of the mobile phone 2. As a result, the user can intuitively determine which of the keys of the mobile phone 2 the key of the remote controller 15 corresponds to, and can operate the mobile phone 2 by the remote controller 15.

なお、図5に示す例では、「電源」キーおよび「操作切替」キーが破線で表示されている。これは、「電源」キーおよび「操作切替」キーがテレビ1の操作モードに依存しないキーであることを示す。つまり、「電源」キーは、テレビ1の操作モードがテレビ操作モード、携帯電話機操作モードに関わらず、テレビ1の電源をオンまたはオフするためのキーである。また、「操作切替」キーは、テレビ1の操作モードがテレビ操作モードの場合、テレビ1の操作モードを携帯電話機操作モードに切り替えるためのキーであり、テレビ1の操作モードが携帯電話機操作モードの場合、テレビ1の操作モードをテレビ操作モードに切り替えるためのキーである。   In the example shown in FIG. 5, the “power” key and the “operation switching” key are displayed by broken lines. This indicates that the “power” key and the “operation switching” key are keys that do not depend on the operation mode of the television 1. That is, the “power” key is a key for turning on or off the power of the television 1 regardless of whether the operation mode of the television 1 is the television operation mode or the mobile phone operation mode. The “switch operation” key is a key for switching the operation mode of the television 1 to the mobile phone operation mode when the operation mode of the television 1 is the television operation mode. The operation mode of the television 1 is the mobile phone operation mode. In this case, it is a key for switching the operation mode of the television 1 to the television operation mode.

操作マーク75は、テレビ1の操作モードがテレビ操作モードであるか、携帯電話機操作モードであるかをユーザに通知するものである。なお、ユーザに操作モードを通知する方法はこれに限らず、例えば、テレビ操作モード時にキーガイダンスを透明または半透明で表示し、携帯電話機操作モード時に通常に表示して、テレビ1の操作モードを通知してもよい。   The operation mark 75 notifies the user whether the operation mode of the television 1 is the television operation mode or the mobile phone operation mode. The method of notifying the user of the operation mode is not limited to this. For example, the key guidance is displayed transparently or translucently in the television operation mode, and is normally displayed in the mobile phone operation mode, and the operation mode of the television 1 is changed. You may be notified.

以下に、本実施形態に係るテレビ1および携帯電話機2の構成、および、その処理について説明する。   Below, the structure of the television 1 and the mobile telephone 2 which concern on this embodiment, and its process are demonstrated.

〔テレビ1及び携帯電話機2の要部構成〕
本実施形態に係るテレビ1および携帯電話機2の構成について、図1に基づいて説明する。図1は、表示システム3に含まれるテレビ1および携帯電話機2の要部構成を示すブロック図である。
[Main components of TV 1 and mobile phone 2]
The configuration of the television 1 and the mobile phone 2 according to the present embodiment will be described with reference to FIG. FIG. 1 is a block diagram showing a main configuration of the television 1 and the mobile phone 2 included in the display system 3.

<テレビ1の構成>
まず、テレビ1の構成について説明する。図示のように、テレビ1は、制御部10、記憶部11、表示部12、通信部13、および、キー情報受信部(操作情報取得手段)14を備えている。また、テレビ1には、テレビ1を遠隔操作可能な操作機器であるリモートコントローラ15が付属されている。テレビ1は、これらの部材以外にも、アンテナ、チューナ、スピーカ、マイク、バッテリー等の部材を備えていてもよいが、発明の特徴点とは関係がないため当該部材を図示していない。
<Configuration of TV 1>
First, the configuration of the television 1 will be described. As illustrated, the television 1 includes a control unit 10, a storage unit 11, a display unit 12, a communication unit 13, and a key information reception unit (operation information acquisition unit) 14. Further, the television 1 is attached with a remote controller 15 that is an operation device capable of remotely operating the television 1. In addition to these members, the television 1 may include members such as an antenna, a tuner, a speaker, a microphone, and a battery, but these members are not shown because they are not related to the features of the invention.

表示部12は、制御部10の指示に従って画像を表示するものである。表示部12は、制御部10の指示に従って画像を表示するものであればよく、例えば、LCD(液晶ディスプレイ)、有機ELディスプレイ、プラズマディスプレイなどを適用することが可能である。   The display unit 12 displays an image in accordance with an instruction from the control unit 10. The display unit 12 only needs to display an image in accordance with an instruction from the control unit 10, and for example, an LCD (liquid crystal display), an organic EL display, a plasma display, or the like can be applied.

通信部13は、無線通信手段または有線通信手段によって、携帯電話機2などの他の装置と通信を行い、データのやりとりを行うものである。本実施形態では、通信部13が外部インターフェースとして機能し、携帯電話機2とHDMIケーブルで接続されているものとする。   The communication unit 13 communicates with other devices such as the cellular phone 2 by wireless communication means or wired communication means, and exchanges data. In this embodiment, it is assumed that the communication unit 13 functions as an external interface and is connected to the mobile phone 2 via an HDMI cable.

キー情報受信部14は、リモートコントローラ15から送信された信号を受信するものである。本実施形態では、リモートコントローラ15が、赤外線通信を利用してテレビ1に信号を送信するため、キー情報受信部14が赤外線受光部として機能する。   The key information receiving unit 14 receives a signal transmitted from the remote controller 15. In the present embodiment, since the remote controller 15 transmits a signal to the television 1 using infrared communication, the key information receiving unit 14 functions as an infrared light receiving unit.

なお、テレビ1が操作部(不図示)を備えていてもよい。この場合、リモートコントローラ15を操作してテレビ1を制御するのと同様に、操作部を操作してテレビ1を制御してもよい。この場合、キー情報受信部14は、操作部から操作情報を取得する操作情報取得手段として機能する。   Note that the television 1 may include an operation unit (not shown). In this case, the TV 1 may be controlled by operating the operation unit in the same manner as the TV 1 is controlled by operating the remote controller 15. In this case, the key information receiving unit 14 functions as an operation information acquisition unit that acquires operation information from the operation unit.

制御部10は、記憶部11から一時記憶部(不図示)に読み出されたプログラムを実行することにより、各種の演算を行うと共に、テレビ1が備える各部を統括的に制御するものである。   The control unit 10 executes various programs by executing a program read from the storage unit 11 to a temporary storage unit (not shown), and comprehensively controls each unit included in the television 1.

本実施形態では、制御部10は、機能ブロックとして、表示制御部(表示制御手段)21、テレビ制御部22、モード切替部23、外部入力制御部26、キー情報変換部(操作情報変換手段、操作情報送信手段)27、および、機種情報管理部28を備える構成である。これらの制御部10の各機能ブロック(21〜23、26〜28)は、CPU(central processing unit)が、ROM(read only memory)等で実現された記憶装置に記憶されているプログラムをRAM(random access memory)等で実現された一時記憶部に読み出して実行することで実現できる。   In this embodiment, the control unit 10 includes, as function blocks, a display control unit (display control unit) 21, a television control unit 22, a mode switching unit 23, an external input control unit 26, a key information conversion unit (operation information conversion unit, Operation information transmission means) 27 and a model information management unit 28 are provided. Each functional block (21 to 23, 26 to 28) of the control unit 10 stores a program stored in a storage device realized by a CPU (central processing unit), such as a ROM (read only memory), in a RAM ( This can be realized by reading and executing the temporary storage unit realized by random access memory).

表示制御部21は、テレビ制御部22、外部入力制御部26の指示に従って、画像を生成し、生成した画像を表示部12に出力するものである。具体的には、表示制御部21は、通常表示モード時では、テレビ制御部22の指示に従って、テレビ1が受信したテレビジョン放送の電波から画像(映像)を生成し、生成した画像を表示部12に表示させるものである。また、表示制御部21は、外部入力表示モード時には、外部入力制御部26の指示に従って、外部入力表示画像を生成し、生成した外部入力表示画像を表示部12に表示させるものである。   The display control unit 21 generates an image in accordance with instructions from the television control unit 22 and the external input control unit 26, and outputs the generated image to the display unit 12. Specifically, in the normal display mode, the display control unit 21 generates an image (video) from a television broadcast radio wave received by the television 1 in accordance with an instruction from the television control unit 22, and displays the generated image on the display unit. 12 is displayed. Further, in the external input display mode, the display control unit 21 generates an external input display image in accordance with an instruction from the external input control unit 26 and causes the display unit 12 to display the generated external input display image.

テレビ制御部22は、キー情報受信部14から送信されたテレビ1を動作させるためのキー情報(テレビキー情報:第1の操作情報)に基づいて、テレビ1を制御するものである。例えば、テレビ制御部22は、受信したテレビキー情報が電源のオン/オフを示すものであれば、テレビ1の電源をオンまたはオフするように制御する。また、テレビ制御部22は、テレビ1が通常表示モード時には、受信したテレビキー情報が所定のチャンネルを指定するものであれば、チューナ(不図示)に対して、アンテナ(不図示)で受信したテレビジョン放送の電波から、指定のチャンネルを選局するように指示し、チューナが電波から変換した映像信号を表示部12に表示するように表示制御部21に指示する。また、テレビ制御部22は、テレビ1が外部入力表示モード時には、受信したテレビキー情報が所定のチャンネルを指定するものであれば、チューナ(不図示)に対して、アンテナ(不図示)で受信したテレビジョン放送の電波から、指定のチャンネルを選局するように指示し、チューナが電波から変換した映像信号をテレビ映像表示領域72に組み込むように表示制御部21に指示する。   The TV control unit 22 controls the TV 1 based on key information (TV key information: first operation information) for operating the TV 1 transmitted from the key information receiving unit 14. For example, if the received television key information indicates power on / off, the television control unit 22 controls the television 1 to be turned on or off. Further, when the television 1 is in the normal display mode, the television control unit 22 receives the tuner (not shown) with an antenna (not shown) if the received television key information designates a predetermined channel. An instruction is given to select a specified channel from the radio wave of the television broadcast, and the tuner instructs the display control unit 21 to display the video signal converted from the radio wave on the display unit 12. In addition, when the television 1 is in the external input display mode, the television control unit 22 receives an antenna (not shown) with respect to a tuner (not shown) if the received television key information specifies a predetermined channel. The designated channel is instructed from the radio wave of the television broadcast, and the tuner instructs the display control unit 21 to incorporate the video signal converted from the radio wave into the television video display area 72.

テレビ制御部22は、テレビ1が通常表示モードの場合、テレビキー情報に基づいて、テレビ1を制御する。また、テレビ制御部22は、テレビ1が外部入力表示モードであって、テレビ操作モードの場合、テレビキー情報に基づいて、テレビ1を制御する。さらに、テレビ制御部22は、テレビ1が外部入力表示モードであって、携帯電話機操作モードの場合に、キー情報受信部14が操作モードに依存しないテレビキー情報(「電源」キー、「操作切替」キー等)を受信した場合、テレビキー情報に基づいて、テレビ1を制御する。   When the television 1 is in the normal display mode, the television controller 22 controls the television 1 based on the television key information. In addition, when the television 1 is in the external input display mode and is in the television operation mode, the television controller 22 controls the television 1 based on the television key information. Furthermore, when the TV 1 is in the external input display mode and in the mobile phone operation mode, the TV control unit 22 uses the TV key information (“power” key, “operation switching”) that the key information receiving unit 14 does not depend on the operation mode. ”Key or the like), the television 1 is controlled based on the television key information.

モード切替部23は、テレビ1のモードを切り替えるものであり、表示モード切替部24および操作モード切替部25を備える。   The mode switching unit 23 switches the mode of the television 1 and includes a display mode switching unit 24 and an operation mode switching unit 25.

表示モード切替部24は、テレビ1の表示モードを切り替えるものである。例えば、表示モード切替部24は、キー情報受信部14を介して、リモートコントローラ15から表示モードの切替指示を受信して、テレビ1の表示モードを切り替えてもよい。また、表示モード切替部24は、テレビ1が携帯電話機2と通信接続されたことを示す情報を通信部13から受信して、テレビ1の表示モードを通常表示モードから外部入力表示モードに切り替えてもよい。また、表示モード切替部24は、テレビ1が携帯電話機2との通信接続を終了したことを示す情報を通信部13から受信して、テレビ1の表示モードを外部入力表示モードから通常表示モードに切り替えてもよい。   The display mode switching unit 24 switches the display mode of the television 1. For example, the display mode switching unit 24 may switch the display mode of the television 1 by receiving a display mode switching instruction from the remote controller 15 via the key information receiving unit 14. Further, the display mode switching unit 24 receives information indicating that the television 1 is connected to the mobile phone 2 from the communication unit 13 and switches the display mode of the television 1 from the normal display mode to the external input display mode. Also good. Further, the display mode switching unit 24 receives information indicating that the television 1 has ended communication connection with the mobile phone 2 from the communication unit 13, and changes the display mode of the television 1 from the external input display mode to the normal display mode. You may switch.

操作モード切替部25は、テレビ1の操作モードを切り替えるものである。例えば、操作モード切替部25は、キー情報受信部14を介して、リモートコントローラ15から表示モードの切替指示(「操作切替」キー)を受信して、テレビ1の操作モードを切り替えてもよい。   The operation mode switching unit 25 switches the operation mode of the television 1. For example, the operation mode switching unit 25 may switch the operation mode of the television 1 by receiving a display mode switching instruction (“operation switching” key) from the remote controller 15 via the key information receiving unit 14.

外部入力制御部26は、外部入力表示モード時に、表示制御部21に対して、外部入力表示画像71を生成して、表示部12に表示するように指示するものである。また、外部入力制御部26は、外部入力表示画像71における携帯電話機出力画像表示領域73に、携帯電話機2から受信した携帯電話機2の出力画像を組み込むように、表示制御部21に指示する。   The external input control unit 26 instructs the display control unit 21 to generate an external input display image 71 and display it on the display unit 12 in the external input display mode. Further, the external input control unit 26 instructs the display control unit 21 to incorporate the output image of the mobile phone 2 received from the mobile phone 2 in the mobile phone output image display area 73 in the external input display image 71.

また、外部入力制御部26は、外部入力表示画像71におけるキーガイダンス表示領域74に表示させる画像を生成するものである。外部入力制御部26は、キー変換情報記憶部32に格納されているキー変換情報(操作情報変換テーブル)を参照して、リモートコントローラ15のキーが携帯電話機2のどのキーに対応するかを特定し、記憶部11に格納されているリモートコントローラ15のキー配置情報に基づいて、キーガイダンス画像を生成する。外部入力制御部26は、生成したキーガイダンス画像を外部入力表示画像71におけるキーガイダンス表示領域74に組み込むように、表示制御部21に指示する。なお、リモートコントローラ15のキー配置情報とは、リモートコントローラ15の各キーのリモートコントローラ15における位置を示す情報である。   The external input control unit 26 generates an image to be displayed in the key guidance display area 74 in the external input display image 71. The external input control unit 26 refers to the key conversion information (operation information conversion table) stored in the key conversion information storage unit 32 and identifies which key of the mobile phone 2 corresponds to the key of the remote controller 15. Then, a key guidance image is generated based on the key arrangement information of the remote controller 15 stored in the storage unit 11. The external input control unit 26 instructs the display control unit 21 to incorporate the generated key guidance image into the key guidance display area 74 in the external input display image 71. The key arrangement information of the remote controller 15 is information indicating the position of each key of the remote controller 15 in the remote controller 15.

キー情報変換部27は、テレビ1の操作モードが携帯電話機操作モードである場合、記憶部11のキー変換情報記憶部32に格納されているキー変換情報を参照して、キー情報受信部14が受信したテレビキー情報を、対応する携帯電話機キー情報に変換するものである。そして、キー情報変換部27は、変換後の携帯電話機キー情報を通信部13を介して携帯電話機2に送信する。ここで、携帯電話機キー情報(第2の操作情報)とは、携帯電話機2を動作させるためのキー情報である。   When the operation mode of the television 1 is the mobile phone operation mode, the key information conversion unit 27 refers to the key conversion information stored in the key conversion information storage unit 32 of the storage unit 11 and the key information reception unit 14 The received TV key information is converted into corresponding mobile phone key information. Then, the key information conversion unit 27 transmits the converted mobile phone key information to the mobile phone 2 via the communication unit 13. Here, the mobile phone key information (second operation information) is key information for operating the mobile phone 2.

なお、本実施形態では、テレビ1と携帯電話機2とがHDMIケーブルで接続されているため、キー情報変換部27は、HDMI CECコマンドを利用して、変換後の携帯電話機キー情報を送信する。また、キー情報変換部27は、キー情報受信部14が受信したテレビキー情報が、キー変換情報記憶部32に格納されているキー変換情報に含まれていない場合、テレビ制御部22に、キー情報受信部14が受信したテレビキー情報に基づいて動作するように指示する。   In the present embodiment, since the television 1 and the mobile phone 2 are connected by an HDMI cable, the key information conversion unit 27 transmits the converted mobile phone key information using an HDMI CEC command. Further, the key information conversion unit 27 sends the key to the TV control unit 22 when the TV key information received by the key information receiving unit 14 is not included in the key conversion information stored in the key conversion information storage unit 32. The information receiving unit 14 instructs to operate based on the received TV key information.

機種情報管理部28は、テレビ1が外部入力表示モードに移行すると、記憶部11の機種情報記憶部31に格納されているテレビ1の機種情報を読み出し、通信部13を介して、読み出したテレビ1の機種情報を携帯電話機2に送信するものである。そして、機種情報管理部28は、テレビ1の機種情報を携帯電話機2に送信した後、携帯電話機2からキー変換情報を受信すると、受信したキー変換情報を記憶部11のキー変換情報記憶部32に格納する。   When the television 1 shifts to the external input display mode, the model information management unit 28 reads the model information of the television 1 stored in the model information storage unit 31 of the storage unit 11, and reads the read television through the communication unit 13. 1 model information is transmitted to the mobile phone 2. Then, after transmitting the model information of the television 1 to the mobile phone 2 and receiving the key conversion information from the mobile phone 2, the model information management unit 28 receives the key conversion information in the key conversion information storage unit 32 of the storage unit 11. To store.

記憶部11は、制御部10が実行する制御プログラムおよびOSプログラム、ならびに、制御部10が、テレビ1が有する各種機能(例えば、後述の、初期設定処理、表示処理、テレビキー情報解析処理など)を実行するときに読み出す各種の固定データを記憶するものである。本実施形態では、記憶部11には、例えば、機種情報記憶部31、および、キー変換情報記憶部32が含まれており、各種の固定データを記憶する。記憶部11は、例えば、内容の書き換えが可能な不揮発性メモリである、EPROM(Erasable Programmable ROM)、EEPROM(Electrically EPROM)、フラッシュメモリなどで実現される。なお、内容の書き換えが不要な情報を記憶する記憶部としては、上述したとおり、記憶部11とは別の、図示しない、読出し専用の半導体メモリであるROMなどで実現されてもよい。   The storage unit 11 includes a control program and an OS program executed by the control unit 10, and various functions that the control unit 10 has in the television 1 (for example, initial setting processing, display processing, TV key information analysis processing described later). This stores various fixed data that is read when executing. In the present embodiment, the storage unit 11 includes, for example, a model information storage unit 31 and a key conversion information storage unit 32, and stores various types of fixed data. The storage unit 11 is realized by, for example, an EPROM (Erasable Programmable ROM), an EEPROM (Electrically EPROM), a flash memory, or the like, which is a nonvolatile memory whose contents can be rewritten. In addition, as described above, the storage unit that stores information that does not require rewriting of contents may be realized by a ROM that is a read-only semiconductor memory, not shown, different from the storage unit 11.

機種情報記憶部31は、テレビ1の機種を特定するテレビ1の機種情報(第1の機種情報)を格納するものである。機種情報記憶部31に格納されているテレビ1の機種情報として、例えば、図6に示すようなデータであればよい。図6は、テレビ1の機種情報の一例を示す図である。図6の例では、機種情報記憶部31には、テレビ1の機種情報として、テレビ1の機種を識別する文字列「TV1234A」が格納されている。   The model information storage unit 31 stores model information (first model information) of the television 1 that identifies the model of the television 1. The model information of the television 1 stored in the model information storage unit 31 may be data as shown in FIG. FIG. 6 is a diagram illustrating an example of model information of the television 1. In the example of FIG. 6, the model information storage unit 31 stores a character string “TV1234A” that identifies the model of the television 1 as the model information of the television 1.

キー変換情報記憶部32は、キー情報変換部27が、テレビキー情報から対応する携帯電話機キー情報に変換する際に参照するキー変換情報を格納するものである。キー変換情報記憶部32に格納されているキー変換情報として、例えば、図7に示すようなデータであってもよい。図7は、キー変換情報の一例を示す図である。図7に示す例では、キー変換情報記憶部32には、キー変換情報IDが「001」のキー変換情報が格納されている。   The key conversion information storage unit 32 stores key conversion information that the key information conversion unit 27 refers to when converting the TV key information to the corresponding mobile phone key information. The key conversion information stored in the key conversion information storage unit 32 may be, for example, data as shown in FIG. FIG. 7 is a diagram illustrating an example of the key conversion information. In the example illustrated in FIG. 7, the key conversion information storage unit 32 stores key conversion information having a key conversion information ID “001”.

<携帯電話機2の構成>
次に、携帯電話機2の構成について説明する。図示のように、携帯電話機2は、制御部40、記憶部41、表示部42、通信部43、および、操作部44を備えている。携帯電話機2は、これらの部材以外にも、スピーカ、マイク、バッテリー等の部材を備えていてもよいが、発明の特徴点とは関係がないため当該部材を図示していない。
<Configuration of mobile phone 2>
Next, the configuration of the mobile phone 2 will be described. As shown in the figure, the mobile phone 2 includes a control unit 40, a storage unit 41, a display unit 42, a communication unit 43, and an operation unit 44. In addition to these members, the mobile phone 2 may include members such as a speaker, a microphone, and a battery, but these members are not shown because they are not related to the features of the invention.

表示部42は、制御部40の指示に従って画像を表示するものである。表示部42は、制御部40の指示に従って画像を表示するものであればよく、例えば、LCD(液晶ディスプレイ)、有機ELディスプレイ、プラズマディスプレイなどを適用することが可能である。   The display unit 42 displays an image in accordance with an instruction from the control unit 40. The display unit 42 only needs to display an image in accordance with an instruction from the control unit 40. For example, an LCD (liquid crystal display), an organic EL display, a plasma display, or the like can be applied.

通信部43は、無線通信手段または有線通信手段によって、テレビ1などの他の装置と通信を行い、データのやりとりを行うものである。本実施形態では、通信部43が外部インターフェースとして機能し、テレビ1とHDMIケーブルで接続されているものとする。   The communication unit 43 communicates with other devices such as the television 1 and exchanges data by wireless communication means or wired communication means. In the present embodiment, it is assumed that the communication unit 43 functions as an external interface and is connected to the television 1 via an HDMI cable.

操作部44は、ユーザが携帯電話機2に指示信号を入力し、操作するためのものである。本実施形態では、操作部44は、図6に示すように、オンフックキー、オフフックキー、および、テンキーで構成されているものとする。オンフックキーは、携帯電話機2に音声通話機能を開始させるためのキーである。オフフックキーは、携帯電話機2に音声通話機能を終了させるためのキーである。テンキーは、数字、文字、記号等の入力などに使用するためのキーである。   The operation unit 44 is for a user to input and operate an instruction signal to the mobile phone 2. In the present embodiment, it is assumed that the operation unit 44 includes an on-hook key, an off-hook key, and a numeric keypad as shown in FIG. The on-hook key is a key for causing the mobile phone 2 to start a voice call function. The off-hook key is a key for causing the mobile phone 2 to end the voice call function. The numeric keypad is a key used for inputting numbers, characters, symbols, and the like.

図8は、携帯電話機2の操作部44のキー配置の一例を示す図である。なお、操作部44が、上述のキー以外に、例えば、十字キーやファンクションキー等を備えていてもよい。また、図8に示す操作部44のキー配置はあくまで一例であって、図8に示すキー配置に限るものではなく、キー配置を任意に設計してもよい。   FIG. 8 is a diagram illustrating an example of the key arrangement of the operation unit 44 of the mobile phone 2. Note that the operation unit 44 may include, for example, a cross key or a function key in addition to the above-described keys. The key arrangement of the operation unit 44 shown in FIG. 8 is merely an example, and the key arrangement is not limited to the key arrangement shown in FIG. 8, and the key arrangement may be arbitrarily designed.

制御部40は、記憶部41から一時記憶部(不図示)に読み出されたプログラムを実行することにより、各種の演算を行うと共に、携帯電話機2が備える各部を統括的に制御するものである。   The control unit 40 executes various programs by executing a program read from the storage unit 41 to a temporary storage unit (not shown), and comprehensively controls each unit included in the mobile phone 2. .

本実施形態では、制御部40は、機能ブロックとして、表示制御部51、出力モード切替部52、携帯電話機制御部53、および、キー変換情報特定部(機種情報取得手段、操作情報変換テーブル特定手段、変換テーブル送信手段)54を備える構成である。これらの制御部40の各機能ブロック(51〜54)は、CPUが、ROM等で実現された記憶装置に記憶されているプログラムをRAM等で実現された一時記憶部に読み出して実行することで実現できる。   In the present embodiment, the control unit 40 includes, as function blocks, a display control unit 51, an output mode switching unit 52, a mobile phone control unit 53, and a key conversion information specifying unit (model information acquisition unit, operation information conversion table specifying unit). , Conversion table transmission means) 54. Each functional block (51 to 54) of the control unit 40 is executed by the CPU reading a program stored in a storage device realized by a ROM or the like to a temporary storage unit realized by a RAM or the like and executing it. realizable.

表示制御部51は、携帯電話機制御部53の指示に従って、画像を生成し、生成した画像を出力するものである。表示制御部51は、通常出力モード時には、生成した画像を表示部42に出力し、外部出力モード時には、生成した画像を通信部43を介してテレビ1に送信する。なお、表示制御部51は、外部出力モード時にも、画像をテレビ1に送信すると共に、表示部42に出力してもよい。   The display control unit 51 generates an image in accordance with an instruction from the mobile phone control unit 53 and outputs the generated image. The display control unit 51 outputs the generated image to the display unit 42 in the normal output mode, and transmits the generated image to the television 1 via the communication unit 43 in the external output mode. Note that the display control unit 51 may transmit the image to the television 1 and output it to the display unit 42 even in the external output mode.

出力モード切替部52は、携帯電話機2の出力モードを切り替えるものである。例えば、出力モード切替部52は、操作部44から出力モードの切替指示を受信して、携帯電話機2の出力モードを切り替えてもよい。また、出力モード切替部52は、携帯電話機2がテレビ1と通信接続されたことを示す情報を通信部43から受信して、携帯電話機2の出力モードを通常出力モードから外部出力モードに切り替えてもよい。また、出力モード切替部52は、携帯電話機2がテレビ1との通信接続を終了したことを示す情報を通信部43から受信して、携帯電話機2の出力モードを外部出力モードから通常出力モードに切り替えてもよい。   The output mode switching unit 52 switches the output mode of the mobile phone 2. For example, the output mode switching unit 52 may receive an output mode switching instruction from the operation unit 44 and switch the output mode of the mobile phone 2. The output mode switching unit 52 receives information indicating that the mobile phone 2 is connected to the television 1 from the communication unit 43, and switches the output mode of the mobile phone 2 from the normal output mode to the external output mode. Also good. Further, the output mode switching unit 52 receives information indicating that the mobile phone 2 has ended the communication connection with the television 1 from the communication unit 43, and changes the output mode of the mobile phone 2 from the external output mode to the normal output mode. You may switch.

携帯電話機制御部53は、操作部44から送信された携帯電話機2を動作させるためのキー情報(携帯電話機キー情報)に基づいて、携帯電話機2を制御するものである。例えば、携帯電話機制御部53は、受信した携帯電話機キー情報が音声通話の開始を示すものであれば、所定の相手と音声通話を開始するように携帯電話機2を制御し、音声通話を開始したことを示す画像を表示制御部51に生成するように指示する。また、携帯電話機制御部53は、受信した携帯電話機キー情報が記憶部41に格納されている動画の再生を示すものであれば、所定の動画を再生するように制御し、表示制御部51に再生する動画を出力するように指示する。   The mobile phone control unit 53 controls the mobile phone 2 based on key information (mobile phone key information) for operating the mobile phone 2 transmitted from the operation unit 44. For example, if the received mobile phone key information indicates the start of a voice call, the mobile phone control unit 53 controls the mobile phone 2 to start a voice call with a predetermined partner and starts the voice call. The display control unit 51 is instructed to generate an image indicating this. In addition, if the received mobile phone key information indicates the reproduction of the moving image stored in the storage unit 41, the cellular phone control unit 53 controls the display control unit 51 to reproduce a predetermined moving image. Instructs to output the video to be played.

キー変換情報特定部54は、テレビ1から通信部43を介して、テレビ1の機種情報を受信して、キー変換情報の特定処理を実行するものである。具体的には、キー変換情報特定部54は、記憶部41のキー変換情報特定テーブル記憶部62に格納されているキー変換情報特定テーブル(第1の特定テーブル)を参照して、受信したテレビ1の機種情報に対応付けられているキー変換情報を特定し、特定したキー変換情報をキー変換情報記憶部61から読み出す。そして、キー変換情報特定部54は、読み出したキー変換情報を通信部43を介してテレビ1に送信する。   The key conversion information specifying unit 54 receives model information of the television 1 from the television 1 via the communication unit 43 and executes a key conversion information specifying process. Specifically, the key conversion information specifying unit 54 refers to the key conversion information specifying table (first specifying table) stored in the key conversion information specifying table storage unit 62 of the storage unit 41 and receives the received television. The key conversion information associated with one model information is specified, and the specified key conversion information is read from the key conversion information storage unit 61. Then, the key conversion information specifying unit 54 transmits the read key conversion information to the television 1 via the communication unit 43.

本実施形態では、キー変換情報特定部54は、テレビ1からテレビ1の機種情報として「TV1234A」という情報を受信し、図9に示すキー変換情報特定テーブルを参照して、「TV1234A」に対応するキー変換情報ID「001」を特定し、キー変換情報記憶部61に格納されているキー変換情報の中から、キー変換情報IDが「001」であるキー変換情報を読み出す。   In the present embodiment, the key conversion information specifying unit 54 receives information “TV1234A” as the model information of the TV 1 from the TV 1, and corresponds to “TV1234A” by referring to the key conversion information specifying table shown in FIG. The key conversion information ID “001” is identified, and the key conversion information with the key conversion information ID “001” is read from the key conversion information stored in the key conversion information storage unit 61.

記憶部41は、制御部40が実行する制御プログラムおよびOSプログラム、ならびに、制御部40が、携帯電話機2が有する各種機能(例えば、後述の、初期設定処理、携帯電話機キー情報解析処理など)を実行するときに読み出す各種の固定データを記憶するものである。本実施形態では、記憶部41には、例えば、キー変換情報記憶部61、および、キー変換情報特定テーブル記憶部62が含まれており、各種の固定データを記憶する。記憶部41は、例えば、内容の書き換えが可能な不揮発性メモリである、EPROM、EEPROM、フラッシュメモリなどで実現される。なお、内容の書き換えが不要な情報を記憶する記憶部としては、上述したとおり、記憶部41とは別の、図示しない、読出し専用の半導体メモリであるROMなどで実現されてもよい。   The storage unit 41 includes a control program and an OS program executed by the control unit 40, and various functions (for example, initial setting processing and mobile phone key information analysis processing described later) that the control unit 40 has in the mobile phone 2. Various fixed data to be read when executing are stored. In the present embodiment, the storage unit 41 includes, for example, a key conversion information storage unit 61 and a key conversion information specification table storage unit 62, and stores various types of fixed data. The storage unit 41 is realized by, for example, an EPROM, an EEPROM, a flash memory, or the like, which is a nonvolatile memory capable of rewriting contents. In addition, as described above, the storage unit that stores information that does not require rewriting of contents may be realized by a ROM that is a read-only semiconductor memory, not shown, different from the storage unit 41.

キー変換情報記憶部61は、1つまたは複数のキー変換情報を格納するものである。各キー変換情報には、キー変換情報を一意に特定するキー変換情報IDが付与されている。キー変換情報記憶部61に格納されているキー変換情報の一例として、図7に示すキー変換情報であってよい。   The key conversion information storage unit 61 stores one or a plurality of key conversion information. Each key conversion information is given a key conversion information ID that uniquely identifies the key conversion information. As an example of the key conversion information stored in the key conversion information storage unit 61, the key conversion information shown in FIG. 7 may be used.

キー変換情報特定テーブル記憶部62は、テレビ1の機種情報から、キー変換情報を特定する際にキー変換情報特定部54が参照するキー変換情報特定テーブルを格納するものである。キー変換情報特定テーブル記憶部62に格納されているキー変換情報特定テーブルとして、例えば、図9に示すキー変換情報特定テーブルであってよい。図9は、キー変換情報特定テーブルの一例を示す図である。図9に示すように、キー変換情報特定テーブルでは、テレビの機種情報とキー変換情報IDとが対応付けられている。   The key conversion information specification table storage unit 62 stores a key conversion information specification table that the key conversion information specification unit 54 refers to when specifying key conversion information from the model information of the television 1. As the key conversion information specification table stored in the key conversion information specification table storage unit 62, for example, the key conversion information specification table shown in FIG. 9 may be used. FIG. 9 is a diagram illustrating an example of the key conversion information identification table. As shown in FIG. 9, in the key conversion information identification table, the TV model information and the key conversion information ID are associated with each other.

〔テレビ1および携帯電話機2の処理の流れ〕
本実施形態に係るテレビ1および携帯電話機2の処理の流れについて、図10および図11に基づいて説明する。図10は、表示システム3に含まれるテレビ1及び携帯電話機2の処理の流れの一例を示すフローチャートである。
[Flow of processing of TV 1 and mobile phone 2]
A processing flow of the television 1 and the mobile phone 2 according to the present embodiment will be described with reference to FIGS. 10 and 11. FIG. 10 is a flowchart illustrating an example of the processing flow of the television 1 and the mobile phone 2 included in the display system 3.

図10に示すように、まず、テレビ1は、通常表示モードで動作しているものとし(S1)、携帯電話機2は、通常出力モードで動作しているものとする(S11)。   As shown in FIG. 10, first, it is assumed that the television 1 is operating in the normal display mode (S1), and the mobile phone 2 is operating in the normal output mode (S11).

テレビ1が通常表示モードで動作している間、表示モード切替部24は、外部入力表示モードへの切替指示が入力されるのを待つ(S2)。外部入力表示モードへの切替指示の入力がない場合(S2でNO)、表示モード切替部24は、表示モードの切り替えを行わず、テレビ1は通常表示モードで動作する(S1)。一方、外部入力表示モードへの切替指示がテレビ1に入力されると(S2でYES)、表示モード切替部24は、表示モードを外部入力表示モードに切り替える。そして、テレビ1は、外部入力表示モードで動作する。   While the television 1 is operating in the normal display mode, the display mode switching unit 24 waits for an instruction to switch to the external input display mode (S2). When there is no input of an instruction to switch to the external input display mode (NO in S2), the display mode switching unit 24 does not switch the display mode, and the television 1 operates in the normal display mode (S1). On the other hand, when an instruction to switch to the external input display mode is input to the television 1 (YES in S2), the display mode switching unit 24 switches the display mode to the external input display mode. The television 1 operates in the external input display mode.

また、携帯電話機2が通常出力モードで動作している間、出力モード切替部52は、外部出力モードへの切替指示が入力されるのを待つ(S12)。外部出力モードへの切替指示の入力がない場合(S12でNO)、出力モード切替部52は、出力モードの切り替えを行わず、携帯電話機2は通常出力モードで動作する(S11)。一方、外部出力モードへの切替指示が携帯電話機2に入力されると(S12でYES)、出力モード切替部52は、出力モードを外部出力モードに切り替える。そして、携帯電話機2は、外部出力モードで動作する。   Further, while the mobile phone 2 is operating in the normal output mode, the output mode switching unit 52 waits for an instruction to switch to the external output mode (S12). When there is no input of an instruction to switch to the external output mode (NO in S12), the output mode switching unit 52 does not switch the output mode, and the mobile phone 2 operates in the normal output mode (S11). On the other hand, when an instruction to switch to the external output mode is input to the mobile phone 2 (YES in S12), the output mode switching unit 52 switches the output mode to the external output mode. The cellular phone 2 operates in the external output mode.

テレビ1が外部入力表示モードに移行し、携帯電話機2が外部出力モードに移行すると、テレビ1および携帯電話機2は、初期設定処理(S3、S4、S13、S14)を実行する。   When the television 1 shifts to the external input display mode and the mobile phone 2 shifts to the external output mode, the television 1 and the mobile phone 2 execute initial setting processing (S3, S4, S13, S14).

具体的には、テレビ1が外部入力表示モードに移行すると、機種情報管理部28は、記憶部11の機種情報記憶部31に格納されているテレビ1の機種情報を読み出し、通信部13を介して、読み出したテレビ1の機種情報を携帯電話機2に送信する(S3)。   Specifically, when the television 1 shifts to the external input display mode, the model information management unit 28 reads the model information of the television 1 stored in the model information storage unit 31 of the storage unit 11 and passes through the communication unit 13. Then, the read model information of the television 1 is transmitted to the mobile phone 2 (S3).

携帯電話機2が外部出力モードに移行後、キー変換情報特定部54は、テレビ1から通信部43を介して、テレビ1の機種情報を受信すると、キー変換情報の特定処理を実行する(S4)。具体的には、キー変換情報特定部54は、記憶部41のキー変換情報特定テーブル記憶部62に格納されているキー変換情報特定テーブルを参照して、受信したテレビ1の機種情報に対応付けられているキー変換情報を特定し、特定したキー変換情報をキー変換情報記憶部61から読み出す。   After the mobile phone 2 shifts to the external output mode, when the key conversion information specifying unit 54 receives the model information of the television 1 from the television 1 via the communication unit 43, the key conversion information specifying unit 54 executes key conversion information specifying processing (S4). . Specifically, the key conversion information specifying unit 54 refers to the key conversion information specifying table stored in the key conversion information specifying table storage unit 62 of the storage unit 41 and associates it with the received model information of the television 1. The specified key conversion information is specified, and the specified key conversion information is read from the key conversion information storage unit 61.

キー変換情報特定部54は、読み出したキー変換情報を通信部43を介してテレビ1に送信する(S14)。   The key conversion information specifying unit 54 transmits the read key conversion information to the television 1 via the communication unit 43 (S14).

機種情報管理部28は、テレビ1の機種情報を携帯電話機2に送信した後、携帯電話機2からキー変換情報を受信すると、受信したキー変換情報を記憶部11のキー変換情報記憶部32に格納する(S4)。   After transmitting the model information of the television 1 to the mobile phone 2 and receiving key conversion information from the mobile phone 2, the model information management unit 28 stores the received key conversion information in the key conversion information storage unit 32 of the storage unit 11. (S4).

キー変換情報特定部54がテレビ1にキー変換情報を送信した後、携帯電話機2の表示制御部51は、携帯電話機制御部53の指示に基づいて画像を生成し、生成した画像を通信部43を介して、テレビ1に送信する(S15)。   After the key conversion information specifying unit 54 transmits the key conversion information to the television 1, the display control unit 51 of the mobile phone 2 generates an image based on an instruction from the mobile phone control unit 53, and the generated image is transmitted to the communication unit 43. Then, it is transmitted to the television 1 (S15).

また、機種情報管理部28がキー変換情報を格納した後、テレビ1の表示制御部21は、表示処理を実行する(S5)。具体的には、テレビ1の表示制御部21は、外部入力制御部26の指示に基づいて外部入力表示画像を生成し、外部入力表示画像におけるテレビ映像表示領域には、テレビ制御部22の指示に基づいてテレビの画像を組み込み、外部入力表示画像における携帯電話機出力画像表示領域には、通信部13を介して受信した携帯電話機2の出力画像を組み込み、これらの画像を組み込んだ外部入力表示画像を表示部12に表示させる。   In addition, after the model information management unit 28 stores the key conversion information, the display control unit 21 of the television 1 executes display processing (S5). Specifically, the display control unit 21 of the television 1 generates an external input display image based on an instruction from the external input control unit 26, and an instruction from the television control unit 22 is provided in the TV image display area in the external input display image. The mobile phone output image display area in the external input display image includes the output image of the mobile phone 2 received via the communication unit 13 and the external input display image in which these images are incorporated. Is displayed on the display unit 12.

次に、キー情報受信部14は、リモートコントローラ15からテレビキー情報が送信されるのを待つ(S6)。ここで、キー情報受信部14が、リモートコントローラ15からキー情報を受信すると、テレビ1は、テレビキー情報解析処理を実行する(S7)。また、携帯電話機2は、出力画像をテレビ1に送信した後、携帯電話機キー情報解析処理を実行する(S16)。テレビ1のテレビキー情報解析処理および携帯電話機2の携帯電話機キー情報解析処理の詳細については、後述する。   Next, the key information receiving unit 14 waits for the television key information to be transmitted from the remote controller 15 (S6). Here, when the key information receiving unit 14 receives the key information from the remote controller 15, the television 1 executes a TV key information analysis process (S7). In addition, after transmitting the output image to the television 1, the cellular phone 2 executes cellular phone key information analysis processing (S16). Details of the TV key information analysis processing of the TV 1 and the mobile phone key information analysis processing of the mobile phone 2 will be described later.

テレビキー情報解析処理が実行された後、もしくは、S6においてキー情報受信部14がキー情報を受信しなかった場合(S6でNO)、表示モード切替部24は、通常表示モードへの切替指示が入力されるのを待つ(S8)。テレビ1に通常表示モードへの切替指示が入力されなければ(S8でNO)、再度、テレビ1の表示制御部21は、表示処理を実行する(S5)。一方、テレビ1に通常表示モードへの切替指示が入力されると(S8でYES)、表示モード切替部24は、表示モードを通常表示モードに切り替える。そして、テレビ1は、通常表示モードに移行する(S9)。テレビ1は、通常表示モードに移行した後、通常表示モードで動作する(S1)。   After the TV key information analysis process is executed, or when the key information receiving unit 14 does not receive the key information in S6 (NO in S6), the display mode switching unit 24 is instructed to switch to the normal display mode. Wait for input (S8). If an instruction to switch to the normal display mode is not input to the television 1 (NO in S8), the display control unit 21 of the television 1 executes display processing again (S5). On the other hand, when an instruction to switch to the normal display mode is input to the television 1 (YES in S8), the display mode switching unit 24 switches the display mode to the normal display mode. Then, the television 1 shifts to the normal display mode (S9). The television 1 operates in the normal display mode after shifting to the normal display mode (S1).

また、携帯電話機キー情報解析処理が実行された後、出力モード切替部52は、通常出力モードへの切替指示が入力されるのを待つ(S17)。携帯電話機2に通常出力モードへの切替指示が入力されなければ(S17でNO)、再度、携帯電話機2の表示制御部51は、携帯電話機制御部53の指示に基づいて画像を生成し、生成した画像を通信部43を介して、テレビ1に送信する(S15)。一方、携帯電話機2に通常出力モードへの切替指示が入力されると(S17でYES)、出力モード切替部52は、表示モードを通常出力モードに切り替える。そして、携帯電話機2は、通常出力モードに移行する(S18)。携帯電話機2は、通常出力モードに移行した後、通常出力モードで動作する(S11)。   In addition, after the mobile phone key information analysis process is executed, the output mode switching unit 52 waits for an instruction to switch to the normal output mode (S17). If the switching instruction to the normal output mode is not input to the mobile phone 2 (NO in S17), the display control unit 51 of the mobile phone 2 generates an image again based on the instruction from the mobile phone control unit 53, and generates the image. The transmitted image is transmitted to the television 1 via the communication unit 43 (S15). On the other hand, when a switching instruction to the normal output mode is input to the mobile phone 2 (YES in S17), the output mode switching unit 52 switches the display mode to the normal output mode. Then, the mobile phone 2 shifts to the normal output mode (S18). The mobile phone 2 operates in the normal output mode after shifting to the normal output mode (S11).

なお、S9においてテレビ1が通常表示モードに戻り、S18において携帯電話機2が通常出力モードに戻った後、再び、テレビ1が外部入力表示モードに移行し、携帯電話機2が外部出力モードに移行した場合、テレビ1および携帯電話機2は、初期設定処理を実行しなくてもよい。つまり、この場合、テレビ1は、S3およびS4の処理を実行しなくてもよく、また、携帯電話機2は、S13およびS14の処理を実行しなくてもよい。   In S9, the television 1 returns to the normal display mode, and after the mobile phone 2 returns to the normal output mode in S18, the television 1 again shifts to the external input display mode, and the mobile phone 2 shifts to the external output mode. In this case, the television 1 and the mobile phone 2 do not have to execute the initial setting process. That is, in this case, the television 1 may not execute the processes of S3 and S4, and the mobile phone 2 may not execute the processes of S13 and S14.

〔テレビキー情報解析処理および携帯電話機キー情報解析処理の流れ〕
次に、図10に示すS7のテレビキー情報解析処理、および、S16の携帯電話機キー情報解析処理の流れについて、図11に基づいて説明する。図11は、テレビキー情報解析処理、および、携帯電話機キー情報解析処理の流れの一例を示すフローチャートである。
[Flow of TV key information analysis processing and mobile phone key information analysis processing]
Next, the flow of the TV key information analysis process of S7 shown in FIG. 10 and the mobile phone key information analysis process of S16 will be described with reference to FIG. FIG. 11 is a flowchart showing an example of the flow of TV key information analysis processing and mobile phone key information analysis processing.

まず、テレビ1が実行するテレビキー情報解析処理について説明する。   First, TV key information analysis processing executed by the TV 1 will be described.

キー情報受信部14がリモートコントローラ15からテレビキー情報を受信する(S21)。キー情報受信部14がテレビキー情報を受信すると、制御部10は、テレビ1の操作モードがテレビ操作モードであるか、携帯電話機操作モードであるかを判定する(S22)。テレビ1の操作モードがテレビ操作モードである場合、テレビ制御部22は、キー情報受信部14が受信したテレビキー情報に基づく処理を行う(S23)。   The key information receiving unit 14 receives TV key information from the remote controller 15 (S21). When the key information receiving unit 14 receives the television key information, the control unit 10 determines whether the operation mode of the television 1 is the television operation mode or the mobile phone operation mode (S22). When the operation mode of the television 1 is the television operation mode, the television control unit 22 performs a process based on the television key information received by the key information receiving unit 14 (S23).

一方、テレビ1の操作モードが携帯電話機操作モードである場合、キー情報変換部27は、記憶部11のキー変換情報記憶部32に格納されているキー変換情報を参照して、キー情報受信部14が受信したテレビキー情報を、対応する携帯電話機キー情報に変換する(S24)。そして、キー情報変換部27は、変換後の携帯電話機キー情報を通信部13を介して携帯電話機2に送信する(S25)。   On the other hand, when the operation mode of the television 1 is the mobile phone operation mode, the key information conversion unit 27 refers to the key conversion information stored in the key conversion information storage unit 32 of the storage unit 11 and refers to the key information reception unit. The TV key information received by 14 is converted into corresponding mobile phone key information (S24). Then, the key information conversion unit 27 transmits the converted mobile phone key information to the mobile phone 2 via the communication unit 13 (S25).

次に携帯電話機2が実行する携帯電話機キー情報解析処理について説明する。   Next, mobile phone key information analysis processing executed by the mobile phone 2 will be described.

携帯電話機2の携帯電話機制御部53は、テレビ1から携帯電話機キー情報が送信されるのを待つ(S31)。テレビ1から携帯電話機キー情報を受信すると(S31でYES)、携帯電話機制御部53は、受信した携帯電話機キー情報に基づく処理を実行する(S32)。一方、テレビ1から携帯電話機キー情報が送信されなければ(S31でNO)、携帯電話機制御部53は、何も処理をせず、携帯電話機キー情報解析処理を終了する。   The mobile phone control unit 53 of the mobile phone 2 waits for the mobile phone key information to be transmitted from the television 1 (S31). When mobile phone key information is received from the television 1 (YES in S31), the mobile phone control unit 53 executes processing based on the received mobile phone key information (S32). On the other hand, if the mobile phone key information is not transmitted from the television 1 (NO in S31), the mobile phone control unit 53 does not perform any processing and ends the mobile phone key information analysis processing.

上述のように、本発明に係る表示システム3では、テレビ1は、リモートコントローラ15からテレビキー情報を受信し、受信したテレビキー情報を対応する携帯電話機キー情報に変換して、変換後の携帯電話機キー情報を携帯電話機2に送信する。次に、携帯電話機2は、受信した携帯電話機キー情報に基づいて動作し、出力画像をテレビ1に送信する。そして、テレビ1は、携帯電話機2が出力する出力画像を受信して、受信した出力画像を表示する。   As described above, in the display system 3 according to the present invention, the television 1 receives the TV key information from the remote controller 15, converts the received TV key information into the corresponding mobile phone key information, and converts the converted mobile phone information. The telephone key information is transmitted to the mobile phone 2. Next, the cellular phone 2 operates based on the received cellular phone key information, and transmits an output image to the television 1. Then, the television 1 receives the output image output from the mobile phone 2 and displays the received output image.

そのため、テレビ1を視聴するユーザは、リモートコントローラ15を操作してテレビ1にテレビキー情報を送信することによって、送信したテレビキー情報に対応する携帯電話機キー情報に基づいて携帯電話機2を動作させて、テレビ1にその動作に基づく携帯電話機2の出力画像を表示させることができる。すなわち、ユーザは、テレビ1に携帯電話機2の出力画像を表示させている状態において、リモートコントローラ15を操作することによって、携帯電話機2を操作し、その操作に基づく携帯電話機2の出力画像をテレビ1に表示させることができる。   Therefore, a user who views the television 1 operates the remote controller 15 to transmit the TV key information to the TV 1, thereby operating the mobile phone 2 based on the mobile phone key information corresponding to the transmitted TV key information. Thus, the output image of the mobile phone 2 based on the operation can be displayed on the television 1. That is, the user operates the mobile phone 2 by operating the remote controller 15 in a state where the output image of the mobile phone 2 is displayed on the TV 1, and the output image of the mobile phone 2 based on the operation is displayed on the TV. 1 can be displayed.

よって、ユーザは、テレビ1に携帯電話機2の出力画像を表示させている状態であっても、リモートコントローラ15のみを操作して、テレビ1に表示させている画像を制御することができるという効果を奏する。つまり、ユーザがリモートコントローラ15および携帯電話機2の両方を操作する必要がないため、テレビ1に携帯電話機2の出力画像を表示させている状態において、ユーザの操作を簡易にすることができるという効果を奏する。   Therefore, the user can control the image displayed on the television 1 by operating only the remote controller 15 even when the output image of the mobile phone 2 is displayed on the television 1. Play. That is, since the user does not need to operate both the remote controller 15 and the mobile phone 2, the user's operation can be simplified while the output image of the mobile phone 2 is displayed on the television 1. Play.

さらに、一般的に、リモートコントローラ15に備えられたキー(操作ボタン)の方が、携帯電話機2のキー(操作ボタン)より大きいため、リモートコントローラ15の方が操作しやすい。そのため、テレビ1に携帯電話機2の出力画像を表示させている状態において、携帯電話機2を操作することによって、テレビ1および携帯電話機2を制御するより、リモートコントローラ15を操作することによって、テレビ1および携帯電話機2を制御した方が操作性が向上し、ユーザにとって利便性が高くなる。   Furthermore, since the key (operation button) provided in the remote controller 15 is generally larger than the key (operation button) of the mobile phone 2, the remote controller 15 is easier to operate. Therefore, in the state where the output image of the mobile phone 2 is displayed on the television 1, the television 1 can be operated by operating the remote controller 15 rather than controlling the television 1 and the mobile phone 2 by operating the mobile phone 2. Controlling the mobile phone 2 improves operability and increases convenience for the user.

また、上述のように、本発明に係る表示システム3では、テレビ1にキーガイダンスを表示することによって、ユーザは、リモートコントローラ15のキーが携帯電話機2のどのキーに対応しているかを知ることができる。これにより、ユーザは、リモートコントローラ15を操作して、携帯電話機2に所望の動作を実行させることができる。   Further, as described above, in the display system 3 according to the present invention, the key guidance is displayed on the television 1 so that the user knows which key of the mobile phone 2 corresponds to the key of the remote controller 15. Can do. Accordingly, the user can operate the remote controller 15 to cause the mobile phone 2 to perform a desired operation.

その上、一般的に、携帯電話機2は、他の操作機器(リモートコントローラ15など)と異なり、固有のキー(操作ボタン)を備えている。また、携帯電話機2のキーは、他の操作機器と同機能のキーを備えていたとしても、そのキーの位置(キー配置)は、他の操作機器と異なる場合が多い。そのため、図5に示すようなキーガイダンスを表示することによって、ユーザは、携帯電話機2が固有に備えるキーであっても、そのキーがリモートコントローラ15等の操作機器のどのキーに対応しているかを直感的に理解することができる。   In addition, generally, the mobile phone 2 includes a unique key (operation button) unlike other operation devices (such as the remote controller 15). In addition, even if the keys of the mobile phone 2 are provided with keys having the same function as other operation devices, the positions of the keys (key arrangement) are often different from those of other operation devices. Therefore, by displaying the key guidance as shown in FIG. 5, the user corresponds to which key of the operating device such as the remote controller 15, even if the key is uniquely provided in the mobile phone 2. Can be understood intuitively.

また、上述のように、本発明に係る表示システム3では、携帯電話機2は、テレビ1からテレビ1の機種情報を取得し、テレビ1の機種情報に対応付けられているキー変換情報を特定し、特定したキー変換情報をテレビ1に送信する。これにより、出力画像の送信先であるテレビ1に対応するキー変換情報を特定し、そのキー変換情報を対応するテレビ1に送信することができる。   Further, as described above, in the display system 3 according to the present invention, the mobile phone 2 acquires the model information of the television 1 from the television 1 and specifies the key conversion information associated with the model information of the television 1. The specified key conversion information is transmitted to the television 1. Thereby, the key conversion information corresponding to the television 1 that is the transmission destination of the output image can be specified, and the key conversion information can be transmitted to the corresponding television 1.

すなわち、携帯電話機2が、出力画像の送信先であるテレビ1等の外部機器の機種を判別し、判別した機種に応じたキー変換情報を、当該外部機器に供給することによって、携帯電話機2の出力画像の送信先として、テレビやPC、他の携帯電話機等の様々な種類の外部機器に適用することができる。   That is, the mobile phone 2 determines the model of the external device such as the television 1 to which the output image is transmitted, and supplies the key conversion information corresponding to the determined model to the external device, whereby the mobile phone 2 The transmission destination of the output image can be applied to various types of external devices such as a television, a PC, and other mobile phones.

〔前提となる第2の実施形態〕
上記の実施形態では、携帯電話機2のキー変換情報特定部54がテレビ1の機種情報を用いて、記憶部41に格納されているキー変換情報を特定したが、本発明の前提となる第2の実施形態として、携帯電話機2のキー変換情報特定部54が、テレビ1の機種情報および自装置(携帯電話機2)の機種情報を用いて、ネットワーク上のサーバ(不図示)から、キー変換情報を取得する例を、図12および図13に基づいて説明する。第2の実施形態では、上記の実施形態において、以下に説明するように、記憶部41に格納されている情報と、キー変換情報特定部54が実行する処理とが異なるのみで、その他の構成は、上記の実施形態と同様である。
[Second Embodiment as Premise]
In the above embodiment, the key conversion information specifying unit 54 of the mobile phone 2 uses the model information of the television 1 to specify the key conversion information stored in the storage unit 41. However, the second conversion is a premise of the present invention. As an embodiment of the present invention, the key conversion information specifying unit 54 of the mobile phone 2 uses the model information of the television 1 and the model information of the own device (the mobile phone 2) from a server (not shown) on the network. An example of obtaining the above will be described with reference to FIGS. In the second embodiment, as described below, the information stored in the storage unit 41 is different from the process executed by the key conversion information specifying unit 54 in the above embodiment, and other configurations are different. Is the same as in the above embodiment.

本実施形態では、携帯電話機2の記憶部41には、キー変換情報およびキー変換情報特定テーブルが格納されておらず、代わりに、携帯電話機2の機種情報(第2の機種情報)が格納されている。携帯電話機2の記憶部41に格納されている携帯電話機2の機種情報は、例えば、図12に示すようなデータであればよい。図12は、携帯電話機2の機種情報の一例を示す図である。図12に示す例では、携帯電話機2の記憶部41には、携帯電話機2の機種情報として、携帯電話機2の機種を識別する文字列「HP9876Z」が格納されている。   In the present embodiment, the key conversion information and the key conversion information specifying table are not stored in the storage unit 41 of the mobile phone 2, and instead, the model information (second model information) of the mobile phone 2 is stored. ing. The model information of the mobile phone 2 stored in the storage unit 41 of the mobile phone 2 may be data as shown in FIG. FIG. 12 is a diagram illustrating an example of model information of the mobile phone 2. In the example shown in FIG. 12, the storage unit 41 of the mobile phone 2 stores a character string “HP9876Z” that identifies the model of the mobile phone 2 as the model information of the mobile phone 2.

また、本実施形態では、携帯電話機2は、通信部43がネットワークを介してサーバと接続しており、携帯電話機2は、当該サーバとデータのやりとりが可能な状態である。このサーバには、図13に示すキー変換情報特定テーブル(第2の特定テーブル)と、図7に示すキー変換情報とが格納されている。なお、サーバには、キー変換情報が1つまたは複数格納されている。   In the present embodiment, in the mobile phone 2, the communication unit 43 is connected to a server via a network, and the mobile phone 2 can exchange data with the server. This server stores a key conversion information specification table (second specification table) shown in FIG. 13 and key conversion information shown in FIG. The server stores one or more pieces of key conversion information.

本実施形態において、図13に示すように、キー変換情報特定テーブルは、テレビ1の機種情報および携帯電話機2の機種情報と、キー変換情報IDとが対応付けられている。   In the present embodiment, as shown in FIG. 13, the key conversion information identification table associates the model information of the television 1 and the model information of the mobile phone 2 with the key conversion information ID.

次に、キー変換情報特定部54が実行するキー変換情報の特定処理について説明する。まず、キー変換情報特定部54は、テレビ1から通信部43を介して、テレビ1の機種情報「TV1234A」を受信すると、記憶部41から図12に示す携帯電話機2の機種情報「HP9876Z」を読み出す。次に、キー変換情報特定部54は、サーバに格納されているキー変換情報特定テーブル(図13)を参照し、受信したテレビ1の機種情報「TV1234A」と、読み出した携帯電話機2の機種情報「HP9876Z」とに対応付けられているキー変換情報ID「001」を特定する。そして、キー変換情報特定部54は、特定したキー変換情報IDが「001」であるキー変換情報(図7)を、サーバから取得する。取得した後、キー変換情報特定部54は、取得したキー変換情報をテレビ1に送信する。   Next, the key conversion information specifying process executed by the key conversion information specifying unit 54 will be described. First, upon receiving the model information “TV1234A” of the television 1 from the television 1 via the communication unit 43, the key conversion information specifying unit 54 obtains the model information “HP9876Z” of the mobile phone 2 shown in FIG. read out. Next, the key conversion information specifying unit 54 refers to the key conversion information specifying table (FIG. 13) stored in the server, and receives the received model information “TV1234A” of the television 1 and the read model information of the mobile phone 2. The key conversion information ID “001” associated with “HP9876Z” is specified. Then, the key conversion information specifying unit 54 acquires key conversion information (FIG. 7) having the specified key conversion information ID “001” from the server. After the acquisition, the key conversion information specifying unit 54 transmits the acquired key conversion information to the television 1.

〔変形例1〕
上記の実施形態では、テレビ1と携帯電話機2とがHDMIケーブルで接続されているが、変形例1として、テレビ1と携帯電話機2とがBluetooth(登録商標)によって無線接続されている例を説明する。変形例1では、上記の実施形態において、テレビ1と携帯電話機2との接続方式が異なるのみで、その他の構成は、上記の実施形態と同様である。
[Modification 1]
In the above embodiment, the television 1 and the mobile phone 2 are connected by an HDMI cable. However, as a first modification, an example in which the television 1 and the mobile phone 2 are wirelessly connected by Bluetooth (registered trademark) will be described. To do. In Modification 1, only the connection method between the television 1 and the mobile phone 2 is different from that in the above embodiment, and other configurations are the same as those in the above embodiment.

テレビ1と携帯電話機2とがBluetooth(登録商標)によって無線接続されている場合、携帯電話機2の表示制御部51は、出力画像をテレビ1に送信する際に、Bluetoothのプロファイルの1つである、Video Distribution Profile(VDP)を使用して送信する。また、テレビ1のキー情報変換部27は、変換後の携帯電話機キー情報を携帯電話機2に送信する際に、Bluetoothのプロファイルの1つである、Human Interface Device Profile(HID)を使用して送信する。   When the television 1 and the mobile phone 2 are wirelessly connected by Bluetooth (registered trademark), the display control unit 51 of the mobile phone 2 is one of the profiles of Bluetooth when transmitting an output image to the television 1. , Using Video Distribution Profile (VDP). Further, the key information conversion unit 27 of the television 1 transmits using the Human Interface Device Profile (HID), which is one of the Bluetooth profiles, when transmitting the converted mobile phone key information to the mobile phone 2. To do.

〔第3の実施形態〕
以下、本発明の実施形態である第3の実施形態について、図14〜図19に基づいて詳細に説明する。
[Third Embodiment]
Hereinafter, a third embodiment, which is an embodiment of the present invention, will be described in detail with reference to FIGS.

なお、上述の実施形態と同じ構成要素については、同一の部材番号を付し、その説明を省略する。ここでは、上述の実施形態との相違点を中心に説明し、特に説明していない構成要素は、上述の実施形態と同様の構成・機能を有するものとする。   In addition, about the same component as the above-mentioned embodiment, the same member number is attached | subjected and the description is abbreviate | omitted. Here, differences from the above-described embodiment will be mainly described, and components that are not particularly described have the same configurations and functions as those of the above-described embodiment.

〔システムの概要〕
第3の実施形態の表示システム(音声通話システム)6の概要について、図14に基づいて説明する。図14は、本実施形態に係る表示システム6の概要を示す図である。図示のように、表示システム6は、テレビ(情報処理装置)4と、携帯電話機(通話装置)5と、リモートコントローラ(遠隔操作装置)16とを含むシステムである。
[System Overview]
An overview of the display system (voice call system) 6 according to the third embodiment will be described with reference to FIG. FIG. 14 is a diagram showing an overview of the display system 6 according to the present embodiment. As shown in the figure, the display system 6 is a system including a television (information processing device) 4, a mobile phone (calling device) 5, and a remote controller (remote operation device) 16.

テレビ4は、図2のテレビ1と同様の機能を有するとともに、音声信号の送受信機能を有するものである。なお、詳細は後述するが、テレビ4が送受信する音声信号は、携帯電話機5の通話機能によって、該携帯電話機5と、通話先の装置である通話相手装置(図示せず)との間で送受信される音声信号である。   The television 4 has a function similar to that of the television 1 of FIG. 2 and also has an audio signal transmission / reception function. Although details will be described later, audio signals transmitted / received by the television 4 are transmitted / received between the mobile phone 5 and a communication partner device (not shown), which is a call destination device, by the call function of the mobile phone 5. Audio signal.

携帯電話機5は、図2の携帯電話機2と同様の機能を有する。また、通話の開始および終了をテレビ4に通知する機能と、通話相手装置との間で送受信される音声信号の入力経路および出力経路を制御する機能を有する。なお、携帯電話機5による通話は、携帯電話網を介して行われるものであってもよいし、インターネット等のような他の通信ネットワークを介して行われるものであってもよい。   The mobile phone 5 has the same function as the mobile phone 2 of FIG. In addition, it has a function of notifying the television 4 of the start and end of a call and a function of controlling an input path and an output path of an audio signal transmitted / received to / from a call partner apparatus. Note that the call by the cellular phone 5 may be performed via a cellular phone network, or may be performed via another communication network such as the Internet.

リモートコントローラ16は、図2のリモートコントローラ15と同様の機能を有するとともに、ユーザの声を音声信号に変換することによって、携帯電話機5の通話相手装置に送信する音声信号を生成し、これをテレビ4に送信する機能と、テレビ4から携帯電話機5の通話相手装置から受信した音声信号を受信して音声出力する機能とを有する。   The remote controller 16 has a function similar to that of the remote controller 15 of FIG. 2, and converts a user's voice into an audio signal, thereby generating an audio signal to be transmitted to the communication partner device of the mobile phone 5, which is converted into a television set. 4 and a function of receiving a voice signal received from the other party device of the mobile phone 5 from the television 4 and outputting the voice.

以上のような構成を有する、表示システム6では、携帯電話機5に着信があったときに、リモートコントローラ16を操作して、通話を開始することができる。そして、通話開始後、携帯電話機5が通話相手装置から受信した音声信号を、テレビ4を介してリモートコントローラ16に送信し、リモートコントローラ16から音声出力する。   In the display system 6 having the above-described configuration, when the mobile phone 5 receives an incoming call, the remote controller 16 can be operated to start a call. After the start of the call, the mobile phone 5 transmits the audio signal received from the other party device to the remote controller 16 via the television 4 and outputs the audio from the remote controller 16.

これにより、ユーザは、リモートコントローラ16にて携帯電話機5を操作して通話を開始したときに、手元に携帯電話機5がなくとも、操作中のリモートコントローラ16から通話相手の声を聞くことができる。   Thus, when the user starts a call by operating the mobile phone 5 with the remote controller 16, the user can hear the voice of the other party from the operating remote controller 16 without the mobile phone 5 at hand. .

また、表示システム6では、リモートコントローラ16に対して音声入力ができるようになっている。そして、通話開始後に、リモートコントローラ16に入力された音声は、通話相手装置に送信する音声信号としてテレビ4に送信され、テレビ4から携帯電話機5に送信されて、通話相手装置に送信される。   In the display system 6, voice input can be made to the remote controller 16. Then, after the start of the call, the voice input to the remote controller 16 is transmitted to the television 4 as an audio signal to be transmitted to the other party device, transmitted from the television 4 to the mobile phone 5 and transmitted to the other party device.

このように、表示システム6では、リモートコントローラ16で携帯電話機5を操作して通話を開始して、リモートコントローラ16を用いて通話をすることができるようになっている。   As described above, in the display system 6, the mobile phone 5 is operated by the remote controller 16 to start a call, and the call can be made using the remote controller 16.

なお、表示システム6は、通話を行う通話装置と、通話装置の動作を制御する情報処理装置とを含むものであればよく、その構成要素はテレビ4と携帯電話機5に限られない。例えば、テレビ4の代わりにパーソナルコンピュータ等を適用することもできる。また、パーソナルコンピュータを適用する場合には、パーソナルコンピュータ自体が表示装置を備えていなくともよく、この場合には、表示装置とパーソナルコンピュータとが画像信号を送受信できるように、有線または無線で通信接続されていればよい。   Note that the display system 6 only needs to include a call device that performs a call and an information processing device that controls the operation of the call device, and the components thereof are not limited to the television 4 and the mobile phone 5. For example, a personal computer or the like can be applied instead of the television 4. When a personal computer is applied, the personal computer itself does not have to include a display device. In this case, the display device and the personal computer can communicate with each other by wire or wireless so that an image signal can be transmitted and received. It only has to be done.

続いて、テレビ4、リモートコントローラ16及び携帯電話機5の構成について、図15に基づいて説明する。図15は、表示システム6に含まれるテレビ4、携帯電話機5、およびリモートコントローラ16の要部構成を示すブロック図である。   Next, the configuration of the television 4, the remote controller 16, and the mobile phone 5 will be described with reference to FIG. FIG. 15 is a block diagram illustrating a main configuration of the television 4, the mobile phone 5, and the remote controller 16 included in the display system 6.

<テレビ4の構成>
図示のように、テレビ4は、図1のテレビ1が有する構成に加えて、テレビ側音声送受信部84を備える。さらに、テレビ4の制御部100は、図1のテレビ1の制御部10が有する構成に加えて、通話開始/終了通知受信部(通話検出手段)81と、テレビ側音声送受信制御部82と、テレビ側通話制御部(受信音声転送手段、送信音声転送手段)83とを備える。
<Configuration of TV 4>
As shown in the figure, the television 4 includes a television-side audio transmission / reception unit 84 in addition to the configuration of the television 1 in FIG. Furthermore, the control unit 100 of the television 4 includes a call start / end notification receiving unit (call detecting unit) 81, a television-side audio transmission / reception control unit 82, in addition to the configuration of the control unit 10 of the television 1 of FIG. A television-side call control unit (received voice transfer means, transmission voice transfer means) 83.

通話開始/終了通知受信部81は、携帯電話機5から送信される通話開始通知および通話終了通知を受信することによって、携帯電話機5が通話を開始したことを検出する。また、通話開始/終了通知受信部81は、通話開始通知を受信したときには、携帯電話機5が通話を開始した旨をテレビ側通話制御部83に通知し、通話終了通知を受信したときには、携帯電話機5が終了を開始した旨をテレビ側通話制御部83に通知する。   The call start / end notification receiving unit 81 detects that the mobile phone 5 has started a call by receiving a call start notification and a call end notification transmitted from the mobile phone 5. When the call start / end notification receiving unit 81 receives the call start notification, the call start / end notification receiving unit 81 notifies the television side call control unit 83 that the mobile phone 5 has started a call, and when receiving the call end notification, the mobile phone 5 5 is notified to the television-side call control unit 83.

テレビ側音声送受信制御部82は、音声信号の送受信を制御する。具体的には、テレビ側音声送受信部84を介してリモートコントローラ16から受信した音声信号を、通信部13から携帯電話機5に送信する。また、通信部13を介して携帯電話機5から受信した音声信号を、テレビ側音声送受信部84から上記リモートコントローラ16へと送信する。   The TV-side audio transmission / reception control unit 82 controls transmission / reception of audio signals. Specifically, the audio signal received from the remote controller 16 via the television-side audio transmission / reception unit 84 is transmitted from the communication unit 13 to the mobile phone 5. In addition, the audio signal received from the mobile phone 5 via the communication unit 13 is transmitted from the television-side audio transmission / reception unit 84 to the remote controller 16.

このように、テレビ4では、通信部13を介して携帯電話機5と音声信号(電話による通話のための音声信号)を送受信する。このため、通信部13は、音声信号の送受信が可能な構成とする必要がある。   As described above, the television 4 transmits and receives audio signals (audio signals for telephone calls) to and from the mobile phone 5 via the communication unit 13. For this reason, the communication unit 13 needs to be configured to be able to transmit and receive audio signals.

テレビ側通話制御部83は、リモートコントローラ16を用いた通話を可能にするための制御を行う。具体的には、テレビ側通話制御部83は、通話開始/終了通知受信部81が通話開始通知を受信した後、テレビ側音声送受信制御部82に指示して、リモートコントローラ16から受信した音声信号を携帯電話機5に送信して通話相手装置に送信させ、携帯電話機5から受信した音声信号をリモートコントローラ16に送信して出力させる処理を開始する。また、テレビ側通話制御部83は、通話開始/終了通知受信部81が通話終了通知を受信したときには、テレビ側音声送受信制御部82に指示してこの処理を終了させる。   The television-side call control unit 83 performs control for enabling a call using the remote controller 16. Specifically, the TV-side call control unit 83 instructs the TV-side audio transmission / reception control unit 82 to receive the audio signal received from the remote controller 16 after the call start / end notification receiving unit 81 receives the call start notification. Is transmitted to the mobile phone 5 to be transmitted to the other party device, and a process of transmitting and outputting the audio signal received from the mobile phone 5 to the remote controller 16 is started. Further, when the call start / end notification receiving unit 81 receives the call end notification, the TV side call control unit 83 instructs the TV side audio transmission / reception control unit 82 to end this process.

テレビ側音声送受信部84は、テレビ4とリモートコントローラ16との間で音声信号の送受信を行うためのインターフェースである。テレビ側音声送受信部84は、電話による音声信号の送信及び受信が可能なものであればよい。   The TV-side audio transmission / reception unit 84 is an interface for transmitting / receiving audio signals between the TV 4 and the remote controller 16. The TV-side audio transmission / reception unit 84 only needs to be capable of transmitting and receiving audio signals by telephone.

<リモートコントローラ16の構成>
リモートコントローラ16は、図1のリモートコントローラ15が有する構成に加えて、リモコン側音声送受信部85と、音声出力部(音声出力装置)86と、音声入力部(音声入力装置)87とを備える。
<Configuration of remote controller 16>
In addition to the configuration of the remote controller 15 of FIG. 1, the remote controller 16 includes a remote-side audio transmission / reception unit 85, an audio output unit (audio output device) 86, and an audio input unit (audio input device) 87.

リモコン側音声送受信部85は、テレビ側音声送受信部84と同様に、音声信号の送受信を行うためのインターフェースであり、テレビ側音声送受信部84と音声信号の送受信を行う。   Similarly to the television-side audio transmission / reception unit 84, the remote-control-side audio transmission / reception unit 85 is an interface for performing transmission / reception of audio signals, and transmits / receives audio signals to / from the television-side audio transmission / reception unit 84.

音声出力部86は、音声信号を音声に変換して出力する。具体的には、音声出力部86は、リモコン側音声送受信部85を介してテレビ4から受信した受信音声信号を音声に変換して出力する。音声出力部86としては、一般的なスピーカを適用することもできる。   The sound output unit 86 converts the sound signal into sound and outputs the sound. Specifically, the audio output unit 86 converts the received audio signal received from the television 4 via the remote-control-side audio transmission / reception unit 85 into audio and outputs the audio. As the audio output unit 86, a general speaker can be applied.

音声入力部87は、入力された音声を音声信号に変換して出力する。具体的には、音声入力部87は、入力されたユーザの音声を送信音声信号に変換して、リモコン側音声送受信部85に出力する。リモコン側音声送受信部85は、この送信音声信号をテレビ4に送信する。音声入力部87としては、一般的なマイクを適用することもできる。   The voice input unit 87 converts the input voice into a voice signal and outputs it. Specifically, the voice input unit 87 converts the input user's voice into a transmission voice signal and outputs the transmission voice signal to the remote-control-side voice transmission / reception unit 85. The remote-side audio transmission / reception unit 85 transmits this transmission audio signal to the television 4. As the audio input unit 87, a general microphone can be applied.

<携帯電話機5の構成>
携帯電話機5の制御部400は、図1の携帯電話機2の制御部40が有する構成に加えて、通話開始/終了通知部(通話開始通知手段)91と、携帯側音声送受信制御部92と、携帯側通話制御部(通話装置側受信音声転送手段、通話装置側送信音声転送手段)93とを備える。
<Configuration of mobile phone 5>
In addition to the configuration of the control unit 40 of the mobile phone 2 of FIG. 1, the control unit 400 of the mobile phone 5 includes a call start / end notification unit (call start notification means) 91, a mobile-side voice transmission / reception control unit 92, A mobile-side call control unit (calling device-side reception voice transfer means, calling device-side transmission voice transfer means) 93.

通話開始/終了通知部91は、携帯電話機操作モードにおいて、携帯電話機5で通話が開始されたこと(通話のための通信が開始されたこと)を検出して、その旨を携帯側通話制御部93に通知するとともに、通話が開始されたことを示す通話開始通知をテレビ4に送信する。また、通話開始/終了通知部91は、携帯電話機5で通話が終了されたことを検出して、その旨を携帯側通話制御部93に通知するとともに、通話が終了されたことを示す通話終了通知をテレビ4に送信する。なお、テレビ4への通知の送信は、通信部43を介して行う。   The call start / end notification unit 91 detects that a call is started on the mobile phone 5 in the mobile phone operation mode (communication for a call is started), and notifies the mobile side call control unit 93 and a call start notification indicating that the call has started is transmitted to the television 4. In addition, the call start / end notification unit 91 detects that the call has ended on the mobile phone 5 and notifies the mobile side call control unit 93 to that effect and also ends the call indicating that the call has ended. A notification is transmitted to the television 4. Note that the notification is transmitted to the television 4 via the communication unit 43.

携帯側音声送受信制御部92は、携帯側通話制御部93の指示に従い、通話時における音声信号の送受信経路を制御する。具体的には、携帯側音声送受信制御部92は、通話相手装置から受信した音声信号を、自機のスピーカ(図示せず)から出力する。また、自機のマイク(図示せず)に入力された音声に基づき生成された音声信号を通話相手装置に送信する。そして、携帯側通話制御部93の指示があった場合には、携帯側音声送受信制御部92は、通話相手装置から受信した音声信号を、通信部43を介してテレビ4に送信する。また、通信部43を介してテレビ4から受信した音声信号を通話相手装置に送信する。   The portable audio transmission / reception control unit 92 controls the transmission / reception path of the audio signal during a call in accordance with an instruction from the portable call control unit 93. Specifically, the mobile-side audio transmission / reception control unit 92 outputs an audio signal received from the call partner apparatus from its own speaker (not shown). In addition, an audio signal generated based on the audio input to the microphone (not shown) of the own device is transmitted to the call partner device. And when there exists an instruction | indication of the portable side call control part 93, the portable side audio | voice transmission / reception control part 92 transmits the audio | voice signal received from the other party apparatus to the television 4 via the communication part 43. FIG. In addition, the audio signal received from the television 4 via the communication unit 43 is transmitted to the call partner apparatus.

携帯側通話制御部93は、通話開始/終了通知部91が通話開始通知を送信した後、リモートコントローラ16を用いた通話を可能にするための制御を行う。具体的には、携帯側通話制御部93は、通話開始/終了通知部91から通話が開始された旨の通知を受信すると、通話開始/終了通知部91に指示して、通話開始通知を、通信部43を介してテレビ4に送信させる。また、携帯側音声送受信制御部92に指示して、通話相手装置から受信した音声信号を、通信部43を介してテレビ4に送信させる。そして、通信部43を介してテレビ4から受信した音声信号を通話相手装置に送信させる。   The portable-side call control unit 93 performs control for enabling a call using the remote controller 16 after the call start / end notification unit 91 transmits the call start notification. Specifically, when the mobile-side call control unit 93 receives a notification that the call has been started from the call start / end notification unit 91, the portable side call control unit 93 instructs the call start / end notification unit 91 to send a call start notification, It is transmitted to the television 4 via the communication unit 43. Further, the portable side audio transmission / reception control unit 92 is instructed to transmit the audio signal received from the other party device to the television 4 via the communication unit 43. And the audio | voice signal received from the television 4 via the communication part 43 is transmitted to a telephone call other apparatus.

また、携帯側音声送受信制御部92は、通話開始/終了通知部91が通話終了通知を送信した後、携帯側音声送受信制御部92に指示して、音声信号の送受信を終了(停止)させる。   In addition, after the call start / end notification unit 91 transmits a call end notification, the portable side audio transmission / reception control unit 92 instructs the portable side voice transmission / reception control unit 92 to end (stop) transmission / reception of the audio signal.

〔テレビ4および携帯電話機5が実行する処理の流れ〕
テレビ4および携帯電話機5が実行する処理の流れについて、図16に基づいて説明する。図16は、表示システム6に含まれるテレビ4及び携帯電話機5が実行する処理の一例を示すフローチャートである。なお、図16のS1〜S9、S11〜S18の処理は、図10のS1〜S9、S11〜S18の処理と同様であるから、ここでは説明を省略する。
[Flow of processing executed by television 4 and mobile phone 5]
The flow of processing executed by the television 4 and the mobile phone 5 will be described with reference to FIG. FIG. 16 is a flowchart illustrating an example of processing executed by the television 4 and the mobile phone 5 included in the display system 6. Note that the processes of S1 to S9 and S11 to S18 in FIG. 16 are the same as the processes of S1 to S9 and S11 to S18 in FIG.

テレビ4では、S2で外部入力表示モードへの切り替えが確認された後のS7においてテレビキー情報解析処理を行い、テレビキー情報解析処理で生成した携帯電話機キー情報を携帯電話機5に送信する。   In the television 4, the television key information analysis processing is performed in S 7 after the switching to the external input display mode is confirmed in S 2, and the cellular phone key information generated in the television key information analysis processing is transmitted to the cellular phone 5.

このように、外部入力表示モード(より詳細には携帯電話機操作モード)となったテレビ4では、リモートコントローラ16から受信したテレビキー情報(制御信号)に対応する携帯電話機キー情報(通話装置制御信号)を携帯電話機5に送信して、携帯電話機5の動作を制御する。このため、携帯電話機操作モードは、テレビ4が携帯電話機5を制御する通話装置制御モードと言うことができる。   As described above, in the television 4 that is in the external input display mode (more specifically, the cellular phone operation mode), cellular phone key information (calling device control signal) corresponding to the television key information (control signal) received from the remote controller 16. ) To the mobile phone 5 to control the operation of the mobile phone 5. Therefore, the mobile phone operation mode can be said to be a call device control mode in which the television 4 controls the mobile phone 5.

そして、S7に続くS41では、テレビ側通話制御部83が、音声通話の開始通知である通話開始通知または音声通話の終了通知である通話終了通知を受信したか確認する(S41)。   In S41 following S7, the television-side call control unit 83 confirms whether a call start notification which is a voice call start notification or a call end notification which is a voice call end notification is received (S41).

ここで、通話開始通知または通話終了通知の受信が確認された場合(S41でYES)には、S42の処理に進み、確認されなかった場合(S41でNO)にはS8の処理に進む。   If reception of a call start notification or call end notification is confirmed (YES in S41), the process proceeds to S42, and if not confirmed (NO in S41), the process proceeds to S8.

S41では、テレビ側通話制御部83は、受信を確認した通話開始通知または通話終了通知に基づいて、テレビ側音声制御変更処理を行い、音声信号の送受信を開始または終了する。テレビ側音声制御変更処理の終了後、処理はS8に進む。なお、テレビ側音声制御変更処理の詳細については後述する。   In S41, the television-side call control unit 83 performs a television-side audio control change process based on the call start notification or the call end notification that has been confirmed to be received, and starts or ends transmission / reception of audio signals. After the television-side audio control change process ends, the process proceeds to S8. Details of the TV-side audio control change process will be described later.

一方、携帯電話機5では、S12で外部出力モードへの切り替えが確認された後のS16においてテレビ4から受信した携帯電話機キー情報に基づいて、携帯電話機キー情報解析処理を行う。   On the other hand, the mobile phone 5 performs mobile phone key information analysis processing based on the mobile phone key information received from the television 4 in S16 after confirmation of switching to the external output mode in S12.

このように、外部出力モードとなった携帯電話機5では、テレビ4から受信する携帯電話機キー情報に従って処理を行うので、外部出力モードは、テレビ4からの制御を受ける被制御モードと言うことができる。   As described above, since the cellular phone 5 in the external output mode performs processing in accordance with the cellular phone key information received from the television 4, the external output mode can be said to be a controlled mode that receives control from the television 4. .

そして、S16に続くS51では、通話開始/終了通知部91が、音声通話を開始または終了したかどうかを確認する。なお、音声通話の開始/終了は、携帯電話機制御部53が音声通話を開始/終了したことを検出して判断してもよい。   In S51 subsequent to S16, the call start / end notification unit 91 confirms whether the voice call is started or ended. The start / end of the voice call may be determined by detecting that the mobile phone control unit 53 starts / ends the voice call.

ここで、音声通話の開始または終了が確認された場合(S51でYES)には、通話開始/終了通知部91が通話の開始を携帯側通話制御部93に通知して、処理はS52に進み、確認されなかった場合(S51でNO)にはS17の処理に進む。   If the start or end of the voice call is confirmed (YES in S51), the call start / end notification unit 91 notifies the mobile side call control unit 93 of the start of the call, and the process proceeds to S52. If not confirmed (NO in S51), the process proceeds to S17.

S52では、携帯側通話制御部93が、携帯側音声制御変更処理を行う(S52)。携帯側音声制御変更処理では、通話開始/終了通知部91が、音声通話開始通知または音声通話終了通知をテレビ4に送信し、また、携帯側通話制御部93が、音声信号の送受信態様(経路)を変更する。携帯側音声制御変更処理の後、処理はS17に進む。なお、携帯側音声制御変更処理の詳細は後述する。   In S52, the mobile-side call control unit 93 performs mobile-side voice control change processing (S52). In the mobile-side voice control change process, the call start / end notification unit 91 transmits a voice call start notification or a voice call end notification to the television 4, and the mobile-side call control unit 93 transmits / receives a voice signal (route) ). After the mobile-side voice control change process, the process proceeds to S17. Details of the mobile-side voice control change process will be described later.

〔テレビ側及び携帯側音声制御変更処理の流れ〕
次に、図16のテレビ側音声制御変更処理(S41)、及び携帯側音声制御変更処理(S52)の流れについて、図17に基づいて説明する。図17は、テレビ側音声制御変更処理及び携帯側音声制御変更処理の一例を示すフローチャートである。
[Flow of TV-side and mobile-side voice control change processing]
Next, the flow of the television-side audio control change process (S41) and the mobile-side audio control change process (S52) in FIG. 16 will be described with reference to FIG. FIG. 17 is a flowchart illustrating an example of the television-side audio control change process and the mobile-side audio control change process.

まず、テレビ側音声制御変更処理について説明する。   First, the television-side audio control change process will be described.

携帯電話機5から通話開始通知、または通話終了通知を受信した、通話開始/終了通知受信部81は、受信した通知が通話開始通知であるか通話終了通知であるかを確認する(S61)。そして、通話開始/終了通知受信部81は、確認の結果をテレビ側通話制御部83に通知する。   The call start / end notification receiving unit 81 that has received the call start notification or the call end notification from the mobile phone 5 checks whether the received notification is a call start notification or a call end notification (S61). The call start / end notification receiving unit 81 notifies the confirmation result to the television-side call control unit 83.

上記通話開始/終了通知受信部81から通話開始通知を検出した旨の通知を受信したテレビ側通話制御部83は、リモートコントローラ16のマイク(音声入力部87)からの入力を有効にする(S62)。具体的には、テレビ側通話制御部83は、テレビ側音声送受信制御部82を、音声信号の受信待ち受け状態とする。   The TV-side call control unit 83 that has received the notification that the call start notification has been detected from the call start / end notification receiving unit 81 enables the input from the microphone (voice input unit 87) of the remote controller 16 (S62). ). Specifically, the television-side call control unit 83 puts the television-side audio transmission / reception control unit 82 into a voice signal reception standby state.

また、テレビ側通話制御部83は、入力された音声を携帯電話機5に送信するように制御する(S63)。具体的には、テレビ側通話制御部83は、テレビ側音声送受信制御部82を介して受信した音声信号を携帯電話機5に送信するように、テレビ側音声送受信制御部82に指示する。   Further, the television-side call control unit 83 performs control so that the input voice is transmitted to the mobile phone 5 (S63). Specifically, the television-side call control unit 83 instructs the television-side audio transmission / reception control unit 82 to transmit the audio signal received via the television-side audio transmission / reception control unit 82 to the mobile phone 5.

ここで、リモートコントローラ16の音声入力部87に入力された音声は、音声信号に変換されて、リモコン側音声送受信部85からテレビ4に送信される。テレビ側音声送受信部84は、この音声信号を受信して、テレビ側音声送受信制御部82に出力する。そして、テレビ側音声送受信制御部82は、受信した音声信号を携帯電話機5に送信するようにS63で指示されているので、この音声信号を、通信部13を介して携帯電話機5に送信する。   Here, the audio input to the audio input unit 87 of the remote controller 16 is converted into an audio signal and transmitted from the remote-control-side audio transmission / reception unit 85 to the television 4. The TV-side audio transmission / reception unit 84 receives this audio signal and outputs it to the TV-side audio transmission / reception control unit 82. Then, the television-side audio transmission / reception control unit 82 is instructed in S63 to transmit the received audio signal to the mobile phone 5, and therefore transmits this audio signal to the mobile phone 5 via the communication unit 13.

すなわち、テレビ側通話制御部83は、通話開始通知の受信を確認した場合には、リモートコントローラ16の音声入力部87に入力された音声を、携帯電話機5に送信するように制御する。これにより、ユーザは、リモートコントローラ16を操作して、携帯電話機5による電話の通話を開始した後は、携帯電話機5のマイクではなく、リモートコントローラの音声入力部87に向かって話すことにより、その話し声を携帯電話機5に伝達することができる。   That is, the television-side call control unit 83 controls the voice input to the voice input unit 87 of the remote controller 16 to be transmitted to the mobile phone 5 when the reception of the call start notification is confirmed. Thereby, after the user operates the remote controller 16 to start a telephone call by the mobile phone 5, the user speaks not to the microphone of the mobile phone 5 but to the voice input unit 87 of the remote controller. Speaking voice can be transmitted to the mobile phone 5.

また、テレビ側通話制御部83は、携帯電話機5からの通話音声をリモートコントローラ16に出力するように制御する(S64)。具体的には、テレビ側通話制御部83は、通信部13を介して受信した音声信号をリモートコントローラ16に送信するように、テレビ側音声送受信制御部82に指示する。S64の処理が終了すると、テレビ側音声制御変更処理は終了となる。   In addition, the television-side call control unit 83 controls to output the call voice from the mobile phone 5 to the remote controller 16 (S64). Specifically, the television-side call control unit 83 instructs the television-side audio transmission / reception control unit 82 to transmit the audio signal received via the communication unit 13 to the remote controller 16. When the process of S64 ends, the television-side audio control change process ends.

詳細は後述するが、携帯電話機5は、リモートコントローラ16の操作により、音声通話が開始された場合、通話相手装置から受信した音声信号をテレビ4に送信する。このため、S64において、通信部13を介して受信した音声信号をリモートコントローラ16に送信するように指示されたテレビ側音声送受信制御部82は、この音声信号を、テレビ側音声送受信部84を介してリモートコントローラ16に送信する。そして、リモコン側音声送受信部85は、この音声信号を受信して音声出力部86に送信し、音声出力部86は、受信した音声信号に基づき音声出力する。   Although details will be described later, when a voice call is started by the operation of the remote controller 16, the mobile phone 5 transmits a voice signal received from the other party device to the television 4. Therefore, in S64, the television-side audio transmission / reception control unit 82 instructed to transmit the audio signal received via the communication unit 13 to the remote controller 16 transmits this audio signal via the television-side audio transmission / reception unit 84. To the remote controller 16. Then, the remote-side audio transmission / reception unit 85 receives this audio signal and transmits it to the audio output unit 86, and the audio output unit 86 outputs audio based on the received audio signal.

つまり、ユーザは、リモートコントローラ16を操作して、携帯電話機5による電話の通話を開始した後は、携帯電話機5のスピーカではなく、リモートコントローラの音声出力部86から、携帯電話機5による通話相手の声を聞くことができる。   That is, after the user operates the remote controller 16 to start a telephone call using the mobile phone 5, the user does not use the speaker of the mobile phone 5 but the voice output unit 86 of the remote controller to call the other party. I can hear the voice.

続いて、S61で通話終了通知の受信が確認された場合の処理(S65、S66)を説明する。S65では、テレビ側通話制御部83は、リモートコントローラ16のマイク(音声入力部87)からの入力を停止する。具体的には、テレビ側通話制御部83は、テレビ側音声送受信制御部82の音声信号の受信待ち受け状態を解除する。これにより、テレビ側音声送受信制御部82は、テレビ側音声送受信部84を介して受信した音声信号を、携帯電話機5に送信しない状態となる。   Next, the processing (S65, S66) when the reception of the call end notification is confirmed in S61 will be described. In S <b> 65, the television-side call control unit 83 stops input from the microphone (voice input unit 87) of the remote controller 16. Specifically, the television-side call control unit 83 cancels the audio signal reception standby state of the television-side audio transmission / reception control unit 82. As a result, the television-side audio transmission / reception control unit 82 is in a state where the audio signal received via the television-side audio transmission / reception unit 84 is not transmitted to the mobile phone 5.

また、テレビ側通話制御部83は、携帯電話機5およびリモートコントローラ16への音声送信を停止する(S66)。具体的には、テレビ側通話制御部83は、通信部13を介して受信した音声信号をリモートコントローラ16に送信しないように、テレビ側音声送受信制御部82に指示する。これにより、テレビ4を介した音声信号の送受信が全て終了する。S66の処理が終了すると、テレビ側音声制御変更処理は終了となる。   Further, the television-side call control unit 83 stops the voice transmission to the mobile phone 5 and the remote controller 16 (S66). Specifically, the television-side call control unit 83 instructs the television-side audio transmission / reception control unit 82 not to transmit the audio signal received via the communication unit 13 to the remote controller 16. Thereby, transmission / reception of the audio signal via the television 4 is all completed. When the process of S66 ends, the television-side audio control change process ends.

なお、S65、S66では、テレビ側通話制御部83は、リモートコントローラ16の音声出力部86および音声入力部87の動作を停止させてもよい。この場合には、例えば、テレビ4からリモートコントローラ16に制御信号を送信できるような通信インターフェースを設けるとともに、リモートコントローラ16には音声出力部86および音声入力部87のON/OFFを切り替えさせる制御部を設ければよい。これにより、上記通信インターフェースを介して、テレビ側通話制御部83からリモートコントローラ16の制御部に制御信号を送信して、音声出力部86および音声入力部87をOFFにすることによって音声信号の生成および出力を停止させることができる。   In S65 and S66, the television-side call control unit 83 may stop the operations of the audio output unit 86 and the audio input unit 87 of the remote controller 16. In this case, for example, a communication interface capable of transmitting a control signal from the television 4 to the remote controller 16 is provided, and the remote controller 16 causes the audio output unit 86 and the audio input unit 87 to be switched ON / OFF. May be provided. As a result, a control signal is transmitted from the TV-side call control unit 83 to the control unit of the remote controller 16 via the communication interface, and the audio output unit 86 and the audio input unit 87 are turned off to generate an audio signal. And the output can be stopped.

次に、携帯電話機5が行う携帯側音声制御変更処理について説明する。   Next, mobile side voice control change processing performed by the mobile phone 5 will be described.

携帯側通話制御部93は、音声通話が開始されたときに、通話開始/終了通知部91に指示して、音声通話開始通知をテレビ4に送信させる。また、音声通話が終了されたときには、音声通話終了通知をテレビ4に送信させる。指示を受けた通話開始/終了通知部91は、通信部43を介して音声通話開始通知または音声通話終了通知をテレビ4に送信する(S71)。   When the voice call is started, the portable side call control unit 93 instructs the call start / end notification unit 91 to transmit the voice call start notification to the television 4. When the voice call is terminated, a voice call end notification is transmitted to the television 4. Upon receiving the instruction, the call start / end notification unit 91 transmits a voice call start notification or a voice call end notification to the television 4 via the communication unit 43 (S71).

続いて、携帯側通話制御部93は、音声通話が開始されたか、終了されたかを確認する(S72)。   Subsequently, the mobile-side call control unit 93 confirms whether the voice call has been started or ended (S72).

ここで、音声通話が開始されたことを確認した場合には、S73の処理に進み、通話音声の出力を自機のスピーカからテレビ4に変更する。具体的には、携帯側通話制御部93は、携帯側音声送受信制御部92に指示して、通話相手装置から受信した音声信号をテレビ4に送信させる。この指示を受信した携帯側音声送受信制御部92は、以後、通話相手装置から受信した音声信号を、通信部43を介してテレビ4に送信する。   If it is confirmed that the voice call has been started, the process proceeds to S73, and the output of the call voice is changed from the speaker of the own device to the television 4. Specifically, the portable side call control unit 93 instructs the portable side voice transmission / reception control unit 92 to transmit the audio signal received from the call partner apparatus to the television 4. Receiving this instruction, the mobile audio transmission / reception control unit 92 subsequently transmits the audio signal received from the other party device to the television 4 via the communication unit 43.

また、携帯側通話制御部93は、音声の入力を、自機のマイクから、テレビ4からの入力に変更する(S74)。具体的には、携帯側通話制御部93は、携帯側音声送受信制御部92に指示して、テレビ4から受信する音声信号を、通話相手装置に送信させる。この指示を受信した携帯側音声送受信制御部92は、以後、通信部43を介してテレビ4から受信した音声信号を、通話相手装置に送信する。S74の処理が終了すると、携帯側音声制御変更処理は終了となる。   Further, the portable-side call control unit 93 changes the voice input from the own microphone to the input from the television 4 (S74). Specifically, the mobile-side call control unit 93 instructs the mobile-side audio transmission / reception control unit 92 to transmit an audio signal received from the television 4 to the call partner device. Receiving this instruction, the portable audio transmission / reception control unit 92 subsequently transmits the audio signal received from the television 4 via the communication unit 43 to the call partner device. When the process of S74 is completed, the mobile-side voice control change process is terminated.

一方、S72において、音声通話が終了されたことを確認した場合、処理はS75に進む。S75では、携帯側通話制御部93は、音声の制御を通常に戻す。具体的には、携帯側通話制御部93は、携帯側音声送受信制御部92に指示して、通話相手装置から受信した音声信号のテレビ4への送信を終了させ、当該音声信号の出力先を自機のスピーカに切り換えさせる。また、携帯側通話制御部93は、携帯側音声送受信制御部92に指示して、テレビ4から受信した音声信号の通話相手装置への送信を終了させ、当該音声信号の入力元を自機のマイクに切り換えさせる。   On the other hand, if it is confirmed in S72 that the voice call has been terminated, the process proceeds to S75. In S75, the portable-side call control unit 93 returns the voice control to normal. Specifically, the mobile side call control unit 93 instructs the mobile side audio transmission / reception control unit 92 to end transmission of the audio signal received from the call partner device to the television 4 and to set the output destination of the audio signal. Switch to your own speaker. In addition, the mobile side call control unit 93 instructs the mobile side audio transmission / reception control unit 92 to end transmission of the audio signal received from the television 4 to the call partner apparatus, and the input source of the audio signal is set to the own device. Switch to the microphone.

これにより、携帯電話機5は、自機が備えるスピーカとマイクで通話を行う通常の状態に戻り、携帯側音声制御変更処理は終了となる。なお、この状態に戻す処理を行うタイミングはこの例に限られない。例えば、携帯電話機操作モードが終了したタイミングで行ってもよい。   Thereby, the mobile phone 5 returns to a normal state in which a call is made with the speaker and the microphone included in the mobile phone 5 and the mobile-side voice control change process is ended. In addition, the timing which performs the process which returns to this state is not restricted to this example. For example, it may be performed when the mobile phone operation mode ends.

以上のように、表示システム6では、携帯電話機5は、リモートコントローラ16の操作によって、音声通話が開始されたときには、通話開始通知をテレビ4に通知するとともに、通話相手装置から受信した音声信号の出力先をテレビ4に切り換え、通話相手装置に送信する音声信号の入力元をテレビ4に切り換える。   As described above, in the display system 6, when a voice call is started by the operation of the remote controller 16, the mobile phone 5 notifies the television 4 of the call start notification and also transmits the voice signal received from the call partner device. The output destination is switched to the television 4, and the input source of the audio signal to be transmitted to the other party device is switched to the television 4.

そして、通話開始通知を受信したテレビ4は、リモートコントローラ16の音声入力部87に入力された音声に基づき生成された音声信号を受信して、携帯電話機5に送信するとともに、携帯電話機5から受信した、通話相手装置から受信した音声信号をリモートコントローラ16に送信して、リモートコントローラ16の音声出力部86から音声出力させる。   The television 4 that has received the call start notification receives an audio signal generated based on the audio input to the audio input unit 87 of the remote controller 16, transmits the audio signal to the mobile phone 5, and receives it from the mobile phone 5. The voice signal received from the other party device is transmitted to the remote controller 16, and the voice is output from the voice output unit 86 of the remote controller 16.

また、リモートコントローラ16の操作によって、音声通話が終了されたときには、携帯電話機5は、通話終了通知をテレビ4に通知するとともに、通話相手装置から受信した音声信号の出力先を自機のスピーカに戻し、通話相手装置に送信する音声信号の入力元を自機のマイクに戻す。   Further, when the voice call is terminated by the operation of the remote controller 16, the mobile phone 5 notifies the television 4 of a call termination notification, and the output destination of the voice signal received from the other party device is set to the speaker of the own device. Return the input source of the audio signal to be transmitted to the communication partner device to the microphone of the own device.

これにより、ユーザは、リモートコントローラ16を操作して通話を開始することができるとともに、通話開始後は、リモートコントローラ16を用いて音声通話を行うことができる。つまり、ユーザは、手元に携帯電話機5がなくとも、手持ちのリモートコントローラ16を用いて通話を行うことができるという効果を奏する。また、リモートコントローラ16を携帯電話機5に持ち替えることなく、スムーズに通話を行うことができるという効果を奏する。   As a result, the user can start a call by operating the remote controller 16 and can make a voice call using the remote controller 16 after the start of the call. That is, there is an effect that the user can make a call using the remote controller 16 even if the user does not have the cellular phone 5 at hand. Further, there is an effect that it is possible to make a call smoothly without changing the remote controller 16 to the mobile phone 5.

〔変形例1〕
上記では、リモートコントローラ16を用いた音声通話が可能な表示システム6について説明したが、テレビ電話が可能なように構成することもできる。なお、テレビ電話とは、通話のための音声信号の送受信を行うとともに、互いの画像を見ながら通話ができるように、画像信号の送受信も行う通信態様を指す。
[Modification 1]
In the above description, the display system 6 capable of making a voice call using the remote controller 16 has been described. However, the display system 6 may be configured to be capable of a videophone. Note that a videophone refers to a communication mode in which an audio signal is transmitted / received for a call and an image signal is also transmitted / received so that a call can be made while looking at each other's image.

ここでは、テレビ電話が可能に構成した例を図18に基づいて説明する。図18は、テレビ電話が可能な表示システム(音声通話システム)6aに含まれる、テレビ(情報処理装置)4a、携帯電話機(通話装置)5a、およびリモートコントローラ16の要部構成を示すブロック図である。なお、上述の実施形態と同じ構成要素については、同一の部材番号を付し、その説明を省略する。   Here, an example in which a videophone is configured will be described with reference to FIG. FIG. 18 is a block diagram showing a main configuration of a television (information processing device) 4a, a mobile phone (calling device) 5a, and a remote controller 16 included in a display system (voice call system) 6a capable of videophone. is there. In addition, about the same component as the above-mentioned embodiment, the same member number is attached | subjected and the description is abbreviate | omitted.

図18に示すように、テレビ4aは、第3の実施形態のテレビ4(図15参照)が有する構成に加えて、撮影部(撮像装置)90を備えている。また、テレビ4aは、テレビ4の制御部100の代わりに、テレビ側テレビ電話制御部(画像出力制御手段、画像入力制御手段)88を含む制御部100aを備えている。   As illustrated in FIG. 18, the television 4 a includes a photographing unit (imaging device) 90 in addition to the configuration of the television 4 (see FIG. 15) of the third embodiment. Further, the television 4 a includes a control unit 100 a including a television-side videophone control unit (image output control unit, image input control unit) 88 instead of the control unit 100 of the television 4.

撮影部90は、動画像を撮像するものである。表示システム6aでは、テレビ電話時に、撮影部90が撮像した画像が携帯電話機5aに送信される。なお、ここでは、テレビ4aが撮影部90を備えている例を示しているが、撮影部90はテレビ4aから独立した装置であってもよい。この場合には、テレビ4aは、撮影部90と有線または無線通信するためのインターフェースを備え、該インターフェースを介して、撮影部90の動作を制御し、撮影部90が撮像した画像を取得する構成とすればよい。   The imaging unit 90 captures a moving image. In the display system 6a, an image captured by the photographing unit 90 is transmitted to the mobile phone 5a during a videophone call. Here, an example in which the television 4a includes the photographing unit 90 is shown, but the photographing unit 90 may be a device independent of the television 4a. In this case, the television 4a includes an interface for wired or wireless communication with the imaging unit 90, and controls the operation of the imaging unit 90 via the interface to acquire an image captured by the imaging unit 90. And it is sufficient.

テレビ側テレビ電話制御部88は、テレビ4aを介したテレビ電話を可能にするための制御を行う。なお、テレビ側テレビ電話制御部88が実行する具体的な処理については後述する。   The TV-side videophone control unit 88 performs control to enable a videophone via the TV 4a. The specific processing executed by the TV-side videophone control unit 88 will be described later.

一方、携帯電話機5aは、第3の実施形態の携帯電話機5(図15参照)の制御部400の代わりに、携帯側テレビ電話制御部94を含む制御部400aを備えている構成である。   On the other hand, the mobile phone 5a is configured to include a control unit 400a including a mobile videophone control unit 94 instead of the control unit 400 of the mobile phone 5 (see FIG. 15) of the third embodiment.

携帯側テレビ電話制御部94は、テレビ4aを介したテレビ電話を可能にするための制御を行う。なお、携帯側テレビ電話制御部94が実行する具体的な処理については後述する。   The portable videophone control unit 94 performs control for enabling videophone via the TV 4a. Specific processing executed by the mobile videophone control unit 94 will be described later.

〔テレビ電話時の処理の流れ〕
ここでは、テレビ電話時に行われる処理の流れについて、図19に基づいて説明する。図19は、テレビ電話時にテレビ4aが実行するテレビ側テレビ電話処理、およびテレビ電話時に携帯電話機5aが実行する携帯側テレビ電話処理の一例を示すフローチャートである。
[Flow of processing during videophone calls]
Here, the flow of processing performed during a videophone call will be described with reference to FIG. FIG. 19 is a flowchart illustrating an example of a video-side videophone process executed by the TV 4a during a videophone call and a mobile-side videophone process executed by the mobile phone 5a during a videophone call.

なお、テレビ電話時には、通信相手との間で、音声信号と画像信号が送受信されるが、音声信号の送受信態様は、第3の実施形態と同様(図16、17参照)であるから、ここでは画像信号の送受信に関する処理を説明する。   Note that, during a videophone call, audio signals and image signals are transmitted / received to / from the communication partner. Since the transmission / reception mode of the audio signals is the same as in the third embodiment (see FIGS. 16 and 17), Now, processing related to transmission / reception of image signals will be described.

携帯電話機5aに着信があり、リモートコントローラ16の操作によって通話が開始されたときには、携帯側テレビ電話制御部94は、テレビ電話の着信であるか否かを確認する(S81)。なお、テレビ電話の着信であるか否かは、通話相手装置から受信した信号に画像信号が含まれているか否かによって判断してもよいし、通話相手装置から受信した信号にテレビ電話であることを示す信号が含まれているか否かによって判断してもよい。   When there is an incoming call to the mobile phone 5a and a call is started by operating the remote controller 16, the mobile-side videophone control unit 94 checks whether or not it is an incoming videophone call (S81). Whether or not the incoming call is a videophone call may be determined based on whether or not an image signal is included in the signal received from the call partner apparatus. This may be determined based on whether or not a signal indicating this is included.

そして、テレビ電話の着信であることを確認した場合(S81でYES)、携帯側テレビ電話制御部94は、通話開始/終了通知部91に指示して、テレビ電話の着信があったことを示すテレビ電話着信通知を、通信部43を介してテレビ4aに送信させる(S82)。なお、テレビ電話の着信でないことを確認した場合(S81でNO)、携帯側テレビ電話制御部94は、携帯側テレビ電話処理を終了する。   If it is confirmed that the incoming call is a videophone call (YES in S81), the portable videophone control unit 94 instructs the call start / end notification unit 91 to indicate that a videophone call has been received. A videophone call notification is transmitted to the TV 4a via the communication unit 43 (S82). When it is confirmed that the incoming call is not a videophone call (NO in S81), the mobile-side videophone control unit 94 ends the mobile-side videophone process.

また、携帯側テレビ電話制御部94は、通話相手装置から受信した画像信号の、通信部43を介したテレビ4aへの送信を開始する(S83)。つまり、ここでは、通信部43が、音声信号を送受信することができるものであるとともに、動画像の画像信号を送受信できるものである。通信部43と通信するテレビ4aの通信部13も同様である。なお、画像信号の送信は、通信部43とは別の通信経路で、音声信号とは別に行っても構わない。   Further, the portable videophone control unit 94 starts transmitting the image signal received from the other party device to the television 4a via the communication unit 43 (S83). That is, here, the communication unit 43 can transmit and receive an audio signal and can transmit and receive an image signal of a moving image. The same applies to the communication unit 13 of the television 4 a that communicates with the communication unit 43. Note that the transmission of the image signal may be performed separately from the audio signal through a communication path different from the communication unit 43.

一方、テレビ4aでは、通話開始/終了通知受信部81が、テレビ電話着信通知の受信を待ち受けている。すなわち、本変形例における通話開始/終了通知受信部81は、携帯電話機5aにおける通話の開始、終了に加えて、テレビ電話の開始、終了を検出する。そして、通話開始/終了通知受信部81は、テレビ電話着信通知の受信を確認する(S91)と、テレビ電話による通信が開始された旨をテレビ側テレビ電話制御部88に通知する。   On the other hand, in the television 4a, the call start / end notification receiving unit 81 waits for the reception of the incoming videophone call notification. That is, the call start / end notification receiving unit 81 in the present modification detects the start and end of a videophone in addition to the start and end of a call on the mobile phone 5a. Then, the call start / end notification receiving unit 81 confirms the reception of the incoming videophone call notification (S91), and notifies the video side videophone control unit 88 that the videophone communication has started.

この通知を受信したテレビ側テレビ電話制御部88は、撮影部90を動作させて画像の撮像を開始(S92)させ、撮像によって生成された画像信号の、通信部13を介した携帯電話機5aへの送信を開始する(S93)。   Receiving this notification, the video-side videophone control unit 88 operates the imaging unit 90 to start imaging (S92), and the image signal generated by the imaging is transmitted to the mobile phone 5a via the communication unit 13. Is started (S93).

また、テレビ側テレビ電話制御部88は、携帯電話機5aから受信した画像信号に基づく画像(動画像)を表示部(表示装置)12に表示させる(S94)。なお、テレビ側テレビ電話制御部88は、表示部12に表示する画像を切り換えてもよいし、既に表示されていた画像と並存する形で、受信した画像信号に基づく画像を表示させてもよい。   In addition, the video-side videophone control unit 88 displays an image (moving image) based on the image signal received from the mobile phone 5a on the display unit (display device) 12 (S94). The video-side videophone control unit 88 may switch the image to be displayed on the display unit 12, or may display an image based on the received image signal in a form coexisting with the image that has already been displayed. .

そして、携帯電話機5aでは、テレビ4aから受信した、撮影部90が生成した画像信号を、携帯側テレビ電話制御部94の制御によって、通話相手装置に送信する(S84)。   Then, the cellular phone 5a transmits the image signal generated by the photographing unit 90 received from the television 4a to the call partner device under the control of the portable-side videophone control unit 94 (S84).

これにより、通話相手装置から受信した画像信号に基づく画像がテレビ4aの表示部12に表示され、撮影部90が撮像した画像に基づく画像信号が通話相手装置に送信されるので、テレビ電話が成立する。   As a result, an image based on the image signal received from the other party device is displayed on the display unit 12 of the television 4a, and an image signal based on the image captured by the photographing unit 90 is transmitted to the other party device. To do.

テレビ電話中において、携帯側テレビ電話制御部94は、テレビ電話の終了を待ち受けている(S85)。テレビ電話の終了が確認できない場合(S85でNO)には、処理はS83に戻り、引き続き画像信号の送受信を行う。   During the videophone call, the mobile videophone control unit 94 waits for the videophone call to end (S85). If the end of the videophone call cannot be confirmed (NO in S85), the process returns to S83, and the image signal is continuously transmitted / received.

一方、テレビ電話が終了したことを確認したとき(S85でYES)には、テレビ電話が終了したことを示すテレビ電話終了通知を、通信部43を介してテレビ4aに送信する(S86)。また、携帯側テレビ電話制御部94は、テレビ4aに対する画像信号の送信を停止する(S87)。   On the other hand, when it is confirmed that the videophone call has ended (YES in S85), a videophone call end notification indicating that the videophone call has ended is transmitted to the TV 4a via the communication unit 43 (S86). In addition, the portable videophone control unit 94 stops the transmission of the image signal to the television 4a (S87).

そして、テレビ4aでは、テレビ側テレビ電話制御部88が、テレビ電話終了通知の受信を待ち受けており、テレビ電話終了通知の受信が確認される(S95)と、撮影部90による撮像を停止させ(S96)、撮像によって生成された画像信号の携帯電話機5aへの送信も停止する(S97)。また、テレビ側テレビ電話制御部88は、表示部12に表示する対象をテレビ電話受信前の状態に戻す(S98)。   In the television 4a, the video-side videophone control unit 88 waits for the reception of the videophone end notification, and when the reception of the videophone end notification is confirmed (S95), the imaging by the photographing unit 90 is stopped ( In S96, transmission of the image signal generated by the imaging to the mobile phone 5a is also stopped (S97). In addition, the video-side videophone control unit 88 returns the object to be displayed on the display unit 12 to the state before the videophone reception (S98).

このように、表示システム6aによれば、ユーザは、リモートコントローラ16の操作によって、テレビ電話による通信を開始することができ、通信開始後は、テレビ4aの表示部12および撮影部90を利用して、テレビ電話をすることができる。つまり、ユーザは、リモートコントローラ16を携帯電話機5aに持ち替えることなく、テレビ4aの画面でテレビ電話を楽しむことができる。   Thus, according to the display system 6a, the user can start videophone communication by operating the remote controller 16, and after starting communication, the display unit 12 and the photographing unit 90 of the TV 4a are used. You can make a videophone call. That is, the user can enjoy a videophone on the screen of the television 4a without changing the remote controller 16 to the mobile phone 5a.

〔変形例2〕
上記では、リモートコントローラに音声入力を行い、リモートコントローラから音声出力する例を示したが、音声の入力はテレビに対して行うようにしてもよく、音声の出力はテレビから行うようにしても構わない。
[Modification 2]
In the above example, voice input to the remote controller and voice output from the remote controller are shown. However, voice input may be performed to the television, and voice output may be performed from the television. Absent.

この場合、リモートコントローラは、図15のようなリモコン側音声送受信部85、音声出力部86、音声入力部87を備えている必要はなく、従来から用いられている一般的な構成のものとすることもできる。   In this case, the remote controller does not need to include the remote-side audio transmission / reception unit 85, the audio output unit 86, and the audio input unit 87 as shown in FIG. 15, but has a general configuration that has been conventionally used. You can also.

また、テレビは、リモートコントローラとの間で音声信号の送受信を行う必要がないため、図15のようなテレビ側音声送受信部84を備えている必要はないが、通話相手からの通話音声を出力するための音声出力部と、通話相手に送信する音声を入力するための音声入力部とを備えている必要がある。なお、音声出力部は、テレビ放送の音声出力のためのものを流用してもよい。   Further, since the TV does not need to transmit / receive audio signals to / from the remote controller, it is not necessary to include the TV-side audio transmitting / receiving unit 84 as shown in FIG. It is necessary to include a voice output unit for inputting voice and a voice input unit for inputting voice to be transmitted to the other party. Note that the audio output unit may be used for audio output for television broadcasting.

このような変形例における処理は、携帯電話機から受信した音声信号をリモートコントローラに送信せず、テレビの音声出力部から出力する点、およびリモートコントローラではユーザの音声入力を受け付けず、テレビの音声入力部で受け付ける点を除けば、図16、図17の例と同様である。   The processing in such a modification is that the audio signal received from the mobile phone is not transmitted to the remote controller and is output from the audio output unit of the TV, and the audio input of the TV is not received by the remote controller. Except for the point received by the unit, the example is the same as the example of FIGS.

〔変形例3〕
上記では、リモートコントローラまたはテレビに音声入力部および音声出力部を備える例を説明したが、音声入力部および音声出力部は、リモートコントローラまたはテレビに接続される外付けの機器であってもよい。
[Modification 3]
In the above description, an example in which a remote controller or a television is provided with an audio input unit and an audio output unit has been described. However, the audio input unit and the audio output unit may be external devices connected to the remote controller or the television.

この場合、リモートコントローラまたはテレビは、音声入力部および音声出力部の代わりに、音声入力部を接続するための接続インターフェースと、音声出力部を接続するための接続インターフェースとを備えていればよい。なお、接続インターフェースは、例えば、接続端子のようなものであっても構わない。   In this case, the remote controller or the TV only needs to include a connection interface for connecting the audio input unit and a connection interface for connecting the audio output unit, instead of the audio input unit and the audio output unit. The connection interface may be a connection terminal, for example.

ここで、音声入力部および音声出力部の代わりに、音声入力部を接続するための接続インターフェースおよび音声出力部を接続するための接続インターフェースを用いた場合には、当該接続インターフェースに音声入力部および音声出力部が接続されていなければ、音声の入力および出力が行われず、通話が成立しない。   Here, instead of the voice input unit and the voice output unit, when a connection interface for connecting the voice input unit and a connection interface for connecting the voice output unit are used, the voice input unit and the connection interface are connected to the connection interface. If the voice output unit is not connected, voice input and output are not performed, and a call is not established.

このため、音声入力部および音声出力部の代わりに、音声入力部を接続するための接続インターフェースおよび音声出力部を接続するための接続インターフェースを用いる場合には、通話が開始された後、音声入力部および音声出力部が接続されているか否かを検出し、接続されていないことが検出されたときには、音や光、画像の表示等によって、ユーザに接続を促すことが好ましい。   For this reason, when a connection interface for connecting the voice input unit and a connection interface for connecting the voice output unit are used instead of the voice input unit and the voice output unit, the voice input is performed after the call is started. It is preferable to prompt the user to connect by sound, light, image display, or the like when it is detected whether or not the audio output unit and the audio output unit are connected.

〔補足〕
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
[Supplement]
The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention.

最後に、テレビ1、4、4a、携帯電話機2、5、5aの各ブロック、特に制御部10、40、100、400、100a、および400aは、ハードウェアロジックによって構成してもよいし、次のようにCPUを用いてソフトウェアによって実現してもよい。   Finally, each block of the televisions 1, 4, 4a and the mobile phones 2, 5, 5a, particularly the control units 10, 40, 100, 400, 100a, and 400a may be configured by hardware logic. As described above, it may be realized by software using a CPU.

すなわち、テレビ1、4、4a、携帯電話機2、5、5aは、各機能を実現する制御プログラムの命令を実行するCPU、上記プログラムを格納したROM、上記プログラムを展開するRAM、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアであるテレビ1、4、4a、携帯電話機2、5、5aの制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、上記テレビ1、4、4a、携帯電話機2、5、5aに供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。   That is, the televisions 1, 4, 4a, and the mobile phones 2, 5, 5a include a CPU that executes instructions of a control program that realizes each function, a ROM that stores the program, a RAM that expands the program, the program, and various A storage device (recording medium) such as a memory for storing data is provided. An object of the present invention is to provide program codes (execution format program, intermediate code program, source program) of control programs for the televisions 1, 4, 4a and mobile phones 2, 5, 5a which are software for realizing the functions described above. A recording medium recorded so as to be readable by a computer is supplied to the televisions 1, 4, 4a and the cellular phones 2, 5, 5a, and the computer (or CPU or MPU) reads the program code recorded on the recording medium. It can also be achieved by executing.

上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD−ROM/MO/MD/DVD/CD−R等の光ディスクを含むディスク系、ICカード(メモリカードを含む)/光カード等のカード系、あるいはマスクROM/EPROM/EEPROM/フラッシュROM等の半導体メモリ系などを用いることができる。   Examples of the recording medium include a tape system such as a magnetic tape and a cassette tape, a magnetic disk such as a floppy (registered trademark) disk / hard disk, and an optical disk such as a CD-ROM / MO / MD / DVD / CD-R. Card system such as IC card, IC card (including memory card) / optical card, or semiconductor memory system such as mask ROM / EPROM / EEPROM / flash ROM.

また、テレビ1、4、4a、携帯電話機2、5、5aを通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、LAN、ISDN、VAN、CATV通信網、仮想専用網(virtual private network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、IEEE1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL回線等の有線でも、IrDAやリモコンのような赤外線、Bluetooth(登録商標)、802.11無線、HDR、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。   Further, the televisions 1, 4, 4a and the cellular phones 2, 5, 5a may be configured to be connectable to a communication network, and the program code may be supplied via the communication network. The communication network is not particularly limited. For example, the Internet, intranet, extranet, LAN, ISDN, VAN, CATV communication network, virtual private network, telephone line network, mobile communication network, satellite communication. A net or the like is available. Also, the transmission medium constituting the communication network is not particularly limited. For example, even in the case of wired such as IEEE 1394, USB, power line carrier, cable TV line, telephone line, ADSL line, etc., infrared rays such as IrDA and remote control, Bluetooth ( (Registered trademark), 802.11 wireless, HDR, mobile phone network, satellite line, terrestrial digital network, and the like can also be used. The present invention can also be realized in the form of a computer data signal embedded in a carrier wave in which the program code is embodied by electronic transmission.

〔本願発明の前提となる第1および第2の実施形態に記載の発明について〕
本願発明の前提となる第1および第2の実施形態に記載の発明は、以下のように表現することができる。すなわち、第1および第2の実施形態に記載の発明に係る表示装置は、端末装置から受信した画像を自装置の表示部に表示する表示装置であって、自装置を動作させるための第1の操作情報を上記端末装置以外から取得する操作情報取得手段と、上記第1の操作情報と、上記端末装置を動作させるための第2の操作情報とが対応付けられている操作情報変換テーブルを参照して、上記操作情報取得手段が取得した第1の操作情報を、対応する第2の操作情報に変換する操作情報変換手段と、上記操作情報変換手段が変換した第2の操作情報を上記端末装置に送信する操作情報送信手段とを備え、上記端末装置が、上記操作情報送信手段が送信した第2の操作情報に基づいて出力する出力画像を受信して、受信した当該出力画像を自装置の表示部に表示する表示制御手段をさらに備えることを特徴としている。
[About the invention described in the first and second embodiments, which is the premise of the present invention]
The inventions described in the first and second embodiments, which are the premise of the present invention, can be expressed as follows. That is, the display device according to the inventions described in the first and second embodiments is a display device that displays an image received from a terminal device on a display unit of the device, and is a first device for operating the device. An operation information conversion table in which operation information acquisition means for acquiring the operation information from other than the terminal device, the first operation information, and the second operation information for operating the terminal device are associated with each other. Referring to the operation information conversion means for converting the first operation information acquired by the operation information acquisition means into the corresponding second operation information, and the second operation information converted by the operation information conversion means Operation information transmitting means for transmitting to the terminal device, wherein the terminal device receives an output image output based on the second operation information transmitted by the operation information transmitting means, and automatically receives the received output image. Device display It is characterized by further comprising display control means for displaying.

また、第1および第2の実施形態に記載の発明に係る表示装置の制御方法は、端末装置から受信した画像を自装置の表示部に表示する表示装置の制御方法であって、自装置を動作させるための第1の操作情報を上記端末装置以外から取得する操作情報取得ステップと、上記第1の操作情報と、上記端末装置を動作させるための第2の操作情報とが対応付けられている操作情報変換テーブルを参照して、上記操作情報取得ステップにおいて取得した第1の操作情報を、対応する第2の操作情報に変換する操作情報変換ステップと、上記操作情報変換ステップにおいて変換した第2の操作情報を上記端末装置に送信する操作情報送信ステップとを含み、上記端末装置が、上記操作情報送信ステップにおいて送信された第2の操作情報に基づいて出力する出力画像を受信して、受信した当該出力画像を自装置の表示部に表示する表示制御ステップをさらに含むことを特徴としている。   The display device control method according to the inventions described in the first and second embodiments is a display device control method for displaying an image received from a terminal device on a display unit of the own device. An operation information acquisition step for acquiring first operation information for operating from other than the terminal device, the first operation information, and second operation information for operating the terminal device are associated with each other. Referring to the operation information conversion table, the operation information conversion step for converting the first operation information acquired in the operation information acquisition step into the corresponding second operation information, and the first operation information converted in the operation information conversion step An operation information transmission step of transmitting the operation information of 2 to the terminal device, wherein the terminal device outputs based on the second operation information transmitted in the operation information transmission step. Output image by receiving, the output image received is characterized by further comprising a display control step of displaying on the display unit of the apparatus.

上記の構成によれば、操作情報取得手段が、表示装置を動作させるための第1の操作情報を端末装置以外から取得し、操作情報変換手段が、第1の操作情報と、端末装置を動作させるための第2の操作情報とが対応付けられている操作情報変換テーブルを参照して、操作情報取得手段が取得した第1の操作情報を、対応する第2の操作情報に変換し、操作情報送信手段が、操作情報変換手段が変換した第2の操作情報を端末装置に送信する。次に、端末装置は、操作情報送信手段が送信した第2の操作情報を受信して、受信した第2の操作情報に基づいて動作し、出力画像を出力する。そして、表示制御手段は、端末装置が出力する出力画像を受信して、受信した出力画像を表示装置の表示部に表示する。   According to the above configuration, the operation information acquisition unit acquires the first operation information for operating the display device from other than the terminal device, and the operation information conversion unit operates the first operation information and the terminal device. The first operation information acquired by the operation information acquisition unit is converted into the corresponding second operation information with reference to the operation information conversion table associated with the second operation information for The information transmission means transmits the second operation information converted by the operation information conversion means to the terminal device. Next, the terminal device receives the second operation information transmitted by the operation information transmission unit, operates based on the received second operation information, and outputs an output image. The display control means receives the output image output from the terminal device and displays the received output image on the display unit of the display device.

そのため、端末装置の出力画像を表示する表示装置に対して、表示装置を動作させるための第1の操作情報を送信することによって、当該第1の操作情報に対応する第2の操作情報に基づいて端末装置を動作させて、表示装置にその動作に基づく端末装置の出力画像を表示させることができる。   Therefore, by transmitting the first operation information for operating the display device to the display device that displays the output image of the terminal device, the second operation information corresponding to the first operation information is transmitted. By operating the terminal device, the output image of the terminal device based on the operation can be displayed on the display device.

ここで、表示装置を動作させるための第1の操作情報を送信する機器として、例えば、表示装置を視聴する際にユーザが使用する、表示装置に付属のリモートコントローラ等の操作機器が考えられる。すなわち、ユーザは、表示装置に端末装置の出力画像を表示させている状態において、表示装置を動作させるための操作機器を操作することによって、端末装置を操作し、その操作に基づく端末装置の出力画像を表示装置に表示させることができる。   Here, as a device that transmits the first operation information for operating the display device, for example, an operation device such as a remote controller attached to the display device that is used by the user when viewing the display device can be considered. That is, the user operates the terminal device by operating an operating device for operating the display device in a state where the output image of the terminal device is displayed on the display device, and outputs the terminal device based on the operation. An image can be displayed on a display device.

よって、ユーザは、表示装置に端末装置の出力画像を表示させている状態であっても、表示装置を動作させるための操作機器のみを操作して、表示装置に表示させている画像を制御することができるという効果を奏する。つまり、ユーザが表示装置に付属の操作機器および端末装置の両方を操作する必要がないため、表示装置に端末装置の出力画像を表示させている状態において、ユーザの操作が簡易になるという効果を奏する。   Therefore, even in a state where the output image of the terminal device is displayed on the display device, the user operates only the operating device for operating the display device to control the image displayed on the display device. There is an effect that can be. That is, since the user does not need to operate both the operating device and the terminal device attached to the display device, the user operation is simplified in a state where the output image of the terminal device is displayed on the display device. Play.

また、第1および第2の実施形態に記載の発明に係る表示装置は、上記表示制御手段が、上記第1の操作情報と、上記第2の操作情報との対応関係を上記表示部に表示することが好ましい。   Further, in the display device according to the inventions described in the first and second embodiments, the display control unit displays a correspondence relationship between the first operation information and the second operation information on the display unit. It is preferable to do.

上記の構成によれば、表示制御手段が、第1の操作情報と、第2の操作情報との対応関係を表示装置の表示部に表示するので、ユーザは、第1の操作情報と第2の操作情報との対応関係を知ることができる。すなわち、ユーザは、表示装置に送信する第1の操作情報によって、端末装置がどのように動作するかを予測することができる。従って、ユーザは、所望の動作を端末装置に実行させることができる。   According to said structure, since a display control means displays the correspondence of 1st operation information and 2nd operation information on the display part of a display apparatus, a user is 1st operation information and 2nd It is possible to know the correspondence with the operation information. That is, the user can predict how the terminal device operates by the first operation information transmitted to the display device. Therefore, the user can cause the terminal device to execute a desired operation.

また、第1および第2の実施形態に記載の発明に係る端末装置は、上記表示装置から送信された第2の操作情報に基づいて出力する出力画像を上記表示装置に送信する端末装置であって、上記表示装置から、上記表示装置の機種を特定する第1の機種情報を取得する機種情報取得手段と、上記第1の機種情報と上記操作情報変換テーブルとが対応付けられている第1の特定テーブルを参照して、上記機種情報取得手段が取得した第1の機種情報に対応する操作情報変換テーブルを特定する操作情報変換テーブル特定手段と、上記操作情報変換テーブル特定手段が特定した操作情報変換テーブルを上記表示装置に送信する変換テーブル送信手段とを備えることが好ましい。   The terminal device according to the inventions described in the first and second embodiments is a terminal device that transmits an output image to be output based on the second operation information transmitted from the display device to the display device. Then, the model information acquisition means for acquiring the first model information for specifying the model of the display device from the display device, the first model information and the operation information conversion table are associated with each other. The operation information conversion table specifying means for specifying the operation information conversion table corresponding to the first model information acquired by the model information acquisition means, and the operation specified by the operation information conversion table specifying means It is preferable to include a conversion table transmitting means for transmitting the information conversion table to the display device.

上記の構成によれば、機種情報取得手段が、表示装置から、当該表示装置の機種を特定する第1の機種情報を取得し、操作情報変換テーブル特定手段が、第1の機種情報と操作情報変換テーブルとが対応付けられている第1の特定テーブルを参照して、機種情報取得手段が取得した第1の機種情報に対応する操作情報変換テーブルを特定し、変換テーブル送信手段が、操作情報変換テーブル特定手段が特定した操作情報変換テーブルを表示装置に送信する。   According to said structure, a model information acquisition means acquires the 1st model information which specifies the model of the said display apparatus from a display apparatus, and an operation information conversion table specification means has the 1st model information and operation information. The operation information conversion table corresponding to the first model information acquired by the model information acquisition unit is specified with reference to the first specific table associated with the conversion table, and the conversion table transmission unit performs the operation information The operation information conversion table specified by the conversion table specifying means is transmitted to the display device.

そのため、端末装置は、出力画像の送信先である表示装置から当該表示装置の機種を特定する第1の機種情報を取得することによって、当該表示装置を動作させるための第1の操作情報を第2の操作情報に変換するための操作情報変換テーブルを特定して、表示装置に送信することができる。よって、端末装置は、出力画像の送信先である表示装置に対応する操作情報変換テーブルを特定し、その操作情報交換テーブルを対応する表示装置に送信することができる。   Therefore, the terminal device obtains the first model information for specifying the model of the display device from the display device that is the transmission destination of the output image, thereby obtaining the first operation information for operating the display device. The operation information conversion table for converting into the operation information 2 can be identified and transmitted to the display device. Therefore, the terminal device can specify the operation information conversion table corresponding to the display device that is the transmission destination of the output image, and can transmit the operation information exchange table to the corresponding display device.

また、第1および第2の実施形態に記載の発明に係る端末装置は、上記表示装置から送信された第2の操作情報に基づいて出力する出力画像を上記表示装置に送信する端末装置であって、上記表示装置から、上記表示装置の機種を特定する第1の機種情報を取得する機種情報取得手段と、上記第1の機種情報と、端末装置の機種を特定する第2の機種情報と、上記操作情報変換テーブルとが対応付けられている第2の特定テーブルを参照して、上記機種情報取得手段が取得した第1の機種情報、および、自装置の機種を特定する第2の機種情報に対応する操作情報変換テーブルを特定する操作情報変換テーブル特定手段と、上記操作情報変換テーブル特定手段が特定した操作情報変換テーブルを上記表示装置に送信する変換テーブル送信手段とを備えることが好ましい。   The terminal device according to the inventions described in the first and second embodiments is a terminal device that transmits an output image to be output based on the second operation information transmitted from the display device to the display device. Then, from the display device, model information acquisition means for acquiring the first model information for specifying the model of the display device, the first model information, and the second model information for specifying the model of the terminal device; Referring to the second specific table associated with the operation information conversion table, the first model information acquired by the model information acquisition means and the second model for specifying the model of the device itself Operation information conversion table specifying means for specifying an operation information conversion table corresponding to information, and conversion table transmitting means for transmitting the operation information conversion table specified by the operation information conversion table specifying means to the display device Preferably comprises a.

上記の構成によれば、機種情報取得手段が、表示装置から、当該表示装置の機種を特定する第1の機種情報を取得し、操作情報変換テーブル特定手段が、第1の機種情報と、端末装置の機種を特定する第2の機種情報と、操作情報変換テーブルとが対応付けられている第2の特定テーブルを参照して、上記機種情報取得手段が取得した第1の機種情報、および、自装置の機種を特定する第2の機種情報に対応する操作情報変換テーブルを特定し、変換テーブル送信手段が、操作情報変換テーブル特定手段が特定した操作情報変換テーブルを上記表示装置に送信する。   According to said structure, a model information acquisition means acquires the 1st model information which specifies the model of the said display apparatus from a display apparatus, and an operation information conversion table specification means has a 1st model information and a terminal. A first model information acquired by the model information acquisition unit with reference to a second specification table in which a second model information for specifying a model of the device and an operation information conversion table are associated; The operation information conversion table corresponding to the second model information for specifying the model of the device itself is specified, and the conversion table transmitting means transmits the operation information conversion table specified by the operation information conversion table specifying means to the display device.

そのため、端末装置は、出力画像の送信先である表示装置から当該表示装置の機種を特定する第1の機種情報を取得することによって、当該表示装置を動作させるための第1の操作情報を、自装置を動作させるための第2の操作情報に変換するための操作情報変換テーブルを特定して、表示装置に送信することができる。よって、端末装置は、出力画像の送信先である表示装置に対応する操作情報変換テーブルを特定し、その操作情報交換テーブルを対応する表示装置に送信することができる。   Therefore, the terminal device acquires the first operation information for operating the display device by acquiring the first model information for specifying the model of the display device from the display device to which the output image is transmitted. An operation information conversion table for conversion into second operation information for operating the device itself can be identified and transmitted to the display device. Therefore, the terminal device can specify the operation information conversion table corresponding to the display device that is the transmission destination of the output image, and can transmit the operation information exchange table to the corresponding display device.

また、第1および第2の実施形態に記載の発明に係る表示システムは、上記表示装置と、上記端末装置とを含むことが好ましい。   Moreover, it is preferable that the display system according to the inventions described in the first and second embodiments includes the display device and the terminal device.

本発明の情報処理装置としては、通話装置と通信接続して、該通話装置の動作を制御可能なものであればよく、テレビ以外にもパーソナルコンピュータ等を適用することができる。また、本発明の通話装置としては、通話機能を有し、情報処理装置の制御に従って動作するものであればよく、携帯電話機以外の任意の通話装置を適用することができる。   The information processing apparatus of the present invention may be any apparatus that can be connected to and communicated with a telephone apparatus and can control the operation of the telephone apparatus. A personal computer or the like can be applied in addition to a television. In addition, the call device of the present invention is not limited as long as it has a call function and operates according to the control of the information processing device, and any call device other than a mobile phone can be applied.

4、4a テレビ(情報処理装置)
5、5a 携帯電話機(通話装置)
6、6a 表示システム(音声通話システム)
12 表示部(表示装置)
16 リモートコントローラ(遠隔操作装置)
81 通話開始/終了通知受信部(通話検出手段)
83 テレビ側通話制御部(受信音声転送手段、送信音声転送手段)
86 音声出力部(音声出力装置)
87 音声入力部(音声入力装置)
88 テレビ側テレビ電話制御部(画像出力制御手段、画像入力制御手段)
90 撮影部(撮像装置)
91 通話開始/終了通知部(通話開始通知手段)
93 携帯側通話制御部(通話装置側受信音声転送手段、通話装置側送信音声転送手段)
4, 4a Television (information processing equipment)
5, 5a Mobile phone (calling device)
6, 6a Display system (voice call system)
12 Display unit (display device)
16 Remote controller (remote control device)
81 Call start / end notification receiver (call detection means)
83 TV side call controller (received voice transfer means, transmission voice transfer means)
86 Audio output unit (Audio output device)
87 Voice input unit (voice input device)
88 TV-side videophone control unit (image output control means, image input control means)
90 Imaging unit (imaging device)
91 Call start / end notification section (call start notification means)
93 Mobile phone side call control unit (call device side reception voice transfer means, call device side transmission voice transfer means)

Claims (11)

遠隔操作装置から受信した制御信号に従って処理を行う通常動作モードと、遠隔操作装置から受信した制御信号に基づき、該制御信号に予め対応付けられた、通話装置の動作を制御するための通話装置制御信号を生成して該通話装置に送信する通話装置制御モードとを有する情報処理装置であって、
自装置が上記通話装置制御モードとなっている状態において、上記通話装置が通話を開始したことを検出する通話検出手段と、
上記通話検出手段が通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、自装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送手段と、
上記通話検出手段が通話の開始を検出した後、自装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送手段とを備えていることを特徴とする情報処理装置。
Based on the control signal received from the remote operation device and the normal operation mode in which processing is performed according to the control signal received from the remote operation device, the call device control for controlling the operation of the call device associated with the control signal in advance. An information processing device having a communication device control mode for generating a signal and transmitting the signal to the communication device,
Call detection means for detecting that the call device has started a call in a state where the own device is in the call device control mode;
After the call detection means detects the start of a call, the voice output device which receives the voice signal received from the call destination by the call device from the call device and outputs the sound provided in the own device or the remote control device Received voice transfer means for transmitting to
After the call detecting means detects the start of the call, the voice signal received from the voice input device that generates the voice signal corresponding to the input voice provided in the own device or the remote control device is transmitted to the call destination An information processing apparatus comprising: transmission voice transfer means for transmitting to the telephone device as a voice signal to be transmitted.
上記通話検出手段は、上記通話装置が通話を終了したことを検出し、
上記受信音声転送手段は、上記通話検出手段が通話の終了を検出したときに、音声信号の上記音声出力装置への送信を停止し、
上記送信音声転送手段は、上記通話検出手段が通話の終了を検出したときに、音声信号の上記通話装置への送信を停止することを特徴とする請求項1に記載の情報処理装置。
The call detection means detects that the call device has ended the call,
The received voice transfer means stops the transmission of the voice signal to the voice output device when the call detection means detects the end of the call,
2. The information processing apparatus according to claim 1, wherein the transmission voice transfer unit stops transmission of a voice signal to the call device when the call detection unit detects the end of the call.
上記音声出力装置及び上記音声入力装置は、上記遠隔操作装置に備えられており、
上記受信音声転送手段は、上記遠隔操作装置を介して上記音声出力装置に音声信号を送信し、
上記送信音声転送手段は、上記音声入力装置が生成した音声信号を、上記遠隔操作装置を介して受信することを特徴とする請求項1または2に記載の情報処理装置。
The voice output device and the voice input device are provided in the remote control device,
The received voice transfer means transmits a voice signal to the voice output device via the remote control device,
The information processing apparatus according to claim 1, wherein the transmission voice transfer unit receives the voice signal generated by the voice input device via the remote control device.
上記通話装置は、通話先と音声信号及び画像信号を送受信するテレビ電話機能を備え、
上記通話検出手段は、自装置が上記通話装置制御モードとなっている状態において、上記通話装置がテレビ電話による通信を開始したことを検出し、
上記通話検出手段が、テレビ電話による通信の開始を検出した後、上記通話装置から送信される、該通話装置が通話先から受信した画像信号を受信して自装置の備える表示装置に表示する画像出力制御手段と、
上記通話検出手段が、テレビ電話による通信の開始を検出した後、画像を撮影して画像信号を生成する撮像装置に撮影を開始させるとともに、該撮像装置から受信した画像信号を、上記通話先に送信する画像信号として、上記通話装置に送信する画像入力制御手段とを備えていることを特徴とする請求項1から3の何れか1項に記載の情報処理装置。
The call device includes a videophone function for transmitting and receiving voice signals and image signals to and from a call destination,
The call detection means detects that the call device has started a videophone communication in a state where the own device is in the call device control mode,
After the call detecting means detects the start of videophone communication, the image transmitted from the calling device is received by the calling device from the called party and displayed on the display device of the own device Output control means;
After the call detection means detects the start of communication by a videophone, the image pickup device that picks up an image and generates an image signal starts shooting, and the image signal received from the image pickup device is sent to the call destination. The information processing apparatus according to claim 1, further comprising an image input control unit that transmits the image signal to be transmitted to the call device.
自装置の操作部に対する入力操作に従って処理を行う通常動作モードと、自装置と通信接続された情報処理装置の制御に従って処理を行う被制御モードとを有する通話装置であって、
上記情報処理装置は、該情報処理装置または該情報処理装置を操作する遠隔操作装置が備える音声出力装置に音声信号を送信して音声出力させる機能と、該情報処理装置または上記遠隔操作装置が備える音声入力装置が、該音声入力装置に入力された音声に応じて生成した音声信号を受信する機能とを有するものであり、
自装置が上記被制御モードとなっている状態において、自装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、上記情報処理装置に送信する通話開始通知手段と、
上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送手段と、
上記通話開始通知手段が上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送手段とを備えていることを特徴とする通話装置。
A communication device having a normal operation mode in which processing is performed in accordance with an input operation on an operation unit of the own device, and a controlled mode in which processing is performed in accordance with control of an information processing device connected to the own device,
The information processing apparatus includes a function of transmitting an audio signal to an audio output apparatus included in the information processing apparatus or a remote operation apparatus that operates the information processing apparatus and outputting the audio signal, and the information processing apparatus or the remote operation apparatus. The voice input device has a function of receiving a voice signal generated according to the voice input to the voice input device;
A call start notification means for transmitting a call start notification indicating that a call is started to the information processing apparatus when the own apparatus starts a call in a state where the own apparatus is in the controlled mode;
After the call start notification means transmits the call start notification to the information processing apparatus, the call apparatus side received voice transfer means for transmitting the audio signal received from the call destination to the information processing apparatus;
After the call start notification means transmits the call start notification to the information processing apparatus, the apparatus includes a call apparatus side transmission voice transfer means for transmitting a voice signal received from the information processing apparatus to the call destination. A call device characterized by the above.
請求項1から4の何れか1項に記載の情報処理装置と、請求項5に記載の通話装置とを含むことを特徴とする音声通話システム。   A voice call system comprising: the information processing apparatus according to any one of claims 1 to 4; and the call apparatus according to claim 5. 遠隔操作装置から受信した制御信号に従って処理を行う通常動作モードと、遠隔操作装置から受信した制御信号に基づき、該制御信号に予め対応付けられた、通話装置の動作を制御するための通話装置制御信号を生成して該通話装置に送信する通話装置制御モードとを有する情報処理装置の制御方法であって、
上記情報処理装置が上記通話装置制御モードとなっている状態において、上記通話装置が通話を開始したことを検出する通話検出ステップと、
上記通話検出ステップで通話の開始を検出した後、上記通話装置が通話先から受信した音声信号を該通話装置から受信して、上記情報処理装置または上記遠隔操作装置が備える、音声を出力する音声出力装置に送信する受信音声転送ステップと、
上記通話検出ステップで通話の開始を検出した後、上記情報処理装置または上記遠隔操作装置が備える、入力された音声に応じた音声信号を生成する音声入力装置から受信した音声信号を、上記通話先に送信する音声信号として、上記通話装置に送信する送信音声転送ステップとを含むことを特徴とする情報処理装置の制御方法。
Based on the control signal received from the remote operation device and the normal operation mode in which processing is performed according to the control signal received from the remote operation device, the call device control for controlling the operation of the call device associated with the control signal in advance. A control method of an information processing device having a communication device control mode for generating a signal and transmitting the signal to the communication device,
A call detection step for detecting that the call device has started a call in a state where the information processing device is in the call device control mode;
After detecting the start of the call in the call detection step, the voice signal received by the call device from the call destination is received from the call device, and the voice provided in the information processing device or the remote control device outputs sound. A received voice transfer step to send to the output device;
After detecting the start of the call in the call detection step, the voice signal received from the voice input device that generates the voice signal corresponding to the input voice provided in the information processing device or the remote control device is A control method for an information processing apparatus, comprising: a transmission voice transfer step for transmitting to the telephone device as a voice signal to be transmitted to the communication device.
自装置の操作部に対する入力操作に従って処理を行う通常動作モードと、自装置と通信接続された情報処理装置の制御に従って処理を行う被制御モードとを有する通話装置の制御方法であって、
上記情報処理装置は、該情報処理装置または該情報処理装置を操作する遠隔操作装置が備える音声出力装置に音声信号を送信して音声出力させる機能と、該情報処理装置または上記遠隔操作装置が備える音声入力装置が、該音声入力装置に入力された音声に応じて生成した音声信号を受信する機能とを有するものであり、
上記通話装置が上記被制御モードとなっている状態において、上記通話装置が通話を開始したときに、通話を開始したことを示す通話開始通知を、上記情報処理装置に送信する通話開始通知ステップと、
上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、通話先から受信した音声信号を、上記情報処理装置に送信する通話装置側受信音声転送ステップと、
上記通話開始通知ステップで上記情報処理装置に上記通話開始通知を送信した後、上記情報処理装置から受信した音声信号を、上記通話先に送信する通話装置側送信音声転送ステップとを含むことを特徴とする通話装置の制御方法。
A communication device control method having a normal operation mode in which processing is performed in accordance with an input operation on an operation unit of the own device and a controlled mode in which processing is performed in accordance with control of an information processing device connected to the own device.
The information processing apparatus includes a function of transmitting an audio signal to an audio output apparatus included in the information processing apparatus or a remote operation apparatus that operates the information processing apparatus and outputting the audio signal, and the information processing apparatus or the remote operation apparatus. The voice input device has a function of receiving a voice signal generated according to the voice input to the voice input device;
A call start notification step for transmitting a call start notification indicating that a call is started to the information processing device when the call device starts a call in a state where the call device is in the controlled mode; ,
After transmitting the call start notification to the information processing device in the call start notification step, a call device side reception voice transfer step of transmitting a voice signal received from a call destination to the information processing device;
A call device-side transmission voice transfer step of transmitting a voice signal received from the information processing device to the call destination after transmitting the call start notification to the information processing device in the call start notification step. A method for controlling the communication device.
請求項1から4の何れか1項に記載の情報処理装置を動作させるための制御プログラムであって、コンピュータを上記各手段として機能させるための制御プログラム。   A control program for operating the information processing apparatus according to any one of claims 1 to 4, wherein the control program causes a computer to function as each of the means. 請求項5に記載の通話装置を動作させるための制御プログラムであって、コンピュータを上記各手段として機能させるための制御プログラム。   A control program for operating the communication device according to claim 5 for causing a computer to function as each of the means. 請求項9または10に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。   The computer-readable recording medium which recorded the control program of Claim 9 or 10.
JP2010258006A 2010-11-18 2010-11-18 Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium Pending JP2012109857A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010258006A JP2012109857A (en) 2010-11-18 2010-11-18 Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010258006A JP2012109857A (en) 2010-11-18 2010-11-18 Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium

Publications (1)

Publication Number Publication Date
JP2012109857A true JP2012109857A (en) 2012-06-07

Family

ID=46494988

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010258006A Pending JP2012109857A (en) 2010-11-18 2010-11-18 Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium

Country Status (1)

Country Link
JP (1) JP2012109857A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014165628A (en) * 2013-02-25 2014-09-08 Eibitsuto:Kk Television information system
JP2018142997A (en) * 2018-05-17 2018-09-13 株式会社ニコン Electronic apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014165628A (en) * 2013-02-25 2014-09-08 Eibitsuto:Kk Television information system
JP2018142997A (en) * 2018-05-17 2018-09-13 株式会社ニコン Electronic apparatus

Similar Documents

Publication Publication Date Title
CN104866264B (en) Mobile terminal, display equipment and its control method
KR100630204B1 (en) Device and method for performing multi-tasking in wireless terminal
KR101371413B1 (en) Photographing apparatus of performing communication and method thereof
JP4726901B2 (en) Communication terminal and program
JP2007300594A (en) Method of audio-visual communication using television set and television set using the same
JP7035245B2 (en) Mobile terminal device, TV receiver, and incoming call notification method
JP2004080289A (en) Communication device
JP2005151450A (en) Mobile terminal, video phone system, control program, and recording medium with program recorded thereon
JP5570868B2 (en) Display device, display device control method, control program, recording medium, terminal device, and display system
JP2012109857A (en) Information processor, call device, call system, control method of information processor, control method of call device, control program and recording medium
KR100734203B1 (en) A communication environment establishment equipment which intergrated interfacing information connected with a mobile phone, and method for establishment the same
JP2008054069A (en) Portable terminal device and program
JP2007081785A (en) Portable terminal and program
JP5324694B1 (en) Wireless connection control device and portable wireless connection slave unit
JP2005151073A (en) Portable terminal equipment having videophone function
KR100640429B1 (en) Multi-function device and method for controlling the device
JP4709107B2 (en) Television broadcast receiving apparatus and program
JP2005215158A (en) Image display device and its control method
KR20090046159A (en) A method for providing communication to use epg and an image apparatus using the same
JP2008072420A (en) Mobile phone device and program
US20050266862A1 (en) Apparatus and method for controlling a portable home theater with multiple functions using a wireless terminal
JP2013005409A (en) Mobile terminal
JP5345862B2 (en) Terminal device and program
JP5324696B1 (en) Wireless connection control device and portable wireless connection slave unit
JP4987108B2 (en) Mobile phone