JPH11316644A - 情報処理装置 - Google Patents

Abstract

(57)【要約】 【課題】 アイコン画像表示等を自動的に且つ適時にウ
インドウ表示に戻す。 【解決手段】 ピアノを弾く動画信号１８に応じた動画
がウインドウ１５に画面表示されると同時にニュースを
読み上げる音声信号１７が字幕としてアイコン画像２１
で画面表示されている際、前記音声信号１７に含まれる
情報「次は明日のお天気について・・」が、比較手段２
４において、操作者により予め定められた情報「天気」
と逐次比較され、一致した時点で、前記字幕のアイコン
画像表示がウインドウ表示に変更される。従って、音声
信号１７に含まれる情報が監視されて、操作者がアイコ
ン表示を手動でウインドウ表示に変更する操作の煩わし
さをなくすことができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、音声信号の入力機
能と、ディスプレイ装置の表示画面との双方を有する情
報処理装置の改良に関する。

【０００２】

【従来の技術】最近では、情報処理装置のマルチメディ
ア化の動きによって音声信号やビデオ等の動画を扱う機
能を持った情報処理装置が開発されてきている。また、
情報処理装置の画面上に複数のウィンドウと呼ばれる領
域を設けて、複数の文書等を情報処理装置の画面上のこ
れ等ウィンドウの各々に同時表示する，いわゆるマルチ
ウィンドウ表示は一般に普及している。更に、画面に
「アイコン」と呼ばれる予め設定した小さな図柄を複数
表示し、表示された複数のアイコンのうち何れかを操作
者がマウス等を用いて選択することによって情報処理装
置に対して所定の入力を行う方式も一般に普及してい
る。

【０００３】前記マルチウィンドウ表示においては、ウ
ィンドウに表示された文書等を一時的に参照しない場合
には、このウィンドウを「アイコン」として小面積に図
柄表４して縮小し、画面領域の有効活用を図ることが一
般に行われている。このように使用しないウィンドウを
アイコン化する場合、そのアイコンの図柄としては、そ
のウィンドウをアイコン化する際に、対応する記憶領域
から読み出された図柄が使用されて、この図柄が画面に
表示され、以後そのアイコンは再びウィンドウ化される
まで同じ図柄で静的に表示される。

【０００４】尚、１つのアイコンで、その表示中に図柄
が変更されるものがある。例えば、操作者がアイコンを
選択することによって初めて入力可能とするアイコンで
は、選択された時点で図柄を変更して、選択されたこと
を表示する。また、時計を表示するアイコンでは、時刻
の進行に応じて表示時刻が変更される。電子メールの着
信の有無を表示するアイコンでは、電子メールの着信状
況が定期的に監視され、電子メールの着信があった等の
状況の変化が検出された時点で図柄が変更される。但
し、以上のアイコンの図柄の変更は最も短い間隔でも数
秒程度であり、それより短い周期での更新はＣＰＵの負
担となる等の理由で行われない。つまり、従来の技術で
は、十分滑らかな動きをする動画としての，動的なアイ
コン画像は用いられていない。

【０００５】

【発明が解決しようとする課題】ところで、従来、音声
信号の入力機能とディスプレイ装置の表示画面との双方
を有する情報処理装置では、次の欠点があった。

【０００６】即ち、例えば所定のウィンドウに文書等を
表示すると同時に、この文書等に対応する所定の音声信
号を出力して発音している状態で、この表示中の文書等
のウィンドウをアイコン化すると共に、この文書等に代
えて他の文書等をウィンドウに表示した場合に、この他
の文書等に対応する他の音声信号が発音されているとき
には、前記アイコン化されたウィンドウの文書等に対応
する音声信号をも出力に混合して発音するとすれば、前
記新たに表示された文書等に対応する音声を聴き取るの
に障害となる場合が多い。

【０００７】これに対し、アイコン化されたウィンドウ
の文書等に対応する音声の発音を停止させる場合には、
新たに表示された文書等に対応する音声の聴き取りには
支障は無いものの、前記アイコン化されたウィンドウは
静的に表示されているため、操作者は、このアイコン化
されたウィンドウがその文書等に対応する音声信号に関
連付けられていることを看て取り難い欠点がある。

【０００８】本発明は前記のような従来の課題を解決す
べくなされたものであり、その目的は、音声信号の入力
機能とディスプレイ装置の表示画面との双方を有する情
報処理装置において、ディスプレイ装置の表示画面に例
えばアイコン表示がされている際に、音声信号に応じて
前記アイコン画像表示を自動的に且つ適時にウインドウ
表示することができる情報処理装置を提供することにあ
る。

【０００９】

【課題を解決するための手段】前記の目的を達成するた
め、請求項１記載の発明の情報処理装置は、表示画面を
有するディスプレイ装置と、音声信号を入力する音声信
号入力手段と、前記ディスプレイ装置の画面表示を制御
する表示制御手段と、前記音声信号入力手段により入力
された音声信号に含まれる情報を、予め操作者が定めた
情報と比較し、比較条件を満すか否かを検出する比較手
段とを備え、前記比較手段の比較結果に応じて、前記表
示制御手段による前記ディスプレイ装置の画面表示の態
様が変更されることを特徴とする。

【００１０】また、請求項２記載の発明は、前記請求項
１記載の情報処理装置において、ディスプレイ装置の画
面表示の態様は、前記比較条件を満すとき、アイコン表
示をウインドウ表示に変えるように変更されることを特
徴とする。

【００１１】更に、請求項３記載の発明は、前記請求項
１又は２記載の情報処理装置において、前記ディスプレ
イ装置の表示画面には、複数のウインドウが設定される
ことを特徴とする。

【００１２】加えて、請求項４記載の発明は、前記請求
項３記載の情報処理装置において、ディスプレイ装置の
画面表示の態様は、前記比較条件を満すとき、表示中の
ウインドウをアイコン表示に変えるように変更されるこ
とを特徴とする。

【００１３】また、請求項５記載の発明は、前記請求項
１、２又は４記載の情報処理装置において、前記音声信
号に含まれる情報は音量レベルであり、前記比較手段
は、前記音声信号の音量レベルが、予め操作者が定めた
音量レベル以上のとき、比較条件を満すことを検出する
ことを特徴とする。

【００１４】更に、請求項６記載の発明は、前記請求項
１、２又は４記載の情報処理装置において、前記比較手
段は、前記音声信号に含まれる音声を認識した文章の中
に、予め操作者が定めた文字列を含むとき、比較条件を
満すことを検出することを特徴とする。

【００１５】加えて、請求項７記載の発明は、前記請求
項１、２又は４記載の情報処理装置において、前記比較
手段は、前記音声信号の音源が、予め操作者が定めた音
源と一致するとき、比較条件を満すことを検出すること
を特徴とする。

【００１６】請求項８記載の発明は、前記請求項２又は
４記載の情報処理装置において、前記アイコン表示は、
動的なアイコン画像を表示することにより行われること
を特徴とする。

【００１７】以上の構成により、請求項１ないし請求項
８記載の発明では、文書等の所定の情報がディスプレイ
装置の表示画面にウインドウとして表示されないで例え
ばアイコン表示されている際に、入力された音声信号に
含まれる情報が、操作者が定めた情報に一致して比較条
件が満たされれば、この時点で前記アイコン表示が自動
的且つ適時にウインドウ表示に変更される。従って、操
作者がアイコン表示を手動でウインドウ表示に変更する
操作の煩わしさがない。しかも、変更後のウインドウ表
示内の内容が操作者の収集したい情報を含む場合には、
そのウインドウ表示により、操作者は情報を漏らさず読
み取ることが可能である。

【００１８】特に、請求項４記載の発明では、前記アイ
コン表示が自動的にウインドウ表示に変更される際に、
既に表示画面にウインドウ表示がある場合には、このウ
インドウ表示がアイコン表示に変更される。その結果、
この小さいアイコン表示は、前記自動的に変更されるウ
インドウ表示の支障にならない。

【００１９】

【発明の実施の形態】以下、本発明の実施の形態を図面
に基いて説明する。

【００２０】（第１の実施の形態）図１において、１は
音声入出力手段、２はディスプレイ装置、３は音声情報
抽出手段、４はアイコン画像生成手段、５は表示装置制
御手段、６は画像合成手段、７はＣＧ画像生成手段、１
２は映像信号変換手段、８は以上の手段１〜７、１２を
備えた情報処理装置である。

【００２１】前記音声入出力手段１は、外部から複数の
音声信号が入力されると共に、スピーカ９と、音声混合
増幅器１０と、音声信号選択器１１とを有する。前記音
声混合増幅器１０は、入力された複数の音声信号を所定
の重みにより重み付けし、その重み付け和を計算し、そ
の計算結果をスピーカ９から出力する混合機能を有す
る。この混合機能には、入力された複数の音声信号のう
ち所定の音声信号を出力し又は出力させない選択機能を
含んでいる。また、前記重みは可変である。前記音声信
号選択器１１は、入力された複数の音声信号のうち、前
記音声混合増幅器１０の選択機能により出力されない音
声信号を選択して出力する機能を有している。

【００２２】前記ディスプレイ装置２には、図示しない
が、画面上に複数のウィンドウが設定される。

【００２３】前記音声情報抽出手段３は、前記音声信号
選択器１１から出力される音声信号より実時間情報とし
て、その音声信号の音量レベルを抽出するものである。

【００２４】前記アイコン画像生成手段４は、前記音声
情報抽出手段３により抽出された実時間情報に応じて動
的なアイコン画像を生成するものであり、その動的なア
イコン画像としては、アイコン画像の大きさを前記抽出
された音量レベルに応じて経時的に大小変化させて動的
に見せる図２（ｃ）に示すような画像を生成して用い
る。

【００２５】前記ＣＧ画像生成手段７は、図２（ｂ）に
示すように、前記ディスプレイ装置２の画面上で各ウィ
ンドウとしての静止画像を生成する機能を有する。

【００２６】前記映像信号変換手段１２は、外部からア
ナログ信号である複数の文書等の映像信号が入力され、
これ等入力した映像信号をデジタル信号に変換する複数
個のＤ／Ａ変換器１２ａ…を有し、これ等のデジタル信
号に変換された映像信号を出力する。

【００２７】前記画像生成手段６は、前記映像信号変換
手段１２から出力された映像信号のうち所定の映像信号
を選択し、この選択した映像信号を前記ＣＧ画像生成手
段７で生成された静止画像内に表示すると共に、前記ア
イコン画像生成手段４により生成されたアイコン画像を
ディスプレイ装置２の画面の所定位置に表示するよう
に、これ等映像信号、静止画像及びアイコン画像を合成
する機能を有する。

【００２８】前記表示装置制御手段５は、前記画像合成
手段６により合成された信号に基いてディスプレイ装置
２の画面上に映像信号及びアイコン画像を表示するよう
ディスプレイ装置２を制御する機能を有する。

【００２９】そして、前記表示装置制御手段５及び画像
合成手段６により、前記アイコン画像生成手段４により
生成されたアイコン画像を、前記音声情報抽出手段３に
より実時間情報を抽出した音声信号に対応する文書等に
代えて、前記ディスプレイ装置の画面上に表示する表示
制御手段１３を構成している。

【００３０】次に、以上のように構成された情報処理装
置８の動作について、図２を用いて説明する。尚、図２
において、所定のウィンドウをアイコン化した場合のア
イコン画像を１４、他のウィンドウに表示された画像を
１５、映像信号としてのビデオ動画信号を１６、このビ
デオ動画信号１６に対応する音声信号を１７、映像信号
としての他のビデオ動画信号を１８、このビデオ動画信
号１８に対応する音声信号を１９として説明する。ま
た、図２では、音声混合増幅器１０及び音声信号選択器
１１は図示せず、それ等の機能を信号の流れで表現して
いる。

【００３１】図２において、例えば前記の情報処理装置
８のディスプレイ装置２にビデオ動画信号（アナウンサ
ーがニュースを読み上げる動画）１６をウィンドウに表
示し、これに対応した音声信号（ニュースの読み上げ音
声信号）１７をスピーカー９より出力している状態にお
いて、他のビデオ動画信号（ピアノを弾く動画信号）１
８をウィンドウに表示し、これに対応する音声信号（ピ
アノ音の音声信号）１９を音声入出力手段１で選択して
スピーカ９から発音する場合を説明する。

【００３２】この場合、ニュースの読み上げ音声信号１
７は音声混合増幅器１０によりスピーカー９からの発音
を停止されると共に、このニュースの読み上げ音声信号
１７が音声信号選択器１１より音声情報抽出手段３へ送
られる。前記音声情報抽出手段３は、ニュースの読み上
げ音声信号１７より実時間情報として音量レベルを抽出
し、アイコン画像生成手段４に送る。前記アイコン画像
生成手段４は、抽出された音量レベルに応じて所定のア
イコン画像の大きさを拡大及び縮小変化させてることで
動的なアイコン画像を生成する。この動的なアイコン画
像は画像合成手段６でピアノを弾く動画信号１８と合成
された後、表示制御手段５によって動的なアイコン画像
１４としてディスプレイ装置２の画面上に表示される。

【００３３】従って、動的なアイコン画像１４は、その
大きさの大小変化により操作者に対してニュースの読み
上げ音声信号１７に対応していることを提示するので、
操作者はそのアイコン画像１４に音声信号１７が対応し
て存在していることを容易に認識することができる。

【００３４】ここで、スピーカ９からはピアノ音の音声
信号１９のみが発音され、ニュースの読み上げ音声信号
１７の発音は停止しているので、ピアノ音の聴取には支
障が無い。

【００３５】以上の説明では、発音されない音声信号１
７の音量レベルに応じて動的なアイコン画像１４を生成
したが、その音声信号１７の音量レベルが所定値を越え
た時点でアイコン画像１４を特に目立つ画像に変化させ
れば、過大な音量レベルを監視できる。

【００３６】（第２の実施の形態）図３は本発明の第２
の実施の形態を示し、発音しない音声信号１７に対応す
るビデオ動画信号１６をトランペット演奏動画とした場
合に、アイコン画像生成手段４は、動的なアイコン画像
として、音声情報抽出手段３がトランペット音声信号１
７より抽出した音量レベルを経時的に指示するレベル指
示計（同図（ｂ）参照）としての動的なアイコン画像２
０を生成したものである。

【００３７】したがって、本実施の形態においては、発
音されない音声信号の情報として音量レベルを監視でき
る。

【００３８】（第３の実施の形態）図４は本発明の第３
の実施の形態を示し、発音しない音声信号に対応するビ
デオ動画信号１６をアナウンサーがニュースを読み上げ
る動画信号とした場合に、音声情報抽出手段３は、実時
間情報として、ニュースの読み上げ音声信号１７から、
この音声信号１７を認識した文章（図４では「次は明日
のお天気について…」を示す）を抽出すると共に、アイ
コン画像生成手段４は、動的なアイコン画像として、前
記音声情報抽出手段３がニュースの読み上げ音声信号１
７を認識した文章の経時的な同図（ｂ）に示すような字
幕２１（図４（ａ）及び（ｂ）では「次は明日の…」と
表示している）を生成したものである。

【００３９】したがって、本実施の形態においては、発
音されない音声信号の情報として、その音声信号の内容
を監視できる。

【００４０】（第４の実施の形態）図５は本発明の第４
の実施の形態を示し、発音しない音声信号１７に対応す
るビデオ動画信号１６をトランペット演奏動画とした場
合に、音声情報抽出手段３は、実時間情報として、トラ
ンペット音声信号１７から、この音声信号１７の音程を
認識した音階を経時的に抽出すると共に、アイコン画像
生成手段４は、動的なアイコン画像として、前記音声情
報抽出手段３がトランペット音声信号１７より抽出した
音階を、同図（ｂ）に示すように経時的に５線譜に表示
した楽譜２２を生成したものである。

【００４１】したがって、本実施の形態においては、発
音されない音声信号の実時間情報として、その音声信号
の内容を監視でき、特に音声信号が音楽の場合に有効で
ある。また、抽出した楽譜を記憶媒体に蓄積しておけ
ば、音楽の自動採譜を兼用できる。更に、抽出した楽譜
を、蓄積しながら、同時に実時間表示した動的なアイコ
ン画像とすれば、自動採譜を監視できる。

【００４２】（第５の実施の形態）図６は本発明の第５
の実施の形態を示す。本実施の形態では、前記図５に示
す第４の実施の形態と同様の場合に、音声情報抽出手段
３は、実時間情報として、トランペット音声信号１７か
らその音源を認識し、その音源の認識結果（即ち、「ト
ランペット」）を抽出すると共に、アイコン画像生成手
段４は、動的なアイコン画像として、前記音声情報抽出
手段３が抽出した音源の認識結果の図柄２３（同図
（ｂ）に示すようなトランペットの図柄）を生成したも
のである。

【００４３】したがって、本実施の形態においては、発
音されない音声信号の実時間情報として、その音声信号
の音源を監視でき、音声信号の種類を想像できる。尚、
本実施の形態では、音源の図柄を表示したが、音源の語
（即ち、「トランペット」の語）をアイコン画像として
表示してもよい。

【００４４】尚、以上の説明では、音声情報抽出手段３
によって抽出される実時間情報として音量レベル等を用
いたが、その他、音声信号の包絡線を用いてもよい。こ
の場合、音声情報抽出手段３の構成を簡単な回路で実現
できる。また、音声信号の周波数スペクトルの全部又は
一部を実時間情報として抽出してもよい。この場合に
は、周波数スペクトルの測定を行う機能が付加されるの
で、音声信号の特定周波数での信号レベルを表示できる
効果を奏する。

【００４５】また、以上の説明では、動的なアイコン画
像としてアイコン画像の大きさを経時的に大小変化させ
たが、その他、アイコン画像を回転したり、平行移動し
たり、変形させたり、又は変色させたりしてもよい。前
記アイコン画像を平行移動して動的なアイコン画像を生
成する場合には、アイコン画像生成手段４を簡単な回路
で実現できる効果がある。また、変形させる場合には、
基準となるアイコン画像として適切なものを選べば、印
象の強い動的なアイコン画像を生成できる効果がある。
更に、変色させる場合には、アイコン画像の表示領域が
変化しないので、動的なアイコン画像が他のウィンドウ
やアイコン画像にオーバーラップすることが容易に防止
できる効果がある。加えて、前記のような動的なアイコ
ン画像の生成の他に、実時間情報の一符号語毎に予めア
イコン画像を対応させて記憶しておき、抽出した実時間
情報の一符号語毎にこれ等に対応するアイコン画像を記
憶領域より読み出し出力することにより、動的なアイコ
ン画像を生成してもよい。この場合には、前記予め対応
させる多数のアイコン画像をその連続変化時に不自然さ
なく変化するように設定しておけば、印象の強い動的な
アイコン画像を生成できる効果を生じる。

【００４６】（第６の実施の形態）図７は第６の実施の
形態を示す。本実施の形態では、前記第１の実施の形態
を示す図１の構成に比較手段２４を別途付加した構成と
している。前記比較手段２４には、予め定めた情報、例
えば文字列が設定されて記憶される。また、前記比較手
段２４は、音声情報抽出手段３が音声信号から抽出した
実時間情報、例えば音声信号を認識した文章等が入力さ
れ、この入力された実時間情報と前記予め定めた情報と
を比較して、比較条件が満されたとき（例えば、実時間
情報と予め定めた情報とが一致したとき）、音声入出力
手段１のスピーカ９から、前記実時間情報を抽出した音
声信号を含めた全ての音声信号を所定の重みで重み付け
して発音するように音声混合増幅器１０を制御すると共
に、音声入出力手段１に入力された音声信号の何れをも
選択しないように音声信号選択器１１を制御し、更にア
イコン画像を生成しないようにアイコン画像生成手段４
を制御し、ＣＧ画像生成手段７の生成した静止画像と映
像信号変換手段１２から出力された全ての映像信号とを
合成してこの合成後の信号をディスプレイ装置２の画面
上に表示するようにＣＧ画像生成手段７及び画像合成手
段６を制御する機能を有する。他の構成は図１と同一で
あるので、図１と同一部分には同一の符号を付してその
説明を省略する。

【００４７】次に、以上のように構成された情報処理装
置８の動作を図８及び図９を用いて説明する。図８に示
す前の状態、すなわちニュースの読み上げ音声信号１７
がスピーカー９からの発音を停止され、この発音を停止
されたニュースの読み上げ音声信号１７より実時間情報
として音声情報抽出手段３がその音声信号１７を認識し
た文章を抽出し、これに対応してアイコン画像生成手段
４がその文章を字幕として実時間表示して動的なアイコ
ン画像２１を生成して、表示装置制御手段５がこの動的
なアイコン画像２１をディスプレイ装置２の画面上に表
示している状態を前提として説明する。

【００４８】いま、前記の状態で、ニュースの読み上げ
音声信号１７から実時間情報として抽出された文章（即
ち、図８に示す「次は明日のお天気について」との文
章）が比較手段２４に送られ、この比較手段２４におい
て、操作者が予め聴きたいとして設定した情報（図８で
は文字列「天気」）と常に比較されている。ここで、実
時間情報の文章中に「天気」が含まれていて、この実時
間情報中の「天気」と予め設定した情報「天気」との一
致が検出されると、比較手段２４は一致を示す信号を音
声入出力手段１、アイコン画像生成手段４、ＣＧ画像生
成手段７、及び画像合成手段６に送出する。その結果、
アイコン画像生成手段４は動的なアイコン画像２１の生
成を停止し、図９に示すように、画像合成手段６は、ピ
アノを弾く動画信号１８及びアナウンサーがニュースを
読み上げる動画１６の双方を入力し、これ等動画１６、
１８とＣＧ画像生成手段７で生成された静止画像とを合
成して、この合成信号をディスプレイ装置２の画面上の
各ウィンドウ１５、２５に表示し、その結果、ニュース
の字幕としての動的なアイコン画像２１に代えてニュー
スを読み上げる動画がウィンドウ２５に再表示される。
また、前記の画像合成手段６の動作と同時に、音声入出
力手段１がニュースの読み上げ音声信号１７をもスピー
カ９から発音させる。従って、操作者が一時的に聴き取
りから除外したニュースの読み上げ音声であっても、天
気に関する情報を自動的に監視して、その情報を漏らさ
ず適時に聴き取ることができると共に、ウィンドウ２５
に再表示されたニュースを読み上げる動画により、操作
者はこの動画に含まれる情報を漏らさず適時に読み取る
ことができる。

【００４９】尚、本実施の形態では、比較手段２４は、
抽出した実時間情報と予め設定した情報とを比較してそ
の一致を検出したが、その他、予め設定した情報が所定
値の音量レベル等である場合には、抽出した実時間情報
（音量レベル）がその所定値を越える場合等、実時間情
報と予め設定する情報との優劣を検出してもよく、要
は、この優劣の検出をも含んで、比較条件が満された時
を検出すればよい。

【００５０】また、本実施の形態では、音声情報抽出手
段３によって抽出される実時間情報として音声認識によ
る文章を用い、この文章を予め操作者が設定した文字列
と比較しているが、その他、音程認識による音階又は音
源の認識結果を用い、これ等を予め設定した音階又は音
源名と比較してもよい。

【００５１】更に、本実施の形態では、一致の検出信号
によってアイコン画像の生成を停止させてウィンドウに
アナウンサーがニュースを読み上げる動画を再表示した
が、この検出信号は割り込み信号としてオペレーション
システムに通知してもよい。この場合には、信号を監視
するための情報処理能力の負担が軽減される。

【００５２】（第７の実施の形態）図１０は本発明の第
７の実施の形態を示し、前記第６の実施の形態を示す図
９の構成の一部を変更したものである。即ち、音声入出
力手段１では、ニュースの読み上げ音声信号１７と予め
設定した情報（「天気」）との一致の検出時には、この
ニュースの読み上げ音声信号１７以外の音声信号、即ち
ピアノ音声信号１９はスピーカ９からの発音を停止され
ると共に、画像合成手段６では、ピアノを弾く動画信号
１８の入力を停止し、更にピアノ音声信号１９の実時間
情報を音声情報抽出手段３で抽出して動的なアイコン画
像２６を生成し、この動的なアイコン画像２６とアナウ
ンサーがニュースを読み上げる動画２５とをディスプレ
イ装置２の画面上に表示させるよう制御する。

【００５３】したがって、本実施の形態では、操作者が
聴き取りたい情報（例えば天気情報）以外の情報である
ピアノの音声はスピーカ９から発音されず、また表示し
たい情報以外の動画であるピアノを弾く動画は動的なア
イコン画像として小さく表示するので、聴き取りたい情
報をより一層に聴き取り易くできると共に、前記ピアノ
を弾く動画が天気情報の表示の支障にならず、天気情報
等の情報の読み取りを一層容易にできる。

【００５４】

【発明の効果】以上説明したように、請求項１ないし請
求項８記載の発明の情報処理装置によれば、ディスプレ
イ装置の表示画面に例えばアイコン表示されている際
に、入力された音声信号に含まれる情報が、操作者が定
めた情報に一致して比較条件が満たされた時点で、前記
アイコン表示を自動的に且つ適時にウインドウ表示した
ので、音声信号に含まれる情報を監視して、操作者がア
イコン表示を手動でウインドウ表示に変更する操作の煩
わしさをなくすことができる。しかも、音声信号に含ま
れる情報を監視できるに留まらず、ウインドウ表示内の
内容が操作者の収集したい情報を含む場合には、この情
報を漏らさず聴き取り及び読み取ることができる効果を
奏する。

【００５５】特に、請求項４記載の発明によれば、前記
アイコン表示等が自動的にウインドウ表示される際に、
表示画面に既に存在するウインドウ表示をアイコン表示
に変更したので、ディスプレイ装置の表示画面内で前記
自動的に変更されるウインドウ表示の支障を小さくでき
る。

【図面の簡単な説明】

【図１】第１の実施の形態の構成を示すブロック図であ
る。

【図２】第１の実施の形態の動作の説明図である。

【図３】第２の実施の形態の動作の説明図である。

【図４】第３の実施の形態の動作の説明図である。

【図５】第４の実施の形態の動作の説明図である。

【図６】第５の実施の形態の動作の説明図である。

【図７】第６の実施の形態の構成を示すブロック図であ
る。

【図８】第６の実施の形態における一致を検出する前の
動作の説明図である。

【図９】第６の実施の形態における一致を検出した後の
動作の説明図である。

【図１０】第７の実施の形態の動作の説明図である。

【符号の説明】

１ 音声入出力手段 ２ ディスプレイ装置 ３ 音声情報抽出手段 ４ アイコン画像生成手段 ５ 表示装置制御手段 ６ 画像合成手段 ７ ＣＧ画像生成手段 ８ 情報処理装置 ９ スピーカ １０ 音声混合増幅器 １１ 音声信号選択器 １２ 映像信号変換手段 １２ａ，… Ｄ／Ａ変換器 ２４ 比較手段

Claims (8)

【特許請求の範囲】
1. 【請求項１】 表示画面を有するディスプレイ装置と、 音声信号を入力する音声信号入力手段と、 前記ディスプレイ装置の画面表示を制御する表示制御手
   段と、 前記音声信号入力手段により入力された音声信号に含ま
   れる情報を、予め操作者が定めた情報と比較し、比較条
   件を満すか否かを検出する比較手段とを備え、 前記比較手段の比較結果に応じて、前記表示制御手段に
   よる前記ディスプレイ装置の画面表示の態様が変更され
   ることを特徴とする情報処理装置。
2. 【請求項２】 ディスプレイ装置の画面表示の態様は、 前記比較条件を満すとき、アイコン表示をウインドウ表
   示に変えるように変更されることを特徴とする請求項１
   記載の情報処理装置。
3. 【請求項３】 前記ディスプレイ装置の表示画面には、
   複数のウインドウが設定されることを特徴とする請求項
   １又は２記載の情報処理装置。
4. 【請求項４】 ディスプレイ装置の画面表示の態様は、 前記比較条件を満すとき、表示中のウインドウをアイコ
   ン表示に変えるように変更されることを特徴とする請求
   項３記載の情報処理装置。
5. 【請求項５】 前記音声信号に含まれる情報は音量レベ
   ルであり、 前記比較手段は、前記音声信号の音量レベルが、予め操
   作者が定めた音量レベル以上のとき、比較条件を満すこ
   とを検出することを特徴とする請求項１、２又は４記載
   の情報処理装置。
6. 【請求項６】 前記比較手段は、 前記音声信号に含まれる音声を認識した文章の中に、予
   め操作者が定めた文字列を含むとき、比較条件を満すこ
   とを検出することを特徴とする請求項１、２又は４記載
   の情報処理装置。
7. 【請求項７】 前記比較手段は、 前記音声信号の音源が、予め操作者が定めた音源と一致
   するとき、比較条件を満すことを検出することを特徴と
   する請求項１、２又は４記載の情報処理装置。
8. 【請求項８】 前記アイコン表示は、 動的なアイコン画像を表示することにより行われること
   を特徴とする請求項２又は４記載の情報処理装置。