JP5472960B2 - 端末装置及びプログラム - Google Patents

Description

この発明は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置及びプログラムに関する。

一般に、携帯電話装置、パーソナルコンピュータなどの端末装置において、インターネット接続時には表示画面上に検索窓と呼ばれる検索用入力域が表示されており、この検索窓内に任意の検索文字列がユーザ操作によって入力されると、Ｗｅｂブラウザを起動して当該検索文字列に該当するＷｅｂページの検索を要求するようにしている。
ところで、検索窓内に検索文字列を入力する場合にその入力操作を軽減するための技術として、従来では、Ｗｅｂページ内の任意の文字列が選択されると、この文字列を検索窓に入力するようにした技術が開示されている（特許文献１参照）。
特開２００４−２５９２１６号公報

しかしながら、上述した先行技術にあっては、検索文字列を入力する手間を軽減することができるとはいえ、Ｗｅｂページ内から任意の文字列を選択する際に、ユーザ操作によって所望する文字列を範囲指定する必要があった。このような範囲指定は、ユーザに負担をかけるほか、その範囲指定を間違えると、間違った検索が行われてしまうことになる。また、Ｗｅｂページ内から所望する文字列を探し出す際に、どのような文字列を選択するかを迷うことも多く、結果的に検索までに時間を要してしまうことになる。

この発明の課題は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う際に、その入力から検索開始までを効率良く行うことができるようにすることである。

上述した課題を解決するために請求項１記載の発明は、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置であって、当該端末装置で出力中のコンテンツの種類を判別する判別手段と、この判別手段によって判別されたコンテンツ種類に基づいて、当該端末装置で出力中のコンテンツから前記検索文字列の候補を抽出する際の文字列候補抽出方法を特定する特定手段と、この特定手段によって特定された文字列候補抽出方法を用いて、当該端末装置で出力中のコンテンツ、または該コンテンツに付加されている情報に含まれている文字データを解析して前記検索文字列の候補を抽出する抽出手段と、この抽出手段によって抽出された検索文字列候補の中から所定の優先順位に従って選択した最優先文字列候補を前記検索用入力域に入力させる入力制御手段と、を具備したことを特徴とする。

請求項１に従属する発明として、デジタルテレビ放送を受信するテレビ放送受信手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データである、ことを特徴とする請求項２記載の発明であってもよい。

請求項１に従属する発明として、デジタルテレビ放送を受信するテレビ放送受信手段と、音声から文字データを認識する音声認識手段と、を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データである、ことを特徴とする請求項３記載の発明であってもよい。

請求項３に従属する発明として、前記抽出手段は、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データと前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データとを解析して前記検索文字列の候補を抽出する、ようにしたことを特徴とする請求項４記載の発明であってもよい。

請求項１に従属する発明として、音声通話を行う通話手段と、音声から文字データを認識する音声認識手段と、を更に備え、前記出力中のコンテンツに含まれている文字データは、前記通話手段によって受信された通話音声から前記音声認識手段によって認識された文字データである、ことを特徴とする請求項５記載の発明であってもよい。

請求項１に従属する発明として、電子メールを送受信する電子メール手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記電子メール手段によって送信あるいは受信される電子メールに含まれている文字データである、ことを特徴とする請求項６記載の発明であってもよい。

請求項１に従属する発明として、ネットワーク上に公開されている情報ページをアクセスするアクセス手段を更に備え、前記出力中のコンテンツに含まれている文字データは、前記アクセス手段によってアクセスした情報ページに含まれている文字データである、ことを特徴とする請求項７記載の発明であってもよい。

請求項１に従属する発明として、音楽データあるいは動画データを再生する再生手段を更に備え、前記抽出手段は、前記再生手段によって再生される音楽データあるいは動画データに付加されている文字データの中から当該音楽あるいは動画に関する文字列を前記検索文字列の候補として抽出する、ことを特徴とする請求項８記載の発明であってもよい。

請求項８に従属する発明として、ネットワーク上に公開されている特定情報ページをアクセスするためのアクセス情報を記憶する記憶手段と、前記再生手段によって音楽データあるいは動画データを再生している再生中において前記検索用入力域に入力されている検索文字列に基づいてデータ検索を行う場合に、前記アクセス情報を読み出して前記特定情報ページに対する検索要求を行う検索要求手段と、を更に備えることを特徴とする請求項９記載の発明であってもよい。

請求項１に従属する発明として、前記抽出手段によって抽出された各検索文字列候補の優先順位を決定する順位決定手段を更に備え、前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を、前記最優先文字列候補として前記検索用入力域に入力させる、ことを特徴とする請求項１０記載の発明であってもよい。

請求項１に従属する発明として、前記抽出手段によって抽出された検索文字列候補を一覧表示する一覧表示手段を更に備え、前記入力制御手段は、前記最優先文字列候補に代えて、前記一覧表示手段によって一覧表示されている各検索文字列候補の中から任意に選択された候補を前記検索用入力域に入力させる、ことを特徴とする請求項１１記載の発明であってもよい。

請求項１１に従属する発明として、前記抽出手段によって抽出された各検索文字列候補を前記一覧表示させる場合の優先順位を決定する順位決定手段を更に備え、前記一覧表示手段は、前記順位決定手段によって決定された優先順位を表示順位としてその順位にしたがった並び順となるように各検索文字列候補を一覧表示し、前記入力制御手段は、前記一覧表示の中から任意に選択された検索文字列候補を前記検索用入力域に入力させる、ことを特徴とする請求項１２記載の発明であってもよい。

請求項１２に従属する発明として、前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を前記検索用入力域に入力させる、ことを特徴とする請求項１３記載の発明であってもよい。

請求項１０、１２に従属する発明として、前記順位決定手段は、前記抽出手段によって抽出された各検索データ候補の出現頻度に基づいて前記優先順位を決定する、ことを特徴とする請求項１４記載の発明であってもよい。

請求項１０、１２に従属する発明として、前記順位決定手段は、前記抽出手段によって抽出された各検索データ候補の出現時刻に基づいて前記優先順位を決定する、ことを特徴とする請求項１５記載の発明であってもよい。

請求項１１に従属する発明として、前記一覧表示手段は、前記順位決定手段によって決定された優先順位に基づいてその下位の候補を一覧表示から一定条件下で消去する、ことを特徴とする請求項１６記載の発明であってもよい。

請求項１１に従属する発明として、前記データ検索用入力域に入力された検索文字列が検索履歴として記憶されている状態において、前記一覧表示手段は、前記抽出手段によって抽出された検索文字列候補を前記検索履歴と共に一覧表示する、ことを特徴とする請求項１７記載の発明であってもよい。

請求項１に従属する発明として、前記検索用入力域に入力された検索文字列に基づいてデータ検索を行う場合に、ネットワーク上に公開されている情報ページへの検索を指示する、ことを特徴とする請求項１８記載の発明であってもよい。

また、上述した課題を解決するために請求項１９記載の発明は、コンピュータに対して、検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、出力中のコンテンツの種類を判別するステップと、この判別されたコンテンツ種類に基づいて、前記出力中のコンテンツから前記検索文字列の候補を抽出する際の文字列候補抽出方法を特定するステップと、この特定された文字列候補抽出方法を用いて、前記出力中のコンテンツ、または該コンテンツに付加されている情報に含まれている文字データを解析して前記検索文字列の候補を抽出するステップと、前記抽出された検索文字列候補の中から所定の優先順位に従って選択した最優先文字列候補を前記検索用入力域に入力するステップと、実現させるためのプログラムを特徴とする。

この発明によれば、検索用入力域に入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。

以下、図１〜図１２を参照して本発明の実施形態を説明する。
この実施形態は、端末装置として携帯電話装置に適用した場合を例示したもので、図１は、この携帯電話装置の基本的な構成要素を示したブロック図である。
この携帯電話装置は、例えば、２つの筐体（操作部筐体、表示部筐体）が開閉可能に取り付けられた折り畳み自在なもので、音声通話機能、電子メール機能、インターネット接続機能（Ｗｅｂアクセス機能）などのほか、テレビ放送を受信するテレビ放送受信機能、音楽／動画コンテンツなどを再生するコンテンツ再生機能、検索用入力域（検索窓）に入力されている検索文字列に基づいてデータ検索を行うデータ検索機能など、各種の機能が備えられている。この携帯電話装置は、図示省略したが、無線通信網（公衆移動体通信網）を介してインターネットに接続されており、この無線通信網やインターネット側のメールサーバとの間で電子メールの送受信が可能なほか、インターネットを介して任意のＷｅｂページをアクセス可能となっている。

制御部１は、二次電池を備えた電源部２からの電力供給によって動作し、記憶部３内の各種のプログラムに応じてこの携帯電話装置の全体動作を制御するもので、この制御部１にはＣＰＵ（中央演算処理装置）やメモリなどが設けられている。記憶部３は、内部メモリで、プログラム領域とデータ領域とを有し、このプログラム領域には、後述する図４〜図８に示す動作手順に応じて本実施形態を実現するためのプログラムが格納されている。なお、記憶部３としては、例えば、ＳＤカード、ＩＣカードなど、着脱自在な可搬型メモリ（記録メディア）を含む構成であってもよい。

表示部４は、液晶、有機ＥＬなどを使用した高精細な表示装置で、数値、文字、待受画像、テレビ映像などを表示可能なもので、その待受画面のピクトエリアには、時刻表示、受信感度などが表示される。操作部５は、ダイヤル入力、文字入力、コマンド入力などを行うもので、制御部１は、操作部５からの操作信号に応じた処理として、例えば、発信処理など、各種の処理を実行する。通信部６は、無線部、ベースバンド部、多重分離部などを備え、例えば、通話機能、電子メール機能、インターネット接続機能の動作時に最寄りの基地局との間でデータの送受信を行うもので、通話機能の動作時にはベースバンド部の受信側から信号を取り込んで受信ベースバンド信号に復調したのち、電話部７を介して通話用スピーカＳＰから音声出力させ、また、通話用マイクＭＣからの入力音声データを電話部７から取り込み、送信ベースバンド信号に符号化したのち、ベースバンド部の送信側に与えてアンテナから発信出力させる。

テレビ放送受信部８は、携帯電話などの携帯受信機向けの地上波デジタルテレビ放送を受信するもので、テレビ映像及び音声情報以外にも電子番組表（ＥＰＧ）なども含めて受信可能である。テレビ放送受信部８は、ＴＶアンテナに接続されていて放送信号を抽出する受信部（アナログ回路部）と、受信した放送信号をＯＦＤＭ（直交周波数分割多重）復調したり、多重化されている放送信号から映像データ、音声データ、文字データ（例えば、字幕データなど）に分離して復号化したり、圧縮データの解凍などを行うデジタル回路部を有している。

コンテンツ再生部９は、音楽コンテンツ、映像コンテンツなどを再生するもので、再生開始操作／終了操作に応じて再生動作が制御される。なお、音楽コンテンツ、映像コンテンツは、テレビ放送受信部８から受信した放送コンテンツのほか、インターネットを介してダウンロードしたり、外部メモリなどを介して取得したりしたものである。音声認識部１０は、音声データを文字データとして認識するもので、通話時の音声データ、テレビ放送の音声は、この音声認識部１０によって認識されて文字データに変換される。

図２（Ａ）は、テレビ放送受信画面を示した図である。
このテレビ放送受信画面の上側には検索文字列を入力する横帯状の検索用入力域（検索窓）ＳＷが表示されている。この検索窓ＳＷは、インターネット上のＷｅｂページ（情報ページ）を検索する際の検索文字列が入力されるもので、テレビ放送受信画面の上側に表示されている。この検索窓ＳＷの近傍に設けられた検索ボタンＳＢは、検索窓ＳＷの内容に基づいてインターネット上の該当するＷｅｂページを検索すべきことを指示するボタンである。図２（Ｂ）は、検索窓ＳＷを使用可能とするためにユーザ操作で当該検索窓ＳＷを選択した際に、検索文字列リストＲＴの内容がプルダウンメニューとして表示された状態を示した図である。

この検索文字列リストＲＴは、実行中のアプリケーション（この場合、テレビ放送受信機能）に対応して作成されてプルダウンメニューとして表示されたもので、ユーザ操作で検索窓ＳＷに直接的に入力された検索文字列が検索履歴として表示されるほか、出力中コンテンツとしてのテレビ放送（例えば、字幕データ、音声データ）を解析することによって抽出された文字列が検索文字列候補として表示される。なお、このリストＲＴ内の各検索文字列候補は、所定の並び順にしたがって表示される。

この検索文字列リストＲＴの中からユーザ操作によって任意の検索文字列候補が選択指定されると、選択された検索文字列候補は検索窓ＳＷに入力されて表示される。図２（Ｃ）は、検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページを検索表示させた場合を例示した図である。なお、図示の例では、検索文字列を「ドリブル」とした場合で、テレビ放送受信画面に代わり、「ドリブル」に関するＷｅｂページ画面が切り替え表示された状態を示している。

図３は、テレビ放送（字幕データ、音声データ）から検索文字列候補を抽出し、検索文字列リストＲＴに検索文字列候補を表示するまでの過程を説明するための図である。
制御部１は、テレビ放送受信部８を介してテレビ放送を受信すると、テレビ放送の字幕データ（図３（１Ａ）参照）に対して形態素解析を行って各要素に区分したのち（図３（１Ｂ）参照）、予め決められている文字列抽出条件（名詞、形容詞、形容動詞）を満たす文字列を検索文字列候補として抽出する（図３（１Ｃ）参照）。

また、テレビ放送の音声データに対して音声認識部１０で文字データに変換すると共に、この音声認識文字データ（図３（２Ａ）参照）に対して、上述と同様に形態素解析を行って各要素に区分したのち（図３（２Ｂ）参照）、予め決められている文字列抽出条件を満たす文字列を検索文字列候補として抽出する（図３（２Ｃ）参照）。そして、字幕データを元に抽出した検索文字列候補と音声データを元に抽出した検索文字列候補とをマージ（統合）したのち、所定範囲内（例えば、時間あるいはデータ量）の出現頻度によって優先順位（表示順位）を決定し、その優先順位の並び順にしたがって各検索文字列候補を検索文字列リストＲＴに追加する。そして、検索文字列リストＲＴの内容をプルダウンメニューとして表示させる（図３（Ｄ）参照）。なお、出現頻度によって優先順位を決定する場合、例えば、１分間、１画面分、１ページ分などの所定範囲の出現頻度によって優先順位を決定するようにしている（以下、同様）。

次に、この実施形態における携帯電話装置の動作概念を図４〜図８に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施形態特有の動作を実行することもできる。

図４〜図６は、電源投入に伴って実行開始される携帯電話装置の全体動作を示したフローチャートである。
先ず、制御部１は、所定のメモリをクリアするなどの初期設定を行ったのち（図４のステップＡ１）、所定の待受画像を読み出して表示させながら待ち受け状態となる（ステップＡ２）。この待ち受け状態において通信部６から電話の着信有無をチェックし（ステップＡ３）、電話着信を検出したときには、回線接続させるオフフック操作に応答して（ステップＡ４でＹＥＳ）、通話可能状態とする通話処理を開始する（ステップＡ５）。ここで、通話相手の音声データを音声認識部１０に与えて不特定話者対応の音声認識を行わせ、文字データに変換させる（ステップＡ６）。この場合、通話開始からその相手の音声データをリアルタイムに取得しながら文字データに変換したのち、この文字データに基づいて検索文字列抽出処理を行う（ステップＡ７）。

図７は、検索文字列抽出処理（図４のステップＡ７など）を詳述するためのフローチャートである。
先ず、制御部１は、文字データを形態要素解析し（ステップＢ１）、検索文字列候補を抽出する（ステップＢ２）。図９は、音声通話を文字認識した文字データから検索文字列候補を抽出して検索文字列リストＲＴを表示するまでの過程を説明するための図である。
制御部１は、音声通話を文字認識した文字データに対して（図９（Ａ）参照）、形態素解析を行って各要素に区分したのち（図９（Ｂ）参照）、予め決められている文字列抽出条件（名詞、形容詞、形容動詞）を満たす文字列を検索文字列候補として抽出する（図９（Ｃ）参照）。

そして、抽出した検索文字列候補の出現頻度によって優先順位（表示順位）を決定し（図９（Ｄ）参照）、この優先順位にしたがって並び替えた各検索文字列を検索文字列リストＲＴに追加する（ステップＢ３）。これによって現在実行中のアプリケーション（音声通話機能）に対応する検索文字列リストＲＴが生成される。そして、検索文字列リストＲＴ内の最上位（最優先）の文字列候補を検索窓ＳＷに入力して表示させる（ステップＢ４）。図１０（Ａ）は、音声通話中での表示画面を例示したもので、この表示画面の上側に表示されている検索窓ＳＷには、今回の音声通話によって決定された最優先の文字列候補として“夏休み”が入力される。

このような検索文字列抽出処理（図４のステップＡ７）が終わると、検索文字列リストＲＴの内容を整理するために不要な検索文字列候補を当該リストＲＴから削除する処理を行う（図４のステップＡ８）。この削除処理は、検索文字列抽出処理（ステップＡ７）を行ってから所定時間が経過していることを条件に実行されるもので、下位の文字列候補（例えば、最下位候補）を検索文字列リストＲＴから削除する。なお、所定時間の経過後に最下位の文字列候補を削除する場合に限らず、例えば、検索文字列リストＲＴに記憶されている候補数に応じて削除処理の実行有無を決定したり、削除する候補数を決定したりするようにしてもよい。すなわち、候補数が少なければ、削除処理を一時保留し、候補数が多ければ、最下位から数えて３番目までの文字列候補などのように複数の候補を一度に削除するようにしてもよい。

そして、音声通話画面内の検索窓ＳＷを選択してそれをアクティブ状態とする選択操作が行われたかを調べ（ステップＡ９でＹＥＳ）、その選択操作が行われなければ、回線を遮断させるオンフック操作が行われるまで（ステップＡ１１）、上述の音声認識処理（ステップＡ６）、検索文字列抽出処理（ステップＡ７）を行いながら上述の動作を繰り返す。いま、通話中に検索窓ＳＷを選択する操作が行われた場合には（ステップＡ９でＹＥＳ）、この検索窓ＳＷの内容に基づいてインターネットをアクセスし、該当するＷｅｂページを受信して表示する検索処理に移る（ステップＡ１０）。

図８は、検索処理（図４のステップＡ１０など）を詳述するためのフローチャートである。
先ず、制御部１は、実行中のアプリケーション用の検索文字列リストＲＴを表示させる（ステップＣ１）。図１０（Ｂ）は、音声通話画面の検索窓ＳＷから検索文字列リストＲＴがプルダウン表示された状態を示した図で、図９（Ｄ）に示した内容が検索文字列リストＲＴとして表示される。この検索文字列リストＲＴの中からユーザの所望する検索文字列候補を選択する操作が行われると（ステップＣ２でＹＥＳ）、この選択候補を検索窓ＳＷに入力して表示させるが（ステップＣ３）、検索文字列リストＲＴの中から候補を選択せずに、任意の検索文字列を直接入力する操作が行われたときには（ステップＣ４でＹＥＳ）、直接入力された文字列を検索窓ＳＷに入力して表示させる（ステップＣ５）。

この状態において検索窓ＳＷに付属されている検索ボタンＳＢが操作されると（ステップＣ６でＹＥＳ）、Ｗｅｂブラウザを起動したのち（ステップＣ７）、音楽コンテンツあるいは動画コンテンツの再生中かを調べるが（ステップＣ８）、いま、音声通話中であるので（ステップＣ８でＮＯ）、インターネットに接続し、検索窓ＳＷ内の検索文字列に該当するＷｅｂページの検索を要求し（ステップＣ１２）、それに応答して受信したＷｅｂページを表示させる（ステップＣ１１）。

図１０（Ｃ）は、検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページを検索して表示させた場合を例示した図である。なお、図示の例では、検索文字列を“旅行”とした場合で、通話中画面に代わり、“旅行”に関するＷｅｂページ画面が切り替え表示された状態である。このような検索処理が終わると（図４のステップＡ１０）、上述のステップＡ６に戻り、以下、同様の動作を繰り返す。また、通話中にオンフック操作が行われたときには（ステップＡ１１でＹＥＳ）、回線を遮断させると共に（ステップＡ１２）、今回の通話で作成した検索文字列リストＲＴをクリアしたのち（ステップＡ１３）、待ち受け状態に戻る（ステップＡ２）。

待ち受け状態においてテレビ放送受信開始を指示する操作が行われた場合には（図５のステップＡ１４でＹＥＳ）、テレビ放送受信部８を起動させてテレビ放送の受信を開始させる（ステップＡ１５）。ここで、テレビ放送から字幕データを取得したときには今回取得の字幕データと前回取得の字幕データとを比較して字幕データの更新有無を調べ（ステップＡ１６）、前回の字幕データのままで更新されていなければ、ステップＡ１９に移るが、字幕データが更新されたときには、図７の検索文字列抽出処理を実行する（ステップＡ１７）。いま、テレビ放送の受信開始時に字幕データを取得したときには、字幕データが更新されたものと判断されるので、検索文字列抽出処理を行う。これによって現在実行中のアプリケーション（テレビ放送受信機能）に対応する検索文字列リストＲＴを生成すると共に、この検索文字列リストＲＴ内の最優先文字列候補を検索窓ＳＷに入力させる。例えば、図２（Ａ）に示すように検索窓ＳＷには今回のテレビ放送受信によって決定された最優先候補として“パス”が入力される。

そして、不要な検索文字列候補を検索文字列リストＲＴから削除する削除処理を実行したのち（ステップＡ１８）、今回取得の音声データと前回取得の音声データとを比較して音声データの更新有無を調べ（ステップＡ１９）、音声データが更新されていなければ、ステップＡ２３に移る。いま、テレビ放送の受信開始時に音声データを取得したときには、音声データが更新されたものと判断されるので、ステップＡ２０に移り、音声データを音声認識部１０に与えて不特定話者対応の音声認識を行わせ、文字データに変換させる。この場合、音声データをリアルタイムに取得しながら文字データに変換したのち、図７の検索文字列抽出処理を実行するが（ステップＡ２１）、字幕データから抽出した検索文字列候補と音声データから抽出した検索文字列候補とをマージし、その結果に基づいた出現頻度によって優先順位を決定するようにしている。

そして、不要な検索文字列候補を検索文字列リストＲＴから削除する削除処理を実行したのち（ステップＡ２２）、検索窓ＳＷの選択操作に応答して（ステップＡ２３でＹＥＳ）、図８の検索処理を実行する（ステップＡ２４）。これによって図２（Ｂ）に示すようにテレビ放送受信機能に対応する検索文字列リストＲＴがプルダウンメニューとして表示されるほか、図２（Ｃ）に示すように検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページが検索されて表示される。その後、上述のステップＡ１６に戻り、以下、上述の動作を繰り返す。

また、検索窓ＳＷの選択操作が行われなければ（ステップＡ２３でＮＯ）、テレビ放送の受信終了を指示する終了操作が行われたかを調べ（ステップＡ２５）、その終了操作が行われるまで上述のステップＡ１６に戻り、以下、上述の動作を繰り返す。いま、終了操作が行われると（ステップＡ２５でＹＥＳ）、テレビ放送受信部８を停止させて放送受信を終了させると共に（ステップＡ２６）、今回のテレビ放送受信で作成した検索文字列リストＲＴをクリアしたのち（ステップＡ２７）、待ち受け状態に戻る（図４のステップＡ２）。

また、待ち受け状態において音楽／動画再生開始を指示する操作が行われた場合には（図５のステップＡ２８でＹＥＳ）、再生部９を起動させて音楽／動画コンテンツの再生を開始させる（ステップＡ２９）。そして、音楽／動画コンテンツに付加されている文字データの中から当該コンテンツに関する文字列を検索文字列の候補として抽出する（ステップＡ３０）。例えば、コンテンツのヘッダ部分などに含まれている“アーティスト名”、“曲名”、“タイトル”、“出演者”、“製作者”、“ジャンル”などの文字列を検索文字列の候補として抽出したのち、この検索文字列候補を検索文字列リストＲＴに追加する（ステップＡ３１）。これによって現在実行中のアプリケーション（コンテンツ再生機能）に対応する検索文字列リストＲＴが生成される。

そして、検索文字列リストＲＴの中から予め決められている所定の文字列候補、例えば、音楽であれば、“アーティスト名”、動画であれば、“タイトル”を検索窓ＳＷに入力して表示させる（ステップＡ３２）。図１１（Ａ）は、音楽再生中の表示画面を例示したもので、音楽再生開始時には検索窓ＳＷに“アーティスト名”が表示される。この状態において、検索窓ＳＷの選択操作が行われると（ステップＡ３３でＹＥＳ）、図８の検索処理を実行する（ステップＡ３４）。

これによって図１１（Ｂ）に示すように、コンテンツ再生機能に対応する検索文字列リストＲＴがプルダウンメニューとして表示されるほか、図１１（Ｃ）に示すように検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページが検索されて表示される。その後、図５のステップＡ３３に戻り、以下、検索窓ＳＷの選択操作が行われる毎に検索処理を実行する。

この場合、図８の検索処理のステップＣ８では、音楽／動画コンテンツの再生中であると判別されるので、予め記憶されている特定ＵＲＬ（Uniform Resource Locator）を読み出して（ステップＣ９）インターネットに接続し、検索窓ＳＷ内の検索文字列に該当するＷｅｂページの検索を要求し（ステップＣ１０）、それに応答して受信したＷｅｂページを表示させる（ステップＣ１１）。この特定ＵＲＬは、音楽／動画販売促進用のプロモーションサイトをアクセスするもので、音楽／動画の再生中には、販売促進用のＷｅｂページが表示される。

ここで、音楽／動画再生終了を指示する終了操作が行われると（ステップＡ３５でＹＥＳ）、再生部９を停止させて音楽／動画コンテンツの再生を終了させると共に（ステップＡ３６）、今回の音楽／動画再生で作成した検索文字列リストＲＴをクリアしたのち（ステップＡ２７）、待ち受け状態に戻る（図４のステップＡ２）。

また、待ち受け状態においてＷｅｂブラウザ利用開始を指示する操作が行われた場合には（図６のステップＡ３７でＹＥＳ）、Ｗｅｂブラウザを起動させる（ステップＡ３８）。この状態において表示中のＷｅｂページの更新を指示する操作が行われると（ステップＡ３９でＹＥＳ）、図７の検索文字列抽出処理の実行に移る（ステップＡ４０）。これによってＷｅｂブラウザ内のテキスト（文字データ）に対して形態素解析を行い、現在実行中のアプリケーション（Ｗｅｂアクセス機能）に対応する検索文字列リストＲＴを生成すると共に、この検索文字列リストＲＴ内の最優先文字列候補を検索窓ＳＷに入力させる。図１２（Ａ）は、Ｗｅｂブラウザ利用時／メール表示時の表示画面を例示したもので、その検索窓ＳＷには最優先の文字列候補として“パス”が表示されている。この状態において、検索窓ＳＷの選択操作が行われると（ステップＡ４１でＹＥＳ）、図８の検索処理を実行する（ステップＡ４２）。

これによって図１２（Ｂ）に示すように、Ｗｅｂアクセス機能に対応する検索文字列リストＲＴがプルダウンメニューとして表示されるほか、図１２（Ｃ）に示すように検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページが検索されて表示される。そして、上述のステップＡ３９に戻り、以下、ページ更新操作が行われる毎に、図７の検索文字列抽出処理を実行し、検索窓ＳＷの選択操作が行われる毎に、図８の検索処理を実行する。ここで、Ｗｅｂブラウザ利用終了を指示する操作が行われると（ステップＡ４３でＹＥＳ）、Ｗｅｂブラウザを終了させると共に（ステップＡ４４）、今回のＷｅｂブラウザ利用で作成した検索文字列リストＲＴをクリアしたのち（ステップＡ４５）、待ち受け状態に戻る（図４のステップＡ２）。

また、待ち受け状態において電子メール利用開始を指示する操作が行われた場合には（図６のステップＡ４６でＹＥＳ）、電子メール機能を起動させる（ステップＡ４７）。この状態においてメールを開く操作が行われると（ステップＡ４８）、図７の検索文字列抽出処理の実行に移る（ステップＡ４９）。これによって電子メール本文（文字データ）に対して形態素解析を行い、現在実行中のアプリケーション（電子メール機能）に対応する検索文字列リストＲＴを生成すると共に、この検索文字列リストＲＴ内の最優先文字列候補を検索窓ＳＷに入力させる。

この検索文字列抽出処理のステップＢ３において、優先順位を決定する際には出現頻度ではなく、出現時刻（メールの受信時刻）に応じて優先順位を決定するようにしている。この場合、メールの受信時刻の早い順を優先順位としたり、逆に、受信時刻の遅い順を優先順位としたりしてもよい。図１２（Ａ）は、電子メールを開いたときの表示画面を例示したもので、その検索窓ＳＷには最優先の文字列候補として“パス”が表示されている。この状態において、検索窓ＳＷの選択操作が行われると（ステップＡ５０でＹＥＳ）、図８の検索処理を実行する（ステップＡ５１）。

これによって図１２（Ｂ）に示すように、電子メール機能に対応する検索文字列リストＲＴがプルダウンメニューとして表示されるほか、図１２（Ｃ）に示すように検索ボタンＳＢの操作に応答してインターネット上の該当するＷｅｂページが検索されて表示される。その後、上述のステップＡ４８に戻り、以下、電子メールを開く操作が行われる毎に、図７の検索文字列抽出処理を実行し、検索窓ＳＷの選択操作が行われる毎に、図８の検索処理を実行する。ここで、電子メール利用終了を指示する操作が行われると（ステップＡ５２でＹＥＳ）、電子メール機能を終了すると共に（ステップＡ５３）、今回のメール利用で作成した検索文字列リストＲＴをクリアしたのち（ステップＡ４５）、待ち受け状態に戻る（図４のステップＡ２）。

なお、その他の操作が行われた場合には（図６のステップＡ５４でＹＥＳ）、操作に対応する処理として、例えば、発信処理、電子メール作成処理などを実行する（ステップＡ５５）。

以上のように、この実施形態において制御部１は、出力中のコンテンツに含まれている文字データを解析して検索文字列の候補を抽出すると共に、この検索文字列候補を表示部４から一覧表示させ、この一覧表示されている各検索文字列候補の中から選択された候補を検索窓ＳＷに入力するようにしたので、検索窓ＳＷに入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。

出力中のコンテンツに含まれている文字データは、テレビ放送に付加されている文字データであるので、テレビ放送受信中に番組に適した検索文字列候補を検索窓ＳＷに入力することができる。

出力中のコンテンツに含まれている文字データは、テレビ放送に付加されている音声データを認識した文字データであるので、テレビ放送受信中に番組に適した検索文字列候補を検索窓ＳＷに入力することができる。

テレビ放送に付加されている文字データ（例えば、字幕データ）とテレビ放送に付加されている音声データを認識した文字データとを解析して検索文字列の候補を抽出するようにしたので、字幕データを元に抽出した検索文字列候補と音声データを元に抽出した検索文字列候補とをマージ（統合）させることができる。

出力中のコンテンツに含まれている文字データは、通話音声から音声認識された文字データであるので、音声通話中の会話に適した検索文字列候補を検索窓ＳＷに入力することができる。

出力中のコンテンツに含まれている文字データは、受信される電子メールに含まれている文字データであるので、電子メールの閲覧中に適した検索文字列候補を検索窓ＳＷに入力することができる。

出力中のコンテンツに含まれている文字データは、インターネット上に公開されているＷｅｂページに含まれている文字データであるので、Ｗｅｂページの閲覧中に適した検索文字列候補を検索窓ＳＷに入力することができる。

出力中のコンテンツに付加されている文字データの中から当該コンテンツに関する文字列を検索文字列の候補として抽出して一覧表示させ、この一覧表示されている各検索文字列候補の中から選択された候補を検索窓ＳＷに入力するようにしたので、検索窓ＳＷに入力されている検索文字列に基づいてデータ検索を行う際に、ユーザに負担をかけずにその入力から検索開始までを効率良く行うことができ、検索文字列入力支援として実用性に富んだものとなる。この場合、出力中のコンテンツに付加されている文字データを解析しなくても、検索文字列候補を抽出することができる。

音楽データ／動画データに付加されている文字データの中から当該音楽／動画に関する文字列を検索文字列の候補として抽出するようにしたので、音楽／動画の再生中に適した検索文字列候補を検索窓ＳＷに入力することができる。

音楽／動画データの再生中に検索窓ＳＷに入力されている検索文字列に基づいてデータ検索を行う場合に、特定サイト（例えば、音楽/動画販売促進用サイト）のＵＲＬを読み出してそのＷｅｂページに対する検索要求を行うようにしたので、ユーザにあっては、音楽／動画を再生しながらそのコンテンツを購入することができるほか、音楽／動画の再生に適したＷｅｂページを検索することができる。

抽出した各検索文字列候補の優先順位を決定し、この優先順位のうち最優先順位の候補を検索窓ＳＷに入力するようにしたので、検索窓ＳＷへの自動入力が可能となり、ユーザ操作が不要となる。

抽出した検索文字列候補を一覧表示させると共に、この一覧表示されている各検索文字列候補の中からユーザ操作によって選択された候補を検索窓ＳＷに入力するようにしたので、従来のようにユーザが検索文字列を直接入力したり、範囲指定して選択したりすることなく、候補一覧の中から検索文字列を選択するだけで良く、ユーザの負担を大幅に軽減することが可能となる。

各検索文字列候補を一覧表示させる場合の優先順位（表示順位）を決定するようにしたので、ユーザにあっては、各候補の並び順に応じて所望する候補を選択することができ、所望する候補を容易に選択することが可能となる。

各検索文字列候補を一覧表示させる場合の優先順位を決定した場合にその最優先順位の候補を検索窓ＳＷに入力するようにしたので、検索に使用する可能性の高い候補が検索窓ＳＷに入力されるので、直ちに検索を開始することができる。

各検索文字列候補の優先順位を決定する場合に、その出現順位に基づいて優先順位を決定するようにしたので、頻繁に出現する文字列を検索候補として検索窓ＳＷに入力させることができる。

各検索文字列候補の優先順位を決定する場合に、その出現時刻に基づいて優先順位を決定するようにしたので、メールの受信時刻が最も早いメールあるいは最も遅いメールを検索窓ＳＷに入力させることができる。

優先順位に基づいてその下位の候補を一覧表示から一定条件下で消去するようにしたので、検索に使用する可能性の低い不用な候補を削除することができ、候補数を絞り込むことができる。

検索文字列リストＲＴには、ユーザ操作で検索窓ＳＷに直接的に入力された検索文字列が検索履歴として表示されるほか、出力中コンテンツを解析することによって抽出された文字列が検索文字列候補として表示されるので、リストＲＴの内容は実情に即したものとなり、検索に使用する可能性の高い候補を表示させることができる。

検索窓ＳＷに入力された検索文字列に基づいてデータ検索を行う場合に、インターネット上のＷｅｂページへの検索を指示するようにしたので、莫大な情報の中から所望する情報を検索することができる。

なお、上述した実施形態においては、受信される電子メールに含まれている文字データから検索文字列候補を抽出するようにしたが、送信する電子メールに含まれている文字データから検索文字列候補を抽出するようにしてもよい。これによって電子メールの作成中に適した検索文字列候補を検索窓ＳＷに入力することができる。

また、上述した実施形態においては、検索文字列リストＲＴにユーザ操作で検索窓ＳＷに直接的に入力された検索文字列を検索履歴として表示するほか、出力中コンテンツを解析することによって抽出された文字列を検索文字列候補として表示するようにしたが、コンテンツ解析で抽出した検索文字列候補を検索履歴とは別個に表示するようにしてもよい。また、検索文字列リストＲＴは、検索窓ＳＷからプルダウンメニューとして表示させる場合に限らず、別のウインドウに表示するようにしてもよい。

また、上述した実施形態においては、検索窓ＳＷに入力された検索文字列に基づいてデータ検索を行う場合に、インターネット上のＷｅｂページへの検索を指示するようにしたが、内蔵されている各種の電子辞書あるいは外部接続されている各種の電子辞書を検索窓ＳＷに入力された検索文字列に基づいて検索するようにしてもよい。更に、電子辞書に限らず、各種のテーブル、ファイル、フォルダを検索するようにしてもよい。
その他、携帯電話装置に限らず、例えば、ＰＤＡ、デジタルカメラ、音楽再生機などの携帯端末装置、ＰＣ（パーソナルコンピュータ）などにも同様に適用可能である。

端末装置として適用した携帯電話装置の基本的な構成要素を示したブロック図。 （Ａ）は、テレビ放送受信画面、（Ｂ）は、検索窓ＳＷの選択に応じて検索文字列リストＲＴが表示された状態、（Ｃ）は、検索ボタンＳＢの操作でＷｅｂページを検索表示させた状態を示した図。 テレビ放送（字幕データ、音声データ）から検索文字列候補を抽出し、検索文字列リストＲＴに検索文字列候補を表示するまでの過程を説明するための図。 電源投入に伴って実行開始される携帯電話装置の全体動作を示したフローチャート。 図４の動作に続くフローチャート。 図５の動作に続くフローチャート。 検索文字列抽出処理（図４のステップＡ７など）を詳述するためのフローチャート。 検索処理（図４のステップＡ１０など）を詳述するためのフローチャート。 音声通話から検索文字列候補を抽出し、検索文字列リストＲＴに検索文字列候補を表示するまでの過程を説明するための図。 （Ａ）は、音声通話中の画面、（Ｂ）は、検索窓ＳＷの選択に応じて検索文字列リストＲＴが表示された状態、（Ｃ）は、検索ボタンＳＢの操作でＷｅｂページを検索表示させた状態を示した図。 （Ａ）は、音楽／動画の再生画面、（Ｂ）は、検索窓ＳＷの選択に応じて検索文字列リストＲＴが表示された状態、（Ｃ）は、検索ボタンＳＢの操作でＷｅｂページを検索表示させた状態を示した図。 （Ａ）は、Ｗｅｂブラウザ利用時／メール表示時の表示画面、（Ｂ）は、検索窓ＳＷの選択に応じて検索文字列リストＲＴが表示された状態、（Ｃ）は、検索ボタンＳＢの操作でＷｅｂページを検索表示させた状態を示した図。

符号の説明

１ 制御部
２ 電源部
３ 記憶部
４ 表示部
５ 操作部
６ 通信部
７ 電話部
８ テレビ放送受信部
９ 再生部
１０ 音声認識部
ＳＷ 検索窓
ＲＴ 検索文字列リスト
ＳＢ 検索ボタン

Claims (19)

1. 検索用入力域に入力されている検索文字列に基づいてデータ検索を行う検索機能を有する端末装置であって、
   当該端末装置で出力中のコンテンツの種類を判別する判別手段と、
   この判別手段によって判別されたコンテンツ種類に基づいて、当該端末装置で出力中のコンテンツから前記検索文字列の候補を抽出する際の文字列候補抽出方法を特定する特定手段と、
   この特定手段によって特定された文字列候補抽出方法を用いて、当該端末装置で出力中のコンテンツ、または該コンテンツに付加されている情報に含まれている文字データを解析して前記検索文字列の候補を抽出する抽出手段と、
   この抽出手段によって抽出された検索文字列候補の中から所定の優先順位に従って選択した最優先文字列候補を前記検索用入力域に入力させる入力制御手段と、
   を具備したことを特徴とする端末装置。
2. デジタルテレビ放送を受信するテレビ放送受信手段を更に備え、
   前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データである、
   ことを特徴とする請求項１記載の端末装置。
3. デジタルテレビ放送を受信するテレビ放送受信手段と、
   音声から文字データを認識する音声認識手段と、
   を更に備え、前記出力中のコンテンツに含まれている文字データは、前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データである、
   ことを特徴とする請求項１記載の端末装置。
4. 前記抽出手段は、前記テレビ放送受信手段によって受信されるテレビ放送に付加されている文字データと前記テレビ放送受信手段によって受信されたテレビ放送の音声から前記音声認識手段によって認識された文字データとを解析して前記検索文字列の候補を抽出する、
   ようにしたことを特徴とする請求項３記載の端末装置。
5. 音声通話を行う通話手段と、
   音声から文字データを認識する音声認識手段と、
   を更に備え、
   前記出力中のコンテンツに含まれている文字データは、前記通話手段によって受信された通話音声から前記音声認識手段によって認識された文字データである、
   ことを特徴とする請求項１記載の端末装置。
6. 電子メールを送受信する電子メール手段を更に備え、
   前記出力中のコンテンツに含まれている文字データは、前記電子メール手段によって送信あるいは受信される電子メールに含まれている文字データである、
   ことを特徴とする請求項１記載の端末装置。
7. ネットワーク上に公開されている情報ページをアクセスするアクセス手段を更に備え、
   前記出力中のコンテンツに含まれている文字データは、前記アクセス手段によってアクセスした情報ページに含まれている文字データである、
   ことを特徴とする請求項１記載の端末装置。
8. 音楽データあるいは動画データを再生する再生手段を更に備え、
   前記抽出手段は、前記再生手段によって再生される音楽データあるいは動画データに付加されている文字データの中から当該音楽あるいは動画に関する文字列を前記検索文字列の候補として抽出する、
   ことを特徴とする請求項１記載の端末装置。
9. ネットワーク上に公開されている特定情報ページをアクセスするためのアクセス情報を記憶する記憶手段と、
   前記再生手段によって音楽データあるいは動画データを再生している再生中において前記検索用入力域に入力されている検索文字列に基づいてデータ検索を行う場合に、前記アクセス情報を読み出して前記特定情報ページに対する検索要求を行う検索要求手段と、
   を更に備えることを特徴とする請求項８記載の端末装置。
10. 前記抽出手段によって抽出された各検索文字列候補の優先順位を決定する順位決定手段を更に備え、
    前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を、前記最優先文字列候補として前記検索用入力域に入力させる、
    ことを特徴とする請求項１記載の端末装置。
11. 前記抽出手段によって抽出された検索文字列候補を一覧表示する一覧表示手段を更に備え、
    前記入力制御手段は、前記最優先文字列候補に代えて、前記一覧表示手段によって一覧表示されている各検索文字列候補の中から任意に選択された候補を前記検索用入力域に入力させる、
    ことを特徴とする請求項１記載の端末装置。
12. 前記抽出手段によって抽出された各検索文字列候補を前記一覧表示させる場合の優先順位を決定する順位決定手段を更に備え、
    前記一覧表示手段は、前記順位決定手段によって決定された優先順位を表示順位としてその順位にしたがった並び順となるように各検索文字列候補を一覧表示し、
    前記入力制御手段は、前記一覧表示の中から任意に選択された検索文字列候補を前記検索用入力域に入力させる、
    ことを特徴とする請求項１１記載の端末装置。
13. 前記入力制御手段は、前記順位決定手段によって決定された優先順位のうち最優先順位の候補を前記検索用入力域に入力させる、
    ようにしたことを特徴とする請求項１２記載の端末装置。
14. 前記順位決定手段は、前記抽出手段によって所定範囲内に抽出された各検索データ候補の出現頻度に基づいて前記優先順位を決定する、
    ことを特徴とする請求項１０あるいは請求項１２記載の端末装置。
15. 前記順位決定手段は、前記抽出手段によって抽出された各検索データ候補の出現時刻に基づいて前記優先順位を決定する、
    ことを特徴とする請求項１０あるいは１２記載の端末装置。
16. 前記一覧表示手段は、前記順位決定手段によって決定された優先順位に基づいてその下位の候補を一覧表示から一定条件下で消去する、
    ことを特徴とする請求項１１記載の端末装置。
17. 前記データ検索用入力域に入力された検索文字列が検索履歴として記憶されている状態において、前記一覧表示手段は、前記抽出手段によって抽出された検索文字列候補を前記検索履歴と共に一覧表示する、
    ことを特徴とする請求項１１記載の端末装置。
18. 前記検索用入力域に入力された検索文字列に基づいてデータ検索を行う場合に、ネットワーク上に公開されている情報ページへの検索を指示する、
    ことを特徴とする請求項１記載の端末装置。
19. コンピュータに対して、
    検索用入力域に入力されている検索文字列に基づいてデータ検索を行うステップと、
    出力中のコンテンツの種類を判別するステップと、
    この判別されたコンテンツ種類に基づいて、前記出力中のコンテンツから前記検索文字列の候補を抽出する際の文字列候補抽出方法を特定するステップと、
    この特定された文字列候補抽出方法を用いて、前記出力中のコンテンツ、または該コンテンツに付加されている情報に含まれている文字データを解析して前記検索文字列の候補を抽出するステップと、
    前記抽出された検索文字列候補の中から所定の優先順位に従って選択した最優先文字列候補を前記検索用入力域に入力するステップと、
    を実現させるためのプログラム。

Images