JP7414053B2 - 情報処理装置、プログラム及び情報通信方法 - Google Patents

Description

本発明は、情報処理装置、プログラム及び情報通信方法に関する。

従来、携帯電話等の情報処理装置が受信した情報を、ユーザが装着するスマートウォッチ等の電子機器に転送する技術が知られている。この種の技術が記載されているものとして特許文献１がある。

特許文献１は、携帯電話機がデータ等を受信した時、近距離通信を介して、データ転送の要否判定を腕時計から行うことが可能で、転送を行う場合に腕時計が有するＬＣＤ（画面）でデータ表示可能な構成に関する技術が記載されている。

特開２００２－２２３４７５号公報

しかしながら、腕時計に表示するデータが受信通知のみで、携帯電話において所定のプログラムが動作して表示画面が占有されている場合、スマートウォッチ側に携帯電話がメッセージを受信したことを通知したとしても、メッセージの内容を確認するためには、携帯電話で所定のプログラムの動作を一時停止させる等の必要がある。

本発明は、このような状況に鑑みてなされたものであり、プログラムの動作状況に応じた通知内容を決定できる情報処理装置、プログラム及び情報通信方法を提供することを目的とする。

上記目的を達成するため、本発明の一態様の情報処理装置は、
テキスト、画像、及び音声の少なくとも一つを含むメッセージ情報を外部から受信可能であり、外部の電子機器と通信する通信部と、
自機に関して、少なくとも画像を出力する所定のプログラムが動作しているか否かの動作判定を行う制御部と、
を備え、
前記制御部は、前記動作判定の結果に基づいて、前記通信部を介して前記外部の電子機器へ送信する情報の形式を切り替えることが可能であり、前記所定のプログラムが動作している状態では、前記メッセージ情報を前記外部の電子機器に前記通信部を介して送信し、前記所定のプログラムが動作していない状態では、前記メッセージ情報を受信したことを示す着信通知情報を前記外部の電子機器に前記通信部を介して送信する、
ことを特徴とする。

本発明によれば、プログラムの動作状況に応じた通知内容を決定できる情報処理装置、プログラム及び情報通信方法を提供できる。

本発明の一実施形態に係るユーザ端末とウェアラブル端末とが適用される情報通信システムの模式図である。 本発明の一実施形態に係るユーザ端末のハードウェアの構成を示すブロック図である。 本発明の一実施形態に係るユーザ端末の機能的構成の一部を示す機能ブロック図である。 本発明の一実施形態に係るウェアラブル端末のハードウェアの構成を示すブロック図である。 本発明の一実施形態に係るウェアラブル端末の機能的構成の一部を示す機能ブロック図である。 本発明の一実施形態に係るユーザ端末及びウェアラブル端末による通信処理を説明する模式図である。 本発明の一実施形態に係るユーザ端末による通信処理の流れの一例を示すフローチャートである。 本発明の一実施形態に係るユーザ端末による通信処理の流れの一例を示すフローチャートである。 本発明の一実施形態に係るウェアラブル端末による通信処理の流れの一例を示すフローチャートである。 変形例に係るユーザ端末とウェアラブル端末とが適用される情報通信システムの模式図である。 変形例に係るユーザ端末による表示モード切替処理の流れの一例を示すフローチャートである。 変形例に係るユーザ端末による着信通知処理の流れの一例を示すフローチャートである。 変形例に係るウェアラブル端末による着信通知処理の流れの一例を示すフローチャートである。

以下、本発明の実施形態について、図面を用いて説明する。

＜情報通信システム＞
情報通信システムＳの概要について説明する。図１は、本発明の一実施形態に係るユーザ端末３０及びウェアラブル端末６０が適用される情報通信システムＳの模式図である。なお、ここでいうシステムは、複数の装置や複数の手段等により構成される全体的な装置を意味するものとする。また、ユーザ端末３０は、例えば、スマートフォン、タブレット等の携帯可能なコンピュータである。ウェアラブル端末６０は、例えば、スマートウォッチ等の装着型情報処理装置である。

本実施形態の情報通信システムＳは、通信処理を行うユーザ端末３０及びウェアラブル端末６０によって実現される。ユーザ端末３０は、インターネット等のネットワーク１を介して外部の電子機器からメール等のテキスト情報を受信可能である。また、ユーザ端末３０は、ウェアラブル端末６０とペアリングを行って近距離通信を介して各種の情報の送受信を行う。

＜ユーザ端末＞
次に、ユーザ端末３０の一例について説明する。図２は、本発明の一実施形態に係るユーザ端末３０のハードウェアの構成を示すブロック図である。

ユーザ端末３０は、図２に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）３２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３３と、バス４２と、入出力インターフェース４３と、入力部３４と、出力部３５と、記憶部３６と、通信部３７と、ＧＮＳＳ部３８と、加速度センサ３９と、バッテリ４１と、近距離通信部４５と、を備えるコンピュータである。

ＣＰＵ３１、ＲＯＭ３２及びＲＡＭ３３は、バス４２を介して相互に接続されている。ＣＰＵ３１は、ＲＯＭ３２に記録されているプログラム又はＲＡＭ３３にロードされたプログラムに従って各種の処理を実行する。

バス４２は入出力インターフェース４３にも接続されている。入出力インターフェース４３には、入力部３４と、出力部３５と、記憶部３６と、通信部３７と、ＧＮＳＳ部３８と、加速度センサ３９と、バッテリ４１と、近距離通信部４５と、が接続されている。

入力部３４及び出力部３５は、有線又は無線により電気的に入出力インターフェース４３に接続されるユーザインターフェースである。入力部３４は例えばキーボードやマウス等によって構成され、出力部３５は、画像を表示するディスプレイや音声を拡声するスピーカ等によって構成される。なお、出力部３５及び入力部３４は、タッチパネルのように表示機能と入力機能が一体的な構成であってもよい。

記憶部３６は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の半導体メモリで構成され、ユーザ端末３０の種々のデータを保存する装置である。

通信部３７は、ＣＰＵ３１が、インターネット等のネットワークを介して他のコンピュータとの間で通信を行う装置である。

ＧＮＳＳ部３８は、位置情報を取得するための測位情報取得部である。ＧＮＳＳは、Global Navigation Satellite Systemの略称であり、ＧＮＳＳ部３８はＧＰＳ等の衛星測位システムを利用する。ＧＮＳＳ部３８は、アンテナを含み、複数の測位衛星から送信される測位衛星信号に基づいて測位を行って自身の位置を特定する。

加速度センサ３９は、任意の方向の移動と加速度を検出する装置である。例えば、加速度センサ３９は、静電容量型或いはピエゾ抵抗素子型の３軸センサであり、３軸方向のそれぞれに生じる加速度を検出する。

バッテリ４１は、ユーザ端末３０に電力を供給する。例えば、バッテリ４１はリチウムイオン電池によって構成される。

近距離通信部４５は、ウェアラブル端末６０と通信を行う装置である。近距離通信部４５は、例えば、ＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標） Ｌｏｗ Ｅｎｅｒｇｙ）やＷｉ－Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）の通信規格に基づいた通信方式でウェアラブル端末６０と通信を行う。

次に、ユーザ端末３０の機能的構成について説明する。図３は、本発明の一実施形態に係るユーザ端末３０の機能的構成のうち、通信処理を行うための機能的構成を示す機能ブロック図である。

ユーザ端末３０の各種の制御を行う制御部５０は、演算処理を実行するＣＰＵ３１によって実現される。

本実施形態の制御部５０は、通信処理部（通信処理機能）５１と、出力処理部（出力処理機能）５２と、入力処理部（入力処理機能）５３と、状態判定部（状態判定機能）５４と、を有する。

通信処理部５１は、通信部３７を介して外部の機器と通信するための処理を実行し、近距離通信部４５を介してウェアラブル端末６０と各種の情報をやり取りする処理を実行する。

出力処理部５２は、ユーザ端末３０の出力部３５に画像を表示するための処理を実行する。例えば、出力処理部５２は、後述する入力処理部５３により入力されたテキスト情報を出力部３５に表示する処理を実行する。

入力処理部５３は、ユーザによる入力部３４の操作を受け付ける処理を実行する。例えば、入力処理部５３は、ユーザが入力したテキスト情報を受け付ける処理を実行する。

状態判定部５４は、制御部５０によって動作しているプログラムの状態を判定する処理を実行する。また、状態判定部５４は、外部からメッセージを受信したことを示す着信通知情報を出力部３５に表示させる画像に反映する処理を行う。着信通知情報は、例えばメッセージの題名や本文の一部が表示されたポップアップ表示である。状態判定部５４は、通信処理部５１が通信部３７を介して外部よりメッセージ情報を受信した場合に、メッセージ情報からメッセージの題名や本文の一部を抽出し、着信通知情報を生成する。状態判定部５４は、生成した着信通知情報を出力処理部５２に指令して出力部３５に表示させる画像に反映させる。この処理について後述する。

＜ウェアラブル端末＞
次に、ウェアラブル端末６０の一例について説明する。図４は、本発明の一実施形態に係るウェアラブル端末６０のハードウェアの構成を示すブロック図である。

本実施形態のウェアラブル端末６０は、ＣＰＵ６１と、ＲＯＭ６２と、ＲＡＭ６３と、入力部６４と、出力部６５と、記憶部６６と、通信部６７と、ＧＮＳＳ部６８と、加速度センサ６９と、生体センサ７０と、バッテリ７１と、バス７２と、入出力インターフェース７３と、近距離通信部７５と、を備えるコンピュータである。なお、既に説明した構成と共通又は同様の構成については同じ名称をつけて詳細な説明を省略する場合がある。

ユーザ端末３０が備えていない構成である生体センサ７０について説明する。生体センサ７０は、ユーザの生体情報を取得する生体情報取得装置である。生体情報は、ユーザの脈拍やウェアラブル端末６０がユーザの皮膚に接触しているか否か等の情報である。

本実施形態の生体センサ７０は、ウェアラブル端末６０の裏面（ユーザに接触する面）側に配置される。生体センサ７０は、例えば、光学式のものや電流に基づく電流検知式のものが用いられる。光学式の場合、生体センサ７０は、ユーザの皮膚に光を照射し、その反射光を測定すること等により、ユーザの生体情報を検出する。電流検知式の場合、生体センサ７０は、ユーザの皮膚の微弱電流を直接検出することによって生体情報を取得したり、微弱な電流を皮膚に流して心拍を計測する生体インピーダンス法等を利用して生体情報を取得したりする。

次に、ウェアラブル端末６０の機能的構成について説明する。図５は、本発明の一実施形態に係るウェアラブル端末６０の機能的構成の一部を示す機能ブロック図である。

ウェアラブル端末６０の各種の制御を行う制御部８０は、演算処理を実行するＣＰＵ６１によって実現される。本実施形態の制御部８０は、通信処理部（通信処理機能）８１と、出力処理部（出力処理機能）８２と、入力処理部（入力処理機能）８３と、位置情報取得部（位置情報取得機能）８４と、生体情報取得部（生体情報取得機能）８５と、状態判定部（状態判定機能）８６と、を有する。

通信処理部８１は、通信部６７を介して外部の機器と各種の情報をやり取りする処理を実行し、近距離通信部７５を介してユーザ端末３０と各種の情報をやり取りする処理を実行する。

出力処理部８２は、ウェアラブル端末６０の出力部６５に画像を表示するための処理を実行する。例えば、出力処理部８２は、ユーザ端末３０から取得した情報を表示したり、後述する生体情報取得部８５が取得した情報を表示したりする処理を実行する。

入力処理部８３は、ユーザによる入力部６４の操作を受け付ける処理を実行する。例えば、入力処理部８３は、出力部６５に表示された情報に基づいて表示する情報を切り替える処理等を実行する。

位置情報取得部８４は、ＧＮＳＳ部６８が検出する測位信号に基づいてウェアラブル端末６０の現在位置を示す第２位置情報を取得する処理を実行する。

生体情報取得部８５は、生体センサ７０から取得する信号に基づいてユーザの脈拍を示す情報や、ユーザがウェアラブル端末６０を身に着けているか否かを示す情報等の生体情報を取得する。

状態判定部８６は、ユーザ端末３０の状態判定部５４による、制御部５０によって動作しているプログラムの状態を判定する情報を取得する処理を実行する。また、状態判定部８６は、ユーザ端末３０から受信した着信通知情報を出力部６５に表示させる画像に反映する処理を行う。例えば、状態判定部８６は、通信処理部８１が通信部６７を介してユーザ端末３０より着信通知情報を受信した場合に、着信通知情報を出力処理部８２に指令して出力部６５に表示させる画像に反映させる。この処理について後述する。

＜通信処理の例＞
次に、本発明を適用した通信処理の一例について説明する。本実施形態では、状態判定部５４は、自機の状態に応じてウェアラブル端末６０への送信情報の形式を切り替えるために、所定のプログラムの動作の有無を判定する。送信情報は所定のプログラムとは異なる第２のプログラムによって取得、又は生成されたものである。第２のプログラムとは、例えば、Ｅメールを管理するメールアプリやメッセンジャーアプリ等である。所定のプログラムは、判定基準として記憶部３６に予め記憶される。

所定のプログラムの例について説明する。所定のプログラムは、例えばアプリケーションソフトウェア（以下単に「アプリ」と記述）でもよいし、アプリ起動時の所定の状態であってもよい。言い換えると、アプリ起動中の一部の動作（プログラム）であっても良い。例えば、アプリ起動中に出力部３５にアプリの内容が全画面表示されるプログラムを所定のプログラムとしてもよい。また、所定のプログラムは、アプリとは異なる自機で実行されるプログラムであってもよい。例えば、出力部３５の画面がカメラ画像や動画によって占有された状態を表示面積に基づいて判定するプログラムを所定のプログラムとしてもよい。

次に、所定のプログラムの一例について説明する。図６は、本発明の一実施形態に係るユーザ端末３０とウェアラブル端末６０による通信処理を説明する模式図である。図６に示す例では、ドローン９０の操縦用のアプリケーションソフトウェアである操縦アプリが、所定のプログラムとして設定されている。

ドローン９０は、不図示の近距離通信部を有する。ドローン９０は、当該近距離通信部を介してユーザ端末３０と近距離通信可能である。また、ウェアラブル端末６０は、ユーザの腕に装着されている。また、ユーザ端末３０は、ユーザによる保持されている。更に、ユーザ端末３０には、上述の操縦アプリがインストールされている。

操縦アプリが起動すると、出力処理部５２は、出力部３５にドローン９０のコントローラ表示を表示させる。ユーザは、コントローラ表示をタッチすることで近距離通信を介してドローン９０を操縦する。操縦アプリ起動中、出力部３５の画面は、ドローン９０のコントローラ表示により占有されている。

以上の状況において、スマートフォンとしてのユーザ端末３０とスマートウォッチ（ＳＷ端末）としてのウェアラブル端末６０との通信処理について、図７～９に示されるフローチャートを用いて説明する。この通信処理は、ユーザ端末３０とウェアラブル端末６０とがペアリングを行うことにより開始される。図７～８は、図３の機能的構成を有するユーザ端末３０が実行する通信処理の流れを説明するフローチャートである。図９は、図５の機能的構成を有するウェアラブル端末６０が実行する通信処理の流れを説明するフローチャートである。

まずは、ユーザ端末３０の処理について説明する。図７に示すように、状態判定部５４は、制御部５０による操縦アプリの動作の有無の判定を行う（ステップＳ１０）。操縦アプリの動作が確認できた場合（ステップＳ１０：Ｙｅｓ）、状態判定部５４は、操縦アプリが開始されたという通知（以下、アプリ開始通知）をウェアラブル端末６０に対して通信処理部５１に送信させる（ステップＳ１１）。次に、状態判定部５４は、通信処理部５１が外部の機器からメッセージを受信しているか否かを判定する（ステップＳ１２）。

通信処理部５１が外部の機器からメッセージを受信していた場合（ステップＳ１２：Ｙｅｓ）、状態判定部５４は、通信処理部５１に外部の機器からメッセージを受信したことを示す着信通知情報（以下単に「通知テキスト情報」とも称する）を生成しウェアラブル端末６０に送信させる（ステップＳ１３）。次に、状態判定部５４は、受信したメッセージの内容を示す情報（以下単に「内容テキスト情報」と称する）をウェアラブル端末６０に送信し（ステップＳ１４）、状態判定部５４は、処理をステップＳ１２に推移させる。

一方、通信処理部５１が外部の機器からメッセージを受信していない場合（ステップＳ１２：Ｎｏ）、状態判定部５４は、操縦アプリの動作が終了しているか否かを判定する（ステップＳ１５）。操縦アプリの動作が終了していない場合（ステップＳ１５：Ｎｏ）、状態判定部５４は、処理をステップＳ１２へ移行させる。操縦アプリの動作が終了している場合（ステップＳ１５：Ｙｅｓ）、通信処理部５１は、ウェアラブル端末６０に操縦アプリが終了したという通知（以下、アプリ終了通知）を送信して（ステップＳ１６）、状態判定部５４は、通信処理を終了させる。

次に、ステップＳ１０で操縦アプリの動作の確認ができない場合について説明する。ステップＳ１０で操縦アプリの動作の確認ができない場合（ステップＳ１０：Ｎｏ）、状態判定部５４は、処理をステップＳ２２へ移行する。引き続き、図８に示すように状態判定部５４は、通信処理部５１が外部の機器からメッセージを受信しているか否かを判定する（ステップＳ２２）。通信処理部５１が外部の機器からメッセージを受信していた場合（ステップＳ２２：Ｙｅｓ）、状態判定部５４は、通信処理部５１にウェアラブル端末６０へ通知テキスト情報を送信させて（ステップＳ２３）、処理をステップＳ２２へ移行する。通信処理部５１が外部の機器からメッセージを受信していない場合（ステップＳ２２：Ｎｏ）、状態判定部５４は、通信処理を終了させる。

次に、ウェアラブル端末６０の処理について説明する。図９に示すように、通信処理部８１が、アプリ開始通知を受信した場合（ステップＳ３０：Ｙｅｓ）、出力処理部８２は、全文受信待ち受けモードに移行する（ステップＳ３１）。出力処理部８２が当該モード実行中の場合、通信処理部８１が、ユーザ端末３０からの内容テキスト情報を受信した時に、出力部６５に対して画面に内容テキスト情報を表示させる処理が可能である。

次に、状態判定部８６は、通信処理部８１が通知テキスト情報を受信したか判定する（ステップＳ３２）。通信処理部８１が通知テキスト情報を受信した場合（ステップＳ３２：Ｙｅｓ）、出力処理部８２は、受信したメッセージの着信通知と、受信したメッセージの内容を表示させるか否かの選択画面と、を出力部６５に表示させる（ステップＳ３３）。なお、表示される選択画面は、ユーザがタッチすることで選択内容を入力することができる入力部６４でもある。

全文メッセージを表示させない場合（ステップＳ３４：Ｎｏ）、状態判定部８６は、処理をステップＳ３２へ移行させる。全文メッセージを表示させる場合（ステップＳ３４：Ｙｅｓ）、出力処理部８２は、出力部６５にメッセージの内容を表示させて（ステップＳ３５）、状態判定部８６は、処理をステップＳ３２へ移行させる。

一方、通信処理部８１が通知テキスト情報を受信していない場合（ステップＳ３２：Ｎｏ）、状態判定部８６は、アプリ終了通知の受信の有無を判定する（ステップＳ３６）。アプリ終了通知の受信がない場合（ステップＳ３６：Ｎｏ）、状態判定部８６は、処理をステップＳ３２に移行する。アプリ終了通知の受信があった場合（ステップＳ３６：Ｙｅｓ）、出力処理部８２は、全文持ち受けモードを終了し（ステップＳ３７）、状態判定部８６は、通信処理を終了させる。

以上のように構成されるユーザ端末３０は、ウェアラブル端末６０と通信する通信部３７と、自機に関して、画像又は音声を出力する所定のプログラムが動作しているか否かの動作判定を行う制御部５０と、を備え、制御部５０は、動作判定の結果に基づいて、通信部３７を介してウェアラブル端末６０へ送信する情報の形式を切り替える又は前記ウェアラブル端末６０への情報の送信を停止する。また、送信する情報は、所定のプログラムとは異なる第２のプログラムによって取得、又は生成されたものである。

これにより、プログラムの動作状況に応じた通知内容を決定できる。また、プログラムの動作状況に応じた通知内容を外部の電子機器に送信できる。

また、本実施形態に係るユーザ端末３０において、通信処理部５１は、テキスト、画像、及び音声の少なくとも何れか一つを含むメッセージ情報を外部から受信可能であり、制御部５０は、所定のプログラムが動作している状態では、メッセージ情報をウェアラブル端末６０に通信処理部５１を介して送信し、所定のプログラムが動作していない状態では、メッセージ情報を受信したことを示す着信通知情報をウェアラブル端末６０に通信処理部５１を介して送信する。

これにより、ユーザ端末３０において所定のプログラムが動作して表示画面が占有されている状態で、テキスト及び画像の少なくとも何れか一方を含むメッセージを外部から受信した時に、ユーザは、ユーザ端末３０において所定のプログラムを動作させたまま、ウェアラブル端末６０で当該メッセージを確認できる。また、所定のプログラムが動作していない状態で、当該メッセージを受信した時は、ウェアラブル端末６０に送信する情報をメッセージではなく着信通知にすることができ、より電力消費を抑制できる。

また、本実施形態に係るユーザ端末３０は、画像を表示可能な出力部３５を備え、制御部５０は、出力部３５の画面が占有されている場合に、所定のプログラムが動作していると判定する。

これにより、本実施形態に係るユーザ端末３０では、制御部５０において動作しているプログラムが、画面を占有するようなプログラムであるか否かが判定できる。

また、本実施形態に係るユーザ端末３０において、所定のプログラムはドローン９０を操縦するためのプログラムである。

これにより、本実施形態に係るユーザ端末３０では、ドローン９０を操縦するプログラムが動作中の状態で、メッセージを外部から受信した時に、ユーザはドローン９０を操縦するプログラムを動作させたまま、ウェアラブル端末６０で当該メッセージを確認できる。

また、本実施形態に係るウェアラブル端末６０は、ユーザ端末３０と通信する通信処理部８１と、画像を表示する出力部６５と、ユーザ端末３０から通信部６７を介して受信した表示情報を出力部６５に表示する処理を実行する制御部８０と、を備え、制御部８０は、ユーザ端末３０で所定のプログラムが動作していることを示す動作情報を受信した場合は、当該動作情報に基づいて表示する情報の形式を切り替える。

これにより、ユーザ端末３０において所定のプログラムが動作して表示画面が占有されている場合でも、所定のプログラムの動作を一時停止させずに、受信したメッセージをより容易に確認できる。

なお、本実施形態では、ユーザ端末３０における通信処理部５１からウェアラブル端末６０に通知テキスト情報と内容テキスト情報とを送信した上で、ウェアラブル端末６０における出力処理部８２が出力部６５に全文表示を行うか否かの切り替えを行っているが、ユーザ端末３０における通信処理部５１からウェアラブル端末６０に送信するタイミングで、内容テキスト情報を送信するか否かの切り替えを行うようにしてもよい。

また、本実施形態では、ユーザ端末３０がドローン９０の操縦アプリ動作中にメッセージを受信した場合に、ウェアラブル端末６０では、受信したメッセージの全文を表示させるか否かの判断を行っていたが、表示させるメッセージは全文ではなく一部であってもよい。また、本実施形態では、ユーザ端末３０がドローン９０の操縦アプリ動作中にメッセージを受信した場合に、ウェアラブル端末６０では、受信したメッセージの全文を表示させるか否かの判断を行っていたが、判断をせずにそのまま表示させる処理を行ってもよい。

また、本実施形態では、ユーザ端末３０がドローン９０の操縦アプリ動作中にメッセージを受信した場合に、ユーザ端末３０では、通信処理部５１からウェアラブル端末６０に通知テキスト情報を送信しつつ、内容テキスト情報を送信しているが、内容テキスト情報を送信しなくても良い。また、ユーザ端末３０がドローン９０の操縦アプリ動作中にメッセージを受信した場合に、ユーザ端末３０は、通信処理部５１からウェアラブル端末６０に通知テキスト情報を送信せずに内容テキスト情報のみを送信してもよい。また、本実施形態では、ユーザ端末３０がドローン９０の操縦アプリ動作中にメッセージを受信した場合に、ウェアラブル端末６０では、通知テキスト情報を表示させつつ、全文表示を行うか否かの切り替えを行っているが、通知テキスト情報を表示させずに、全文表示を行うか否かの切り替えのみを行わせてもよい。

また、本実施形態では、受信したメッセージはテキストであったが、図形や音声データ等のテキスト以外の情報であってもよい。例えば、ユーザ端末３０は、音声データを受信した時にユーザ端末３０で音楽等の別の音声データを出力している場合、受信した音声データをウェアラブル端末６０に転送して、ウェアラブル端末６０で音声データを出力させることができる。この場合、所定のプログラムは、音楽等を再生するアプリでも良いし、アプリ起動中に出力部３５に音声を出力させるプログラムでも良い。また、本実施形態では、ドローン９０の操縦アプリ動作中の場合について説明していたが、ユーザ端末３０の画面の一部又は全てを占有するようなアプリ、例えば通話アプリや動画撮影アプリや動画再生アプリやゲームアプリにも本発明を適用可能である。

＜変形例＞
上述の実施形態では、ユーザ端末３０は、ユーザ端末３０の画面の一部又は全てを占有するようなアプリが動作中にメッセージを受信した場合、ウェアラブル端末６０に着信通知情報としての通知テキスト情報を表示させていたが、更に、ユーザ端末３０には、画面にメッセージの着信通知を表示させない着信通知の非表示モードが設定可能である。

図１０は、変形例に係るユーザ端末３０とウェアラブル端末６０とが適用される情報通信システムＳの模式図である。変形例に係る情報通信システムＳは、通信処理を行うユーザ端末３０、ウェアラブル端末６０、プロジェクタ１００及びスクリーン１０１を含む。プロジェクタ１００は、ユーザ端末３０とペアリングを行って近距離通信を介してユーザ端末３０から受信した画像をスクリーン１０１に投影することができる装置である。

なお、プロジェクタ１００とユーザ端末３０との間の通信方法は、近距離通信に限らず、例えばＬＡＮ又はインターネット等の情報通信ネットワークを介した通信方法でも良い。また、変形例に係るユーザ端末３０、ウェアラブル端末６０のハードウェア構成及び機能的構成は、第１の実施形態と同様の構成の為、同じ名称をつけて詳細な説明を省略する。

図１０に示す例では、ユーザ端末３０に表示されるプレゼンテーションアプリと同一の内容がプロジェクタ１００によってスクリーン１０１に投影される。従って、プレゼンテーション中にユーザ端末３０がメッセージを受信した場合は、出力部３５の画面にメッセージの題名や本文の一部が表示された着信通知が表示されることになる。

即ち、着信通知がユーザ端末３０のプロジェクタ投影アプリの動作によりプロジェクタ１００を介してスクリーン１０１にも投影される。このため、プレゼンテーションを受ける第三者もスクリーン１０１に投影された着信通知を介して当該情報を閲覧できてしまい、意図しない情報を開示してしまうおそれがある。そこで、変形例に係るユーザ端末３０は、プロジェクタ投影アプリによる投影が行われている場合に着信通知の表示モードを非表示モードに切り替える表示モード切替処理を行う機能を有する。ユーザ端末３０は、プロジェクタ投影アプリによる投影が行われている時に意図せずメッセージを受信した場合でも、非表示モード設定のため着信通知を出力部３５の画面には表示されない。即ち、当該メッセージの着信通知は、プロジェクタ１００からスクリーン１０１に投影されない。

また、ユーザ端末３０は、ウェアラブル端末６０に当該メッセージの着信通知を送信する着信通知処理を実行し、ウェアラブル端末６０は、送信された着信通知情報に基づいて着信通知を画面に表示する着信通知処理を行い、ユーザに着信通知を行うことができる。

次に、本実施形態に係るユーザ端末３０が実行する表示モード切替処理について、図１１を用いて説明する。図１１は、変形例に係るユーザ端末３０による表示モード切替処理の流れの一例を示すフローチャートである。表示モード切替処理は、入力処理部５３が入力部３４へ入力されたプロジェクタ投影アプリの開始操作を受け付けたタイミングで開始される。

まず、状態判定部５４は、プロジェクタ投影アプリが投影動作を開始したか否かを確認する（ステップＳ４０）。プロジェクタ投影アプリが投影動作を開始した場合（ステップＳ４０：ＹＥＳ）、状態判定部５４は、メッセージ着信非表示モードをＯＮに設定する（ステップＳ４１）。次に、状態判定部５４は、プロジェクタ投影アプリが投影を終了したか否かを確認する（ステップＳ４２）。

プロジェクタ投影アプリが投影を終了した場合（ステップＳ４２：ＹＥＳ）、状態判定部５４は、メッセージ着信非表示モードをＯＦＦに設定する（ステップＳ４３）。次に、状態判定部５４は、プロジェクタ投影アプリが終了したか否かを確認する（ステップＳ４４）。プロジェクタ投影アプリが終了していない場合（ステップＳ４４：ＮＯ）、状態判定部５４は、処理をステップＳ４０まで移行させる。一方、プロジェクタ投影アプリが終了している場合（ステップＳ４４：ＹＥＳ）、状態判定部５４は、処理を終了させる。

次に、本実施形態に係るユーザ端末３０が実行する着信通知処理について、図１２を用いて説明する。図１２は、変形例に係るユーザ端末３０による着信通知処理の流れの一例を示すフローチャートである。着信通知処理は、ユーザ端末３０が着信可能な状態となったタイミングで開始される。ユーザ端末３０が着信可能な状態となるタイミングの一例としては、ユーザ端末３０の電源が入るタイミングである。

まず、状態判定部５４は、メッセージを受信したか否かを確認する（ステップＳ５０）。次に、状態判定部５４は、メッセージの着信通知の非表示モードのＯＮ、ＯＦＦについて確認する（ステップＳ５１）。メッセージの着信通知の非表示モードがＯＮの場合（ステップＳ５１：ＹＥＳ）、状態判定部５４は、処理をステップＳ５３に移行させる。

一方、メッセージの着信通知の非表示モードがＯＦＦの場合（ステップＳ５１：ＮＯ）、状態判定部５４は、出力処理部５２に指令して出力部３５の画面に着信通知を表示させる（ステップＳ５２）。次に、状態判定部５４は、通信処理部５１に指令して通信部３７を介してスマートウォッチ（ＳＷ端末）としてのウェアラブル端末６０に着信通知情報を送信させる（ステップＳ５３）。

次に、状態判定部５４は、ユーザ端末３０が着信可能な状態か否かを確認する（ステップＳ５４）。着信可能ではない状態の一例としては、ユーザ端末３０の電源が切れている状態である。ユーザ端末３０が着信可能な状態の場合（ステップＳ５４：ＹＥＳ）、状態判定部５４は、処理をステップＳ５０へ移行させる。一方、ユーザ端末３０が着信可能な状態ではない場合（ステップＳ５４：ＮＯ）、状態判定部５４は、処理を終了させる。

なお、変形例に係る状態判定部５４による着信処理は、上述の例に限らない。例えば、状態判定部５４は、ユーザ端末３０が非表示モードのときは、ユーザ端末３０の出力部３５の画面にメールの本文は表示されないため、ウェアラブル端末６０にメールの全文のメッセージとして内容テキスト情報を送信しても良い。なお、出力部３５の画面に着信が来たことを通知する着信通知情報はプロジェクタ１００に投影されるが、メールの本文は表示されない。また、状態判定部５４は、ユーザ端末３０が非表示モードでないときは、ユーザ端末３０の出力部３５の画面に内容テキスト情報を表示させ、ウェアラブル端末６０には、メッセージ全文を送らず、送信する情報をメッセージの着信通知情報のみに限定しても良い。

また、変形例に係る状態判定部５４は、ユーザ端末３０が非表示モードのときは、ウェアラブル端末６０に着信通知情報を送信しても良い。また、状態判定部５４は、ユーザ端末３０が非表示モードでないときは、ウェアラブル端末６０に着信通知情報を送信しなくても良い。言い換えると、状態判定部５４は、プロジェクタ投影アプリが動作していない状態では、ウェアラブル端末６０への情報の送信を停止しても良い。

次に、本実施形態に係るウェアラブル端末６０が実行する着信通知処理について、図１３を用いて説明する。図１３は、変形例に係るユーザ端末３０による着信通知処理の流れの一例を示すフローチャートである。着信通知処理は、ウェアラブル端末６０がユーザ端末３０とペアリングしたタイミングで開始される。

まず、状態判定部８６は、通信処理部８１が近距離通信部７５を介してユーザ端末３０から着信通知情報を受信したか否かを確認する（ステップＳ６０）。通信処理部８１が着信通知情報を受信していない場合（ステップＳ６０：ＮＯ）、状態判定部８６は、処理をステップＳ６２に移行させる。一方、通信処理部８１が着信通知情報を受信している場合（ステップＳ６０：ＹＥＳ）、状態判定部８６は、出力処理部８２に指令して出力部６５の画面に着信通知を表示させる（ステップＳ６１）。

次に、状態判定部８６は、通信処理部８１がユーザ端末３０とのペアリングの処理を行っているか否かを確認する（ステップＳ６２）。通信処理部８１がユーザ端末３０とのペアリングの処理を行っている場合（ステップＳ６２：ＹＥＳ）、状態判定部８６は、処理をステップＳ６０に移行させる。一方、通信処理部８１がユーザ端末３０とのペアリングの処理を行っていない場合（ステップＳ６２：ＮＯ）、状態判定部８６は、処理を終了させる。

以上のように構成される変形例に係るユーザ端末３０では、制御部５０は、所定のプログラムが動作をしていない状態では、ウェアラブル端末６０への情報の送信を停止する。

これにより、本実施形態に係るユーザ端末３０では、所定のプログラムが動作していない時に通信部３７による情報の送信動作自体を停止させ、ウェアラブル端末６０への送受信等の余分な情報のやり取りを省略できる。

また、変形例に係るユーザ端末３０は、画像を表示可能な出力部３５を備え、所定のプログラムは、出力部３５の画面に表示する画像を、外部のプロジェクタ１００に表示させる処理を行うプロジェクタ投影アプリである。

これにより、本実施形態に係るユーザ端末３０では、プロジェクタ投影アプリが動作中の状態で、メッセージを外部から受信した時に、ユーザはプロジェクタ投影アプリを動作させたまま、ウェアラブル端末６０で当該メッセージを確認したり、またプロジェクタ投影アプリが動作中の時に情報の送信動作自体が停止され、プロジェクタ１００により意図せず情報が投影されることを抑制したりすることができる。

また、制御部５０は、プロジェクタ投影アプリが動作している状態では、メッセージを受信したことを示す着信通知情報を出力部３５に表示させる画像に反映させず、プロジェクタ投影アプリが動作していない状態では、着信通知情報を出力部３５に表示させる画像に反映させる。

これにより、本実施形態に係るユーザ端末３０では、プロジェクタ投影アプリが動作中の状態で、メッセージを外部から受信した時に、プロジェクタにより投影された映像等により第三者に意図せず着信したメッセージを見られることを抑制できる。

なお、本変形例では、プロジェクタ投影アプリ実行時に、非表示モードに切り替える表示モード切替処理を行っていたが、これに限らず、オンライン会議アプリ等の画面を第三者と共有するアプリ実行時に、非表示モードに切り替える表示モード切替処理を行っても良い。

以上、本発明に係る一実施形態及び変形例について説明した。本発明は、この実施形態や変形例に限定されるものではない。上記実施形態と変形例のそれぞれを組み合わせてもよいし、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

上述のフローチャートを参照して説明した各ステップの処理は、一部を省略したり、ステップを適宜追加したり、条件を組み合わせてもよい。

また、本実施形態における機能的構成は、演算処理を実行するプロセッサによって実現され、本実施形態に用いることが可能なプロセッサには、シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐ＰｒｏｇｒａｍｍａｂｌｅＧａｔｅ Ａｒｒａｙ）等の処理回路とが組み合わせられたものを含む。

そして、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。換言すると、上記実施形態や変形例で示した機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に上記実施形態や変形例限定されない。また、一つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

また、プログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される場合だけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成してもよい。また、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。

また、上記実施形態及び変形例で示したハードウェア構成は、あくまで一例であり、特にこの構成に限定されるわけではない。シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の処理回路とが組み合わせられたものをプロセッサとして機能的構成を実現するものとして採用してもよい。

以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
外部の電子機器と通信する通信部と、
自機に関して、画像又は音声を出力する所定のプログラムが動作しているか否かの動作判定を行う制御部と、
を備え、
前記制御部は、前記動作判定の結果に基づいて、前記通信部を介して前記電子機器へ送信する情報の形式を切り替える又は前記電子機器への情報の送信を停止することを特徴とする情報処理装置。
［付記２］
前記情報は、前記所定のプログラムとは異なる第２のプログラムによって取得、又は生成されたものであることを特徴とする付記１に記載の情報処理装置。
［付記３］
前記通信部は、テキスト、画像、及び音声の少なくとも何れか一つを含むメッセージ情報を外部から受信可能であり、
前記制御部は、
前記所定のプログラムが動作している状態では、前記メッセージ情報を前記電子機器に前記通信部を介して送信し、
前記所定のプログラムが動作していない状態では、前記メッセージ情報を受信したことを示す着信通知情報を前記電子機器に前記通信部を介して送信することを特徴とする付記１又は２に記載の情報処理装置。
［付記４］
画像を表示可能な表示部を備え、
前記制御部は、
前記表示部の画面が占有されている場合に、前記所定のプログラムが動作していると判定することを特徴とする付記１から３の何れかに記載の情報処理装置。
［付記５］
前記所定のプログラムは、ドローンを操縦するためのプログラムであることを特徴とする付記１から４の何れかに記載の情報処理装置。
［付記６］
前記制御部は、前記所定のプログラムが動作していない状態では、前記電子機器への情報の送信を停止することを特徴とする付記１又は２に記載の情報処理装置。
［付記７］
画像を表示可能な表示部を備え、
前記所定のプログラムは、前記表示部の画面に表示する画像を、外部の表示装置に表示させる処理を行うプログラムであることを特徴とする付記１から６の何れかに記載の情報処理装置。
［付記８］
前記制御部は、
前記所定のプログラムが動作している状態では、テキスト、画像、及び音声の少なくとも何れか一つを含むメッセージ情報を受信したことを示す着信通知情報を前記表示部に表示させる画像に反映させず、
前記所定のプログラムが動作していない状態では、前記着信通知情報を前記表示部に表示させる画像に反映させることを特徴とする付記７に記載の情報処理装置。
［付記９］
外部の情報処理装置と通信する通信部と、
画像を表示する表示部と、
前記外部の情報処理装置から前記通信部を介して受信した表示情報を前記表示部に表示する処理を実行する制御部と、を備え、
前記制御部は、
前記外部の情報処理装置で所定のプログラムが動作していることを示す動作情報を受信した場合は、当該動作情報に基づいて表示する情報の形式を切り替えることを特徴とする情報処理装置。
［付記１０］
コンピュータに、
外部の電子機器と通信する通信機能と、
自機に関して、画像又は音声を出力する所定のプログラムが動作しているか否かの動作判定を行う制御機能と、を実行させ、
前記制御機能は、前記動作判定の結果に基づいて、前記通信機能によって前記電子機器へ送信する情報の形式を切り替える又は前記電子機器への情報の送信を停止する制御を行うプログラム。
［付記１１］
情報処理装置が実行する情報通信方法であって、
外部の電子機器と通信する通信ステップと、
自機に関して、画像又は音声を出力する所定のプログラムが動作しているか否かの動作判定を行う制御ステップと、を含み、
制御ステップでは、前記動作判定の結果に基づいて、前記通信ステップにて前記電子機器へ送信する情報の形式を切り替える又は前記電子機器への情報の送信を停止する制御を行う情報通信方法。
［付記１２］
コンピュータに、
外部の情報処理装置と通信する通信機能と、
画像を表示する表示機能と、
外部の情報処理装置から受信した表示情報を前記表示機能により表示する処理を実行する制御機能と、を実行させ、
前記制御機能は、
前記情報処理装置で所定のプログラムが動作していることを示す動作情報を受信した場合は、当該動作情報に基づいて表示する情報の形式を切り替える制御を行うプログラム。
［付記１３］
情報処理装置が実行する情報通信方法であって、
外部の情報処理装置と通信する通信ステップと、
画像を表示する表示ステップと、
外部の情報処理装置から受信した表示情報を表示ステップにより表示する処理を実行する制御ステップと、を含み、
制御ステップでは、
前記情報処理装置で所定のプログラムが動作していることを示す動作情報を受信した場合は、当該動作情報に基づいて表示する情報の形式を切り替える制御を行う情報通信方法。

３０ ユーザ端末
５０ 制御部
５１ 通信処理部
６０ ウェアラブル端末
６５ 出力部
８０ 制御部
８１ 通信処理部

Claims (8)

1. テキスト、画像、及び音声の少なくとも一つを含むメッセージ情報を外部から受信可能であり、外部の電子機器と通信する通信部と、
   自機に関して、少なくとも画像を出力する所定のプログラムが動作しているか否かの動作判定を行う制御部と、
   を備え、
   前記制御部は、前記動作判定の結果に基づいて、前記通信部を介して前記外部の電子機器へ送信する情報の形式を切り替えることが可能であり、前記所定のプログラムが動作している状態では、前記メッセージ情報を前記外部の電子機器に前記通信部を介して送信し、前記所定のプログラムが動作していない状態では、前記メッセージ情報を受信したことを示す着信通知情報を前記外部の電子機器に前記通信部を介して送信する、
   ことを特徴とする情報処理装置。
2. 前記外部の電子機器へ送信する情報は、前記所定のプログラムとは異なる第２のプログラムによって取得又は生成されたものである
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記第２のプログラムは、メールアプリ又はメッセンジャーアプリである、
   ことを特徴とする請求項２に記載の情報処理装置。
4. 画像を表示可能な表示部を備え、
   前記制御部は、
   前記表示部の画面が占有されている場合に、前記所定のプログラムが動作していると判定する
   ことを特徴とする請求項１から３の何れかに記載の情報処理装置。
5. 前記所定のプログラムは、アプリケーションソフトウェア又はアプリケーションソフトウェア起動中動作である、
   ことを特徴とする請求項１から４の何れかに記載の情報処理装置。
6. 前記所定のプログラムは、ドローンを操縦するためのプログラムである
   ことを特徴とする請求項１から５の何れかに記載の情報処理装置。
7. 情報処理装置のコンピュータに、
   テキスト、画像、及び音声の少なくとも一つを含むメッセージ情報を外部から受信可能であり、外部の電子機器と通信する通信機能と、
   自機に関して、少なくとも画像を出力する所定のプログラムが動作しているか否かの動作判定を行う制御機能と、を実行させ、
   前記制御機能は、前記動作判定の結果に基づいて、前記通信機能によって前記外部の電子機器へ送信する情報の形式を切り替えることが可能であり、前記所定のプログラムが動作している状態では、前記メッセージ情報を前記外部の電子機器に送信し、前記所定のプログラムが動作していない状態では、前記メッセージ情報を受信したことを示す着信通知情報を前記外部の電子機器に送信する制御を行う
   ことを特徴とするプログラム。
8. 情報処理装置が実行する情報通信方法であって、
   テキスト、画像、及び音声の少なくとも一つを含むメッセージ情報を外部から受信し、外部の電子機器と通信する通信ステップと、
   自機に関して、少なくとも画像を出力する所定のプログラムが動作しているか否かの動作判定を行う制御ステップと、を含み、
   制御ステップでは、前記動作判定の結果に基づいて、前記通信ステップにて前記外部の電子機器へ送信する情報の形式を切り替えることが可能であり、前記所定のプログラムが動作している状態では、前記メッセージ情報を前記外部の電子機器に送信し、前記所定のプログラムが動作していない状態では、前記メッセージ情報を受信したことを示す着信通知情報を前記外部の電子機器に送信する制御を行う
   ことを特徴とする情報通信方法。

Images