JP7030288B2 - 携帯移動端末用アプリケーションソフトウェア - Google Patents

Description

特許法第３０条第２項適用 平成２９年８月２９日にサテライトオフィスホームページ サテライトオフィス・ＩｏＴアプリページに掲載 ｈｔｔｐ：／／ｗｗｗ．ｓａｔｅｒａｉｔｏ．ｊｐ／ ｈｔｔｐ：／／ｗｗｗ．ｓａｔｅｒａｉｔｏ．ｊｐ／ＩｏＴ／ｉｎｄｅｘ．ｈｔｍｌ

本発明は、携帯移動端末に設けられた所定のセンサーをアクティブにする携帯移動端末用アプリケーションソフトウェアに関する。

従来、室内にセンサーを設けて、センサーが人の動きを検知し、センサーから無線通信でセンサー受信部へ送られ、電話子機から予め設定された受信側となるスマートフォン端末へ発信するように構成された電話システム上に構築される監視装置が知られている（例えば、特許文献１）。

特開２０１７－１３５６５４号公報（特に、段落００１８～００２０参照）

しかしながら、上述した従来の電話システム上に構築される監視装置は、スマートフォン端末自体に設けられたセンサーを用いずに、別体のセンサーを用いる構成であったため、スマートフォン端末の機能が十分に活用されていないという問題があった。

そこで、本発明は、前述したような従来技術の問題を解決するものであって、すなわち、本発明の目的は、携帯移動端末自体に設けられたセンサーを用いてユーザーは何かイベントが発生したことを知ることができる携帯移動端末用アプリケーションソフトウェアを提供することである。

本請求項１に係る発明は、携帯移動端末に設けられた所定のセンサーをアクティブにする携帯移動端末用アプリケーションソフトウェアであって、前記センサーが、焦電センサーまたは画像センサーであり、前記センサーのセンシング状態が変化したか否かを判定する判定ステップと、前記センシング状態が変化した場合に画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える画像データ伝達ステップと、前記人工知能画像認識手段からのフィードバック情報を受け取る受け取りステップと、前記センシング状態が変化した場合に変化した旨およびフィードバック情報を携帯移動端末において通知する、または他の端末に通知する通知ステップと、前記受け取りステップの後、サイネージ端末へフィードバック情報を送信するとともにサイネージ端末にその性別、年齢、感情に合わせたメニューコンテンツの表示を指示する指示ステップとを携帯移動端末に実行させることにより、前述した課題を解決するものである。

本請求項２に係る発明は、請求項１に記載された携帯移動端末用アプリケーションソフトウェアの構成に加えて、前記通知ステップは、表計算形式データファイルへの入力、携帯移動端末に設けられたスピーカ部による音声通知、電子メールによる通知、チャットメッセージによる通知、所定の信号による通知のいずれかで通知することにより、前述した課題を解決するものである。

本請求項１に係る発明の携帯移動端末用アプリケーションソフトウェアによれば、何らかの変化をセンサーが検知すると通知されるため、携帯移動端末自体に設けられたセンサーを用いてユーザーは何かイベントが発生したことを知ることができる。
さらに、人物の画像データの場合はその人物の性別、年齢、感情、何をしている状態かについての推定情報がフィードバックされるため、何を撮影したかを簡単に分類することができる。
また、見込み客に応じたメニューコンテンツが表示されるため、見込み客の注意を引くことができる。

本請求項２に係る発明の携帯移動端末用アプリケーションソフトウェアによれば、請求項１に係る発明が奏する効果に加えて、視覚的、聴覚的、データの内容のいずれかに何らかの変化があるため、確実に通知することができる。

本発明の第１実施例の携帯移動端末用アプリケーションソフトウェアの有したスマートフォン端末の概念図。 （Ａ）（Ｂ）は本発明の第１実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第２実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第３実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第４実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第５実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第６実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第７実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。 （Ａ）（Ｂ）は本発明の第８実施例のスマートフォン端末の設置場所を示す図および動作を示すチャート図。

本発明は、携帯移動端末に設けられた所定のセンサーをアクティブにする携帯移動端末用アプリケーションソフトウェアであって、センサーのセンシング状態が変化したか否かを判定する判定ステップと、センシング状態が変化した場合に変化した旨を携帯移動端末において通知する、または他の端末に通知する通知ステップとを携帯移動端末に実行させることにより、携帯移動端末自体に設けられたセンサーを用いてユーザーは何かイベントが発生したことを知ることができるものであれば、その具体的な実施態様は、如何なるものであっても構わない。

例えば、携帯移動端末は、タブレット端末、携帯電話端末、スマートフォン端末など、無線通信自在であり、かつ、センサーおよび通知手段を有して、直接または間接的にユーザーに通知自在なものであれば如何なるものであっても構わない。
また、他の端末は、タブレット端末やスマートフォン端末などの携帯移動端末に加えて、パーソナルコンピュータ端末でもよい。

以下に、本発明の第１実施例である携帯移動端末用アプリケーションソフトウェアについて、図１乃至図２（Ｂ）に基づいて説明する。
ここで、図１は、本発明の第１実施例の携帯移動端末用アプリケーションソフトウェアの有したスマートフォン端末ＳＰの概念図であり、図２（Ａ）は、本発明の第１実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図２（Ｂ）は、第１実施例のスマートフォン端末ＳＰの動作を示すチャート図である。

本発明の第１実施例である携帯移動端末用アプリケーションソフトウェアがインストールされた携帯移動端末の一例であるスマートフォン端末ＳＰは、図１に示すように、センサーＳＰ１と、制御部ＳＰ２と、通知手段ＳＰ３、表示部とを有している。
このうち、センサーＳＰ１として、タッチパネル式のボタンセンサー、焦電センサー、画像センサー、音声センサー、現在位置センサー、磁気センサー、加速度センサー、ジャイロセンサー、光センサー、指紋センサー、温湿度センサー、気圧センサーなどを種々のタイプのものがスマートフォン端末ＳＰに設けられている。
また、制御部ＳＰ２は、携帯移動端末用アプリケーションソフトウェアを実行するように設けられている。
さらに、通知手段ＳＰ３は、スピーカ部による音声通知、パネルによる表示通知、無線通信による他の端末への通知の少なくとも１つを実行自在に設けられている。
表示部は、液晶パネルや有機ＥＬパネルなどのタッチパネルＳＰ４で構成されている。

そして、本発明の携帯移動端末用アプリケーションソフトウェアは、スマートフォン端末ＳＰに設けられた所定のセンサーＳＰ１をアクティブにし、センサーＳＰ１のセンシング状態が変化したか否かを判定する判定ステップと、センシング状態が変化した場合に変化した旨をスマートフォン端末ＳＰにおいて通知する、または他の端末に通知する通知ステップとをスマートフォン端末ＳＰに実行させるように設けられている。
これにより、何らかの変化をセンサーＳＰ１が検知すると通知される。
その結果、スマートフォン端末ＳＰ自体に設けられたセンサーＳＰ１を用いてユーザーは何かイベントが発生したことを知ることができる。
なお、本発明の携帯移動端末用アプリケーションソフトウェアは、一例としてハイパーテキスト・マークアップ・ランゲージ（ＨＴＬＭ）形式であり、比較的短くて簡単な記載で動作指令を表すことができる。

以下に、具体例を示して説明する。
図２（Ａ）に示すように、スマートフォン端末ＳＰが、一例として会社の受付に設置されているとする。
そして、焦電センサーおよびタッチボタン形式であるタッチパネルＳＰ４のボタンセンサーがアクティブ状態になっている。
ここで、受付に人が近づく、言い換えると、スマートフォン端末ＳＰの前に人がやってくると、焦電センサーが、人体から発せられる僅かな赤外線による赤外線量の変化を検知する。
図２（Ｂ）に示すように、ステップＳ１では、判定ステップとして、制御部ＳＰ２が、焦電センサーのセンシング状態を監視し、赤外線量の変化の有無を判定する。
人がスマートフォン端末ＳＰの前にやってくると赤外線量が僅かに増えるので、制御部ＳＰ２は、センシングに変化ありと判定し、ステップＳ２へ進む。
他方、赤外線量に変化がなくセンシングに変化なしの場合は、ステップＳ１を繰り返す。

ステップＳ２では、音声発声ステップとして、制御部ＳＰ２が、スマートフォン端末ＳＰに設けられたスピーカ部を用いて、話すように制御する。
例えば、「こんにちは。いらっしゃいませ！ ご用のある方は呼び出しボタンを押してください。」の旨を、スピーカ部を用いて話し、ステップＳ３へ進む。
ステップＳ３では、判定ステップとして、タッチパネルＳＰ４の「呼び出しボタン」のボタンセンサーが押されたか（タップ・タッチされたか）否かを、制御部ＳＰ２が判定する。
押されたと判定した場合はステップＳ４へ進み、他方、押されていないと判定した場合はステップＳ１に戻る。

ステップＳ４では、通知ステップとして、制御部ＳＰ２が、「焦電センサーのセンシングが変化した旨、ボタンが押された旨」を他の端末である受付担当部署の端末に通知したり、応対予定者が決まっている場合はその応対予定者のスマートフォン端末ＳＰに通知する。
つまり、タッチボタン形式のセンサーが押されると他の所定の端末である受付担当部署の端末や応対予定者のスマートフォン端末ＳＰにその旨が通知される。
その結果、例えば、会社や診療所などの受付にスマートフォン端末ＳＰを設置しておくだけで受付機能を果たすことができ、人件費を削減することができる。
また、お客さんがスマートフォン端末ＳＰの目の前に来たときに音声を発するため、お客さんに対して会話のやり取りや音声による情報の提供をすることができる。
なお、通知ステップとして他の端末に通知して基幹システムが起動して、例えば、１８：００の締め処理をスタートさせたり、在庫確認を実施させたり、本日の売り上げデータ集計システムをスタートさせたり、全店舗への作業指示システムを稼動させたり、営業マンへの指示だしシステムをスタートさせるように構成してもよい。
また、従業員が、タッチパネルＳＰ４で自分の名前のボタンを選択してから、出社ボタンや退社ボタンを押すと、他の端末に通知されて勤怠が記録されるように構成してもよい。
さらに、通知ステップは、表計算形式データファイルへの入力、携帯移動端末に設けられたスピーカ部による音声通知、電子メールによる通知、チャットメッセージによる通知、所定の信号による通知のいずれで通知してもよい。

このようにして得られた本発明の第１実施例である携帯移動端末用アプリケーションソフトウェアは、携帯移動端末の一例であるスマートフォン端末ＳＰに設けられた所定のセンサーＳＰ１をアクティブにするものであって、センサーＳＰ１のセンシング状態が変化したか否かを判定する判定ステップＳ１、Ｓ３と、センシング状態が変化した場合に変化した旨をスマートフォン端末ＳＰにおいて通知する、または他の端末に通知する通知ステップＳ４とをスマートフォン端末ＳＰに実行させることにより、スマートフォン端末ＳＰ自体に設けられたセンサーＳＰ１を用いてユーザー（例えば、受付担当部署、応対予定者）は何かイベントが発生したことを知ることができる。

さらに、センサーＳＰ１が、スマートフォン端末ＳＰの表示部であるタッチパネルＳＰ４に表示されたタッチボタン形式のセンサーであり、通知ステップＳ４は、タッチボタン形式のセンサーが押されたとき、他の所定の端末に通知することにより、会社や診療所などの受付に携帯移動端末を設置しておくだけで受付機能を果たすことができ、人件費を削減することができる。

また、センサーＳＰ１が、焦電センサーであり、通知ステップＳ４は、焦電センサーのセンシング状態が変化したとき、他の所定の端末に通知し、センシング状態が変化した場合にスマートフォン端末ＳＰに設けられたスピーカ部を用いて音声を発する音声発声ステップＳ２をさらに有していることにより、ユーザーに対して会話のやり取りや音声による情報の提供をすることができるなど、その効果は甚大である。

続いて、本発明の第２実施例である携帯移動端末用アプリケーションソフトウェアについて、図３（Ａ）および図３（Ｂ）に基づいて説明する。
ここで、図３（Ａ）は、本発明の第２実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図３（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第２実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図３（Ａ）に示すように、スマートフォン端末ＳＰが、一例としてコピー機ＣＰの近傍に設置されているとする。
そして、タッチボタン形式であるタッチパネルＳＰ４のボタンセンサーがアクティブ状態になっている。
ここで、コピー機ＣＰの用紙やトナーなどの消耗品が残り僅かだけ使用できる状況になると、コピー機ＣＰに用紙補充マークやトナー交換マークが表示される。
ユーザーは、それらのマークの表示に気づくと、スマートフォン端末ＳＰのタッチパネルＳＰ４に表示された各消耗品の発注ボタンを押す。

図３（Ｂ）に示すように、ステップＳ１１では、判定ステップとして、タッチパネルＳＰ４の「注文」ボタンのボタンセンサーが押されたか（タップ・タッチされたか）否かを、制御部ＳＰ２が判定する。
押されたと判定した場合はステップＳ１２へ進み、他方、押されていないと判定した場合はステップＳ１１に戻る。

ステップＳ１２では、通知ステップとして、制御部ＳＰ２が、「注文ボタンが押された旨」を他の端末である発注担当部署の端末に通知したり、所謂、業者である消耗品供給会社の端末に通知する。
つまり、タッチボタン形式のセンサーを例えば、所定の機器の消耗品の注文ボタンに設定し、押されたときにその旨が発注部署や業者の端末に通知される設定にすると、注文ボタンが押されたときに発注部署や業者の端末に通知される。
その結果、所定の機器の一例であるコピー機ＣＰの近くにスマートフォン端末ＳＰを設置しておくだけで発注機能を果たすことができ、発注忘れを防止するとともに人件費を削減することができる。

このようにして得られた本発明の第２実施例である携帯移動端末用アプリケーションソフトウェアは、スマートフォン端末ＳＰの表示部であるタッチパネルＳＰ４に表示されたタッチボタン形式のセンサーのセンシング状態が変化したか否かを判定する判定ステップＳ１１と、センシング状態が変化した場合に変化した旨を他の端末に通知する通知ステップＳ１２とを有していることにより、所定の機器の近くにスマートフォン端末ＳＰを設置しておくだけで発注機能を果たすことができ、発注忘れを防止するとともに人件費を削減することができるなど、その効果は甚大である。

続いて、本発明の第３実施例である携帯移動端末用アプリケーションソフトウェアについて、図４（Ａ）および図４（Ｂ）に基づいて説明する。
ここで、図４（Ａ）は、本発明の第３実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図４（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第３実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例および第２実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例および第２実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図４（Ａ）に示すように、スマートフォン端末ＳＰが、一例としてスタンプラリーの会場の各ポイントに設置されているとする。
そして、タッチパネルＳＰ４がスタンプ（図示せず）を表示するとともに、焦電センサーがアクティブ状態になっている。
ここで、スタンプラリーのポイントに人が近づく、言い換えると、スマートフォン端末ＳＰの前に人がやってくると、焦電センサーが、人体から発せられる僅かな赤外線による赤外線量の変化を検知する。
図４（Ｂ）に示すように、ステップＳ２１では、判定ステップとして、制御部ＳＰ２が、焦電センサーのセンシング状態を監視し、赤外線量の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ２２へ進み、他方、センシングに変化なしと判定した場合はステップＳ２１を繰り返す。

ステップＳ２２では、通知ステップ、２次元コード表示ステップとして、制御部ＳＰ２が、「焦電センサーのセンシングが変化した旨」を他の端末である管理者の端末に通知するとともに、スタンプ情報が記載された２次元コードＣＤをタッチパネルＳＰ４に表示する。
つまり、来場者がスタンプラリーのポイントに設置されたスマートフォン端末ＳＰの目の前に来たときに２次元コードＣＤを表示して、来場者のスマートフォン端末ＳＰが読み取り自在になる。
その結果、２次元コードＣＤを介して情報のやり取りを行うことができ、来場者は自身のスマートフォン端末でスタンプを集めることができる。
さらに、スタンプラリーの管理者は、来場者がスタンプラリーのポイントに来たことについて通知を受けるため、その通知の頻度から盛況な様子を把握することができる。
また、センシング変化をトリガーとして、制御部ＳＰ２が、来場者が目の前に来たときに「２次元コードを読み取るとスタンプデータをゲットできるよ！」の旨をタッチパネルＳＰ４に表示するとともに、スマートフォン端末ＳＰのスピーカ部を用いて、音声で案内してもよい。

このようにして得られた本発明の第３実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーのセンシング状態が変化したか否かを判定する判定ステップＳ２１と、センシング状態が変化した場合に変化した旨を他の端末に通知する通知ステップＳ２２と、センシング状態が変化した場合にスマートフォン端末ＳＰに設けられた表示部であるタッチパネルＳＰ４に２次元コードＣＤを表示する２次元コード表示ステップＳ２２とを有していることにより、２次元コードＣＤを介して情報のやり取りを行うことができ、例えば、スタンプラリー会場で、来場者は自身の端末でスタンプを集めることができるなど、その効果は甚大である。

続いて、本発明の第４実施例である携帯移動端末用アプリケーションソフトウェアについて、図５（Ａ）および図５（Ｂ）に基づいて説明する。
ここで、図５（Ａ）は、本発明の第４実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図５（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第４実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例乃至第３実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例乃至第３実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図５（Ａ）に示すように、スマートフォン端末ＳＰが、一例として展示会の展示ブースに設置されているとする。
そして、焦電センサーがアクティブ状態になっている。
図５（Ｂ）に示すように、ステップＳ３１では、判定ステップとして、制御部ＳＰ２が、焦電センサーのセンシング状態を監視し、赤外線量の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ３２へ進み、他方、センシングに変化なしと判定した場合はステップＳ３１を繰り返す。

ステップＳ３２では、通知ステップ、音声発声ステップとして、制御部ＳＰ２が、「焦電センサーのセンシングが変化した旨」を他の端末である管理者の端末に通知するとともに、スマートフォン端末ＳＰに設けられたスピーカ部を用いて音声案内を開始する。
つまり、来場者が展示ブースに設置されたスマートフォン端末ＳＰの目の前に来たときに製品や資料などの説明が音声で開始される。
その結果、来場者に対して会話のやり取りや音声による情報の提供をすることができ、来場者は音声による説明を最初から聴くことができる。
音声による説明内容は、プレゼンテーション資料のメモテキストを読み込んで発声するものでもよいし、予め準備されたテキストデータや音声データのものでもよい。
さらに、センシング変化をトリガーとして、制御部ＳＰ２が、来場者が目の前に来たときに音声による説明内容のテキストをタッチパネルＳＰ４に表示してもよい。
また、会場で、来場者が目の前に来たときにアンケートの質問を音声で開始し、音声によるアンケートの回答をマイクで集音してもよい。

このようにして得られた本発明の第４実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーのセンシング状態が変化したか否かを判定する判定ステップＳ３１と、センシング状態が変化した場合に変化した旨を他の端末に通知する通知ステップＳ３２と、センシング状態が変化した場合に携帯移動端末に設けられたスピーカ部を用いて音声を発する音声発声ステップＳ３２とを有していることにより、ユーザーに対して会話のやり取りや音声による情報の提供をすることができ、例えば、セミナー会場で、来場者は音声による説明を最初から聴くことができるなど、その効果は甚大である。

続いて、本発明の第５実施例である携帯移動端末用アプリケーションソフトウェアについて、図６（Ａ）および図６（Ｂ）に基づいて説明する。
ここで、図６（Ａ）は、本発明の第５実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図６（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第５実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例乃至第４実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例乃至第４実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図６（Ａ）に示すように、スマートフォン端末ＳＰが、一例として会社内の通行規制のある廊下ＰＡに設置されているとする。
そして、焦電センサーがアクティブ状態になっている。
図６（Ｂ）に示すように、ステップＳ４１では、判定ステップとして、制御部ＳＰ２が、焦電センサーのセンシング状態を監視し、赤外線量の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ４２へ進み、他方、センシングに変化なしと判定した場合はステップＳ４１を繰り返す。
ステップＳ４２では、撮影ステップとして、制御部ＳＰ２が、スマートフォン端末ＳＰに設けられた画像センサーであるカメラを用いて、目の前の廊下ＰＡの人物を撮影し、ステップＳ４３へ進む。

ステップＳ４３では、通知ステップとして、制御部ＳＰ２が、「焦電センサーのセンシングが変化した旨」を他の端末である管理者の端末に通知したり、警備室の端末に通知する。
つまり、スマートフォン端末ＳＰの周辺で何かが移動して赤外線量が変化すると焦電センサーのセンシング状態が変化してその旨が通知されるとともに画像センサーによって撮影される。
その結果、スマートフォン端末ＳＰを設置するだけで防犯・監視機能を果たすことができる。

このようにして得られた本発明の第５実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーのセンシング状態が変化したか否かを判定する判定ステップＳ４１と、センシング状態が変化した場合にスマートフォン端末ＳＰに設けられた画像センサーをアクティブにして撮影する撮影ステップＳ４２と、センシング状態が変化した場合に変化した旨を他の端末に通知する通知ステップＳ４３とを有していることにより、スマートフォン端末ＳＰを設置するだけで防犯・監視機能を果たすことができるなど、その効果は甚大である。

続いて、本発明の第６実施例である携帯移動端末用アプリケーションソフトウェアについて、図７（Ａ）および図７（Ｂ）に基づいて説明する。
ここで、図７（Ａ）は、本発明の第６実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図７（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第６実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例乃至第５実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例乃至第５実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図７（Ａ）に示すように、スマートフォン端末ＳＰが、任意の場所に設置されているとする。
そして、焦電センサーおよび画像センサーの少なくとも一方がアクティブ状態になっている。
ここで、スマートフォン端末ＳＰの前に人がやってくると、焦電センサーが、人体から発せられる僅かな赤外線による赤外線量の変化を検知する。
また、スマートフォン端末ＳＰの前で人が動くと、画像センサーが、人の動きを検知する。

図７（Ｂ）に示すように、ステップＳ５１では、判定ステップとして、制御部ＳＰ２が、焦電センサーおよび画像センサーの少なくとも一方について、センシング状況を監視し、センシング状況の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ５２へ進み、他方、センシングに変化なしと判定した場合はステップＳ５１を繰り返す。
ステップＳ５２では、撮影ステップとして、制御部ＳＰ２が、スマートフォン端末ＳＰに設けられた画像センサーであるカメラを用いて、目の前の廊下ＰＡの人物を撮影し、ステップＳ５３へ進む。
なお、撮影画像の形式は、静止画でもよいし動画でもよい。

ステップＳ５３では、画像データ伝達ステップとして、制御部ＳＰ２が、画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える。
人工知能画像認識手段には、クラウド（サーバＳＶ）上で提供されているアプリケーションプログラミングインタフェース（Application Programming Interface、以下ＡＰＩという）で、写真に写っている人物の感情を認識するものや、写真に写っている人物の顔から性別、年齢、服装、行っている動作、著名人や登録されている人物であれば名前、などを認識するものがある。
より具体的に、制御部ＳＰ２は、無線通信を用いて、画像データをクラウド（サーバＳＶ）上のＡＰＩへアップロードして画像データを伝える。

ステップＳ５４では、受け取りステップとして、制御部ＳＰ２が、ＡＰＩからフィードバック情報を受け取る。
具体的には、ステップＳ５３でＡＰＩに伝えた画像データに何が写っているかについての情報を受ける。
ステップＳ５５では、通知ステップとして、制御部ＳＰ２が、「焦電センサーまたは画像センサーのセンシングが変化した旨、フィードバック情報の内容」をこのスマートフォン端末ＳＰに通知したり、管理者の端末に通知する。
つまり、人物の画像データの場合はその人物の性別、年齢、感情、何をしている状態かについての推定情報がフィードバックされる。
その結果、何を撮影したかを簡単に分類することができる。

このようにして得られた本発明の第６実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーまたは画像センサーのセンシング状態が変化したか否かを判定する判定ステップＳ５１と、センシング状態が変化した場合に画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える画像データ伝達ステップＳ５３と、人工知能画像認識手段からのフィードバック情報を受け取る受け取りステップＳ５４と、センシング状態が変化した場合に変化した旨およびフィードバック情報をスマートフォン端末ＳＰにおいて通知する、または他の端末に通知する通知ステップＳ５５とを有していることにより、何を撮影したかを簡単に分類することができるなど、その効果は甚大である。

続いて、本発明の第７実施例である携帯移動端末用アプリケーションソフトウェアについて、図８（Ａ）および図８（Ｂ）に基づいて説明する。
ここで、図８（Ａ）は、本発明の第７実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図８（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第７実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例乃至第６実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例乃至第６実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図８（Ａ）に示すように、スマートフォン端末ＳＰが、一例として飲食店の入り口近くに設置されているとする。
また、サイネージ端末ＳＮが、飲食店の入り口に設置され、飲食店のメニューを表示している。
そして、焦電センサーおよび画像センサーの少なくとも一方がアクティブ状態になっている。
ここで、スマートフォン端末ＳＰの前に人がやってくると、焦電センサーが、人体から発せられる僅かな赤外線による赤外線量の変化を検知する。
また、スマートフォン端末ＳＰの前で人が動くと、画像センサーが、人の動きを検知する。

図８（Ｂ）に示すように、ステップＳ６１では、判定ステップとして、制御部ＳＰ２が、焦電センサーおよび画像センサーの少なくとも一方について、センシング状況を監視し、センシング状況の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ６２へ進み、他方、センシングに変化なしと判定した場合はステップＳ６１を繰り返す。
ステップＳ６２では、撮影ステップとして、制御部ＳＰ２が、スマートフォン端末ＳＰに設けられた画像センサーであるカメラを用いて、目の前の廊下ＰＡの人物を撮影し、ステップＳ６３へ進む。
なお、撮影画像の形式は、静止画でもよいし動画でもよい。

ステップＳ６３では、画像データ伝達ステップとして、制御部ＳＰ２が、無線通信を用いて、画像センサーにより撮影した画像データを人工知能画像認識手段であるクラウド（サーバＳＶ）上のＡＰＩへアップロードして伝える。
ステップＳ６４では、受け取りステップとして、制御部ＳＰ２が、ＡＰＩからフィードバック情報を受け取る。
具体的には、ステップＳ６３でＡＰＩに伝えた画像データに何が写っているかについての情報を受ける。
例えば、写っている人物の性別、年齢、感情についての推定情報を受ける。

ステップＳ６５では、通知ステップ、指示ステップとして、制御部ＳＰ２が、「焦電センサーまたは画像センサーのセンシングが変化した旨、フィードバック情報の内容」をサイネージ端末ＳＮに通知するとともに、フィードバック情報の内容に応じたメニューコンテンツの表示を指示する。
例えば、女性で２０歳以上であれば、ケーキ、パフェ、パンケーキなどのスイーツ類（デザート類）と紅茶とのセットや、野菜たっぷりのスープなどを表示するように指示する。
また、男性で２０歳以上であれば、コーヒーを表示するように指示する。

さらに、表情が疲れていると推定された場合、疲労回復のために甘いスイーツ類（デザート類）や飲み物などを表示するように指示する。
また、子供が含まれていれば、子供が喜びそうなお子様セットや子供向けの辛くない味付けのメニューを表示するように指示する。
なお、ＡＰＩがデータベースと照合して一度来店したことがある人物と同じ人物であると推定した場合、店舗が管理しているデータベースと連携して以前に注文した履歴のデータを参照して以前に注文したメニューと同じものを表示するように指示してもよい。

これにより、飲食店の入り口の近くにいる見込み客に応じたメニューコンテンツが表示される。
その結果、見込み客の注意を引くことができ、飲食店へ入るお客の数を増やすことができる。

このようにして得られた本発明の第７実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーまたは画像センサーのセンシング状態が変化したか否かを判定する判定ステップＳ６１と、センシング状態が変化した場合に携帯移動端末に設けられた画像センサーをアクティブにして撮影する撮影ステップＳ６２と、センシング状態が変化した場合に画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える画像データ伝達ステップＳ６３と、人工知能画像認識手段からのフィードバック情報を受け取る受け取りステップＳ６４と、センシング状態が変化した場合に変化した旨およびフィードバック情報を他の端末に通知する通知ステップＳ６５と、サイネージ端末ＳＮへフィードバック情報を送信するとともにサイネージ端末ＳＮにその性別、年齢、感情に合わせたメニューコンテンツの表示を指示する指示ステップＳ６５とを有していることにより、見込み客の注意を引くことができるなど、その効果は甚大である。

続いて、本発明の第８実施例である携帯移動端末用アプリケーションソフトウェアについて、図９（Ａ）および図９（Ｂ）に基づいて説明する。
ここで、図９（Ａ）は、本発明の第８実施例のスマートフォン端末ＳＰの設置場所を示す図であり、図９（Ｂ）は、スマートフォン端末ＳＰの動作を示すチャート図である。
第８実施例の携帯移動端末用アプリケーションソフトウェアは、第１実施例乃至第７実施例の携帯移動端末用アプリケーションソフトウェアの用途を変更したものであり、多くの要素について第１実施例乃至第７実施例の携帯移動端末用アプリケーションソフトウェアと共通するので、共通する事項については詳しい説明を省略する。

図９（Ａ）に示すように、スマートフォン端末ＳＰが、一例として会社の入り口に設置されているとする。
そして、焦電センサーおよび画像センサーの少なくとも一方がアクティブ状態になっている。
ここで、スマートフォン端末ＳＰの前に人がやってくると、焦電センサーが、人体から発せられる僅かな赤外線による赤外線量の変化を検知する。
また、スマートフォン端末ＳＰの前で人が動くと、画像センサーが、人の動きを検知する。

図９（Ｂ）に示すように、ステップＳ７１では、判定ステップとして、制御部ＳＰ２が、焦電センサーおよび画像センサーの少なくとも一方について、センシング状況を監視し、センシング状況の変化の有無を判定する。
制御部ＳＰ２がセンシングに変化ありと判定した場合はステップＳ７２へ進み、他方、センシングに変化なしと判定した場合はステップＳ７１を繰り返す。

ステップＳ７２では、撮影ステップとして、制御部ＳＰ２が、スマートフォン端末ＳＰに設けられた画像センサーであるカメラを用いて、目の前の人物を撮影し、ステップＳ７３へ進む。
なお、撮影画像の形式は、静止画でもよいし動画でもよい。
ステップＳ７３では、画像データ伝達ステップとして、制御部ＳＰ２が、無線通信を用いて、画像センサーにより撮影した画像データを人工知能画像認識手段であるクラウド（サーバＳＶ）上のＡＰＩへアップロードして伝える。

ステップＳ７４では、受け取りステップとして、制御部ＳＰ２が、ＡＰＩからフィードバック情報を受け取る。
具体的には、ステップＳ７３でＡＰＩに伝えた画像データに誰が写っているかについての情報を受ける。
例えば、写っている人物の性別、年齢、氏名についての推定情報を受ける。
ここで、予め会社の従業員の画像データをＡＰＩに事前学習させて覚えさせることにより、ＡＰＩは、ステップＳ７３で伝えられた画像データに誰が写っているかを高い精度で推定することができる。

ステップＳ７５では、通知ステップ、勤怠記録指示ステップとして、制御部ＳＰ２が、「焦電センサーまたは画像センサーのセンシングが変化した旨、フィードバック情報の内容」をサーバＳＶのボットに通知するとともに、ボットに勤怠記録の指示を送信する。
例えば、写っていたのが従業員の鈴木一郎さんであると推定された場合、鈴木一郎さんである旨をボットに通知するとともに、その時刻情報と合わせて鈴木一郎さんが出社または退社した旨の勤怠記録をするように指示する。
つまり、ボットが各従業員の勤怠を記録し、従業員はタイムカードを操作する必要がない。
その結果、携帯移動端末用アプリケーションソフトウェアが、タイムカード機能を果たすとともに勤怠の不正を防止することができる。
また、高校や大学などにおける授業の出欠席の記録機能を果たし、代返（身代わり返事）による不正を防止することができる。
以上、スマートフォン端末ＳＰに設けられたセンサーＳＰ１のうちの一部のものを用いた例を挙げたが、加速度センサーや温湿度センサーなど他のセンサーを用いて通知する構成でもよいのは言うまでもない。
なお、時間を設定して所定時間毎に、光センサーや温湿度センサーによるセンシング状態を確認して、照明のスイッチ、冷暖房のスイッチの消し忘れを判定して通知するように構成してもよい。例えば、夜２２：００になっても照度センサーのセンシングに変化が無かったら、照明のスイッチの消し忘れと判断できる。
夜２２：００になっても温湿度センサーのセンシングに変化が無かったら、冷暖房のスイッチの消し忘れと判断できる。
それらの場合、遠隔操作でスイッチを切り換えるように設けてもよい。

このようにして得られた本発明の第７実施例である携帯移動端末用アプリケーションソフトウェアは、焦電センサーまたは画像センサーのセンシング状態が変化したか否かを判定する判定ステップＳ７１と、センシング状態が変化した場合にスマートフォン端末ＳＰに設けられた画像センサーをアクティブにして撮影する撮影ステップＳ７２と、センシング状態が変化した場合に画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える画像データ伝達ステップＳ７３と、人工知能画像認識手段からのフィードバック情報を受け取る受け取りステップＳ７４と、センシング状態が変化した場合に変化した旨およびフィードバック情報を通知する通知ステップＳ７５と、サーバＳＶのボットへフィードバック情報を送信してボットに勤怠記録を指示する勤怠記録指示ステップＳ７５と有していることにより、タイムカード機能を果たすとともに勤怠の不正を防止することができるなど、その効果は甚大である。

ＳＰ ・・・ スマートフォン端末（携帯移動端末）
ＳＰ１・・・ センサー
ＳＰ２・・・ 制御部
ＳＰ３・・・ 通知手段
ＳＰ４・・・ タッチパネル（表示部）
ＣＰ ・・・ コピー機
ＰＡ ・・・ 廊下
ＳＶ ・・・ サーバ
ＳＮ ・・・ サイネージ端末
ＣＤ ・・・ ２次元コード

Claims (2)

1. 携帯移動端末に設けられた所定のセンサーをアクティブにする携帯移動端末用アプリケーションソフトウェアであって、
   前記センサーが、焦電センサーまたは画像センサーであり、
   前記センサーのセンシング状態が変化したか否かを判定する判定ステップと、
   前記センシング状態が変化した場合に画像センサーにより撮影した画像データを人工知能画像認識手段へ伝える画像データ伝達ステップと、
   前記人工知能画像認識手段からのフィードバック情報を受け取る受け取りステップと、
   前記センシング状態が変化した場合に変化した旨およびフィードバック情報を携帯移動端末において通知する、または他の端末に通知する通知ステップと、
   前記受け取りステップの後、サイネージ端末へフィードバック情報を送信するとともにサイネージ端末にその性別、年齢、感情に合わせたメニューコンテンツの表示を指示する指示ステップとを携帯移動端末に実行させることを特徴とする携帯移動端末用アプリケーションソフトウェア。
2. 前記通知ステップは、表計算形式データファイルへの入力、携帯移動端末に設けられたスピーカ部による音声通知、電子メールによる通知、チャットメッセージによる通知、所定の信号による通知のいずれかで通知することを特徴とする請求項１に記載の携帯移動端末用アプリケーションソフトウェア。

Images