JP6899940B1 - 簡易通信システム、簡易通信方法、及びプログラム - Google Patents
簡易通信システム、簡易通信方法、及びプログラム Download PDFInfo
- Publication number
- JP6899940B1 JP6899940B1 JP2020059399A JP2020059399A JP6899940B1 JP 6899940 B1 JP6899940 B1 JP 6899940B1 JP 2020059399 A JP2020059399 A JP 2020059399A JP 2020059399 A JP2020059399 A JP 2020059399A JP 6899940 B1 JP6899940 B1 JP 6899940B1
- Authority
- JP
- Japan
- Prior art keywords
- stamp
- user
- unit
- image
- word
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004891 communication Methods 0.000 title claims abstract description 117
- 238000000034 method Methods 0.000 title claims description 20
- 238000012545 processing Methods 0.000 claims abstract description 132
- 230000005540 biological transmission Effects 0.000 claims abstract description 129
- 238000003860 storage Methods 0.000 claims abstract description 91
- 230000008921 facial expression Effects 0.000 claims abstract description 82
- 210000003128 head Anatomy 0.000 claims abstract description 21
- 210000001508 eye Anatomy 0.000 claims abstract description 19
- 230000008451 emotion Effects 0.000 claims description 20
- 238000003384 imaging method Methods 0.000 claims description 18
- 238000010586 diagram Methods 0.000 abstract description 13
- 238000001514 detection method Methods 0.000 description 16
- 238000005516 engineering process Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 239000000284 extract Substances 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Landscapes
- Telephone Function (AREA)
- Information Transfer Between Computers (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
図1は、第1の実施形態による簡易通信システム1の一例を示すシステム構成図である。また、図2は、第1の実施形態による簡易通信システム1の一例を示す機能ブロック図である。
なお、本実施形態による簡易通信システム1では、利用者間でメッセージを送受信するメッセージアプリケーション(以下、メッセージアプリという)を使用する場合の一例について説明する。また、本実施形態において、メッセージアプリは、メッセージの他に、利用者の心情を表現するイラストであるスタンプを、利用者間で互いに送受信できるものとする。ここで、心情とは、例えば、心の中にある思いや感情を示す。
図3に示すように、スタンプ記憶部32は、「ユーザID」と、「スタンプID」と、「スタンプ情報」と、「単語」と、「表情」とを対応付けたスタンプテーブル情報を記憶する。
なお、スタンプ記憶部32は、スタンプテーブル情報を、利用者U1(「ユーザID」)ごとに記憶している。
表示部13は、例えば、液晶ディスプレイや有機EL(Electro-Luminescence)ディスプレイなどの表示デバイスであり、携帯端末10の各種情報を表示する。
なお、入力部12及び表示部13は、例えば、タッチスクリーンとして構成されている。
図4は、本実施形態による簡易通信システム1の動作の一例を示すフローチャートである。
図5に示す表示画面G1は、眼鏡型表示装置20の表示部23が表示する画面である。表示部23は、携帯端末10がメッセージアプリにより受信したメッセージを、表示画面G1のように表示する。
図6に示す表示画面G2は、眼鏡型表示装置20の表示部23が表示する画面である。表示部23は、携帯端末10から受信した複数のスタンプの候補(例えば、スタンプSTP1、スタンプSTP2、スタンプSTP3、・・・など)を、表示画面G2のように表示する。
図7に示す表示画面G3は、眼鏡型表示装置20の表示部23が表示する画面であり、表示部23は、携帯端末10が送信したスタンプSTP4を、表示画面G2のように表示する。
次に、図面を参照して、第2の実施形態のよる簡易通信システム1aについて説明する。本実施形態では、過去のスタンプの送信履歴を利用して、スタンプの候補に、優先順位を付ける変形例について説明する。
図8に示すように、簡易通信システム1aは、携帯端末10aと、眼鏡型表示装置20と、サーバ装置30aとを備える。
なお、この図において、図1及び図2と同一の構成には、同一の符号を付与して、ここではその説明を省略する。
図9に示すように、送信履歴記憶部33は、「ユーザID」と、「日時」と、「スタンプID」と、「送信先」と、「単語」と、「表情」と、「場所」と、「スケジュール」とを対応付けた履歴情報を記憶する。
スケジュール記憶部141は、予め登録されている利用者U1のスケジュールを記憶する。スケジュール記憶部141は、例えば、日時情報と、スケジュール内容(“仕事”、“趣味活動”など利用者U1の状況を示す情報)とを対応付けて記憶する。スケジュール記憶部141が記憶するスケジュールは、上述した送信履歴情報や、スタンプの候補の優先順位付け行う際に利用される。
また、本実施形態において、「優先順位を上げる」とは、優先順位を高めることであり、「優先順位を下げる」とは、優先順位を低めることである。
図10は、本実施形態による簡易通信システム1aの動作の一例を示すフローチャートである。
ステップS207において、携帯端末10aの推奨処理部153aは、送信履歴情報に基づいてスタンプの候補の優先順位を決定する。すなわち、推奨処理部153aは、送信履歴記憶部33が記憶する送信履歴情報に基づいて、上述したように、スタンプの候補の優先順位を決定する。
また、ステップS213において、送信処理部156aは、送信履歴情報を追加する。送信処理部156aは、送信したスタンプに対応する送信履歴情報を、送信履歴記憶部33に追加して記憶させる。ステップS213の処理後に、送信処理部156aは、当該処理を終了する。
これにより、本実施形態による簡易通信システム1aは、使用場所に応じて、適切なスタンプの候補を利用者U1に勧める(推奨する)ことができる。
これにより、本実施形態による簡易通信システム1aは、例えば、仕事(ビジネス)や趣味活動(プライベート)などの利用者U1の状況に応じて、適切なスタンプの候補を利用者U1に勧める(推奨する)ことができる。
これにより、本実施形態による簡易通信システム1aは、例えば、直近に送信したスタンプを連続して送付してしまうことを抑制することができ、適切なスタンプの候補を利用者U1に勧める(推奨する)ことができる。
これにより、本実施形態による簡易通信システム1aは、使用頻度が高いスタンプの候補を優先的に表示部23に表示させるため、利用者の使用傾向に合わせた適切なスタンプの候補を利用者U1に勧める(推奨する)ことができる。
図11に示すように、スタンプ記憶部32の変形例では、「ユーザID」と、「グループID」と、「スタンプID」と、「スタンプ情報」と、「単語」と、「表情」とを対応付けたスタンプテーブル情報を記憶する。ここで、「グループID」は、スタンプのグループを識別する識別情報であり、グループ情報の一例である。
これにより、本実施形態による簡易通信システム1aは、グループ情報が一致したスタンプの候補の優先的に推薦することで、送信するスタンプに一貫性を持たせること可能であり、利便性を向上させることができる。
例えば、上記の実施形態において、スタンプ記憶部32及び送信履歴記憶部33をサーバ装置30(30a)が備える例を説明したが、これに限定されるものではなく、携帯端末10(10a)が、これらの記憶部を備えるようにしてもよい。
また、「コンピュータシステム」は、インターネットやWAN、LAN、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、CD−ROM等の非一過性の記録媒体であってもよい。
10、10a 携帯端末
11、24、31 NW通信部
12 入力部
13、23 表示部
14、14a 端末記憶部
15、15a 端末制御部
16 位置情報検出部
20 眼鏡型表示装置
21 ***カメラ
22 視線カメラ
30、30a サーバ装置
32 スタンプ記憶部
33 送信履歴記憶部
141 スケジュール記憶部
151 単語識別部
152 表情識別部
153、163a 推奨処理部
154 視線検出部
155 受信処理部
156、156a 送信処理部
157 スタンプ登録処理部
NW1 ネットワーク
Claims (11)
- 利用者の頭部に装着可能な表示装置であって、前記利用者の頭部に装着された場合に、少なくとも前記利用者の***を含む第1画像を撮像可能な第1撮像部と、前記利用者の目を含む第2画像を撮像可能な第2撮像部と、画像を表示する表示部とを有する表示装置と、
ネットワークに接続可能な携帯端末と
を備え、
前記携帯端末は、
前記第1撮像部が撮像した前記第1画像に基づいて、前記***の動きを検出し、検出した前記***の動きに基づいて、前記***の動きが示す単語を識別する単語識別部と、
前記第1画像に基づいて、前記利用者の表情を識別する表情識別部と、
前記単語と、前記表情と、前記利用者の心情を表現するイラストであるスタンプとを対応付けて記憶する候補記憶部から、前記単語識別部が識別した前記単語と、前記表情識別部が識別した前記表情とに基づいて、前記スタンプの候補を取得し、前記スタンプの候補を含む前記画像を前記表示部に表示させる推奨処理部と、
前記第2撮像部が撮像した前記第2画像に基づいて検出された前記利用者の視線により、前記表示部に表示されている前記スタンプの候補のうちから前記スタンプを選択し、選択した前記スタンプを、所定の送信先に前記ネットワークを経由して送信する送信処理部と
を備えることを特徴とする簡易通信システム。 - 送信日時と、送信した前記スタンプと、送信先と、前記単語と、前記表情とを対応付けた過去の送信履歴情報を記憶する送信履歴記憶部を備え、
前記推奨処理部は、前記送信履歴記憶部が記憶する前記送信履歴情報に基づいて、前記スタンプの候補の優先順位を決定し、当該優先順位に応じた配置にして、前記スタンプの候補を前記表示部に表示させる
ことを特徴とする請求項1に記載の簡易通信システム。 - 前記送信履歴情報には、前記スタンプを送信した場所情報が含まれ、
前記推奨処理部は、前記送信履歴情報に基づいて、現在の前記携帯端末の場所に対応した前記スタンプの候補の優先順位を上げる
ことを特徴とする請求項2に記載の簡易通信システム。 - 前記送信履歴情報には、前記スタンプを送信した際の状況を示すスケジュール情報が含まれ、
前記推奨処理部は、前記利用者の前記送信履歴情報に基づいて、現在のスケジュールに基づく利用者の状況に対応した前記スタンプの候補の前記優先順位を上げる
ことを特徴とする請求項2又は請求項3に記載の簡易通信システム。 - 前記送信処理部は、送信した前記スタンプに対応する前記送信履歴情報を、前記送信履歴記憶部に追加して記憶させ、
前記推奨処理部は、直近に送信された前記スタンプに対する前記スタンプの候補の優先順位を下げる
ことを特徴とする請求項2から請求項4のいずれか一項に記載の簡易通信システム。 - 前記推奨処理部は、前記利用者の前記送信履歴情報に基づいて、前記スタンプの使用頻度が高い程、前記スタンプの候補の前記優先順位を上げる
ことを特徴とする請求項2から請求項5のいずれか一項に記載の簡易通信システム。 - 前記候補記憶部は、前記単語と、前記表情と、前記スタンプと、前記スタンプのグループを示すグループ情報とを対応付けて記憶し、
前記推奨処理部は、前記利用者の前記送信履歴情報に基づいて、前回送信した前記スタンプの前記グループ情報と一致する、前記スタンプの候補の前記優先順位を上げる
ことを特徴とする請求項2から請求項6のいずれか一項に記載の簡易通信システム。 - 前記候補記憶部は、前記単語と、前記表情と、前記スタンプとを対応付けたスタンプテーブル情報を、利用者ごとに記憶し、
前記候補記憶部に、前記利用者の前記スタンプテーブル情報を記憶させて登録する登録処理部を備える
ことを特徴とする請求項1から請求項7のいずれか一項に記載の簡易通信システム。 - 前記ネットワークを経由して受信したメッセージを、前記表示部に表示させる受信処理部を備え、
前記推奨処理部は、受信した前記メッセージに対する前記スタンプの候補を含む前記画像を前記表示部に表示させ、
前記送信処理部は、選択した前記スタンプを、受信した前記メッセージの送信元を含む所定の送信先に送信する
ことを特徴とする請求項1から請求項8のいずれか一項に記載の簡易通信システム。 - 利用者の頭部に装着可能な表示装置であって、前記利用者の頭部に装着された場合に、少なくとも前記利用者の***を含む第1画像を撮像可能な第1撮像部と、前記利用者の目を含む第2画像を撮像可能な第2撮像部と、画像を表示する表示部とを有する表示装置と、ネットワークに接続可能な携帯端末とを備える簡易通信システムの簡易通信方法であって、
前記携帯端末が、前記第1撮像部が撮像した前記第1画像に基づいて、前記***の動きを検出し、検出した前記***の動きに基づいて、前記***の動きが示す単語を識別する単語識別ステップと、
前記携帯端末が、前記第1画像に基づいて、前記利用者の表情を識別する感情識別ステップと、
前記携帯端末が、前記単語と、前記表情と、前記利用者の心情を表現するイラストであるスタンプとを対応付けて記憶する候補記憶部から、前記単語識別ステップによって識別された前記単語と、前記感情識別ステップによって識別された前記表情とに基づいて、前記スタンプの候補を取得し、前記スタンプの候補を含む前記画像を前記表示部に表示させる推奨処理ステップと、
前記携帯端末が、前記第2撮像部が撮像した前記第2画像に基づいて検出された前記利用者の視線により、前記表示部に表示されている前記スタンプの候補のうちから前記スタンプを選択し、選択した前記スタンプを、所定の送信先に前記ネットワークを経由して送信する送信処理ステップと
を含むことを特徴とする簡易通信方法。 - 利用者の頭部に装着可能な表示装置であって、前記利用者の頭部に装着された場合に、少なくとも前記利用者の***を含む第1画像を撮像可能な第1撮像部と、前記利用者の目を含む第2画像を撮像可能な第2撮像部と、画像を表示する表示部とを有する表示装置と、ネットワークに接続可能な携帯端末とを備える簡易通信システムのコンピュータに、
前記第1撮像部が撮像した前記第1画像に基づいて、前記***の動きを検出し、検出した前記***の動きに基づいて、前記***の動きが示す単語を識別する単語識別ステップと、
前記第1画像に基づいて、前記利用者の表情を識別する感情識別ステップと、
前記単語と、前記表情と、前記利用者の心情を表現するイラストであるスタンプとを対応付けて記憶する候補記憶部から、前記単語識別ステップによって識別された前記単語と、前記感情識別ステップによって識別された前記表情とに基づいて、前記スタンプの候補を取得し、前記スタンプの候補を含む前記画像を前記表示部に表示させる推奨処理ステップと、
前記第2撮像部が撮像した前記第2画像に基づいて検出された前記利用者の視線により、前記表示部に表示されている前記スタンプの候補のうちから前記スタンプを選択し、選択した前記スタンプを、所定の送信先に前記ネットワークを経由して送信する送信処理ステップと
を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020059399A JP6899940B1 (ja) | 2020-03-30 | 2020-03-30 | 簡易通信システム、簡易通信方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020059399A JP6899940B1 (ja) | 2020-03-30 | 2020-03-30 | 簡易通信システム、簡易通信方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6899940B1 true JP6899940B1 (ja) | 2021-07-07 |
JP2021157681A JP2021157681A (ja) | 2021-10-07 |
Family
ID=76649995
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020059399A Active JP6899940B1 (ja) | 2020-03-30 | 2020-03-30 | 簡易通信システム、簡易通信方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6899940B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023015752A (ja) * | 2021-07-20 | 2023-02-01 | ヤフー株式会社 | 制御プログラム、制御方法および情報処理装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023048392A (ja) | 2021-09-28 | 2023-04-07 | トヨタ自動車株式会社 | 車両制御インターフェースおよびそれを備える車両、自動運転システムおよびそれを備える車両、ならびに、車両の制御方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4836885B2 (ja) * | 2007-07-04 | 2011-12-14 | シャープ株式会社 | 携帯通信端末用の非接触型入力装置、携帯通信端末及びメール作成システム |
JP2010026731A (ja) * | 2008-07-17 | 2010-02-04 | Nec Saitama Ltd | 文字入力装置、文字入力方法、文字入力システム、文字入力サーバー及び端末 |
JP6255646B2 (ja) * | 2013-03-04 | 2018-01-10 | 株式会社L is B | メッセージシステム |
JP2015115926A (ja) * | 2013-12-16 | 2015-06-22 | 株式会社日立システムズ | 携帯端末装置、読唇通信方法、及びプログラム |
EP3153973A4 (en) * | 2014-06-06 | 2018-01-17 | Sony Corporation | Information processing device and method, and program |
WO2016000219A1 (zh) * | 2014-07-02 | 2016-01-07 | 华为技术有限公司 | 信息传输方法及传输装置 |
KR20160024002A (ko) * | 2014-08-21 | 2016-03-04 | 삼성전자주식회사 | 비쥬얼 사운드 이미지를 제공하는 방법 및 이를 구현하는 전자 장치 |
JP2016071571A (ja) * | 2014-09-30 | 2016-05-09 | 大日本印刷株式会社 | メッセージ送信装置及びコンピュータプログラム |
JP2016134747A (ja) * | 2015-01-19 | 2016-07-25 | 株式会社イルド | 電話装置、プログラム及び電話システム |
WO2016151794A1 (ja) * | 2015-03-25 | 2016-09-29 | エヌ・ティ・ティ・ソフトウェア株式会社 | 通信制御装置、ユーザ端末、及びプログラム |
JP6518134B2 (ja) * | 2015-05-27 | 2019-05-22 | 株式会社ソニー・インタラクティブエンタテインメント | 眼前装着型表示装置 |
JP2018018449A (ja) * | 2016-07-29 | 2018-02-01 | フォーブ インコーポレーテッド | 情報処理システム、操作方法及び操作プログラム |
JP2018109924A (ja) * | 2017-01-06 | 2018-07-12 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US10366691B2 (en) * | 2017-07-11 | 2019-07-30 | Samsung Electronics Co., Ltd. | System and method for voice command context |
JP7007168B2 (ja) * | 2017-12-07 | 2022-01-24 | Line株式会社 | プログラム、情報処理方法、及び情報処理装置 |
US10755463B1 (en) * | 2018-07-20 | 2020-08-25 | Facebook Technologies, Llc | Audio-based face tracking and lip syncing for natural facial animation and lip movement |
-
2020
- 2020-03-30 JP JP2020059399A patent/JP6899940B1/ja active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023015752A (ja) * | 2021-07-20 | 2023-02-01 | ヤフー株式会社 | 制御プログラム、制御方法および情報処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2021157681A (ja) | 2021-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11049147B2 (en) | System and method for providing recommendation on an electronic device based on emotional state detection | |
JP6490023B2 (ja) | 生体情報通信装置、サーバ、生体情報通信方法及び生体情報通信プログラム | |
US11194535B2 (en) | Information processing apparatus, information processing system, and non-transitory computer readable medium storing program | |
US10552004B2 (en) | Method for providing application, and electronic device therefor | |
JP6719072B2 (ja) | 接客装置、接客方法及び接客システム | |
US9858924B2 (en) | Voice processing apparatus and voice processing method | |
US8948451B2 (en) | Information presentation device, information presentation method, information presentation system, information registration device, information registration method, information registration system, and program | |
US11246008B2 (en) | Information processing apparatus and information processing method | |
JP6899940B1 (ja) | 簡易通信システム、簡易通信方法、及びプログラム | |
US9020918B2 (en) | Information registration device, information registration method, information registration system, information presentation device, informaton presentation method, informaton presentaton system, and program | |
WO2015155841A1 (ja) | 情報表示方法および情報表示端末 | |
JP6728863B2 (ja) | 情報処理システム | |
US20190095867A1 (en) | Portable information terminal and information processing method used in the same | |
JP6040745B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム及びコンテンツ提供システム | |
CN111670431B (zh) | 信息处理装置、信息处理方法以及程序 | |
US20240047046A1 (en) | Virtual augmentation of clinical care environments | |
US20150145763A1 (en) | Electronic device | |
JP2016048301A (ja) | 電子機器 | |
JP7088270B2 (ja) | 質問応答システム、及び質問応答方法 | |
KR20190052584A (ko) | 영상 통화 서비스를 제공하는 단말 및 서버 | |
JP5989725B2 (ja) | 電子機器及び情報表示プログラム | |
JP6077930B2 (ja) | 情報管理装置、情報管理システム、通信端末および情報管理方法 | |
KR101607218B1 (ko) | 스마트 단말수단에서의 지인 안내 서비스 시스템 | |
US11928253B2 (en) | Virtual space control system, method for controlling the same, and control program | |
JP7072482B2 (ja) | 電子機器、制御方法および制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200330 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210518 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210615 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6899940 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |