JP6367031B2 - 電子機器遠隔操作システム及びプログラム - Google Patents
電子機器遠隔操作システム及びプログラム Download PDFInfo
- Publication number
- JP6367031B2 JP6367031B2 JP2014146470A JP2014146470A JP6367031B2 JP 6367031 B2 JP6367031 B2 JP 6367031B2 JP 2014146470 A JP2014146470 A JP 2014146470A JP 2014146470 A JP2014146470 A JP 2014146470A JP 6367031 B2 JP6367031 B2 JP 6367031B2
- Authority
- JP
- Japan
- Prior art keywords
- graphic
- identification information
- target device
- electronic device
- command
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Character Discrimination (AREA)
- User Interface Of Digital Computer (AREA)
Description
(操作2)卓上照明72をOFFする。
(操作3)卓上照明72とテレビ74を同時にONする。
(操作4)液晶テレビ74のチャンネルを変える。
(操作5)液晶テレビ74をOFFする。
まず最初に、ユーザは、図3(a)に示すように、デジタルペン12で紙14に「Light」と描画する。一方、手書き描画解析部20の文字認識部22は、手書き入力受付部10に入力される手書きの軌跡を、常時、機械学習識別器26に照会して文字認識を実施するように構成されている。ここで、機械学習識別器26には、操作対象機器である卓上照明72を意味する文字“Light”を手書きした軌跡の学習済みデータが事前に登録されており、この場合、文字認識部22は、紙14に文字列“Light”が描画されたことを認識する。
ユーザは、図5(a)に示すように、デジタルペン12で手書き文字「off」を描画した後、これを囲うように“円形m”を描画する。これを受けて、手書き描画解析部20の文字認識部22は、手書き入力受付部10に入力される手書きの軌跡を機械学習識別器26に照会して文字認識を実施し、紙14に文字列“off”が描画されたことを認識する。また、手書き描画解析部20の図形認識部24は、手書き入力受付部10に入力される手書きの軌跡を機械学習識別器26に照会して図形認識を実施し、紙14に“円形”が描画されたことを認識する。
ユーザは、図6(a)に示すように、デジタルペン12で「TV」と描画した後、これを囲うように“四角形p”を描画する。これを受けて、手書き描画解析部20の文字認識部22は、手書き入力受付部10に入力される手書きの軌跡を機械学習識別器26に照会して文字認識を実施し、紙14に文字列“TV”が描画されたことを認識する。また、手書き描画解析部20の図形認識部24は、手書き入力受付部10に入力される手書きの軌跡を機械学習識別器26に照会して図形認識を実施し、紙14に“四角形”が描画されたことを認識する。
ユーザは、図6(c)に示すように、デジタルペン12で、“四角形p”の内部に、「6」と描画した後、これを囲うように“円形r”を描画する。これを受けて、手書き描画解析部20の文字認識部22は、手書き入力受付部10に入力される手書きの軌跡を機械学習識別器26に照会して文字認識を実施し、紙14に数字“6”が描画されたことを認識する。
ユーザは、図7(e)に示すように、デジタルペン12で“四角形p“と“円形m”を結ぶように線sを描画する。これを受けて、関連付け部36は、操作登録部38に登録されている“円形m”に紐付いた操作命令の識別情報“off”と“四角形p”に紐付いた操作対象機器の識別情報“TV”を関連付ける。
(1)“Music”という文字を手書きする。
(2)手書き文字“Music”を四角で囲む。
(3)四角の中に五線譜を描画する。
(4)“Pf”および“VI”という文字を描画し、それぞれを“円形“で囲う。
(5)“Pf”および“VI”を囲ったそれぞれの“円形“と“五線譜”を結ぶように線を描画する。
(6)“play”および“stop”という文字を描画し、それぞれを“円形“で囲う。
(7)“play”および“stop”を囲ったそれぞれの“円形“と“五線譜”を結ぶように線を描画する。
12…デジタルペン
14…紙
20…手書き描画解析部
22…文字認識部
24…図形認識部
26…機械学習識別器
30…操作要求特定部
32…操作対象機器特定部
34…操作命令特定部
36…関連付け部
38…操作登録部
40…操作コード生成部
42…トリガー操作検知部
44…操作コード変換部
50…情報処理装置
60…操作信号出力装置
72…卓上照明
74…液晶テレビ
100…電子機器遠隔操作システム
Claims (15)
- 手書きの軌跡を入力として受け付ける手書き入力受付手段と、
前記手書きの軌跡からユーザが描画した内容を解析する手書き描画解析手段と、
ユーザが描画した前記内容を所定の記法に照らして該ユーザが要求する電子機器の操作内容を特定する操作要求特定手段と、
特定された操作内容に対応する電子機器の操作コードを生成する操作コード生成手段と、
を含み、
前記手書き描画解析手段は、
操作対象機器および操作命令を意味する文字を認識するための文字認識手段と、
操作対象機器を定義する第1の図形および操作命令を定義する第2の図形を認識するための図形認識手段と、
を含み、
前記操作要求特定手段は、
前記第1の図形に囲まれている文字を操作対象機器の識別情報として該第1の図形に紐付ける操作対象機器特定手段と、
前記第2の図形に囲まれている文字を操作命令の識別情報として該第2の図形に紐付ける操作命令特定手段と、
前記操作対象機器の識別情報と前記操作命令の識別情報を関連付ける関連付け手段と、
を含み、
前記操作コード生成手段は、
操作の開始要求を意味するトリガー操作を検知するトリガー操作検知手段を含み、前記第2の図形に対する前記トリガー操作を検知したことに応答して、該第2の図形に紐付いた操作命令の識別情報に関連付けられた操作対象機器の識別情報に係る電子機器に対する該操作命令を表す操作コードを生成する、
電子機器遠隔操作システム。 - 前記所定の記法は、操作対象機器および操作命令を、それ自体を意味する文字と図形の組み合わせで表現し、該操作対象機器と該操作命令の対応関係を線図で表現する記法である、請求項1に記載の電子機器遠隔操作システム。
- 前記手書き入力受付手段は、デジタルペンによって取得された手書きの軌跡を入力として受け付ける、請求項1または2に記載の電子機器遠隔操作システム。
- 前記関連付け手段は、
前記第1の図形と前記第2の図形を結ぶように線が描画されたことに応答して、該第1の図形に紐付いた前記操作対象機器の識別情報と該第2の図形に紐付いた前記操作命令の識別情報を関連付ける、請求項1〜3のいずれか一項に記載の電子機器遠隔操作システム。 - 前記関連付け手段は、
前記線を取り消すことを意味する所定の記号が描画されたことに応答して、該線に基づく関連付けを解消する、請求項4に記載の電子機器遠隔操作システム。 - 前記関連付け手段は、
前記第1の図形に前記第2の図形が囲まれている場合に、該第1の図形に紐付いた前記操作対象機器の識別情報と該第2の図形に紐付いた前記操作命令の識別情報を関連付ける、請求項1〜5のいずれか一項に記載の電子機器遠隔操作システム。 - 前記操作コード生成手段は、
操作対象機器に係る識別情報と操作命令に係る識別情報を入力とし該操作対象機器に対する該操作命令を表す操作コードを出力とする操作コード変換手段を備え、
前記第2の図形に対する前記トリガー操作を検知したことに応答して、該第2の図形に紐付いた操作命令に係る識別情報と該識別情報に関連付けられた操作対象機器に係る識別情報を前記操作コード変換手段に入力し、該操作対象機器に対する該操作命令を表す操作コードを出力として取得する、
請求項1〜6のいずれか一項に記載の電子機器遠隔操作システム。 - さらに、前記操作コード生成手段が取得した前記操作コードに基づいて操作信号を生成し、当該操作信号を操作対象機器が対応する通信媒体に載せて出力する操作信号出力装置を含む、請求項1〜7のいずれか一項に記載の電子機器遠隔操作システム。
- 電子機器を遠隔操作するためのコンピュータを、
手書きの軌跡を入力として受け付ける手書き入力受付手段、
前記手書きの軌跡からユーザが描画した内容を解析する手書き描画解析手段、
ユーザが描画した前記内容を所定の記法に照らして該ユーザが要求する電子機器の操作内容を特定する操作要求特定手段、
特定された操作内容に対応する電子機器の操作コードを生成する操作コード生成手段、
として機能させるためのプログラムであって、
前記手書き描画解析手段は、
操作対象機器および操作命令を意味する文字を認識するための文字認識手段、
操作対象機器を定義する第1の図形および操作命令を定義する第2の図形を認識するための図形認識手段、
を含み、
前記操作要求特定手段は、
前記第1の図形に囲まれている文字を操作対象機器の識別情報として該第1の図形に紐付ける操作対象機器特定手段と、
前記第2の図形に囲まれている文字を操作命令の識別情報として該第2の図形に紐付ける操作命令特定手段と、
前記操作対象機器の識別情報と前記操作命令の識別情報を関連付ける関連付け手段と、
を含み、
前記操作コード生成手段は、
操作の開始要求を意味するトリガー操作を検知するトリガー操作検知手段を含み、前記第2の図形に対する前記トリガー操作を検知したことに応答して、該第2の図形に紐付いた操作命令の識別情報に関連付けられた操作対象機器の識別情報に係る操作対象機器に対する該操作命令を表す操作コードを生成する、
コンピュータ実行可能なプログラム。 - 前記所定の記法は、操作対象機器および操作命令を、それ自体を意味する文字と図形の組み合わせで表現し、該操作対象機器と該操作命令の対応関係を線図で表現する記法である、請求項9に記載のプログラム。
- 前記手書き入力受付手段は、デジタルペンによって取得された手書きの軌跡を入力として受け付ける、請求項9または10に記載のプログラム。
- 前記関連付け手段は、
前記第1の図形と前記第2の図形を結ぶように線が描画されたことに応答して、該第1の図形に紐付いた前記操作対象機器の識別情報と該第2の図形に紐付いた前記操作命令の識別情報を関連付ける、請求項9〜11のいずれか一項に記載のプログラム。 - 前記関連付け手段は、
前記線を取り消すことを意味する所定の記号が描画されたことに応答して、該線に基づく関連付けを解消する、請求項12に記載のプログラム。 - 前記関連付け手段は、
前記第1の図形に前記第2の図形が囲まれている場合に、該第1の図形に紐付いた前記操作対象機器の識別情報と該第2の図形に紐付いた前記操作命令の識別情報を関連付ける、請求項9〜13のいずれか一項に記載のプログラム。 - 前記操作コード生成手段は、
電子機器に係る識別情報と操作命令に係る識別情報を入力とし該電子機器に対する該操作命令を表す操作コードを出力とする操作コード変換手段を備え、
前記第2の図形に対する前記トリガー操作を検知したことに応答して、該第2の図形に紐付いた操作命令に係る識別情報と該識別情報に関連付けられた電子機器に係る識別情報を前記操作コード変換手段に入力し、該電子機器に対する該操作命令を表す操作コードを出力として取得する、
請求項9〜14のいずれか一項に記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014146470A JP6367031B2 (ja) | 2014-07-17 | 2014-07-17 | 電子機器遠隔操作システム及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014146470A JP6367031B2 (ja) | 2014-07-17 | 2014-07-17 | 電子機器遠隔操作システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016024519A JP2016024519A (ja) | 2016-02-08 |
JP6367031B2 true JP6367031B2 (ja) | 2018-08-01 |
Family
ID=55271254
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014146470A Active JP6367031B2 (ja) | 2014-07-17 | 2014-07-17 | 電子機器遠隔操作システム及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6367031B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106254918A (zh) * | 2016-08-31 | 2016-12-21 | 苏州见真物联科技有限公司 | 具有手写输入功能的电视机遥控器 |
KR102655584B1 (ko) | 2017-01-02 | 2024-04-08 | 삼성전자주식회사 | 디스플레이 장치 및 디스플레이 장치의 제어 방법 |
CN107678606B (zh) * | 2017-11-17 | 2023-12-26 | 普天智能照明研究院有限公司 | 用于远程操控电器设备的控制装置和方法 |
JP7006198B2 (ja) * | 2017-12-01 | 2022-01-24 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システムおよびプログラム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3219527B2 (ja) * | 1993-03-25 | 2001-10-15 | 三洋電機株式会社 | 情報処理装置 |
US5889506A (en) * | 1996-10-25 | 1999-03-30 | Matsushita Electric Industrial Co., Ltd. | Video user's environment |
JP4210846B2 (ja) * | 2003-07-18 | 2009-01-21 | ソニー株式会社 | 映像表示装置 |
JP4784367B2 (ja) * | 2006-03-29 | 2011-10-05 | カシオ計算機株式会社 | 機器制御装置および機器制御処理のプログラム |
KR101509245B1 (ko) * | 2008-07-31 | 2015-04-08 | 삼성전자주식회사 | 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법 |
JP2011203829A (ja) * | 2010-03-24 | 2011-10-13 | Seiko Epson Corp | コマンド生成装置、その制御方法及びそれを備えたプロジェクター |
JP2014102669A (ja) * | 2012-11-20 | 2014-06-05 | Toshiba Corp | 情報処理装置、情報処理方法およびプログラム |
-
2014
- 2014-07-17 JP JP2014146470A patent/JP6367031B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016024519A (ja) | 2016-02-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101554221B1 (ko) | 휴대단말기를 이용한 악기 연주 방법 및 장치 | |
US20120069169A1 (en) | Information processing apparatus, method, and storage medium | |
JP6275839B2 (ja) | リモコン装置、情報処理方法およびシステム | |
US9304602B2 (en) | System for capturing event provided from edge of touch screen | |
US7831933B2 (en) | Method and system for implementing a user interface for a device employing written graphical elements | |
JP2019220237A (ja) | 文字入力インターフェース提供方法及び装置 | |
JP6367031B2 (ja) | 電子機器遠隔操作システム及びプログラム | |
US20030067450A1 (en) | Interactive system and method of interaction | |
JP2010205069A (ja) | 入力装置 | |
US20070103431A1 (en) | Handheld tilt-text computing system and method | |
JP2011141905A (ja) | 一体型キーパッドシステム | |
JPWO2012011263A1 (ja) | ジェスチャ入力装置およびジェスチャ入力方法 | |
KR20110010906A (ko) | 사용자 인터랙션을 이용한 전자기기 제어 방법 및 장치 | |
US20170344113A1 (en) | Hand-held controller for a computer, a control system for a computer and a computer system | |
US20220129126A9 (en) | System for capturing event provided from edge of touch screen | |
KR20140044585A (ko) | 휴대단말기의 사용 방법 및 장치 | |
US9117376B2 (en) | System and methods for sensing finger position in digital musical instruments | |
KR20160143428A (ko) | 펜 단말기 및 그 제어방법 | |
KR101053411B1 (ko) | 문자 입력 방법 및 그 단말기 | |
JP2008046276A (ja) | カラオケ装置の操作パネル、カラオケ装置 | |
US7671269B1 (en) | Methods and systems for graphical actuation of a velocity and directionally sensitive sound generation application | |
EP3338457B1 (en) | Audio apparatus, driving method for audio apparatus, and computer readable recording medium | |
KR20090111943A (ko) | 터치스크린을 이용한 악기 연주 시뮬레이션 장치 및 방법 | |
US20140210732A1 (en) | Control Method of Touch Control Device | |
KR20160087692A (ko) | 전자 기기 및 그 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170523 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180703 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180704 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6367031 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |