JP2013050907A - 操作装置、その情報処理方法及び情報処理装置 - Google Patents

操作装置、その情報処理方法及び情報処理装置 Download PDF

Info

Publication number
JP2013050907A
JP2013050907A JP2011189439A JP2011189439A JP2013050907A JP 2013050907 A JP2013050907 A JP 2013050907A JP 2011189439 A JP2011189439 A JP 2011189439A JP 2011189439 A JP2011189439 A JP 2011189439A JP 2013050907 A JP2013050907 A JP 2013050907A
Authority
JP
Japan
Prior art keywords
unit
coordinate
operating device
posture
detection space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011189439A
Other languages
English (en)
Other versions
JP2013050907A5 (ja
JP5891659B2 (ja
Inventor
Takashi Tsurumoto
隆志 弦本
Toshihiko Fushimi
俊彦 伏見
Ikuo Yamano
郁男 山野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2011189439A priority Critical patent/JP5891659B2/ja
Application filed by Sony Corp filed Critical Sony Corp
Priority to US14/238,642 priority patent/US8830406B2/en
Priority to RU2014106485A priority patent/RU2621183C2/ru
Priority to BR112014004124A priority patent/BR112014004124A2/pt
Priority to PCT/JP2012/005311 priority patent/WO2013031158A1/ja
Priority to CN201280040767.6A priority patent/CN103765365B/zh
Publication of JP2013050907A publication Critical patent/JP2013050907A/ja
Publication of JP2013050907A5 publication Critical patent/JP2013050907A5/ja
Application granted granted Critical
Publication of JP5891659B2 publication Critical patent/JP5891659B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1662Details related to the integrated keyboard
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • Selective Calling Equipment (AREA)
  • Details Of Television Systems (AREA)

Abstract

【課題】操作性の向上を図ることのできる操作装置を提供する。
【解決手段】この操作装置は、表裏対向する2つの面を第1の面及び第2の面として有する筐体と、前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作を検出を行う検出部を含む第1の操作入力部と、前記第2の面に設けられた第2の操作入力部と、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部とを具備する。
【選択図】図5

Description

本技術は、テレビジョン受像機などの情報処理装置を遠隔操作する操作装置、その情報処理方法及び、操作装置の制御対象である情報処理装置に関する。
テレビジョン受像機などの情報処理装置をリモートコントロールする無線操作端末は、赤外線通信を利用する赤外線リモコンが主流とされてきた。しかし、赤外線リモコンでは、赤外線の指向性が強いために、リモコンを被制御機器の方向へ赤外線の発光部を向ける必要があった。これに対し、電波の指向性は比較的弱いため、近年では、高周波電波を用いたRF(Radio Frequency)リモコンが開発されて主流となりつつある。また、RFリモコンの規格を標準化するための試みが各団体によってなされている。
例えば、近距離無線通信規格IEEE(登録商標)(Institute of Electrical and Electronic Engineers)802.15.4に準拠し、IEEE(登録商標)802.15.4の上位に相当するネットワーク層、セキュリティ層、アプリケーション層の仕様としてZigBee(登録商標)が標準化されている。さらに、IEEE(登録商標)802.15.4をもとに、業界団体によってRFリモコン規格ZigBee(登録商標) RF4CE(Radio Frequency for Consumer Electronics)が標準化されている。
例えば、特許文献1には、RF4CEなどのRF無線信号を用いてテレビジョン受像機などの情報処理装置をコントロールする操作端末に関する技術が開示されている。また、特許文献2には、6面直方体からなる筐体の2つの主面に操作用のキーを設けたリモートコントロール装置が開示されている。このリモートコントロール装置は、さらに2つの主面のどちらを表にした姿勢となっているかを検出し、裏側の主面の操作キーを無効することが記載されている。
特開2011−034294号公報 特開平6−89634号公報
ところで、近年、情報処理装置の多機能化は目覚しく、例えば、インターネットに接続して、インターネット上の様々なサービスを利用することが可能なテレビジョン受像機なども登場している。したがって、このように多機能の情報処理装置を遠隔操作するための操作装置においても、タッチパッドなどのポインティングデバイスやキーボードの必要性が増大してきている。しかし、ポインティングデバイスやキーボードはある程度の面サイズを要するため搭載場所をとり、操作装置のサイズを大きくする要因となる。そこで、キーボードとタッチパッドなどを操作装置の表裏対向する2つの面に配置することが検討されている。このような構成を採った場合、操作性を高めるための様々な改良が期待されている。
以上のような事情に鑑み、本技術の目的は、操作性の向上を図ることのできる操作装置、その操作装置の情報処理御方法及び情報処理装置を提供することにある。
上記の課題を解決するために、本技術に係る一形態である操作装置は、表裏対向する2つの面を第1の面及び第2の面として有する筐体と、前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部と、前記第2の面に設けられた第2の操作入力部と、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部とを具備する。
前記検出部は、前記座標検出空間に対してユーザにより指示された座標を検出し、前記変換部は、前記検出部により検出された座標を(X,Y)、前記第2の面側から前記座標検出空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出空間のY軸方向の長さをα、前記座標検出空間のX軸方向の長さをβとして、
X’=α−Y
Y’=β−X
の計算式により変換を行うものであってよい。
上記の操作装置において、前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備するものであってよい。
前記制御部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にするものであってよい。
前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にするものであってもよい。
本技術に係る操作装置は、前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部をさらに具備し、前記判定部は、前記撮像部により撮像された画像をもとに前記姿勢を判定するものであってよい。
前記変換部は、前記座標検出部の座標系で得た検出座標を(X,Y)、前記第2の面側から前記座標検出空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出部の検出空間のY軸方向の長さをαとして、
X’=α−X
Y’=Y
の計算式により変換を行うものであってもよい。
前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、
前記変換部は、
前記座標検出部の座標系により検出された前記移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
x’=−y
y’=−x
の計算式により変換を行うものであってもよい。
前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、前記変換部は、前記座標検出部の座標系で得た移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
x’=−x
y’=y
の計算式により変換を行うものであってもよい。
本技術に係るその他の形態である操作装置の情報処理方法は、所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部が設けられた第1の面と、第2の操作入力部が設けられ、前記第1の面に表裏対向する第2の面を有する筐体の、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定し、前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する、というものである。
本技術に係るその他の形態である情報処理装置は、表裏対向する2つの面を第1の面及び第2の面として有する筐体と、前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部と、前記第2の面に設けられた第2の操作入力部と、を具備する操作装置の、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部とを具備する。
以上のように、本技術によれば、操作性の高い操作装置を提供することができる。
本技術に係る第1の実施形態の情報処理システムの構成を示すブロック図である。 図1の情報処理装置のハードウェア構成を示す図である。 図1の操作装置のリモコン面側の外観図である。 図1の操作装置のキーボード面側の外観図である。 図1の操作装置のバードウェア構成を示すブロック図である。 図1の操作装置のタッチパッド操作姿勢を示す図である。 図1の操作装置のキーボード操作姿勢を示す図である。 図1の操作装置のキーボード面をユーザ側に向けたままその裏側面にあるタッチパッドを操作するときの状態を示す図である。 図1の操作装置のタッチパッドの座標系を説明するための図である。 図1の操作装置においてキーボード面側からタッチパッドの座標検出空間を透視した座標系を説明するための図である。 変形例1の操作装置の第2のタッチパッド操作姿勢を示す図である。 変形例1の操作装置のタッチパッド操作姿勢を示す図である。 変形例4の操作装置による姿勢検出の方法を説明するための図である。 同じく変形例4の操作装置による姿勢検出の方法を説明するための図である。 変形例5の操作装置を説明するための図である。
以下、本技術に係る実施形態を、図面を参照しながら説明する。
本実施形態は、例えばテレビジョン受像機、ゲーム機、録画装置、パーソナルコンピュータなどの情報処理装置を、例えばケーブル伝送信号、Ir信号、RF信号、無線LANなどの伝送路を用いて遠隔操作する操作装置に関するものである。
近年、情報処理装置の多機能化は目覚しく、例えば、インターネットに接続して、インターネット上の様々なサービスを利用することが可能なテレビジョン受像機なども登場している。そこで、例えばパーソナルコンピュータ用のキーボードなどに採用された標準的なキー配列を備えたQWERTYキーボードや、タッチパッドなどを搭載した遠隔操作装置も登場してきている。また、QWERTYキーボードとタッチパッドなどをユーザから見て1つの面に搭載するとなると、操作装置の面サイズが大きくなり、操作装置の大型化を招くことになる。そこで、QWERTYキーボードとタッチパッドなどのポインティングデバイスを操作装置の表裏対向する2つの面に配置することが検討されている。
QWERTYキーボードとタッチパッドなどを操作装置の表裏対向する2つの面に配置した場合、タッチパッドなどの操作の形態として、QWERTYキーボードの搭載された面をユーザ側に向けたまま、タッチパッドなどを操作する、といった形態が考えられる。QWERTYキーボードの搭載された面をユーザ側に向けたまま裏側面にあるタッチパッドを操作する際には、ユーザはタッチパッドの座標系を裏側から見ていることを意識しながらの操作を行う必要があり、直感的な操作ができなくなることで、操作性が著しく低下する。
本実施形態の操作装置は、姿勢を検知するために必要な加速度センサなどの検出部を内蔵する。この操作装置は、検出部の検出値をもとに姿勢を検出し、タッチパッドが配置された第1の面とQWERTYキーボードが配置された第2の面とで、どちらの面がユーザに面しているかかを判定するとともに、操作装置の縦横の姿勢の向きを判定する。操作装置は、判定した結果をもとに、必要に応じて、タッチパッドにより検出された座標などの情報を、第2の面側からタッチパッドの座標検出空間を透視した座標系の情報に変換するものである。
以下、本実施形態の操作装置を詳細に説明する。
<第1の実施形態>
図1は、本技術に係る第1の実施形態の情報処理システムの構成を示すブロック図である。同図に示すように、本実施形態の情報処理システム100は、操作対象である情報処理装置200と、情報処理装置200を遠隔操作する操作装置300とを有する。情報処理装置200は、例えば、テレビジョン受像機、パーソナルコンピュータ、レコーダ、プレーヤ、ゲーム機など、基本的なコンピュータのハードウェア構成を含むものであれば何であってもよい。また、情報処理装置200は、インターネットなどのネットワークに接続して、ウェブページなどの閲覧を行うことが可能な機器であってもよい。
[情報処理装置200の構成]
図2は情報処理装置200のハードウェア構成を示す図である。
本実施形態では、情報処理装置200としてテレビジョン受像機を用いた場合を説明する。
この情報処理装置200は、CPU(Central Processing Unit)201、バス202、メモリ203、ストレージ204、ネットワークI/F206、無線通信部207を有する。情報処理装置200は、また、アンテナ209、チューナ210、デスクランブラ211、デマルチプレクサ212、Audioデコーダ213、Videoデコーダ214、音声処理回路215、スピーカ216、GUI重畳器217、映像処理回路218、ディスプレイ219を有している。
この情報処理装置200では、CPU201が、バス202を介して接続されたメモリ203又はストレージ204に記憶されているプログラムに従って各種処理を実行する。
無線通信部207は、操作装置300との間で無線による双方向の信号の通信を行う。無線通信の方式としては、例えば、IR(赤外線)方式、家電用RFリモコンの国際規格であるRF4CE(Radio Frequency for Consumer Electronics)などのRF方式、IEEE 802.11b規格などに準拠した無線LANなどが挙げられる。
アンテナ209は、デジタル放送信号などを受信してチューナ210に入力する。
チューナ210は、デジタル放送信号から所定のチャンネルの放送信号を抽出する。チューナ210は、この抽出した放送信号に対して復調処理を施して得た所定のチャンネルのトランスポートストリームをデスクランブラ211に出力する。
デスクランブラ211は、情報処理装置200に装着された所定のICカード(図示せず)にあらかじめ記憶されている解除キーを用いて、チューナ210から入力されたトランスポートストリームのスクランブルを解除する。デスクランブラ211は、このスクランブル解除済のトランスポートストリームをデマルチプレクサ212に出力する。
デマルチプレクサ212は、デスクランブラ211から入力されたスクランブル解除済のトランスポートストリームからオーディオデータとビデオデータとを分離する。デマルチプレクサ212は、分離したオーディオデータをAudioデコーダ213に出力し、分離したビデオデータをVideoデコーダ214に出力する。
Audioデコーダ213は、デマルチプレクサ212から入力されたオーディオデータをデコードし、得られた音声データを、音声処理回路215に出力する。
音声処理回路215は、Audioデコーダ213から入力された音声データに対してD/A(Digital/Analog)変換、増幅処理などを施し、得られた音声信号をスピーカ216に出力する。
Videoデコーダ214は、デマルチプレクサ212から入力されたビデオデータをデコードし、得られた映像データを、GUI(Graphical User Interface)重畳器217に出力する。
GUI重畳器217は、Videoデコーダ214から入力された映像データに対して、OSD(On Screen Display)などのグラフィックデータを重畳して、映像処理回路218に出力する。
映像処理回路218は、GUI重畳器217から入力された映像データに対して、所定の画像処理、D/A(Digital/Analog)変換などを施し、得られた映像信号をディスプレイ219に出力する。
また、CPU201は、操作装置300からの録画に関する操作信号、あるいはメモリ203に設定された録画予約のための情報をもとに、デジタル放送を受信し、所定のチャンネルのトランスポートストリームを得て、これを番組の映像音声データとして、ストレージ204に保存することができる。
このようにして、情報処理装置200は、デジタル放送を受信して、その番組を視聴可能なようにディスプレイ219およびスピーカ216を通じて出力したり、ストレージ204に録画したりすることができる。また、CPU201は、ネットワークI/F206を通じてインターネットにアクセスし、取得したウェブページをディスプレイ219に表示させたりすることもできる。
[操作装置300の構成]
次に、操作装置300の構成を説明する。
図3は操作装置300のリモコン面側の外観図である。図4は操作装置300のキーボード面側の外観図である。
図3及び図4に示すように、操作装置300は、表裏対向する長方形の2つの面を主面31,32として有し、主面31,32の2軸方向のサイズに対して、それらの2軸に対して直交する軸方向(奥行き方向)のサイズが十分小さい計6面体の直方体形状の筐体33を有する。表裏対向する2つの主面はどちらもユーザにとっての操作面となっている。すなわち、一方の主面31(「リモコン面31」とも呼ぶ。)には、タッチパッド34と、カーソルキー35などのキーが第1の操作入力部として設けられている。タッチパッド34は一方の主面31においてほぼ中央の領域に配置されている。これは、キーボード操作姿勢(後述する。)での操作時にユーザにとってタッチパッド34の操作はブラインド操作となることから、リモコン面31の中心とタッチパッド34の中心座標とを一致もしくはほぼ一致させることで、タッチパッド34のブラインドによる一定の操作性を確保できる。筐体33のリモコン面31に対して表裏対向する関係にある他方の主面32(「キーボード面32」とも呼ぶ。)には、QWERTYキーボードなどのキーボード38が第2の操作入力部として設けられている。筐体33のリモコン面31及びキーボード面32以外の4面(以下これらをそれぞれ「側面」と呼ぶ。)のうち少なくとも1つの側面36には、例えば、音量調整、選局など、例えば使用頻度の高い複数のキー37が設けられている。
図5は、操作装置300のバードウェア構成を示すブロック図である。
操作装置300は、制御部301、無線通信部302、タッチパッド34、加速度センサ304、リモコン面キーマトリクス305、側面キーマトリクス306、キーボード面キーマトリクス307を有する。
制御部301は、操作装置300を構成する各ブロックの全体的な制御、各種の演算処理、各ブロック間でのデータのやりとりを制御する。
無線通信部302は、情報処理装置200との間で無線による双方向の信号の通信を行う。無線通信の方式としては、例えば、IR(赤外線)方式、家電用RFリモコンの国際規格であるRF4CE(Radio Frequency for Consumer Electronics)などのRF方式、IEEE 802.11b規格などに準拠した無線LANなどが挙げられる。
タッチパッド34は、ユーザがタッチした位置の座標を検出するデバイスである。タッチパッド34は、例えば、静電容量方式、抵抗膜方式などのタッチセンサなどにより構成される。
加速度センサ304は、3軸(X軸、Y軸、Z軸)方向の加速度を検出するセンサである。加速度センサ304の検出信号は制御部301に供給され、操作装置300の姿勢を検出するための情報として処理される。なお、操作装置300の姿勢を検出する手段としては、加速度センサ304の他に、重力方向に対する角度を検出するジャイロセンサなどがある。あるいは、図示しないカメラにより操作装置300から見た周辺の映像を撮像し、操作装置300内の制御部301あるいは情報処理装置200内のCPU201などにおいて、その撮影画像を解析して、操作装置300の姿勢を検出する方法などもある。
リモコン面キーマトリクス305は、リモコン面31に設けられたカーソルキー35などのキーに対する操作を検出して制御部301に通知する。
側面キーマトリクス306は、筐体33の側面36に設けられたキー37に対する操作を検出して制御部301に通知する。
キーボード面32キーマトリクス307は、キーボード38に対する操作を検出して制御部301に通知する。
<動作の説明>
次に、本実施形態の操作装置300の動作を説明する。
操作装置300の制御部301は、予め組み込まれたタッチパッド検出情報の変換用プログラムに基づいて次のような制御を行う。
操作装置300の制御部301は、加速度センサ304によって得られた検出結果をもとに操作装置300の操作姿勢を判定する(判定部)。
本実施形態の操作装置300を操作する際の姿勢には少なくとも次の2種類の基本姿勢がある。
1.リモコン面31をユーザに向けて縦向きの姿勢(以下「タッチパッド操作姿勢」と呼ぶ。)(図6参照)。
2.キーボード面32をユーザに向けて横向きの姿勢(図7参照)(以下「キーボード操作姿勢」と呼ぶ。)。横向きに使用されるのは、QWERTYキーボードなどのキーボード38のキー配列が横長であるためである。ユーザは操作装置300の両端部分を両手で持って両手の指を使ってキー入力を行うことになる。また、この姿勢での操作の際に、図8に示すように、ユーザは背面側(リモコン面31側)に指を廻してタッチパッド34の操作を行うこともできる。
加速度センサ304によって得られた検出結果をもとに操作装置300の操作姿勢を判定する方法としては、例えば、以下がある。
1.制御部301が、加速度センサ304の出力をもとにリモコン面31とキーボード面32のどちらが、より重力方向を向いているかを判定する。制御部301が、リモコン面31の方がより重力方向を向いていることを判定した場合にはキーボード操作姿勢にあることを判定し、キーボード面32の方がより重力方向を向いていることを判定した場合にはタッチパッド操作姿勢にあることを判定する。
2.操作装置300の長手方向と短手方向のどちらが、より重力方向を向いているかを判定する。制御部301が、操作装置300の長手方向の方がより重力方向を向いていることを判定した場合にはタッチパッド操作姿勢にあることを判定し、短手方向の方がより重力方向を向いていることを判定した場合にはキーボード操作姿勢にあることを判定する。
3.上記の2つの判定方法を併用する。すなわち、制御部301が、リモコン面31の方がより重力方向を向き、かつ短手方向の方がより重力方向を向いていることを判定した場合にはキーボード操作姿勢にあることを判定する。また、制御部301は、キーボード面32の方がより重力方向を向き、かつ長手方向の方がより重力方向を向いていることを判定した場合にはタッチパッド操作姿勢にあることを判定する。その他の場合には無視する。
制御部301は、タッチパッド操作姿勢を判定したとき、タッチパッド34の出力情報をそのまま有効とする。ここで、タッチパッド34の座標検出空間の座標系は、図9に示すように、タッチパッド34の左下端の点cを基準座標(X=0,Y=0)として、左右方向をX軸方向、上下方向をY軸方向としたものである。
これに対し、図10に示すように、キーボード操作姿勢にあるとき、タッチパッド34の座標検出空間の座標系と、キーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系とは鏡面対称かつ180度回転対称の関係となる。そこで制御部301は、キーボード操作姿勢が判定されたとき、タッチパッド34により検出された座標(X,Y)をキーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系の座標(X’,Y’)に下記の計算によって変換する(変換部)。
X’=α−Y
Y’=β−X
但し、αはタッチパッド34のY軸方向の長さ、βはタッチパッド34のX軸方向の長さである。
なお、ここでは、タッチパッド34のX軸方向とY軸方向の長さが同一であることを想定した。これに対し、X軸方向とY軸方向の長さが異なる場合(タッチパッド34の座標検出空間が長方形である場合)には、上記の変換のとき、縦横比に応じて、これらの計算式に採用するY、Xの値をスケール変換、センター補正、あるいはその両方などによって調整すればよい。
このようにキーボード操作姿勢でのタッチパッド34の操作に対して検出された座標を、キーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系の座標に変換することで、キーボード操作姿勢でのタッチパッド34の操作をユーザの座標系の感覚通りに行うことができる。
ところで、上記のように筐体33の裏表に操作入力部をそれぞれ設けた場合、ユーザから見て裏側の操作入力部のキーなどを誤って操作してしまう可能性がある。そこで、本実施形態の操作装置300において、制御部301は、加速度センサ304の出力をもとに判定された操作姿勢に応じて、ユーザから見て裏側の面に設けられた操作入力部を停止状態にするように制御を行う。例えば、キーボード操作姿勢が判定された場合には、制御部301は、リモコン面31に設けられたカーソルキー35などのキーの操作に対する検出を停止状態にするように制御を行う。これによりユーザから見て裏側の面に設けられた操作入力部の誤操作を防止することができる。
<変形例1>
次に、上記実施形態の変形例を説明する。
本変形例の操作装置300Aは、操作時の2種類の基本姿勢が上記の実施形態と異なる。
1a.リモコン面31をユーザに向けて横向きの姿勢(以下「第2のタッチパッド操作姿勢」と呼ぶ。)(図11参照)。
2b.キーボード面32をユーザに向けて横向きの姿勢(図12参照)(以下「キーボード操作姿勢」と呼ぶ。)。このキーボード操作姿勢は、上記の実施形態と同じである。
図11に示すように、第2のタッチパッド操作姿勢が判定されたとき、制御部301は、タッチパッド34の出力情報をそのまま有効とする。これに対し、図12に示すように、キーボード操作姿勢にあるとき、タッチパッド34の座標系と、キーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系とは鏡面対称の関係となる。そこで操作装置300Aの制御部301は、キーボード操作姿勢が判定されたとき、タッチパッド34により検出された座標(X,Y)をキーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系の座標(X’,Y’)に下記の計算によって変換する。
X’=α−X
Y’=Y
但し、αはタッチパッド34のY軸方向の長さである。
なお、本変形例1においては、加速度センサ304によって得られた検出結果をもとに、例えば以下のようにして操作装置300Aの操作姿勢を判定する。
1.制御部301が、加速度センサ304の出力をもとにリモコン面31とキーボード面32のどちらが、より重力方向を向いているかを判定する。制御部301が、リモコン面31の方がより重力方向を向いていることを判定した場合にはキーボード操作姿勢にあることを判定し、キーボード面32の方がより重力方向を向いていることを判定した場合にはタッチパッド操作姿勢にあることを判定する。
このようにしてキーボード操作姿勢でのタッチパッド34の操作に対して検出されたタッチパッド34の座標系での座標を、キーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系の座標に変換することで、キーボード操作姿勢でのタッチパッド34の操作をユーザの座標系の感覚通りに行うことができる。
<変形例2>
次に、上記実施形態の変形例2を説明する。
以上の説明では、タッチパッド34により検出された座標を変換処理する場合について説明した。
本変形例2は、座標ではなく移動情報(移動量及び移動方向)、より具体的には単位時間当たりに移動した指などの検出子の2点間の座標の差分を変換処理対象としたものである。
この場合、タッチパッド34により検出された移動情報(x,y)を、キーボード面32からタッチパッド34の座標検出空間34Sを透視した座標系での移動情報(x’,y’)に変換するための計算式は以下のようになる。
リモコン面31をユーザに向けて縦向きの姿勢と、キーボード面32をユーザに向けて横向きの姿勢とを操作時の基本姿勢とする場合、
x’=−y
y’=−x
また、リモコン面31をユーザに向けて横向きの姿勢と、キーボード面32をユーザに向けて横向きの姿勢を操作時の基本姿勢とする場合、
x’=−x
y’=y
なお、ここでは、タッチパッド34のX軸方向とY軸方向の長さが同一であることを想定した。これに対し、X軸方向とY軸方向の長さが異なる場合(タッチパッド34の座標検出空間が長方形である場合)には、上記の変換のとき、縦横比に応じて、これらの計算式に採用するx、yの値をスケール変換、センター補正、あるいはその両方などによって調整すればよい。
<変形例3>
上記の実施形態及び変形例の座標の変換や、キーの検出停止などの制御は、操作装置300の制御部301によってではなく、操作装置300の制御対象である情報処理装置200のCPU201(図2)にて行うようにしてもよい。操作装置300と情報処理装置200とがRF信号、無線LANなど、比較的高速な無線通信を可能とする場合には、情報処理装置200のCPU201による制御によっても、実用上十分なリアルタイム性が得られる。
<変形例4>
上記の実施形態では、加速度センサ304を用いて操作装置300の姿勢を判定することとしたが、操作装置300に設けられたカメラによって撮影された画像をもとに操作装置300の姿勢を判定するようにしてもよい。
図13及び図14は、操作装置300Bに設けられたカメラによって撮影された画像をもとに操作装置300Bの姿勢を判定する様子を示す図である。
操作装置300Bにおいて、カメラのレンズ41はリモコン面31またはキーボード面32のいずれか一方に設けられている。図の例では、カメラのレンズ41はリモコン面側に設けられているものとする。
操作装置300Bの制御部301は、カメラによって撮像されたユーザ51の顔の画像のパターンマッチングなどによってユーザ51を認識する。認識されたユーザ51が予め登録されたユーザと一致する場合、制御部301は、操作装置300Bがリモコン面31をユーザ51に向けた姿勢にあることを判定する(図13参照)。逆に、登録されたユーザの顔が認識されなかった場合には、制御部301は、操作装置300Bがキーボード面32をユーザ51に向けた姿勢にあることを判定する(図14参照)。
また、このカメラによる姿勢の判定と、加速度センサ304による操作装置300Bの横向き/縦向きの姿勢の判定結果とを組み合わせて、操作装置300Bの姿勢の最終的な判定結果とすることもできる。
これにより、操作装置300Bの姿勢をより精度良く判定することができる。例えば、操作装置300Bは、ユーザ51の目の高さよりも低い位置で操作される場合と、ユーザ51の目の高さよりも高い位置で操作される場合がある。変形例3の方法によれば、そのいずれの状態においても、タッチパッド操作姿勢とキーボード操作姿勢を精度良く判定することが可能である。
<変形例5>
タッチパッド34で指などの検出子が検出された状態においては、カメラの撮影画像や加速度センサ304の出力に基づくタッチパッド操作姿勢及びキーボード操作姿勢の判定を無効化するようにしてもよい。
図15は、この制御の様子を示す図である。
タッチパッド操作姿勢(状態1)から操作装置300Cの姿勢が、リモコン面31がより重力方向を向くように変えられたとき(状態2)、制御部301は加速度センサ304の出力をもとに操作装置300Cの姿勢がキーボード操作姿勢に変化したことを判定する。このときタッチパッド34に指などが触れた状態にある場合(状態3)、すなわちタッチパッド34から情報が出力されている場合には、制御部301はカメラの撮影画像や加速度センサ304の出力に基づくタッチパッド操作姿勢及びキーボード操作姿勢の判定を無効化する。これにより操作装置300Cの姿勢はタッチパッド操作姿勢のままであるものとして制御が行われる
このようにすることによって、リモコン面31での入力操作時に発生した姿勢の変化により、リモコン面31に存在するキーの操作に対する検出がユーザの意に反して停止されることを防止することができる。
同様の原理で、キーボード操作姿勢でキーボード38のキーが押されていることが検出された状態においては、カメラから得た撮影画像や加速度センサ304の出力に基づくタッチパッド操作姿勢及びキーボード操作姿勢の判定を無効化するようにしてもよい。
さらに、リモコン面の操作ボタンが通常の操作時の頻度を考慮して決められた所定値以上の頻度で操作されている間は、加速度センサ304の出力に基づくタッチパッド操作姿勢及びキーボード操作姿勢の判定を無効化して、タッチパッド操作姿勢での制御を行うようにしてもよい。
同様に、キーボード38のキーが通常の操作時の頻度を考慮して決められた所定値以上の頻度で操作されている間は、加速度センサ304の出力に基づくタッチパッド操作姿勢及びキーボード操作姿勢の判定を無効化して、キーボード操作姿勢での制御を行うようにしてもよい。
なお、本技術は以下のような構成も採ることができる。
(1) 表裏対向する2つの面を第1の面及び第2の面として有する筐体と、
前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作を検出を行う検出部を含む第1の操作入力部と、
前記第2の面に設けられた第2の操作入力部と、
前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、
前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部と
を具備する操作装置。
(2)前記(1)に記載の操作装置であって、
前記検出部は、前記座標検出空間に対してユーザにより指示された座標を検出し、
前記変換部は、前記検出部により検出された座標を(X,Y)、前記第2の面側から前記座標検出空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出空間のY軸方向の長さをα、前記座標検出空間のX軸方向の長さをβとして、
X’=α−Y
Y’=β−X
の計算式により変換を行う
操作装置。
(3)前記(1)または(2)に記載の操作装置であって、
前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、
前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備する
操作装置。
(4)前記(1)から(3)のうちいずれか1つに記載の操作装置であって、
前記判定部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にする
操作装置。
(5)前記(1)から(4)のうちいずれか1つに記載の操作装置であって、
前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にする
操作装置。
(6)前記(1)から(4)のうちいずれか1つに記載の操作装置であって、
前記判定部は、
前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部と、
前記制御部は、前記撮像部により撮像された画像をもとに前記姿勢を判定する
操作装置。
(7)前記(1)に記載の操作装置であって、
前記検出部は、前記座標検出空間に対してユーザにより指示された座標を検出し、
前記変換部は、
前記座標検出部の座標系で得た検出座標を(X,Y)、前記第2の面側から前記空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出部の検出空間のY軸方向の長さをαとして、
X’=α−X
Y’=Y
の計算式により変換を行う
操作装置。
(8)前記(7)に記載の操作装置であって、
前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、
前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備する
操作装置。
(9)前記(7)または(8)に記載の操作装置であって、
前記判定部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にする
操作装置。
(10)前記(7)から(9)のうちいずれか1つに記載の操作装置であって、
前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にする
操作装置。
(11)前記(7)から(10)のうちいずれか1つに記載の操作装置であって、
前記判定部は、
前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部と、
前記制御部は、前記撮像部により撮像された画像をもとに前記姿勢を判定する
操作装置。
(12)前記(1)に記載の操作装置であって、
前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、
前記変換部は、
前記座標検出部により検出された前記移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
x’=−y
y’=−x
の計算式により変換を行う
操作装置。
(13)前記(12)に記載の操作装置であって、
前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、
前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備する
操作装置。
(14)前記(12)または(13)に記載の操作装置であって、
前記判定部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にする
操作装置。
(15)前記(12)から(14)のうちいずれか1つに記載の操作装置であって、
前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にする
操作装置。
(16)前記(12)から(15)のうちいずれか1つに記載の操作装置であって、
前記判定部は、
前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部と、
前記制御部は、前記撮像部により撮像された画像をもとに前記姿勢を判定する
操作装置。
(17)前記(1)に記載の操作装置であって、
前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、
前記変換部は、
前記座標検出部の座標系で得た移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
x’=−x
y’=y
の計算式により変換を行う
操作装置。
(18)前記(17)に記載の操作装置であって、
前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、
前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備する
操作装置。
(19)前記(17)または(18)に記載の操作装置であって、
前記判定部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にする
操作装置。
(20)前記(17)から(19)のうちいずれか1つに記載の操作装置であって、
前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にする
操作装置。
(21)前記(17)から(20)のうちいずれか1つに記載の操作装置であって、
前記判定部は、
前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部と、
前記制御部は、前記撮像部により撮像された画像をもとに前記姿勢を判定する
操作装置。
なお、本技術は以上説明した実施の形態には限定されるものではなく、本技術の技術思想の範囲内で種々の変形が可能である。
31…リモコン面
32…キーボード面
33…筐体
34…タッチパッド
34S…座標検出空間
35…カーソルキー
38…キーボード
100…情報処理システム
200…情報処理装置
201…CPU
300…操作装置
301…制御部
304…加速度センサ
305…リモコン面キーマトリクス
306…側面キーマトリクス
307…キーボード面キーマトリクス

Claims (11)

  1. 表裏対向する2つの面を第1の面及び第2の面として有する筐体と、
    前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部と、
    前記第2の面に設けられた第2の操作入力部と、
    前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、
    前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部と
    を具備する操作装置。
  2. 請求項1に記載の操作装置であって、
    前記検出部は、前記座標検出空間に対してユーザにより指示された座標を検出し、
    前記変換部は、前記検出部により検出された座標を(X,Y)、前記第2の面側から前記座標検出空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出空間のY軸方向の長さをα、前記座標検出空間のX軸方向の長さをβとして、
    X’=α−Y
    Y’=β−X
    の計算式により変換を行う
    操作装置。
  3. 請求項2に記載の操作装置であって、
    前記第1の操作入力部は、前記検出部とともに1以上のキー操作部を有し、
    前記姿勢が判定されたとき、前記キー操作部の操作の検出を停止状態にする制御部をさらに具備する
    操作装置。
  4. 請求項3に記載の操作装置であって、
    前記制御部は、前記検出部から情報が出力されているとき、前記姿勢の判定を停止状態にする
    操作装置。
  5. 請求項4に記載の操作装置であって、
    前記制御部は、前記第2の操作入力部が操作されているとき、前記姿勢の判定を停止状態にする
    操作装置。
  6. 請求項5に記載の操作装置であって、
    前記第1の面及び前記第2の面のいずれか一方の正面側を撮影可能な撮像部をさらに具備し、
    前記判定部は、前記撮像部により撮像された画像をもとに前記姿勢を判定する
    操作装置。
  7. 請求項1に記載の操作装置であって、
    前記検出部は、前記座標検出空間に対してユーザにより指示された座標を検出し、
    前記変換部は、
    前記座標検出部の座標系で得た検出座標を(X,Y)、前記第2の面側から前記空間を透視した座標系での検出座標を(X’,Y’)、前記座標検出部の検出空間のY軸方向の長さをαとして、
    X’=α−X
    Y’=Y
    の計算式により変換を行う
    操作装置。
  8. 請求項1に記載の操作装置であって、
    前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、
    前記変換部は、
    前記座標検出部により検出された前記移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
    x’=−y
    y’=−x
    の計算式により変換を行う
    操作装置。
  9. 請求項1に記載の操作装置であって、
    前記検出部は、前記座標検出空間に対するユーザの操作による移動情報を検出し、
    前記変換部は、
    前記座標検出部の座標系で得た移動情報を(x,y)、前記第2の面側から前記座標検出空間を透視した座標系での移動情報を(x’,y’)として、
    x’=−x
    y’=y
    の計算式により変換を行う
    操作装置。
  10. 所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部が設けられた第1の面と、第2の操作入力部が設けられ、前記第1の面に表裏対向する第2の面を有する筐体の、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定し、
    前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する
    操作装置の情報処理方法。
  11. 表裏対向する2つの面を第1の面及び第2の面として有する筐体と、
    前記第1の面に設けられ、当該第1の面上の所定の座標検出空間に対するユーザの操作の検出を行う検出部を含む第1の操作入力部と、
    前記第2の面に設けられた第2の操作入力部と、
    を具備する操作装置の、前記第2の面側から前記検出部の前記座標検出空間に対するユーザの操作が行われるときの前記筐体の姿勢を判定する判定部と、
    前記姿勢が判定されたとき、前記検出部により検出された情報を、前記第2の面側から前記座標検出空間を透視した座標系の情報に変換する変換部と
    を具備する情報処理装置。
JP2011189439A 2011-08-31 2011-08-31 操作装置、その情報処理方法及び情報処理装置 Active JP5891659B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2011189439A JP5891659B2 (ja) 2011-08-31 2011-08-31 操作装置、その情報処理方法及び情報処理装置
RU2014106485A RU2621183C2 (ru) 2011-08-31 2012-08-24 Устройство оперирования, способ обработки информации в нем и устройство обработки информации
BR112014004124A BR112014004124A2 (pt) 2011-08-31 2012-08-24 aparelho de operação, método de processamento de informação para um aparelho de operação, e, aparelho de processamento de informação
PCT/JP2012/005311 WO2013031158A1 (ja) 2011-08-31 2012-08-24 操作装置、その情報処理方法及び情報処理装置
US14/238,642 US8830406B2 (en) 2011-08-31 2012-08-24 Operation apparatus, information processing method therefor, and information processing apparatus
CN201280040767.6A CN103765365B (zh) 2011-08-31 2012-08-24 操作装置、其信息处理方法和信息处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011189439A JP5891659B2 (ja) 2011-08-31 2011-08-31 操作装置、その情報処理方法及び情報処理装置

Publications (3)

Publication Number Publication Date
JP2013050907A true JP2013050907A (ja) 2013-03-14
JP2013050907A5 JP2013050907A5 (ja) 2014-10-02
JP5891659B2 JP5891659B2 (ja) 2016-03-23

Family

ID=47755688

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011189439A Active JP5891659B2 (ja) 2011-08-31 2011-08-31 操作装置、その情報処理方法及び情報処理装置

Country Status (6)

Country Link
US (1) US8830406B2 (ja)
JP (1) JP5891659B2 (ja)
CN (1) CN103765365B (ja)
BR (1) BR112014004124A2 (ja)
RU (1) RU2621183C2 (ja)
WO (1) WO2013031158A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016187159A (ja) * 2015-03-27 2016-10-27 パナソニックIpマネジメント株式会社 遠隔制御システム及び電子機器

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9779710B2 (en) * 2015-04-17 2017-10-03 Samsung Electronics Co., Ltd. Electronic apparatus and control method thereof
US9826187B2 (en) * 2015-08-25 2017-11-21 Echostar Technologies L.L.C. Combined absolute/relative touchpad navigation
US9781468B2 (en) 2015-08-25 2017-10-03 Echostar Technologies L.L.C. Dynamic scaling of touchpad/UI grid size relationship within a user interface

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04148412A (ja) * 1990-10-12 1992-05-21 Sharp Corp タッチパネルを有する電子入力装置
JP2001051799A (ja) * 1999-05-28 2001-02-23 Sony Corp 表示装置及びこれを使用したカメラ
WO2005010740A1 (ja) * 2003-07-28 2005-02-03 Nec Corporation 携帯情報端末
JP2009187290A (ja) * 2008-02-06 2009-08-20 Yamaha Corp タッチパネル付制御装置およびプログラム
JP2011095228A (ja) * 2009-11-02 2011-05-12 Sony Computer Entertainment Inc 操作入力装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0689634A (ja) 1992-09-08 1994-03-29 Sony Corp 入力装置
EP2107796B1 (en) 1999-05-28 2016-11-16 Sony Corporation Image pick-up apparatus
JP2001147775A (ja) * 1999-11-24 2001-05-29 Casio Comput Co Ltd 携帯端末装置及びそのプログラムを記憶した記憶媒体
JP2002077357A (ja) * 2000-06-13 2002-03-15 Matsushita Electric Ind Co Ltd 電子機器
JP3852368B2 (ja) * 2002-05-16 2006-11-29 ソニー株式会社 入力方法及びデータ処理装置
US7259710B2 (en) * 2002-08-07 2007-08-21 Canon Information Systems Research Australia Pty Ltd User input device
JP2008077845A (ja) * 2006-09-19 2008-04-03 Funai Electric Co Ltd リモートコントローラ
US20100277420A1 (en) * 2009-04-30 2010-11-04 Motorola, Inc. Hand Held Electronic Device and Method of Performing a Dual Sided Gesture
JP2011034294A (ja) 2009-07-31 2011-02-17 Sony Corp 情報処理装置、操作端末、情報処理システムおよび情報処理システムによる情報処理方法
KR101275314B1 (ko) * 2011-05-11 2013-06-17 도시바삼성스토리지테크놀러지코리아 주식회사 리모트 컨트롤러와, 이를 이용한 제어 방법 및 제어 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04148412A (ja) * 1990-10-12 1992-05-21 Sharp Corp タッチパネルを有する電子入力装置
JP2001051799A (ja) * 1999-05-28 2001-02-23 Sony Corp 表示装置及びこれを使用したカメラ
WO2005010740A1 (ja) * 2003-07-28 2005-02-03 Nec Corporation 携帯情報端末
JP2009187290A (ja) * 2008-02-06 2009-08-20 Yamaha Corp タッチパネル付制御装置およびプログラム
JP2011095228A (ja) * 2009-11-02 2011-05-12 Sony Computer Entertainment Inc 操作入力装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016187159A (ja) * 2015-03-27 2016-10-27 パナソニックIpマネジメント株式会社 遠隔制御システム及び電子機器

Also Published As

Publication number Publication date
US8830406B2 (en) 2014-09-09
RU2014106485A (ru) 2015-08-27
US20140192269A1 (en) 2014-07-10
CN103765365A (zh) 2014-04-30
WO2013031158A1 (ja) 2013-03-07
JP5891659B2 (ja) 2016-03-23
CN103765365B (zh) 2017-10-13
BR112014004124A2 (pt) 2017-04-04
RU2621183C2 (ru) 2017-05-31

Similar Documents

Publication Publication Date Title
US9414125B2 (en) Remote control device
US10326866B2 (en) Electronic device and method for controlling the electronic device thereof
EP3105649B1 (en) User terminal device and displaying method thereof
US20190339740A1 (en) User terminal device and displaying method thereof
US8689145B2 (en) 3D remote control system employing absolute and relative position detection
KR101711828B1 (ko) 영상표시장치 및 그 동작방법
EP2677741A1 (en) Remote control apparatus and control method thereof
US20130106700A1 (en) Electronic apparatus and input method
US20140344918A1 (en) Method and electronic device for providing security
CN107801075A (zh) 图像显示设备及其操作方法
US20060220902A1 (en) Remote-control system, remote controller, remote-control method, information-processing device, information-processing method, and program
KR20170124811A (ko) 영상 표시 장치 및 그 동작방법
JP5891659B2 (ja) 操作装置、その情報処理方法及び情報処理装置
US9280211B2 (en) Remote controller
KR20150029254A (ko) 전자장치 및 전자장치의 동작방법
US20130201157A1 (en) User interface device and method of providing user interface
JP2016071558A (ja) 表示制御装置、制御方法、制御プログラム、および記録媒体
CN111176522B (zh) 一种解锁方法及电子设备
KR20170063197A (ko) 전자 장치, 보조 장치 및 전자 장치의 동작 방법
JP5937715B2 (ja) 画像提供機器、制御方法、表示装置、およびテレビジョン受像機
JP7210153B2 (ja) 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
KR101424562B1 (ko) 공간 인식 장치, 이의 동작 방법 및 이를 포함하는 시스템
KR20130123679A (ko) 화상회의장치, 및 그 동작방법
WO2014157360A1 (ja) 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140818

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140818

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150622

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151027

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160126

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160208

R151 Written notification of patent or utility model registration

Ref document number: 5891659

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250