JP2022118367A - Portable terminal, display method and display program - Google Patents
Portable terminal, display method and display program Download PDFInfo
- Publication number
- JP2022118367A JP2022118367A JP2021014823A JP2021014823A JP2022118367A JP 2022118367 A JP2022118367 A JP 2022118367A JP 2021014823 A JP2021014823 A JP 2021014823A JP 2021014823 A JP2021014823 A JP 2021014823A JP 2022118367 A JP2022118367 A JP 2022118367A
- Authority
- JP
- Japan
- Prior art keywords
- screen
- display
- gesture motion
- displayed
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 13
- 238000012545 processing Methods 0.000 claims abstract description 17
- 230000008859 change Effects 0.000 claims abstract description 12
- 230000009471 action Effects 0.000 claims abstract description 11
- 230000033001 locomotion Effects 0.000 claims description 54
- 238000001514 detection method Methods 0.000 claims description 14
- 238000012544 monitoring process Methods 0.000 claims description 13
- 230000004044 response Effects 0.000 claims description 11
- 238000004891 communication Methods 0.000 claims description 9
- 230000007704 transition Effects 0.000 abstract description 24
- 230000001133 acceleration Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
- G06F3/1203—Improving or facilitating administration, e.g. print management
- G06F3/1207—Improving or facilitating administration, e.g. print management resulting in the user being informed about print result after a job submission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1229—Printer resources management or printer maintenance, e.g. device status, power levels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1259—Print job monitoring, e.g. job status
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
- G06F3/1292—Mobile client, e.g. wireless printing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
- G06F3/1203—Improving or facilitating administration, e.g. print management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
Description
本発明は、携帯端末、表示方法、表示プログラムに関する。 The present invention relates to mobile terminals, display methods, and display programs.
従来、スマートフォン等の操作において、タッチパネルへのタッチ操作以外に、利用者がスマートフォンをシェイクする等のジェスチャーによって利用者の指示を受け付けて画面を遷移させる構成が知られている(例えば特許文献1、2)。
Conventionally, in the operation of a smartphone or the like, in addition to a touch operation on a touch panel, a configuration is known in which a user's instruction is accepted by a gesture such as a user shaking the smartphone and the screen is changed (for example,
工場等では利用者は手袋を装着して作業することが多い。手袋を装着していると、利用者は携帯端末のタッチパネルに対するタッチ操作で画面を遷移させることができない。 Users often work in factories or the like while wearing gloves. When wearing gloves, the user cannot switch screens by touch operations on the touch panel of the mobile terminal.
上記目的を達成するための携帯端末は、監視対象機器の稼働情報を取得する通信部と、表示部と、携帯端末の姿勢変化を伴うジェスチャー動作を検出する検出部と、稼働情報の内容に応じたオブジェクトを含む第1画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第1画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させる処理部と、を備え、稼働情報が異なれば第1画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面が表示される。 A mobile terminal for achieving the above object includes a communication unit that acquires operation information of a device to be monitored, a display unit, a detection unit that detects a gesture movement that accompanies a posture change of the mobile terminal, and a When a gesture motion is detected while the first screen including the object is displayed on the display unit, the display unit displays a screen corresponding to the type of the gesture motion and the type of the object included in the first screen. and a processing unit that displays different operating information, different objects included in the first screen, and different screens are displayed even if the same gesture motion is detected.
上記目的を達成するための表示方法は、監視対象機器の稼働情報を取得し、携帯端末の姿勢変化を伴うジェスチャー動作を検出し、稼働情報の内容に応じたオブジェクトを含む第1画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第1画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させる、ことを含み、稼働情報が異なれば第1画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面を表示させる。 A display method for achieving the above object is to acquire operation information of a device to be monitored, detect a gesture movement that accompanies a change in posture of a mobile terminal, and display a first screen containing an object corresponding to the contents of the operation information. operating information, including displaying on the display unit a screen corresponding to the type of gesture motion and the type of object included in the first screen when a gesture motion is detected in the state displayed in are different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.
上記目的を達成するための表示プログラムは、監視対象機器の稼働情報を取得するステップと、携帯端末の姿勢変化を伴うジェスチャー動作を検出するステップと、稼働情報の内容に応じたオブジェクトを含む第1画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第1画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させるステップであって、稼働情報が異なれば第1画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面を表示させるステップと、を携帯端末に実行させる。 A display program for achieving the above object comprises the steps of acquiring operation information of a device to be monitored; a step of displaying on the display unit a screen corresponding to the type of the gesture motion and the type of object included in the first screen when the gesture motion is detected while the screen is being displayed on the display unit; and causing the mobile terminal to display a different screen even if the object included in the first screen is different if the operation information is different, and the same gesture motion is detected.
ここでは、下記の順序に従って本発明の実施の形態について説明する。
(1)携帯端末の構成:
(2)メイン画面表示処理:
(3)他の実施形態:
Here, embodiments of the present invention will be described according to the following order.
(1) Mobile terminal configuration:
(2) Main screen display processing:
(3) Other embodiments:
(1)携帯端末の構成:
図1は、本発明の実施形態にかかる携帯端末としてのスマートフォン10の構成を示すブロック図である。スマートフォン10は、プロセッサー20と、不揮発性メモリー30と、通信部40と、タッチパネルディスプレイ50と、加速度センサー60と、ジャイロセンサー70と、を備えている。プロセッサー20は、図示しないCPU、RAM、ROM等を備え、不揮発性メモリー30に記録された種々のプログラムを実行することができる。通信部40は、他の装置とLTE(登録商標)やWi-Fi(登録商標)等の各種の通信規格に従って通信するための通信インターフェース回路を含む。プロセッサー20は、通信部40を介して監視対象機器の稼働情報を収集するサーバー(不図示)と通信可能である。
(1) Mobile terminal configuration:
FIG. 1 is a block diagram showing the configuration of a
本実施形態において、スマートフォン10は、例えばプリンターが複数台設置されている印刷工場にて、監視対象機器としてのプリンターの稼働情報を作業者(利用者とも呼ぶ)が閲覧するために利用される。上述のサーバー(不図示)は、各プリンターから収集した稼働情報を蓄積し、稼働情報をスマートフォン10からの要求に応じてスマートフォン10に送信するように構成されている。
In the present embodiment, the
稼働情報は、監視対象機器の稼働状況を示す情報であり、本実施形態においては例えば、プリンター群の当日の稼働実績(印刷ジョブ件数、印刷面積合計、稼働率等)、エラーが発生しているプリンターの情報、警告が発生しているプリンターの情報等が含まれる。 The operation information is information indicating the operation status of the monitoring target device. It includes printer information, printer information for which a warning has occurred, and so on.
タッチパネルディスプレイ50は、タッチ検出パネルと当該パネルに重ねられた表示パネル(表示部)とを備える。例えばスマートフォンにおいて用いられる静電容量方式タッチパネルである。プロセッサー20は、タッチパネルディスプレイ50の表示パネルに各種の情報を表示させることができる。また、プロセッサー20は、タッチ検出パネルに対するタッチ操作が検出されると、タッチ位置等を示す情報をプロセッサー20に受け渡す。プロセッサー20は、表示パネルに表示中のオブジェクトの位置とタッチ位置とに基づいて、利用者の操作を特定し、当該操作に応じた処理を実行する。
The
スマートフォン10は、手袋を着用した状態でも操作可能なように構成されている。加速度センサー60は、3軸加速度センサーであり、スマートフォン10において規定された直交3軸の各方向における加速度を測定し、出力する。プロセッサー20は、加速度センサー60の出力に基づいて、スマートフォン10の移動方向等を検出することができる。ジャイロセンサー70は、3軸ジャイロセンサーであり、スマートフォン10において規定された直交3軸の各軸を基準とした角速度を測定し、出力する。プロセッサー20は、ジャイロセンサー70の出力に基づいて、スマートフォン10の回転を検出することができる。このように、加速度センサー60およびジャイロセンサー70は、スマートフォン10の姿勢変化を伴うジェスチャー動作を検出する検出部として機能する。
The
本実施形態において、携帯端末の姿勢変化を伴うジェスチャー動作のうち、右への傾斜、左への傾斜、左への回転、右への回転、前への傾斜、後ろへの傾斜を、検出対象のジェスチャー動作とする。各ジェスチャー動作は例えば次のように規定される。タッチパネルディスプレイ50の画面における上下方向に延び左右方向の中央を通る軸をy軸とし、左右方向に延び上下方向の中央を通る軸をx軸とし、x軸およびy軸の交点を通りxy平面と直交する軸をz軸と規定する。右への傾斜は、xy平面においてy軸を利用者から見て時計回りに既定角度以上回転させた後、元の姿勢に戻すジェスチャーである。左への傾斜は、xy平面においてy軸を反時計回りに既定角度以上回転させた後、元に姿勢に戻すジェスチャーである。本実施形態において、「右への傾斜」と「左への傾斜」とでは、「右への傾斜」の方が利用者にとって行いやすい動作である見なされている。
In this embodiment, among the gesture motions that accompany posture changes of the mobile terminal, tilting to the right, tilting to the left, turning to the left, turning to the right, tilting forward, and tilting backward are detected. gesture motion. Each gesture action is defined as follows, for example. An axis that extends vertically and passes through the center in the horizontal direction of the screen of the
左への回転は、タッチパネルディスプレイ50の表示面の左端を利用者から遠ざけ右端を利用者側に近づけるように回転させた後、元の姿勢に戻すジェスチャーである。右への回転は、タッチパネルディスプレイ50の表示面の右端を利用者から遠ざけ左端を利用者側に近づけるように回転させた後、元の姿勢に戻すジェスチャーである。
Rotation to the left is a gesture in which the left end of the display surface of
前への傾斜は、タッチパネルディスプレイ50の表示面の上端を利用者側に近づけ下端を遠ざけるように傾斜させた後、元の姿勢に戻すジェスチャーである。後ろへの傾斜は、表示面の上端を利用者から遠ざけ下端を近づけるように傾斜させた後、元の姿勢に戻すジェスチャーである。プロセッサー20は、加速度センサー60とジャイロセンサー70の出力に基づいて、これらのジェスチャーを検出することができる。
The forward tilt is a gesture in which the upper end of the display surface of
プロセッサー20は、監視対象機器の稼働情報を利用者に提供するアプリケーションプログラムを実行することができる。利用者が監視対象プリンター情報を提供するアプリケーションプログラムを起動する操作を行うと、プロセッサー20はタッチパネルディスプレイ50にまずホーム画面を表示する。図2のG10は、ホーム画面の一例を示す図である。ホーム画面G10には、印刷ジョブ件数を示すオブジェクトob7、印刷面積を示すオブジェクトob8、稼働率を示すオブジェクトob9、さらに、オブジェクトob1と、お知らせオブジェクトob2、オブジェクトob5、オブジェクトob6、オブジェクトob10が含まれる。このうち、ホーム画面から他の画面に遷移させるためのオブジェクトは、オブジェクトob1、ob5、ob6である。
The
例えば、オブジェクトob1は、プリンター稼働状況画面G11に遷移するためのオブジェクトであり、オブジェクトob1へのタッチ操作を検出すると、プロセッサー20はホーム画面G10に変わってプリンター稼働状況画面G11をタッチパネルディスプレイ50に表示する。また、オブジェクトob5はタッチ操作によってプリンター画面(不図示)に遷移するためのオブジェクトであり、オブジェクトob6はタッチ操作によってレポート画面(不図示)に遷移するためのオブジェクトである。
For example, the object ob1 is an object for transitioning to the printer operation status screen G11, and when a touch operation to the object ob1 is detected, the
お知らせオブジェクトob2は、いずれかのプリンターに各種のイベントが発生している場合に、そのイベントを示すオブジェクトを表示する。いずれのプリンターにもイベントが発生していない場合、図2のホーム画面G10に示すようにお知らせオブジェクトob2は空欄である。 Notification object ob2 displays an object indicating an event when various events occur in any printer. If no event has occurred in any printer, the notification object ob2 is blank as shown in the home screen G10 of FIG.
イベントは、エラーや警告を含む。エラーは、監視対象のプリンターの稼働停止を示す第1イベントに相当する。警告は、エラーよりも緊急性が低い第2イベントに相当する。警告が発生しているプリンターは稼働停止にはまだ至っていない。エラーや警告等のイベントが発生している場合、図3のホーム画面G1に示すように、お知らせオブジェクトob2内にエラーの発生を示すオブジェクトob3や警告の発生を示すオブジェクトob4が表示される。オブジェクトob3内に表示されている数値は、エラーが発生しているプリンターの台数を示している。また、オブジェクトob4内に表示されている数値は、警告が発生しているプリンターの台数を示している。お知らせオブジェクトob2は、稼働情報の内容に応じたオブジェクトに相当し、お知らせオブジェクトob2を含むホーム画面(G10、G1等)は、本実施形態において第1画面に相当する。 Events include errors and warnings. The error corresponds to the first event indicating that the monitored printer stops working. A warning corresponds to a secondary event that is less urgent than an error. Printers with warnings have not yet stopped operating. When an event such as an error or a warning occurs, an object ob3 indicating the occurrence of an error and an object ob4 indicating the occurrence of a warning are displayed in the notification object ob2, as shown in the home screen G1 of FIG. A numerical value displayed in the object ob3 indicates the number of printers in which an error has occurred. Also, the numerical value displayed in the object ob4 indicates the number of printers for which the warning has occurred. The notification object ob2 corresponds to an object corresponding to the contents of the operation information, and the home screen (G10, G1, etc.) including the notification object ob2 corresponds to the first screen in this embodiment.
このようなお知らせオブジェクトob2を含むホーム画面(G1、G10等)がタッチパネルディスプレイ50に表示されている状態で、スマートフォン10の姿勢変化を伴うジェスチャー動作が検出された場合、プロセッサー20は、当該ジェスチャー動作の種類とホーム画面に含まれているオブジェクトの種類と、に応じた画面をタッチパネルディスプレイ50に表示させる処理部として機能する。
In a state where the home screen (G1, G10, etc.) including the notification object ob2 is displayed on the
上述したように、稼働情報が異なれば、すなわち、エラーや警告が発生しているか否かやその発生数等が異なれば、お知らせオブジェクトob2内に表示される内容が異なる。このようなホーム画面を表示している場合に、プロセッサー20は、特定の条件を満たす場合と満たさない場合とで、同じジェスチャー動作が検出されても異なる画面を表示するように構成されている。プロセッサー20は、プリンターに生じたイベントを示すオブジェクトがホーム画面に含まれている場合に、特定の条件を満たしたと判定する。本実施形態において、特定の条件は、監視対象のプリンター群に、エラーまたは警告が発生していることである。
As described above, if the operating information is different, that is, if errors or warnings are generated or not, and if the number of occurrences of errors or warnings is different, the contents displayed in the notification object ob2 will be different. When such a home screen is displayed, the
プロセッサー20は、特定の条件を満たさない場合、第1ジェスチャー動作が検出されたことに応じて、第2画面を表示させ、特定の条件を満たす場合、第1ジェスチャー動作が検出されたことに応じて、第2画面とは異なる第3画面を表示させる。本実施形態において、第1ジェスチャー動作は右への傾斜、第2画面はプリンター稼働状況画面G11、第3画面はエラーまたは警告が発生しているプリンター個別の画面であってエラーまたは警告の詳細を通知するための詳細画面である。図2のホーム画面G10は、特定の条件を満たさない場合、すなわち、エラーまたは警告が発生していない場合に表示されるホーム画面である。このようなホーム画面G10が表示されている状態で、右への傾斜(第1ジェスチャー動作)を検出すると、プロセッサー20は、ホーム画面(第1画面)に変わって、プリンター稼働状況画面G11(第2画面)を表示する。なお、ホーム画面G10が表示されている状態で右への傾斜を検出した場合に表示されるプリンター稼働状況画面G11は、オブジェクトob1へのタッチ操作が検出された場合に遷移する画面と同一の画面である。
The
ホーム画面G10においては、オブジェクトob1とオブジェクトob5とオブジェクトob6は、他画面に遷移するためのオブジェクトであるが、本実施形態においては、そのうち、オブジェクトob1に対応付けられたプリンター稼働状況画面G11への遷移が、利用者が行いやすいジェスチャーである右への傾斜に割り当てられている。なお、ホーム画面(G10やG1等)が表示されている状態で、右への回転が検出されると、プロセッサー20は、プリンター画面(不図示)に遷移させ、左への回転が検出されると、レポート画面(不図示)に遷移させる。このように左右いずれかへの回転ジェスチャーは、ホーム画面とプリンター画面とレポート画面を回転方向に応じた順に切り替える処理が割り当てられている。なお、右への回転が検出された場合に遷移するプリンター画面(不図示)は、オブジェクトob5へのタッチ操作が検出された場合に遷移する画面でもある。また、左への回転が検出された場合に遷移するレポート画面(不図示)は、オブジェクトob6へのタッチ操作が検出された場合に遷移する画面でもある。
In the home screen G10, the objects ob1, ob5, and ob6 are objects for transitioning to other screens. The transition is assigned to lean to the right, which is a user-friendly gesture. When rotation to the right is detected while the home screen (G10, G1, etc.) is being displayed, the
特定の条件を満たす場合、すなわち、図3のホーム画面G1のように、エラーや警告を示すオブジェクトob3,ob4が表示されている状態で、右への傾斜(第1ジェスチャー動作)を1回検出した場合、図3のホーム画面G2のように、プロセッサー20は、緊急性が警告より高いイベントであるエラーが発生しているプリンターのリストli3を表示する。ホーム画面G2のようにリストli3が表示された状態で再度右への傾斜を1回検出すると、プロセッサー20は、リストli3に含まれるプリンターのうちの1台のプリンターの個別の詳細画面を表示する。図3の例の場合、エラーが発生しているプリンター2台のうちの1台であるprinter001が選択され、printer001のエラーの詳細画面G3に遷移する。
When a specific condition is satisfied, that is, when objects ob3 and ob4 indicating errors and warnings are displayed as in the home screen G1 of FIG. 3, a tilt to the right (first gesture motion) is detected once. In this case, the
図3のprinter001の詳細画面G3が表示されている状態で、右への傾斜が検出されると、プロセッサー20は、図4に示すホーム画面G4に遷移させる。ホーム画面G4では、プロセッサー20は、エラーが発生している2台のプリンターのうち2番目のプリンターであるprinter002を選択した状態とする。従って、ホーム画面G4が表示されprinter002が選択されている状態で、右への傾斜が検出されると、プロセッサー20はprinter002のエラーの詳細画面G5に遷移させる。この結果、エラーが発生している2台のプリンターの詳細画面は表示済みとなる。詳細画面G5が表示されている状態で、右への傾斜が検出されると、プロセッサー20は、ホーム画面G6に遷移させる。ホーム画面G6では、今度は、プロセッサー20は、エラーが発生しているプリンターのリストli3を非表示とし、緊急性がエラーよりも低いイベントである警告が発生しているプリンターのリストli4を表示する。またプロセッサー20は、警告が発生している15台のうちの1番目のプリンターであるprinter003を選択した状態とする。このようにして、エラーや警告が発生しているプリンターが複数ある場合、緊急性の高い方から順に(緊急性が同レベルのイベントについては表示順に)詳細画面(第3画面)が表示される。なお、リスト内のどのプリンターが次の右への傾斜によって詳細画面が表示される対象であるかを示すカーソル等は、本実施形態においては表示されない(リストli3やリストli4のうち選択中のプリンターはプロセッサー20において内部的に管理される)。
When a tilt to the right is detected while the detailed screen G3 of printer001 in FIG. 3 is being displayed, the
なおプロセッサー20は、特定の条件を満たす場合、すなわちプリンターにエラーや警告が発生している場合、右への傾斜(第1ジェスチャー動作)とは異なるジェスチャーである左への傾斜(第2ジェスチャー動作)が検出されたことに応じて、プリンター稼働状況画面G11(第2画面)に遷移させる。
Note that when a specific condition is satisfied, that is, when an error or warning occurs in the printer, the
このように、同じ「右への傾斜」というジェスチャーであっても、エラーや警告が発生している状態と、発生していない状態とでは、ホーム画面から遷移した遷移後の画面が相違する。本実施形態において、「右への傾斜」は利用者にとって「左への傾斜」より行いやすいジェスチャーである。ホーム画面内において利用者にとって行いやすいジェスチャーであって手袋を着用していても可能なジェスチャー動作が、ホーム画面における優先度の高いオブジェクト(稼働情報の内容に応じて異なり得る)をタッチした場合と同じ動作となるように割り付けられている。そのため、利用者は、手袋を着用していたとしても、緊急性の高い情報を容易な操作で閲覧することが可能である。特に、工場において手袋を着用したまま作業をするとき、あらかじめスマートフォンの監視アプリケーションを起動しておき、スマートフォンのロックは顔認証等のタッチ操作以外の方法で解除し、上述の通りジェスチャーによって画面を遷移させることができると、エラーや警告が発生する度に手袋を外してタッチ操作をすることなく、緊急性の高い情報を閲覧することができる。 In this way, even with the same "tilt to the right" gesture, the screen after the transition from the home screen is different between the state in which an error or warning has occurred and the state in which it has not occurred. In this embodiment, "tilt to the right" is a gesture that is easier for the user to perform than "tilt to the left". Gesture actions that are easy for the user to perform on the home screen and that can be performed even when wearing gloves are the case of touching a high-priority object on the home screen (which may differ depending on the content of the operation information). They are assigned to have the same operation. Therefore, even if the user is wearing gloves, it is possible to browse highly urgent information with a simple operation. In particular, when working in a factory while wearing gloves, start the smartphone monitoring application in advance, unlock the smartphone by a method other than touch operation such as face authentication, and transition the screen using gestures as described above. If it can be enabled, highly urgent information can be browsed without taking off gloves and performing a touch operation every time an error or warning occurs.
なお、例えば、図4のリストli4のように、画面に収まりきらない項目が存在する場合、前への傾斜あるいは後ろへの傾斜が検出されると、プロセッサー20は、画面に表示されている内容を上方向または下方向にスクロールして表示範囲を変化させる。 For example, if there are items that do not fit on the screen, such as the list li4 in FIG. scroll up or down to change the display range.
(2)ホーム画面表示処理:
図5はホーム画面表示処理を示すフローチャートである。図5の処理は、ホーム画面の表示要求がある場合に、開始される。ホーム画面の表示要求がある場合とは、監視対象プリンター情報を提供するアプリケーションプログラムを起動する場合や、起動後のホーム画面表示状態において表示内容を更新する場合や、他画面からホーム画面に遷移する場合などである。
(2) Home screen display processing:
FIG. 5 is a flowchart showing home screen display processing. The processing of FIG. 5 is started when there is a request to display the home screen. When there is a request to display the home screen, when an application program that provides monitored printer information is started, when the display contents are updated while the home screen is being displayed after startup, or when transitioning from another screen to the home screen. and so on.
ホーム画面表示処理が開始されると、プロセッサー20は、監視対象機器の稼働情報を取得する(ステップS100)。すなわち、プロセッサー20は、通信部40を介して、サーバーに稼働情報を要求し、要求に応じてサーバーから送信された稼働情報を取得する。
When the home screen display process is started, the
続いて、プロセッサー20は、稼働情報に基づいてホーム画面(第1画面)を表示する(ステップS105)。すなわち、プロセッサー20は、ホーム画面を構成する各オブジェクトの画像データを予め決められた位置に表示する。各オブジェクトの内容は、稼働情報の内容が反映される。例えば、印刷ジョブ件数を示す数値には稼働情報に含まれる印刷ジョブ件数の値が反映され、稼働率を示す数値には稼働情報に含まれる稼働率の値が反映される。また、プロセッサー20は、取得した稼働情報にエラーや警告が発生していることを示す情報が含まれている場合、お知らせオブジェクトob2内にオブジェクトob3やオブジェクトob4を表示する。オブジェクトob3やオブジェクトob4に関して、ホーム画面の表示要求に応じてホーム画面を表示する場合、プロセッサー20は、図3に示すように、まず、リストを閉じた状態で表示する。なお、稼働情報にエラーの情報、警告の情報のいずれも含まれない場合、プロセッサー20は、お知らせオブジェクトob2を空欄で表示する。
Subsequently, the
続いて、プロセッサー20は、タッチ操作有りか否かを判定する(ステップS110)。すなわちプロセッサー20は、タッチパネルディスプレイ50に対するタッチ操作が検出されたか否かを判定する。
Subsequently, the
ステップS110において、タッチ操作有りと判定された場合、プロセッサー20は、他画面へ遷移するためのオブジェクトへのタッチ操作であるか否かを判定し(ステップS111)、他画面遷移オブジェクトへのタッチ操作である場合、他画面に遷移させる(ステップS112)。例えば、ホーム画面G10(図2参照)のオブジェクトob1にタッチ操作がなされた場合、プロセッサー20は、プリンター稼働状況画面G11に遷移させる。ステップS111にて他画面遷移オブジェクトへのタッチ操作であると判定されなかった場合、プロセッサー20は、タッチされたオブジェクトに応じた表示を行う(ステップS115)。例えば、図3のホーム画面G1においてオブジェクトob3はリストが非表示の状態である。この状態において、オブジェクトob3にタッチ操作がなされた場合、図3のホーム画面G2に示すようにリストli3を表示させる。
When it is determined in step S110 that there is a touch operation, the
ステップS110において、タッチ操作有りと判定されなかった場合、プロセッサー20は、携帯端末の姿勢変化を伴うジェスチャー動作有りか否かを判定する(ステップS120)。ステップS120において、当該ジェスチャー動作有りと判定されなかった場合、プロセッサー20はステップS110に戻る。
If it is not determined in step S110 that there is a touch operation, the
ステップS120において、姿勢変化を伴うジェスチャー動作有りと判定された場合、プロセッサー20は、ジェスチャー動作の種類に応じた処理を実行する。検出されたジェスチャー動作が右への傾斜である場合(ステップS125:Y)、プロセッサー20は、イベント有りか否かを判定する(ステップS130)。すなわち、特定条件を満たすか否かが判定される。具体的に、プロセッサー20は、稼働情報を参照し、イベントが発生しているか否かを判定する。
In step S120, when it is determined that there is a gesture motion accompanied by a posture change, the
ステップS130においてイベント有りと判定されなかった場合、すなわち特定の条件を満たさない場合、プロセッサー20は、プリンター稼働状況画面G11に遷移させ(ステップS150)、ホーム画面表示処理を終了する。この結果、ホーム画面G10に変わってプリンター稼働状況画面G11がタッチパネルディスプレイ50に表示される。ステップS130においてイベント有りと判定された場合、すなわち特定の条件を満たす場合、プロセッサー20は、リスト表示済みであるか否かを判定する(ステップS135)。リストは、エラーが発生しているプリンター一覧や警告が発生しているプリンター一覧である。ステップS135において、リスト表示済みであると判定されなかった場合、プロセッサー20はイベント発生プリンターのリストを表示させ(ステップS140)、ステップS110に戻る。
If it is determined in step S130 that there is no event, that is, if the specific condition is not met, the
ステップS135においてリスト表示済みであると判定された場合、プロセッサー20は、内部的に選択されているプリンターのイベントの詳細画面に遷移させ(ステップS145)、ホーム画面表示処理を終了する。イベントを示すオブジェクトであって緊急度の異なる複数のオブジェクトが含まれている場合、プロセッサー20は、「右への傾斜」が検出されたことに応じて、緊急性が高いイベントの詳細情報を示す詳細画面(第3画面)を表示させる。なおリストの中で内部的に選択されているプリンターは、「右への傾斜」ジェスチャー毎に変化する。
If it is determined in step S135 that the list has been displayed, the
検出されたジェスチャー動作が左への傾斜である場合(ステップS155:Y)、プロセッサー20は、イベント有りか否か、すなわち特定の条件を満たすか否かを判定する(ステップS160)。具体的に、プロセッサー20は、稼働情報を参照し、イベントが発生しているか否かを判定する。ステップS160においてイベント有りと判定された場合、すなわち特定の条件を満たす場合、プロセッサー20は、プリンター稼働状況画面に遷移させ(ステップS150)、ホーム画面表示処理を終了する。この結果、ホーム画面G10に変わってプリンター稼働状況画面G11がタッチパネルディスプレイ50に表示される。ステップS160においてイベント有りと判定されなかった場合、プロセッサー20はステップS100の処理に戻る。すなわち、イベント無しの状態で左への傾斜が行われても表示は変化しない。
If the detected gesture motion is tilting to the left (step S155: Y), the
検出されたジェスチャー動作が左右に回転である場合(ステップS165:Y)、プロセッサー20は、プリンター画面またはレポート画面に遷移させ(ステップS170)、ホーム画面表示処理を終了する。すなわち、プロセッサー20は、左に回転の場合にホーム画面に変わってレポート画面を表示させ、右に回転の場合にホーム画面に変わってプリンター画面を表示させる。検出されたジェスチャー動作が前後に傾斜の場合(ステップS175:Y)、プロセッサー20は、表示範囲をスクロールさせる(ステップS180)。検出されたジェスチャー動作が、右への傾斜、左への傾斜、左右回転、前後傾斜のいずれでもない場合、プロセッサー20はステップS110に戻る。
If the detected gesture motion is left/right rotation (step S165: Y), the
(3)他の実施形態:
以上の実施形態は本発明を実施するための一例であり、他にも種々の実施形態を採用可能である。例えば、携帯端末は、スマートフォン以外にも、タブレット、ノートPC、スマートウォッチ、スマートグラス等の様々な電子機器であってよい。また、監視対象機器はプリンターに限定されない。監視対象機器は、ロボット等、他の電子機器であってもよい。また、監視対象機器の稼働情報を収集するサーバーを介して携帯端末は稼働情報を取得できる構成であってもよいし、監視対象機器に携帯端末が直接問い合わせて稼働情報を取得する構成であってもよい。
(3) Other embodiments:
The above embodiment is an example for carrying out the present invention, and various other embodiments can be adopted. For example, mobile terminals may be various electronic devices other than smartphones, such as tablets, notebook PCs, smart watches, and smart glasses. In addition, devices to be monitored are not limited to printers. The monitored device may be another electronic device such as a robot. Further, the mobile terminal may be configured to acquire operation information via a server that collects the operation information of the monitoring target device, or may be configured such that the mobile terminal directly inquires of the monitoring target device and acquires the operation information. good too.
携帯端末の姿勢変化を伴うジェスチャー動作は、上記実施形態で採用した動作の他にも、様々な動作を採用可能である。例えば携帯端末を特定の方向に繰り返し振動させるシェイク動作が採用されてもよい。また、利用者が行いやすいジェスチャー動作や、行いやすさの順序について、上記実施形態の態様は一例であり、他にも様々な態様を採用可能である。また、利用者毎に設定可能であってもよい。 Various actions other than the actions used in the above-described embodiments can be adopted as the gesture action that accompanies the posture change of the mobile terminal. For example, a shake motion of repeatedly vibrating the mobile terminal in a specific direction may be adopted. In addition, regarding the gesture motions that are easy for the user to perform and the order of ease of execution, the aspect of the above-described embodiment is just an example, and various other aspects can be adopted. Also, it may be possible to set for each user.
稼働情報が異なれば第1画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても第1画面から遷移する画面が異なる構成において、ジェスチャー動作と当該ジェスチャー動作によって遷移する画面との対応付けを利用者に示すようにしてもよい。例えば、画面に表示されたオブジェクト内に、対応付けられたジェスチャー動作を示す文字や記号・アイコン等を表示するようにしてもよい。具体的に例えば、図2のホーム画面G10において、右への傾斜に応じてプリンター稼働状況画面G11に遷移するように構成されている場合、オブジェクトob1内に右への傾斜を示すアイコン等を表示してもよい。また、図3のホーム画面G2において左への傾斜に応じてプリンター稼働状況画面G11に遷移するように構成されている場合、オブジェクトob1内に左への傾斜を示すアイコン等を表示してもよい。また、図3のホーム画面G2や図4のホーム画面G4のリストli3や、ホーム画面G6のリストli4においても、選択状態にある項目と非選択状態の項目とを識別可能に表示してもよい。 If the operation information is different, the objects included in the first screen are different, and even if the same gesture motion is detected, the screen to be transitioned from the first screen is different. You may make it show to a user. For example, characters, symbols, icons, or the like indicating the associated gesture motion may be displayed in the object displayed on the screen. Specifically, for example, when the home screen G10 in FIG. 2 is configured to transition to the printer operation status screen G11 in accordance with the tilt to the right, an icon or the like indicating the tilt to the right is displayed in the object ob1. You may Further, when the home screen G2 in FIG. 3 is configured to transition to the printer operation status screen G11 in accordance with the tilt to the left, an icon or the like indicating the tilt to the left may be displayed in the object ob1. . Also, in the home screen G2 of FIG. 3, the list li3 of the home screen G4 of FIG. 4, and the list li4 of the home screen G6, the selected items and the non-selected items may be displayed so as to be identifiable. .
特定の条件は、同じジェスチャー動作に異なる処理を対応付けるか否かを切り替えるための条件であればよい。特定の条件は、監視対象機器に予め決められたイベントが生じたことであってもよいし、携帯端末に予め決められたイベントが発生したことであってもよいし、さらに利用者に通知すべき別のイベントが発生したことであってもよい。携帯端末でのイベントとしては例えば、携帯端末のバッテリー残量が基準以下になった場合とそうでない場合とで、優先的に利用者に通知すべき情報(遷移させる画面)が同じジェスチャー動作がなされた場合でも異なる構成を採用してもよい。 The specific condition may be a condition for switching whether or not to associate different processing with the same gesture motion. The specific condition may be that a predetermined event has occurred in the monitoring target device, that a predetermined event has occurred in the mobile terminal, or that the user is notified. It may also be that another event has occurred. As an event on a mobile terminal, for example, the same gesture operation is performed for the information that should be preferentially notified to the user (screen to be transitioned) depending on whether the remaining battery level of the mobile terminal is below the standard or not. A different configuration may be adopted even if the
監視対象機器に生じたイベントを示すオブジェクトが第1画面に含まれている場合に、特定の条件を満たしたと判定する構成を採用してもよいし、監視対象機器に生じたイベントが特定のイベントであった場合に特定の条件を満たしたと判定する構成を採用してもよい。 A configuration may be adopted in which it is determined that a specific condition is satisfied when an object indicating an event that has occurred in the monitoring target device is included in the first screen, or an event that has occurred in the monitoring target device is the specific event. A configuration may be adopted in which it is determined that a specific condition is satisfied when
イベントは監視対象機器の稼働停止を示す第1イベントと、当該第1イベントよりも緊急性が低い第2イベントの他に、さらに細分化され、緊急性を示す順位が対応付けられていてもよい。 The event may be further subdivided in addition to a first event indicating the operation stop of the monitoring target device and a second event having a lower urgency than the first event, and may be associated with an order indicating urgency. .
さらに、本発明のように、コンピューターが実行するプログラムや方法としても適用可能である。また、以上のようなシステム、プログラム、方法は、単独の装置として実現される場合もあれば、複数の装置が備える部品を利用して実現される場合もあり、各種の態様を含むものである。また、一部がソフトウェアであり一部がハードウェアであったりするなど、適宜、変更可能である。さらに、システムを制御するプログラムの記録媒体としても発明は成立する。むろん、そのプログラムの記録媒体は、磁気記録媒体であってもよいし半導体メモリーであってもよいし、今後開発されるいかなる記録媒体においても全く同様に考えることができる。 Furthermore, like the present invention, it can also be applied as a computer-executed program or method. In addition, the system, program, and method described above may be implemented as a single device or may be implemented using components provided in a plurality of devices, and include various modes. In addition, it can be changed as appropriate, such as a part of which is software and a part of which is hardware. Furthermore, the invention is established as a recording medium for a program for controlling the system. Of course, the program recording medium may be a magnetic recording medium, a semiconductor memory, or any other recording medium that will be developed in the future.
1…10…スマートフォン、20…プロセッサー、30 不揮発性メモリー、40…通信部、50…タッチパネルディスプレイ、60…加速度センサー、70…ジャイロセンサー
REFERENCE SIGNS
Claims (9)
表示部と、
携帯端末の姿勢変化を伴うジェスチャー動作を検出する検出部と、
前記稼働情報の内容に応じたオブジェクトを含む第1画面が前記表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第1画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させる処理部と、
を備え、
前記稼働情報が異なれば前記第1画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面が表示される、
携帯端末。 a communication unit that acquires operation information of a monitored device;
a display unit;
a detection unit that detects a gesture motion that accompanies a posture change of the mobile terminal;
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen and a processing unit that causes the display unit to display a screen corresponding to the type of
with
If the operation information is different, the objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.
mobile terminal.
前記ジェスチャー動作が検出されたことに応じて表示される画面は、前記第1画面内の既定のオブジェクトに対するタッチ操作が検出された場合に前記処理部が表示させる画面と同一である、
請求項1に記載の携帯端末。 The detection unit detects a touch operation on the display unit,
The screen displayed in response to the detection of the gesture action is the same as the screen displayed by the processing unit when a touch operation on a predetermined object in the first screen is detected.
The mobile terminal according to claim 1.
特定の条件を満たさない場合、第1ジェスチャー動作が検出されたことに応じて、第2画面を表示させ、
前記特定の条件を満たす場合、前記第1ジェスチャー動作が検出されたことに応じて、前記第2画面とは異なる第3画面を表示させる、
請求項1または請求項2に記載の携帯端末。 The processing unit is
if the specific condition is not satisfied, display the second screen in response to the detection of the first gesture motion;
When the specific condition is satisfied, displaying a third screen different from the second screen in response to the detection of the first gesture motion;
3. The portable terminal according to claim 1 or 2.
請求項3に記載の携帯端末。 The processing unit determines that the specific condition is satisfied when an object indicating an event that has occurred in the monitored device is included in the first screen.
The mobile terminal according to claim 3.
請求項4に記載の携帯端末。 When a plurality of objects indicating the event are included in the first screen, the processing unit may display the detailed information of the event with high urgency in response to detection of the first gesture motion. Display 3 screens,
The mobile terminal according to claim 4.
請求項5に記載の携帯端末。 The events include a first event indicating that the monitoring target device has stopped operating, and a second event that is less urgent than the first event.
The mobile terminal according to claim 5.
請求項3から請求項6のいずれか一項に記載の携帯端末。 The processing unit causes the second screen to be displayed in response to detection of a second gesture motion different from the first gesture motion even when the specific condition is satisfied.
The mobile terminal according to any one of claims 3 to 6.
携帯端末の姿勢変化を伴うジェスチャー動作を検出し、
前記稼働情報の内容に応じたオブジェクトを含む第1画面が表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第1画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させる、ことを含み、
前記稼働情報が異なれば前記第1画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面を表示させる、
表示方法。 Acquire the operation information of the monitoring target device,
Detects gesture movements that accompany posture changes of the mobile terminal,
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen are determined. and causing the display unit to display a screen corresponding to the type,
If the operation information is different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.
Display method.
携帯端末の姿勢変化を伴うジェスチャー動作を検出するステップと、
前記稼働情報の内容に応じたオブジェクトを含む第1画面が表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第1画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させるステップであって、前記稼働情報が異なれば前記第1画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面を表示させるステップと、
を携帯端末に実行させる表示プログラム。 a step of acquiring operation information of a monitored device;
a step of detecting a gesture motion that accompanies a posture change of the mobile terminal;
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen are determined. a step of displaying a screen corresponding to a type on the display unit, wherein if the operation information is different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed. a step;
A display program that causes a mobile terminal to execute
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021014823A JP2022118367A (en) | 2021-02-02 | 2021-02-02 | Portable terminal, display method and display program |
CN202210105881.8A CN114844981B (en) | 2021-02-02 | 2022-01-28 | Portable terminal, display method, and recording medium |
US17/649,412 US11947793B2 (en) | 2021-02-02 | 2022-01-31 | Portable terminal, display method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021014823A JP2022118367A (en) | 2021-02-02 | 2021-02-02 | Portable terminal, display method and display program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022118367A true JP2022118367A (en) | 2022-08-15 |
Family
ID=82561819
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021014823A Pending JP2022118367A (en) | 2021-02-02 | 2021-02-02 | Portable terminal, display method and display program |
Country Status (3)
Country | Link |
---|---|
US (1) | US11947793B2 (en) |
JP (1) | JP2022118367A (en) |
CN (1) | CN114844981B (en) |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007172577A (en) * | 2005-11-25 | 2007-07-05 | Victor Co Of Japan Ltd | Operation information input apparatus |
JP5017264B2 (en) * | 2006-06-08 | 2012-09-05 | 株式会社クリエイティヴ・リンク | Display screen providing method, display screen providing system, server device, and computer program |
JP5655515B2 (en) * | 2010-11-11 | 2015-01-21 | ソニー株式会社 | Information processing apparatus, table, display control method, program, portable terminal, and information processing system |
US9239674B2 (en) * | 2010-12-17 | 2016-01-19 | Nokia Technologies Oy | Method and apparatus for providing different user interface effects for different implementation characteristics of a touch event |
US10074345B2 (en) * | 2012-02-20 | 2018-09-11 | Pantech Inc. | Mobile terminal having a multifaceted graphical object and method for performing a display switching operation |
CN102710866B (en) * | 2012-06-20 | 2014-05-07 | 宇龙计算机通信科技(深圳)有限公司 | Terminal and collaborative control method |
JP5613314B1 (en) | 2013-11-14 | 2014-10-22 | Jfeシステムズ株式会社 | Gesture detection device, gesture detection program, gesture recognition device, and gesture recognition program |
JP2015118618A (en) * | 2013-12-19 | 2015-06-25 | キヤノン株式会社 | Information processing apparatus, information processing method, and computer program |
CN104679434A (en) * | 2015-03-17 | 2015-06-03 | 北京合生共济投资咨询有限责任公司 | Method for switching client pages |
CN105302468B (en) * | 2015-11-10 | 2018-05-01 | 北京奇虎科技有限公司 | Intelligent watch and its main interface method for handover control |
JP6663131B2 (en) * | 2016-01-28 | 2020-03-11 | カシオ計算機株式会社 | Display device, display control method and program |
JP6115925B2 (en) * | 2016-05-09 | 2017-04-19 | 京セラ株式会社 | Portable terminal device, program, and display control method |
WO2018144339A2 (en) * | 2017-05-16 | 2018-08-09 | Apple Inc. | Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects |
-
2021
- 2021-02-02 JP JP2021014823A patent/JP2022118367A/en active Pending
-
2022
- 2022-01-28 CN CN202210105881.8A patent/CN114844981B/en active Active
- 2022-01-31 US US17/649,412 patent/US11947793B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN114844981A (en) | 2022-08-02 |
US11947793B2 (en) | 2024-04-02 |
CN114844981B (en) | 2023-10-27 |
US20220244843A1 (en) | 2022-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5759660B2 (en) | Portable information terminal having touch screen and input method | |
US20160291864A1 (en) | Method of interacting with a portable electronic device | |
EP2722730B1 (en) | Mobile terminal and method for moving cursor thereof | |
US20140372914A1 (en) | Two-factor rotation input on a touchscreen device | |
CN104272234A (en) | Device and program for controlling display direction of images | |
JP2010026638A (en) | Mobile type image display device, control method thereof, program, and information storage medium | |
US20150169180A1 (en) | Rearranging icons on a display by shaking | |
WO2017166589A1 (en) | Method and device for launching application of mobile terminal | |
JP2011022851A (en) | Display terminal, image processing system, and image processing method | |
JP2015043135A (en) | Information processor | |
EP3671412A1 (en) | Touch operation response method and device | |
JP2014052950A (en) | Information terminal | |
US9268362B2 (en) | Method for controlling cursor | |
KR101451534B1 (en) | Portable electronic device and method of controlling same | |
US11354031B2 (en) | Electronic apparatus, computer-readable non-transitory recording medium, and display control method for controlling a scroll speed of a display screen | |
EP3671420A1 (en) | Touch operation response method and apparatus | |
WO2012061917A1 (en) | Motion gestures interface for portable electronic device | |
JP2017138843A (en) | Portable information processing apparatus, display control method by the same, and computer-executable program | |
KR20140138101A (en) | Mobile terminal based on 3D function key and Method for converting of display 3D function key | |
JP2022118367A (en) | Portable terminal, display method and display program | |
JP5756682B2 (en) | Information processing device | |
EP2634679A1 (en) | Two-factor rotation input on a touchscreen device | |
US10901495B2 (en) | Techniques for multi-finger typing in mixed-reality | |
KR101231105B1 (en) | The ui for mobile devices based on motion sensors control system and a method | |
CN111813473A (en) | Screen capturing method and device and electronic equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20210915 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20211104 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231207 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240626 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240702 |