JP2022118367A - Portable terminal, display method and display program - Google Patents

Portable terminal, display method and display program Download PDF

Info

Publication number
JP2022118367A
JP2022118367A JP2021014823A JP2021014823A JP2022118367A JP 2022118367 A JP2022118367 A JP 2022118367A JP 2021014823 A JP2021014823 A JP 2021014823A JP 2021014823 A JP2021014823 A JP 2021014823A JP 2022118367 A JP2022118367 A JP 2022118367A
Authority
JP
Japan
Prior art keywords
screen
display
gesture motion
displayed
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021014823A
Other languages
Japanese (ja)
Inventor
信一郎 新山
Shinichiro Niiyama
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2021014823A priority Critical patent/JP2022118367A/en
Priority to CN202210105881.8A priority patent/CN114844981B/en
Priority to US17/649,412 priority patent/US11947793B2/en
Publication of JP2022118367A publication Critical patent/JP2022118367A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1207—Improving or facilitating administration, e.g. print management resulting in the user being informed about print result after a job submission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1229—Printer resources management or printer maintenance, e.g. device status, power levels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1259—Print job monitoring, e.g. job status
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1292—Mobile client, e.g. wireless printing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

To address a technical problem such that a screen cannot transition by a touch operation given to the touch panel of a portable terminal when a user wears a glove.SOLUTION: A portable terminal includes: a communicating unit that obtains operating information on a device to be monitored; a display unit; a detecting unit that detects a gesture action together with the posture change of the portable terminal; and a processing unit that displays, on the display unit, a screen in accordance with the kind of the gesture action and with the kind of an object contained in a first screen when the gesture action is detected with the first screen containing the object in accordance with the details of the operating information being displayed on the display unit. The portable terminal is configured to display the screen in such a way that the object contained in the first screen differs when the operating information differs, and the different screen is displayed when the same gesture action is detected.SELECTED DRAWING: Figure 1

Description

本発明は、携帯端末、表示方法、表示プログラムに関する。 The present invention relates to mobile terminals, display methods, and display programs.

従来、スマートフォン等の操作において、タッチパネルへのタッチ操作以外に、利用者がスマートフォンをシェイクする等のジェスチャーによって利用者の指示を受け付けて画面を遷移させる構成が知られている（例えば特許文献１、２）。 Conventionally, in the operation of a smartphone or the like, in addition to a touch operation on a touch panel, a configuration is known in which a user's instruction is accepted by a gesture such as a user shaking the smartphone and the screen is changed (for example, Patent Document 1, 2).

特開２０１７－１３４６３２号公報JP 2017-134632 A 特開２０１５－９５２３２号公報JP 2015-95232 A

工場等では利用者は手袋を装着して作業することが多い。手袋を装着していると、利用者は携帯端末のタッチパネルに対するタッチ操作で画面を遷移させることができない。 Users often work in factories or the like while wearing gloves. When wearing gloves, the user cannot switch screens by touch operations on the touch panel of the mobile terminal.

上記目的を達成するための携帯端末は、監視対象機器の稼働情報を取得する通信部と、表示部と、携帯端末の姿勢変化を伴うジェスチャー動作を検出する検出部と、稼働情報の内容に応じたオブジェクトを含む第１画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第１画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させる処理部と、を備え、稼働情報が異なれば第１画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面が表示される。 A mobile terminal for achieving the above object includes a communication unit that acquires operation information of a device to be monitored, a display unit, a detection unit that detects a gesture movement that accompanies a posture change of the mobile terminal, and a When a gesture motion is detected while the first screen including the object is displayed on the display unit, the display unit displays a screen corresponding to the type of the gesture motion and the type of the object included in the first screen. and a processing unit that displays different operating information, different objects included in the first screen, and different screens are displayed even if the same gesture motion is detected.

上記目的を達成するための表示方法は、監視対象機器の稼働情報を取得し、携帯端末の姿勢変化を伴うジェスチャー動作を検出し、稼働情報の内容に応じたオブジェクトを含む第１画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第１画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させる、ことを含み、稼働情報が異なれば第１画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面を表示させる。 A display method for achieving the above object is to acquire operation information of a device to be monitored, detect a gesture movement that accompanies a change in posture of a mobile terminal, and display a first screen containing an object corresponding to the contents of the operation information. operating information, including displaying on the display unit a screen corresponding to the type of gesture motion and the type of object included in the first screen when a gesture motion is detected in the state displayed in are different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.

上記目的を達成するための表示プログラムは、監視対象機器の稼働情報を取得するステップと、携帯端末の姿勢変化を伴うジェスチャー動作を検出するステップと、稼働情報の内容に応じたオブジェクトを含む第１画面が表示部に表示されている状態でジェスチャー動作が検出された場合、ジェスチャー動作の種類と第１画面に含まれているオブジェクトの種類と、に応じた画面を表示部に表示させるステップであって、稼働情報が異なれば第１画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても異なる画面を表示させるステップと、を携帯端末に実行させる。 A display program for achieving the above object comprises the steps of acquiring operation information of a device to be monitored; a step of displaying on the display unit a screen corresponding to the type of the gesture motion and the type of object included in the first screen when the gesture motion is detected while the screen is being displayed on the display unit; and causing the mobile terminal to display a different screen even if the object included in the first screen is different if the operation information is different, and the same gesture motion is detected.

携帯端末のブロック図。Block diagram of a mobile terminal. 画面遷移例を示す図。The figure which shows the screen transition example. 画面遷移例を示す図。The figure which shows the screen transition example. 画面遷移例を示す図。The figure which shows the screen transition example. ホーム画面表示処理のフローチャート。4 is a flowchart of home screen display processing.

ここでは、下記の順序に従って本発明の実施の形態について説明する。
（１）携帯端末の構成：
（２）メイン画面表示処理：
（３）他の実施形態： Here, embodiments of the present invention will be described according to the following order.
(1) Mobile terminal configuration:
(2) Main screen display processing:
(3) Other embodiments:

（１）携帯端末の構成：
図１は、本発明の実施形態にかかる携帯端末としてのスマートフォン１０の構成を示すブロック図である。スマートフォン１０は、プロセッサー２０と、不揮発性メモリー３０と、通信部４０と、タッチパネルディスプレイ５０と、加速度センサー６０と、ジャイロセンサー７０と、を備えている。プロセッサー２０は、図示しないＣＰＵ、ＲＡＭ、ＲＯＭ等を備え、不揮発性メモリー３０に記録された種々のプログラムを実行することができる。通信部４０は、他の装置とＬＴＥ（登録商標）やＷｉ－Ｆｉ（登録商標）等の各種の通信規格に従って通信するための通信インターフェース回路を含む。プロセッサー２０は、通信部４０を介して監視対象機器の稼働情報を収集するサーバー（不図示）と通信可能である。 (1) Mobile terminal configuration:
FIG. 1 is a block diagram showing the configuration of a smartphone 10 as a mobile terminal according to an embodiment of the invention. The smartphone 10 includes a processor 20 , a nonvolatile memory 30 , a communication section 40 , a touch panel display 50 , an acceleration sensor 60 and a gyro sensor 70 . The processor 20 includes a CPU, RAM, ROM, etc. (not shown), and can execute various programs recorded in the nonvolatile memory 30 . The communication unit 40 includes a communication interface circuit for communicating with other devices according to various communication standards such as LTE (registered trademark) and Wi-Fi (registered trademark). The processor 20 can communicate via the communication unit 40 with a server (not shown) that collects operation information of the monitoring target device.

本実施形態において、スマートフォン１０は、例えばプリンターが複数台設置されている印刷工場にて、監視対象機器としてのプリンターの稼働情報を作業者（利用者とも呼ぶ）が閲覧するために利用される。上述のサーバー（不図示）は、各プリンターから収集した稼働情報を蓄積し、稼働情報をスマートフォン１０からの要求に応じてスマートフォン１０に送信するように構成されている。 In the present embodiment, the smartphone 10 is used, for example, in a printing factory where a plurality of printers are installed, so that a worker (also called a user) can view operation information of printers as monitoring target devices. The server (not shown) described above is configured to store operation information collected from each printer and transmit the operation information to the smartphone 10 in response to a request from the smartphone 10 .

稼働情報は、監視対象機器の稼働状況を示す情報であり、本実施形態においては例えば、プリンター群の当日の稼働実績（印刷ジョブ件数、印刷面積合計、稼働率等）、エラーが発生しているプリンターの情報、警告が発生しているプリンターの情報等が含まれる。 The operation information is information indicating the operation status of the monitoring target device. It includes printer information, printer information for which a warning has occurred, and so on.

タッチパネルディスプレイ５０は、タッチ検出パネルと当該パネルに重ねられた表示パネル（表示部）とを備える。例えばスマートフォンにおいて用いられる静電容量方式タッチパネルである。プロセッサー２０は、タッチパネルディスプレイ５０の表示パネルに各種の情報を表示させることができる。また、プロセッサー２０は、タッチ検出パネルに対するタッチ操作が検出されると、タッチ位置等を示す情報をプロセッサー２０に受け渡す。プロセッサー２０は、表示パネルに表示中のオブジェクトの位置とタッチ位置とに基づいて、利用者の操作を特定し、当該操作に応じた処理を実行する。 The touch panel display 50 includes a touch detection panel and a display panel (display section) superimposed on the panel. For example, it is a capacitive touch panel used in smart phones. The processor 20 can display various information on the display panel of the touch panel display 50 . Also, when a touch operation on the touch detection panel is detected, the processor 20 transfers information indicating a touch position and the like to the processor 20 . The processor 20 identifies the user's operation based on the position of the object being displayed on the display panel and the touch position, and executes processing according to the operation.

スマートフォン１０は、手袋を着用した状態でも操作可能なように構成されている。加速度センサー６０は、３軸加速度センサーであり、スマートフォン１０において規定された直交３軸の各方向における加速度を測定し、出力する。プロセッサー２０は、加速度センサー６０の出力に基づいて、スマートフォン１０の移動方向等を検出することができる。ジャイロセンサー７０は、３軸ジャイロセンサーであり、スマートフォン１０において規定された直交３軸の各軸を基準とした角速度を測定し、出力する。プロセッサー２０は、ジャイロセンサー７０の出力に基づいて、スマートフォン１０の回転を検出することができる。このように、加速度センサー６０およびジャイロセンサー７０は、スマートフォン１０の姿勢変化を伴うジェスチャー動作を検出する検出部として機能する。 The smartphone 10 is configured to be operable even when wearing gloves. The acceleration sensor 60 is a triaxial acceleration sensor, measures acceleration in each direction of three orthogonal axes defined in the smartphone 10, and outputs the acceleration. The processor 20 can detect the moving direction of the smartphone 10 based on the output of the acceleration sensor 60 . The gyro sensor 70 is a 3-axis gyro sensor that measures and outputs angular velocities based on each of the three orthogonal axes defined in the smartphone 10 . Processor 20 can detect rotation of smartphone 10 based on the output of gyro sensor 70 . In this way, the acceleration sensor 60 and the gyro sensor 70 function as a detection unit that detects a gesture motion that accompanies a posture change of the smartphone 10 .

本実施形態において、携帯端末の姿勢変化を伴うジェスチャー動作のうち、右への傾斜、左への傾斜、左への回転、右への回転、前への傾斜、後ろへの傾斜を、検出対象のジェスチャー動作とする。各ジェスチャー動作は例えば次のように規定される。タッチパネルディスプレイ５０の画面における上下方向に延び左右方向の中央を通る軸をｙ軸とし、左右方向に延び上下方向の中央を通る軸をｘ軸とし、ｘ軸およびｙ軸の交点を通りｘｙ平面と直交する軸をｚ軸と規定する。右への傾斜は、ｘｙ平面においてｙ軸を利用者から見て時計回りに既定角度以上回転させた後、元の姿勢に戻すジェスチャーである。左への傾斜は、ｘｙ平面においてｙ軸を反時計回りに既定角度以上回転させた後、元に姿勢に戻すジェスチャーである。本実施形態において、「右への傾斜」と「左への傾斜」とでは、「右への傾斜」の方が利用者にとって行いやすい動作である見なされている。 In this embodiment, among the gesture motions that accompany posture changes of the mobile terminal, tilting to the right, tilting to the left, turning to the left, turning to the right, tilting forward, and tilting backward are detected. gesture motion. Each gesture action is defined as follows, for example. An axis that extends vertically and passes through the center in the horizontal direction of the screen of the touch panel display 50 is defined as the y-axis, an axis that extends in the horizontal direction and passes through the center in the vertical direction is defined as the x-axis, and an x-y plane passes through the intersection of the x-axis and the y-axis. The orthogonal axis is defined as the z-axis. The tilt to the right is a gesture that rotates the y-axis in the xy plane clockwise by a predetermined angle or more as seen from the user, and then returns to the original posture. Leaning to the left is a gesture of rotating the y-axis in the xy plane counterclockwise by a predetermined angle or more and then returning to the original posture. In the present embodiment, between the "right tilt" and the "left tilt", the "right tilt" is considered to be easier for the user to perform.

左への回転は、タッチパネルディスプレイ５０の表示面の左端を利用者から遠ざけ右端を利用者側に近づけるように回転させた後、元の姿勢に戻すジェスチャーである。右への回転は、タッチパネルディスプレイ５０の表示面の右端を利用者から遠ざけ左端を利用者側に近づけるように回転させた後、元の姿勢に戻すジェスチャーである。 Rotation to the left is a gesture in which the left end of the display surface of touch panel display 50 is rotated away from the user and the right end is brought closer to the user, and then returned to the original posture. Rotation to the right is a gesture in which the right end of the display surface of touch panel display 50 is moved away from the user and the left end is moved closer to the user, and then returned to the original posture.

前への傾斜は、タッチパネルディスプレイ５０の表示面の上端を利用者側に近づけ下端を遠ざけるように傾斜させた後、元の姿勢に戻すジェスチャーである。後ろへの傾斜は、表示面の上端を利用者から遠ざけ下端を近づけるように傾斜させた後、元の姿勢に戻すジェスチャーである。プロセッサー２０は、加速度センサー６０とジャイロセンサー７０の出力に基づいて、これらのジェスチャーを検出することができる。 The forward tilt is a gesture in which the upper end of the display surface of touch panel display 50 is tilted closer to the user and the lower end is moved away, and then returned to the original posture. The tilting backward is a gesture in which the upper end of the display surface is tilted away from the user and the lower end is closer to the user, and then returned to the original posture. Processor 20 can detect these gestures based on the outputs of acceleration sensor 60 and gyro sensor 70 .

プロセッサー２０は、監視対象機器の稼働情報を利用者に提供するアプリケーションプログラムを実行することができる。利用者が監視対象プリンター情報を提供するアプリケーションプログラムを起動する操作を行うと、プロセッサー２０はタッチパネルディスプレイ５０にまずホーム画面を表示する。図２のＧ１０は、ホーム画面の一例を示す図である。ホーム画面Ｇ１０には、印刷ジョブ件数を示すオブジェクトｏｂ７、印刷面積を示すオブジェクトｏｂ８、稼働率を示すオブジェクトｏｂ９、さらに、オブジェクトｏｂ１と、お知らせオブジェクトｏｂ２、オブジェクトｏｂ５、オブジェクトｏｂ６、オブジェクトｏｂ１０が含まれる。このうち、ホーム画面から他の画面に遷移させるためのオブジェクトは、オブジェクトｏｂ１、ｏｂ５、ｏｂ６である。 The processor 20 can execute an application program that provides the user with operating information of the monitored device. When the user performs an operation to start an application program that provides monitored printer information, the processor 20 first displays the home screen on the touch panel display 50 . G10 in FIG. 2 is a diagram showing an example of the home screen. The home screen G10 includes an object ob7 indicating the number of print jobs, an object ob8 indicating the print area, an object ob9 indicating the operating rate, an object ob1, a notification object ob2, an object ob5, an object ob6, and an object ob10. Among these, objects ob1, ob5, and ob6 are objects for transitioning from the home screen to other screens.

例えば、オブジェクトｏｂ１は、プリンター稼働状況画面Ｇ１１に遷移するためのオブジェクトであり、オブジェクトｏｂ１へのタッチ操作を検出すると、プロセッサー２０はホーム画面Ｇ１０に変わってプリンター稼働状況画面Ｇ１１をタッチパネルディスプレイ５０に表示する。また、オブジェクトｏｂ５はタッチ操作によってプリンター画面（不図示）に遷移するためのオブジェクトであり、オブジェクトｏｂ６はタッチ操作によってレポート画面（不図示）に遷移するためのオブジェクトである。 For example, the object ob1 is an object for transitioning to the printer operation status screen G11, and when a touch operation to the object ob1 is detected, the processor 20 changes to the home screen G10 and displays the printer operation status screen G11 on the touch panel display 50. do. Object ob5 is an object for transitioning to a printer screen (not shown) by touch operation, and object ob6 is an object for transitioning to a report screen (not shown) by touch operation.

お知らせオブジェクトｏｂ２は、いずれかのプリンターに各種のイベントが発生している場合に、そのイベントを示すオブジェクトを表示する。いずれのプリンターにもイベントが発生していない場合、図２のホーム画面Ｇ１０に示すようにお知らせオブジェクトｏｂ２は空欄である。 Notification object ob2 displays an object indicating an event when various events occur in any printer. If no event has occurred in any printer, the notification object ob2 is blank as shown in the home screen G10 of FIG.

イベントは、エラーや警告を含む。エラーは、監視対象のプリンターの稼働停止を示す第１イベントに相当する。警告は、エラーよりも緊急性が低い第２イベントに相当する。警告が発生しているプリンターは稼働停止にはまだ至っていない。エラーや警告等のイベントが発生している場合、図３のホーム画面Ｇ１に示すように、お知らせオブジェクトｏｂ２内にエラーの発生を示すオブジェクトｏｂ３や警告の発生を示すオブジェクトｏｂ４が表示される。オブジェクトｏｂ３内に表示されている数値は、エラーが発生しているプリンターの台数を示している。また、オブジェクトｏｂ４内に表示されている数値は、警告が発生しているプリンターの台数を示している。お知らせオブジェクトｏｂ２は、稼働情報の内容に応じたオブジェクトに相当し、お知らせオブジェクトｏｂ２を含むホーム画面（Ｇ１０、Ｇ１等）は、本実施形態において第１画面に相当する。 Events include errors and warnings. The error corresponds to the first event indicating that the monitored printer stops working. A warning corresponds to a secondary event that is less urgent than an error. Printers with warnings have not yet stopped operating. When an event such as an error or a warning occurs, an object ob3 indicating the occurrence of an error and an object ob4 indicating the occurrence of a warning are displayed in the notification object ob2, as shown in the home screen G1 of FIG. A numerical value displayed in the object ob3 indicates the number of printers in which an error has occurred. Also, the numerical value displayed in the object ob4 indicates the number of printers for which the warning has occurred. The notification object ob2 corresponds to an object corresponding to the contents of the operation information, and the home screen (G10, G1, etc.) including the notification object ob2 corresponds to the first screen in this embodiment.

このようなお知らせオブジェクトｏｂ２を含むホーム画面（Ｇ１、Ｇ１０等）がタッチパネルディスプレイ５０に表示されている状態で、スマートフォン１０の姿勢変化を伴うジェスチャー動作が検出された場合、プロセッサー２０は、当該ジェスチャー動作の種類とホーム画面に含まれているオブジェクトの種類と、に応じた画面をタッチパネルディスプレイ５０に表示させる処理部として機能する。 In a state where the home screen (G1, G10, etc.) including the notification object ob2 is displayed on the touch panel display 50, when a gesture motion involving a change in posture of the smartphone 10 is detected, the processor 20 detects the gesture motion. and the types of objects included in the home screen, and a processing unit that causes the touch panel display 50 to display a screen corresponding to the type of object.

上述したように、稼働情報が異なれば、すなわち、エラーや警告が発生しているか否かやその発生数等が異なれば、お知らせオブジェクトｏｂ２内に表示される内容が異なる。このようなホーム画面を表示している場合に、プロセッサー２０は、特定の条件を満たす場合と満たさない場合とで、同じジェスチャー動作が検出されても異なる画面を表示するように構成されている。プロセッサー２０は、プリンターに生じたイベントを示すオブジェクトがホーム画面に含まれている場合に、特定の条件を満たしたと判定する。本実施形態において、特定の条件は、監視対象のプリンター群に、エラーまたは警告が発生していることである。 As described above, if the operating information is different, that is, if errors or warnings are generated or not, and if the number of occurrences of errors or warnings is different, the contents displayed in the notification object ob2 will be different. When such a home screen is displayed, the processor 20 is configured to display different screens even if the same gesture motion is detected depending on whether a specific condition is satisfied or not. The processor 20 determines that a specific condition is met when an object indicating an event that has occurred in the printer is included on the home screen. In this embodiment, the specific condition is that an error or warning has occurred in the monitored printer group.

プロセッサー２０は、特定の条件を満たさない場合、第１ジェスチャー動作が検出されたことに応じて、第２画面を表示させ、特定の条件を満たす場合、第１ジェスチャー動作が検出されたことに応じて、第２画面とは異なる第３画面を表示させる。本実施形態において、第１ジェスチャー動作は右への傾斜、第２画面はプリンター稼働状況画面Ｇ１１、第３画面はエラーまたは警告が発生しているプリンター個別の画面であってエラーまたは警告の詳細を通知するための詳細画面である。図２のホーム画面Ｇ１０は、特定の条件を満たさない場合、すなわち、エラーまたは警告が発生していない場合に表示されるホーム画面である。このようなホーム画面Ｇ１０が表示されている状態で、右への傾斜（第１ジェスチャー動作）を検出すると、プロセッサー２０は、ホーム画面（第１画面）に変わって、プリンター稼働状況画面Ｇ１１（第２画面）を表示する。なお、ホーム画面Ｇ１０が表示されている状態で右への傾斜を検出した場合に表示されるプリンター稼働状況画面Ｇ１１は、オブジェクトｏｂ１へのタッチ操作が検出された場合に遷移する画面と同一の画面である。 The processor 20 causes the second screen to be displayed in response to the detection of the first gesture motion if the specific condition is not met, and displays the second screen in response to the detection of the first gesture motion if the specific condition is met. to display a third screen different from the second screen. In this embodiment, the first gesture action is tilting to the right, the second screen is the printer operation status screen G11, and the third screen is a screen for each printer in which an error or warning has occurred, showing the details of the error or warning. This is a detailed screen for notification. The home screen G10 in FIG. 2 is a home screen that is displayed when a specific condition is not met, that is, when no error or warning has occurred. When the processor 20 detects a tilt to the right (first gesture motion) while the home screen G10 is displayed, the processor 20 changes to the home screen (first screen) and displays the printer operation status screen G11 (first screen). 2 screens). Note that the printer operation status screen G11 that is displayed when a tilt to the right is detected while the home screen G10 is being displayed is the same screen that transitions to when a touch operation on the object ob1 is detected. is.

ホーム画面Ｇ１０においては、オブジェクトｏｂ１とオブジェクトｏｂ５とオブジェクトｏｂ６は、他画面に遷移するためのオブジェクトであるが、本実施形態においては、そのうち、オブジェクトｏｂ１に対応付けられたプリンター稼働状況画面Ｇ１１への遷移が、利用者が行いやすいジェスチャーである右への傾斜に割り当てられている。なお、ホーム画面（Ｇ１０やＧ１等）が表示されている状態で、右への回転が検出されると、プロセッサー２０は、プリンター画面（不図示）に遷移させ、左への回転が検出されると、レポート画面（不図示）に遷移させる。このように左右いずれかへの回転ジェスチャーは、ホーム画面とプリンター画面とレポート画面を回転方向に応じた順に切り替える処理が割り当てられている。なお、右への回転が検出された場合に遷移するプリンター画面（不図示）は、オブジェクトｏｂ５へのタッチ操作が検出された場合に遷移する画面でもある。また、左への回転が検出された場合に遷移するレポート画面（不図示）は、オブジェクトｏｂ６へのタッチ操作が検出された場合に遷移する画面でもある。 In the home screen G10, the objects ob1, ob5, and ob6 are objects for transitioning to other screens. The transition is assigned to lean to the right, which is a user-friendly gesture. When rotation to the right is detected while the home screen (G10, G1, etc.) is being displayed, the processor 20 makes a transition to the printer screen (not shown), and rotation to the left is detected. , to transition to a report screen (not shown). In this way, the left or right rotation gesture is assigned a process of switching the home screen, the printer screen, and the report screen in the order according to the rotation direction. Note that the printer screen (not shown) that transitions when a rightward rotation is detected is also the screen that transitions when a touch operation on the object ob5 is detected. Further, the report screen (not shown) transitioned when a left rotation is detected is also a screen transitioned when a touch operation on the object ob6 is detected.

特定の条件を満たす場合、すなわち、図３のホーム画面Ｇ１のように、エラーや警告を示すオブジェクトｏｂ３，ｏｂ４が表示されている状態で、右への傾斜（第１ジェスチャー動作）を１回検出した場合、図３のホーム画面Ｇ２のように、プロセッサー２０は、緊急性が警告より高いイベントであるエラーが発生しているプリンターのリストｌｉ３を表示する。ホーム画面Ｇ２のようにリストｌｉ３が表示された状態で再度右への傾斜を１回検出すると、プロセッサー２０は、リストｌｉ３に含まれるプリンターのうちの１台のプリンターの個別の詳細画面を表示する。図３の例の場合、エラーが発生しているプリンター２台のうちの１台であるprinter001が選択され、printer001のエラーの詳細画面Ｇ３に遷移する。 When a specific condition is satisfied, that is, when objects ob3 and ob4 indicating errors and warnings are displayed as in the home screen G1 of FIG. 3, a tilt to the right (first gesture motion) is detected once. In this case, the processor 20 displays a list li3 of printers in which an error, which is an event with a higher urgency than a warning, is occurring, as in the home screen G2 of FIG. When the list li3 is displayed as in the home screen G2 and the tilt to the right is detected once again, the processor 20 displays an individual detail screen of one of the printers included in the list li3. . In the example of FIG. 3, printer001, which is one of the two error-prone printers, is selected, and the screen transitions to the error details screen G3 for printer001.

図３のprinter001の詳細画面Ｇ３が表示されている状態で、右への傾斜が検出されると、プロセッサー２０は、図４に示すホーム画面Ｇ４に遷移させる。ホーム画面Ｇ４では、プロセッサー２０は、エラーが発生している２台のプリンターのうち２番目のプリンターであるprinter002を選択した状態とする。従って、ホーム画面Ｇ４が表示されprinter002が選択されている状態で、右への傾斜が検出されると、プロセッサー２０はprinter002のエラーの詳細画面Ｇ５に遷移させる。この結果、エラーが発生している２台のプリンターの詳細画面は表示済みとなる。詳細画面Ｇ５が表示されている状態で、右への傾斜が検出されると、プロセッサー２０は、ホーム画面Ｇ６に遷移させる。ホーム画面Ｇ６では、今度は、プロセッサー２０は、エラーが発生しているプリンターのリストｌｉ３を非表示とし、緊急性がエラーよりも低いイベントである警告が発生しているプリンターのリストｌｉ４を表示する。またプロセッサー２０は、警告が発生している１５台のうちの１番目のプリンターであるprinter003を選択した状態とする。このようにして、エラーや警告が発生しているプリンターが複数ある場合、緊急性の高い方から順に（緊急性が同レベルのイベントについては表示順に）詳細画面（第３画面）が表示される。なお、リスト内のどのプリンターが次の右への傾斜によって詳細画面が表示される対象であるかを示すカーソル等は、本実施形態においては表示されない（リストｌｉ３やリストｌｉ４のうち選択中のプリンターはプロセッサー２０において内部的に管理される）。 When a tilt to the right is detected while the detailed screen G3 of printer001 in FIG. 3 is being displayed, the processor 20 makes a transition to the home screen G4 shown in FIG. In the home screen G4, the processor 20 selects printer002, which is the second printer of the two error-prone printers. Therefore, when the home screen G4 is displayed and the printer002 is selected, if the tilt to the right is detected, the processor 20 makes a transition to the error detail screen G5 of the printer002. As a result, the detailed screens of the two error-producing printers are already displayed. When a tilt to the right is detected while the detailed screen G5 is being displayed, the processor 20 causes the screen to transition to the home screen G6. On the home screen G6, this time, the processor 20 hides the list li3 of printers in which errors have occurred, and displays the list li4 of printers in which warnings, which are events with a lower urgency than errors, has occurred. . Also, the processor 20 selects printer003, which is the first printer among the 15 printers for which a warning has occurred. In this way, if there are multiple printers with errors or warnings, the detailed screen (third screen) is displayed in order of urgency (events with the same level of urgency are displayed in the order of display). . In this embodiment, the cursor or the like that indicates which printer in the list is the target for which the detailed screen is displayed by the next tilt to the right is not displayed (the printer being selected from list li3 and list li4 are managed internally in the processor 20).

なおプロセッサー２０は、特定の条件を満たす場合、すなわちプリンターにエラーや警告が発生している場合、右への傾斜（第１ジェスチャー動作）とは異なるジェスチャーである左への傾斜（第２ジェスチャー動作）が検出されたことに応じて、プリンター稼働状況画面Ｇ１１（第２画面）に遷移させる。 Note that when a specific condition is satisfied, that is, when an error or warning occurs in the printer, the processor 20 tilts to the left (second gesture motion), which is a gesture different from tilting to the right (first gesture motion). ) is detected, the printer operation status screen G11 (second screen) is displayed.

このように、同じ「右への傾斜」というジェスチャーであっても、エラーや警告が発生している状態と、発生していない状態とでは、ホーム画面から遷移した遷移後の画面が相違する。本実施形態において、「右への傾斜」は利用者にとって「左への傾斜」より行いやすいジェスチャーである。ホーム画面内において利用者にとって行いやすいジェスチャーであって手袋を着用していても可能なジェスチャー動作が、ホーム画面における優先度の高いオブジェクト（稼働情報の内容に応じて異なり得る）をタッチした場合と同じ動作となるように割り付けられている。そのため、利用者は、手袋を着用していたとしても、緊急性の高い情報を容易な操作で閲覧することが可能である。特に、工場において手袋を着用したまま作業をするとき、あらかじめスマートフォンの監視アプリケーションを起動しておき、スマートフォンのロックは顔認証等のタッチ操作以外の方法で解除し、上述の通りジェスチャーによって画面を遷移させることができると、エラーや警告が発生する度に手袋を外してタッチ操作をすることなく、緊急性の高い情報を閲覧することができる。 In this way, even with the same "tilt to the right" gesture, the screen after the transition from the home screen is different between the state in which an error or warning has occurred and the state in which it has not occurred. In this embodiment, "tilt to the right" is a gesture that is easier for the user to perform than "tilt to the left". Gesture actions that are easy for the user to perform on the home screen and that can be performed even when wearing gloves are the case of touching a high-priority object on the home screen (which may differ depending on the content of the operation information). They are assigned to have the same operation. Therefore, even if the user is wearing gloves, it is possible to browse highly urgent information with a simple operation. In particular, when working in a factory while wearing gloves, start the smartphone monitoring application in advance, unlock the smartphone by a method other than touch operation such as face authentication, and transition the screen using gestures as described above. If it can be enabled, highly urgent information can be browsed without taking off gloves and performing a touch operation every time an error or warning occurs.

なお、例えば、図４のリストｌｉ４のように、画面に収まりきらない項目が存在する場合、前への傾斜あるいは後ろへの傾斜が検出されると、プロセッサー２０は、画面に表示されている内容を上方向または下方向にスクロールして表示範囲を変化させる。 For example, if there are items that do not fit on the screen, such as the list li4 in FIG. scroll up or down to change the display range.

（２）ホーム画面表示処理：
図５はホーム画面表示処理を示すフローチャートである。図５の処理は、ホーム画面の表示要求がある場合に、開始される。ホーム画面の表示要求がある場合とは、監視対象プリンター情報を提供するアプリケーションプログラムを起動する場合や、起動後のホーム画面表示状態において表示内容を更新する場合や、他画面からホーム画面に遷移する場合などである。 (2) Home screen display processing:
FIG. 5 is a flowchart showing home screen display processing. The processing of FIG. 5 is started when there is a request to display the home screen. When there is a request to display the home screen, when an application program that provides monitored printer information is started, when the display contents are updated while the home screen is being displayed after startup, or when transitioning from another screen to the home screen. and so on.

ホーム画面表示処理が開始されると、プロセッサー２０は、監視対象機器の稼働情報を取得する（ステップＳ１００）。すなわち、プロセッサー２０は、通信部４０を介して、サーバーに稼働情報を要求し、要求に応じてサーバーから送信された稼働情報を取得する。 When the home screen display process is started, the processor 20 acquires operation information of the monitoring target device (step S100). That is, the processor 20 requests operating information from the server via the communication unit 40, and acquires operating information transmitted from the server in response to the request.

続いて、プロセッサー２０は、稼働情報に基づいてホーム画面（第１画面）を表示する（ステップＳ１０５）。すなわち、プロセッサー２０は、ホーム画面を構成する各オブジェクトの画像データを予め決められた位置に表示する。各オブジェクトの内容は、稼働情報の内容が反映される。例えば、印刷ジョブ件数を示す数値には稼働情報に含まれる印刷ジョブ件数の値が反映され、稼働率を示す数値には稼働情報に含まれる稼働率の値が反映される。また、プロセッサー２０は、取得した稼働情報にエラーや警告が発生していることを示す情報が含まれている場合、お知らせオブジェクトｏｂ２内にオブジェクトｏｂ３やオブジェクトｏｂ４を表示する。オブジェクトｏｂ３やオブジェクトｏｂ４に関して、ホーム画面の表示要求に応じてホーム画面を表示する場合、プロセッサー２０は、図３に示すように、まず、リストを閉じた状態で表示する。なお、稼働情報にエラーの情報、警告の情報のいずれも含まれない場合、プロセッサー２０は、お知らせオブジェクトｏｂ２を空欄で表示する。 Subsequently, the processor 20 displays the home screen (first screen) based on the operating information (step S105). That is, the processor 20 displays the image data of each object forming the home screen at a predetermined position. The content of each object reflects the content of the operation information. For example, the numerical value indicating the number of print jobs reflects the value of the number of print jobs included in the operating information, and the numerical value indicating the operating rate reflects the value of the operating rate included in the operating information. Further, when the acquired operation information includes information indicating that an error or warning has occurred, the processor 20 displays the object ob3 and the object ob4 within the notification object ob2. When displaying the home screen of the object ob3 or ob4 in response to a home screen display request, the processor 20 first displays the list in a closed state, as shown in FIG. Note that if the operating information does not include any error information or warning information, the processor 20 displays the notification object ob2 in a blank space.

続いて、プロセッサー２０は、タッチ操作有りか否かを判定する（ステップＳ１１０）。すなわちプロセッサー２０は、タッチパネルディスプレイ５０に対するタッチ操作が検出されたか否かを判定する。 Subsequently, the processor 20 determines whether or not there is a touch operation (step S110). That is, processor 20 determines whether or not a touch operation on touch panel display 50 has been detected.

ステップＳ１１０において、タッチ操作有りと判定された場合、プロセッサー２０は、他画面へ遷移するためのオブジェクトへのタッチ操作であるか否かを判定し（ステップＳ１１１）、他画面遷移オブジェクトへのタッチ操作である場合、他画面に遷移させる（ステップＳ１１２）。例えば、ホーム画面Ｇ１０（図２参照）のオブジェクトｏｂ１にタッチ操作がなされた場合、プロセッサー２０は、プリンター稼働状況画面Ｇ１１に遷移させる。ステップＳ１１１にて他画面遷移オブジェクトへのタッチ操作であると判定されなかった場合、プロセッサー２０は、タッチされたオブジェクトに応じた表示を行う（ステップＳ１１５）。例えば、図３のホーム画面Ｇ１においてオブジェクトｏｂ３はリストが非表示の状態である。この状態において、オブジェクトｏｂ３にタッチ操作がなされた場合、図３のホーム画面Ｇ２に示すようにリストｌｉ３を表示させる。 When it is determined in step S110 that there is a touch operation, the processor 20 determines whether or not the touch operation is performed on an object for transitioning to another screen (step S111). If so, the screen is changed to another screen (step S112). For example, when a touch operation is performed on the object ob1 on the home screen G10 (see FIG. 2), the processor 20 transitions to the printer operation status screen G11. If it is not determined in step S111 that the touch operation is for another screen transition object, the processor 20 performs display according to the touched object (step S115). For example, on the home screen G1 in FIG. 3, the list of the object ob3 is hidden. In this state, when a touch operation is performed on the object ob3, the list li3 is displayed as shown in the home screen G2 of FIG.

ステップＳ１１０において、タッチ操作有りと判定されなかった場合、プロセッサー２０は、携帯端末の姿勢変化を伴うジェスチャー動作有りか否かを判定する（ステップＳ１２０）。ステップＳ１２０において、当該ジェスチャー動作有りと判定されなかった場合、プロセッサー２０はステップＳ１１０に戻る。 If it is not determined in step S110 that there is a touch operation, the processor 20 determines whether there is a gesture motion that accompanies a change in posture of the mobile terminal (step S120). If it is determined in step S120 that there is no gesture motion, the processor 20 returns to step S110.

ステップＳ１２０において、姿勢変化を伴うジェスチャー動作有りと判定された場合、プロセッサー２０は、ジェスチャー動作の種類に応じた処理を実行する。検出されたジェスチャー動作が右への傾斜である場合（ステップＳ１２５：Ｙ）、プロセッサー２０は、イベント有りか否かを判定する（ステップＳ１３０）。すなわち、特定条件を満たすか否かが判定される。具体的に、プロセッサー２０は、稼働情報を参照し、イベントが発生しているか否かを判定する。 In step S120, when it is determined that there is a gesture motion accompanied by a posture change, the processor 20 executes processing according to the type of gesture motion. If the detected gesture motion is tilting to the right (step S125: Y), the processor 20 determines whether there is an event (step S130). That is, it is determined whether or not the specific condition is satisfied. Specifically, the processor 20 refers to the operating information and determines whether an event has occurred.

ステップＳ１３０においてイベント有りと判定されなかった場合、すなわち特定の条件を満たさない場合、プロセッサー２０は、プリンター稼働状況画面Ｇ１１に遷移させ（ステップＳ１５０）、ホーム画面表示処理を終了する。この結果、ホーム画面Ｇ１０に変わってプリンター稼働状況画面Ｇ１１がタッチパネルディスプレイ５０に表示される。ステップＳ１３０においてイベント有りと判定された場合、すなわち特定の条件を満たす場合、プロセッサー２０は、リスト表示済みであるか否かを判定する（ステップＳ１３５）。リストは、エラーが発生しているプリンター一覧や警告が発生しているプリンター一覧である。ステップＳ１３５において、リスト表示済みであると判定されなかった場合、プロセッサー２０はイベント発生プリンターのリストを表示させ（ステップＳ１４０）、ステップＳ１１０に戻る。 If it is determined in step S130 that there is no event, that is, if the specific condition is not met, the processor 20 transitions to the printer operation status screen G11 (step S150), and ends the home screen display process. As a result, a printer operation status screen G11 is displayed on the touch panel display 50 instead of the home screen G10. If it is determined in step S130 that there is an event, that is, if a specific condition is satisfied, the processor 20 determines whether the list has been displayed (step S135). The list is a list of printers in which an error has occurred or a list of printers in which a warning has occurred. If it is not determined in step S135 that the list has been displayed, the processor 20 displays the list of event-occurring printers (step S140), and returns to step S110.

ステップＳ１３５においてリスト表示済みであると判定された場合、プロセッサー２０は、内部的に選択されているプリンターのイベントの詳細画面に遷移させ（ステップＳ１４５）、ホーム画面表示処理を終了する。イベントを示すオブジェクトであって緊急度の異なる複数のオブジェクトが含まれている場合、プロセッサー２０は、「右への傾斜」が検出されたことに応じて、緊急性が高いイベントの詳細情報を示す詳細画面（第３画面）を表示させる。なおリストの中で内部的に選択されているプリンターは、「右への傾斜」ジェスチャー毎に変化する。 If it is determined in step S135 that the list has been displayed, the processor 20 transitions to the event details screen of the internally selected printer (step S145), and ends the home screen display process. When the object indicating the event includes a plurality of objects with different degrees of urgency, the processor 20 indicates the detailed information of the event with high urgency in response to the detection of the "tilt to the right". Display the detail screen (third screen). Note that the printer selected internally in the list changes with each "tilt right" gesture.

検出されたジェスチャー動作が左への傾斜である場合（ステップＳ１５５：Ｙ）、プロセッサー２０は、イベント有りか否か、すなわち特定の条件を満たすか否かを判定する（ステップＳ１６０）。具体的に、プロセッサー２０は、稼働情報を参照し、イベントが発生しているか否かを判定する。ステップＳ１６０においてイベント有りと判定された場合、すなわち特定の条件を満たす場合、プロセッサー２０は、プリンター稼働状況画面に遷移させ（ステップＳ１５０）、ホーム画面表示処理を終了する。この結果、ホーム画面Ｇ１０に変わってプリンター稼働状況画面Ｇ１１がタッチパネルディスプレイ５０に表示される。ステップＳ１６０においてイベント有りと判定されなかった場合、プロセッサー２０はステップＳ１００の処理に戻る。すなわち、イベント無しの状態で左への傾斜が行われても表示は変化しない。 If the detected gesture motion is tilting to the left (step S155: Y), the processor 20 determines whether or not there is an event, that is, whether or not a specific condition is satisfied (step S160). Specifically, the processor 20 refers to the operating information and determines whether an event has occurred. If it is determined in step S160 that there is an event, that is, if a specific condition is satisfied, the processor 20 causes the screen to transition to the printer operation status screen (step S150), and ends the home screen display process. As a result, a printer operation status screen G11 is displayed on the touch panel display 50 instead of the home screen G10. If it is not determined in step S160 that there is an event, the processor 20 returns to step S100. That is, the display does not change even if the tilt to the left is performed in the state of no event.

検出されたジェスチャー動作が左右に回転である場合（ステップＳ１６５：Ｙ）、プロセッサー２０は、プリンター画面またはレポート画面に遷移させ（ステップＳ１７０）、ホーム画面表示処理を終了する。すなわち、プロセッサー２０は、左に回転の場合にホーム画面に変わってレポート画面を表示させ、右に回転の場合にホーム画面に変わってプリンター画面を表示させる。検出されたジェスチャー動作が前後に傾斜の場合（ステップＳ１７５：Ｙ）、プロセッサー２０は、表示範囲をスクロールさせる（ステップＳ１８０）。検出されたジェスチャー動作が、右への傾斜、左への傾斜、左右回転、前後傾斜のいずれでもない場合、プロセッサー２０はステップＳ１１０に戻る。 If the detected gesture motion is left/right rotation (step S165: Y), the processor 20 transitions to the printer screen or the report screen (step S170), and ends the home screen display process. That is, the processor 20 displays the report screen instead of the home screen when rotating to the left, and displays the printer screen instead of the home screen when rotating to the right. If the detected gesture motion is tilting back and forth (step S175: Y), the processor 20 scrolls the display range (step S180). If the detected gesture motion is neither a tilt to the right, a tilt to the left, a turn left or right, or a tilt back and forth, the processor 20 returns to step S110.

（３）他の実施形態：
以上の実施形態は本発明を実施するための一例であり、他にも種々の実施形態を採用可能である。例えば、携帯端末は、スマートフォン以外にも、タブレット、ノートＰＣ、スマートウォッチ、スマートグラス等の様々な電子機器であってよい。また、監視対象機器はプリンターに限定されない。監視対象機器は、ロボット等、他の電子機器であってもよい。また、監視対象機器の稼働情報を収集するサーバーを介して携帯端末は稼働情報を取得できる構成であってもよいし、監視対象機器に携帯端末が直接問い合わせて稼働情報を取得する構成であってもよい。 (3) Other embodiments:
The above embodiment is an example for carrying out the present invention, and various other embodiments can be adopted. For example, mobile terminals may be various electronic devices other than smartphones, such as tablets, notebook PCs, smart watches, and smart glasses. In addition, devices to be monitored are not limited to printers. The monitored device may be another electronic device such as a robot. Further, the mobile terminal may be configured to acquire operation information via a server that collects the operation information of the monitoring target device, or may be configured such that the mobile terminal directly inquires of the monitoring target device and acquires the operation information. good too.

携帯端末の姿勢変化を伴うジェスチャー動作は、上記実施形態で採用した動作の他にも、様々な動作を採用可能である。例えば携帯端末を特定の方向に繰り返し振動させるシェイク動作が採用されてもよい。また、利用者が行いやすいジェスチャー動作や、行いやすさの順序について、上記実施形態の態様は一例であり、他にも様々な態様を採用可能である。また、利用者毎に設定可能であってもよい。 Various actions other than the actions used in the above-described embodiments can be adopted as the gesture action that accompanies the posture change of the mobile terminal. For example, a shake motion of repeatedly vibrating the mobile terminal in a specific direction may be adopted. In addition, regarding the gesture motions that are easy for the user to perform and the order of ease of execution, the aspect of the above-described embodiment is just an example, and various other aspects can be adopted. Also, it may be possible to set for each user.

稼働情報が異なれば第１画面に含まれるオブジェクトが異なり、同じジェスチャー動作が検出されても第１画面から遷移する画面が異なる構成において、ジェスチャー動作と当該ジェスチャー動作によって遷移する画面との対応付けを利用者に示すようにしてもよい。例えば、画面に表示されたオブジェクト内に、対応付けられたジェスチャー動作を示す文字や記号・アイコン等を表示するようにしてもよい。具体的に例えば、図２のホーム画面Ｇ１０において、右への傾斜に応じてプリンター稼働状況画面Ｇ１１に遷移するように構成されている場合、オブジェクトｏｂ１内に右への傾斜を示すアイコン等を表示してもよい。また、図３のホーム画面Ｇ２において左への傾斜に応じてプリンター稼働状況画面Ｇ１１に遷移するように構成されている場合、オブジェクトｏｂ１内に左への傾斜を示すアイコン等を表示してもよい。また、図３のホーム画面Ｇ２や図４のホーム画面Ｇ４のリストｌｉ３や、ホーム画面Ｇ６のリストｌｉ４においても、選択状態にある項目と非選択状態の項目とを識別可能に表示してもよい。 If the operation information is different, the objects included in the first screen are different, and even if the same gesture motion is detected, the screen to be transitioned from the first screen is different. You may make it show to a user. For example, characters, symbols, icons, or the like indicating the associated gesture motion may be displayed in the object displayed on the screen. Specifically, for example, when the home screen G10 in FIG. 2 is configured to transition to the printer operation status screen G11 in accordance with the tilt to the right, an icon or the like indicating the tilt to the right is displayed in the object ob1. You may Further, when the home screen G2 in FIG. 3 is configured to transition to the printer operation status screen G11 in accordance with the tilt to the left, an icon or the like indicating the tilt to the left may be displayed in the object ob1. . Also, in the home screen G2 of FIG. 3, the list li3 of the home screen G4 of FIG. 4, and the list li4 of the home screen G6, the selected items and the non-selected items may be displayed so as to be identifiable. .

特定の条件は、同じジェスチャー動作に異なる処理を対応付けるか否かを切り替えるための条件であればよい。特定の条件は、監視対象機器に予め決められたイベントが生じたことであってもよいし、携帯端末に予め決められたイベントが発生したことであってもよいし、さらに利用者に通知すべき別のイベントが発生したことであってもよい。携帯端末でのイベントとしては例えば、携帯端末のバッテリー残量が基準以下になった場合とそうでない場合とで、優先的に利用者に通知すべき情報（遷移させる画面）が同じジェスチャー動作がなされた場合でも異なる構成を採用してもよい。 The specific condition may be a condition for switching whether or not to associate different processing with the same gesture motion. The specific condition may be that a predetermined event has occurred in the monitoring target device, that a predetermined event has occurred in the mobile terminal, or that the user is notified. It may also be that another event has occurred. As an event on a mobile terminal, for example, the same gesture operation is performed for the information that should be preferentially notified to the user (screen to be transitioned) depending on whether the remaining battery level of the mobile terminal is below the standard or not. A different configuration may be adopted even if the

監視対象機器に生じたイベントを示すオブジェクトが第１画面に含まれている場合に、特定の条件を満たしたと判定する構成を採用してもよいし、監視対象機器に生じたイベントが特定のイベントであった場合に特定の条件を満たしたと判定する構成を採用してもよい。 A configuration may be adopted in which it is determined that a specific condition is satisfied when an object indicating an event that has occurred in the monitoring target device is included in the first screen, or an event that has occurred in the monitoring target device is the specific event. A configuration may be adopted in which it is determined that a specific condition is satisfied when

イベントは監視対象機器の稼働停止を示す第１イベントと、当該第１イベントよりも緊急性が低い第２イベントの他に、さらに細分化され、緊急性を示す順位が対応付けられていてもよい。 The event may be further subdivided in addition to a first event indicating the operation stop of the monitoring target device and a second event having a lower urgency than the first event, and may be associated with an order indicating urgency. .

さらに、本発明のように、コンピューターが実行するプログラムや方法としても適用可能である。また、以上のようなシステム、プログラム、方法は、単独の装置として実現される場合もあれば、複数の装置が備える部品を利用して実現される場合もあり、各種の態様を含むものである。また、一部がソフトウェアであり一部がハードウェアであったりするなど、適宜、変更可能である。さらに、システムを制御するプログラムの記録媒体としても発明は成立する。むろん、そのプログラムの記録媒体は、磁気記録媒体であってもよいし半導体メモリーであってもよいし、今後開発されるいかなる記録媒体においても全く同様に考えることができる。 Furthermore, like the present invention, it can also be applied as a computer-executed program or method. In addition, the system, program, and method described above may be implemented as a single device or may be implemented using components provided in a plurality of devices, and include various modes. In addition, it can be changed as appropriate, such as a part of which is software and a part of which is hardware. Furthermore, the invention is established as a recording medium for a program for controlling the system. Of course, the program recording medium may be a magnetic recording medium, a semiconductor memory, or any other recording medium that will be developed in the future.

１…１０…スマートフォン、２０…プロセッサー、３０ 不揮発性メモリー、４０…通信部、５０…タッチパネルディスプレイ、６０…加速度センサー、７０…ジャイロセンサー REFERENCE SIGNS LIST 1 10 smart phone 20 processor 30 nonvolatile memory 40 communication unit 50 touch panel display 60 acceleration sensor 70 gyro sensor

Claims (9)

監視対象機器の稼働情報を取得する通信部と、
表示部と、
携帯端末の姿勢変化を伴うジェスチャー動作を検出する検出部と、
前記稼働情報の内容に応じたオブジェクトを含む第１画面が前記表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第１画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させる処理部と、
を備え、
前記稼働情報が異なれば前記第１画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面が表示される、
携帯端末。 a communication unit that acquires operation information of a monitored device;
a display unit;
a detection unit that detects a gesture motion that accompanies a posture change of the mobile terminal;
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen and a processing unit that causes the display unit to display a screen corresponding to the type of
with
If the operation information is different, the objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.
mobile terminal. 前記検出部は、前記表示部に対するタッチ操作を検出し、
前記ジェスチャー動作が検出されたことに応じて表示される画面は、前記第１画面内の既定のオブジェクトに対するタッチ操作が検出された場合に前記処理部が表示させる画面と同一である、
請求項１に記載の携帯端末。 The detection unit detects a touch operation on the display unit,
The screen displayed in response to the detection of the gesture action is the same as the screen displayed by the processing unit when a touch operation on a predetermined object in the first screen is detected.
The mobile terminal according to claim 1. 前記処理部は、
特定の条件を満たさない場合、第１ジェスチャー動作が検出されたことに応じて、第２画面を表示させ、
前記特定の条件を満たす場合、前記第１ジェスチャー動作が検出されたことに応じて、前記第２画面とは異なる第３画面を表示させる、
請求項１または請求項２に記載の携帯端末。 The processing unit is
if the specific condition is not satisfied, display the second screen in response to the detection of the first gesture motion;
When the specific condition is satisfied, displaying a third screen different from the second screen in response to the detection of the first gesture motion;
3. The portable terminal according to claim 1 or 2. 前記処理部は、前記監視対象機器に生じたイベントを示すオブジェクトが前記第１画面に含まれている場合に、前記特定の条件を満たしたと判定する、
請求項３に記載の携帯端末。 The processing unit determines that the specific condition is satisfied when an object indicating an event that has occurred in the monitored device is included in the first screen.
The mobile terminal according to claim 3. 前記イベントを示すオブジェクトが前記第１画面に複数含まれている場合、前記処理部は、前記第１ジェスチャー動作が検出されたことに応じて、緊急性が高い前記イベントの詳細情報を示す前記第３画面を表示させる、
請求項４に記載の携帯端末。 When a plurality of objects indicating the event are included in the first screen, the processing unit may display the detailed information of the event with high urgency in response to detection of the first gesture motion. Display 3 screens,
The mobile terminal according to claim 4. 前記イベントには、前記監視対象機器の稼働停止を示す第１イベントと、前記第１イベントよりも緊急性が低い第２イベントとが含まれる、
請求項５に記載の携帯端末。 The events include a first event indicating that the monitoring target device has stopped operating, and a second event that is less urgent than the first event.
The mobile terminal according to claim 5. 前記処理部は、前記特定の条件を満たした場合であっても、前記第１ジェスチャー動作とは異なる第２ジェスチャー動作が検出されたことに応じて、前記第２画面を表示させる、
請求項３から請求項６のいずれか一項に記載の携帯端末。 The processing unit causes the second screen to be displayed in response to detection of a second gesture motion different from the first gesture motion even when the specific condition is satisfied.
The mobile terminal according to any one of claims 3 to 6. 監視対象機器の稼働情報を取得し、
携帯端末の姿勢変化を伴うジェスチャー動作を検出し、
前記稼働情報の内容に応じたオブジェクトを含む第１画面が表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第１画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させる、ことを含み、
前記稼働情報が異なれば前記第１画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面を表示させる、
表示方法。 Acquire the operation information of the monitoring target device,
Detects gesture movements that accompany posture changes of the mobile terminal,
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen are determined. and causing the display unit to display a screen corresponding to the type,
If the operation information is different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed.
Display method. 監視対象機器の稼働情報を取得するステップと、
携帯端末の姿勢変化を伴うジェスチャー動作を検出するステップと、
前記稼働情報の内容に応じたオブジェクトを含む第１画面が表示部に表示されている状態で前記ジェスチャー動作が検出された場合、前記ジェスチャー動作の種類と前記第１画面に含まれているオブジェクトの種類と、に応じた画面を前記表示部に表示させるステップであって、前記稼働情報が異なれば前記第１画面に含まれるオブジェクトが異なり、同じ前記ジェスチャー動作が検出されても異なる画面を表示させるステップと、
を携帯端末に実行させる表示プログラム。 a step of acquiring operation information of a monitored device;
a step of detecting a gesture motion that accompanies a posture change of the mobile terminal;
When the gesture motion is detected while the first screen including the object corresponding to the content of the operation information is displayed on the display unit, the type of the gesture motion and the object included in the first screen are determined. a step of displaying a screen corresponding to a type on the display unit, wherein if the operation information is different, objects included in the first screen are different, and even if the same gesture motion is detected, a different screen is displayed. a step;
A display program that causes a mobile terminal to execute
JP2021014823A 2021-02-02 2021-02-02 Portable terminal, display method and display program Pending JP2022118367A (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021014823A JP2022118367A (en) 2021-02-02 2021-02-02 Portable terminal, display method and display program
CN202210105881.8A CN114844981B (en) 2021-02-02 2022-01-28 Portable terminal, display method, and recording medium
US17/649,412 US11947793B2 (en) 2021-02-02 2022-01-31 Portable terminal, display method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021014823A JP2022118367A (en) 2021-02-02 2021-02-02 Portable terminal, display method and display program

Publications (1)

Publication Number Publication Date
JP2022118367A true JP2022118367A (en) 2022-08-15

Family

ID=82561819

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021014823A Pending JP2022118367A (en) 2021-02-02 2021-02-02 Portable terminal, display method and display program

Country Status (3)

Country Link
US (1) US11947793B2 (en)
JP (1) JP2022118367A (en)
CN (1) CN114844981B (en)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007172577A (en) * 2005-11-25 2007-07-05 Victor Co Of Japan Ltd Operation information input apparatus
JP5017264B2 (en) * 2006-06-08 2012-09-05 株式会社クリエイティヴ・リンク Display screen providing method, display screen providing system, server device, and computer program
JP5655515B2 (en) * 2010-11-11 2015-01-21 ソニー株式会社 Information processing apparatus, table, display control method, program, portable terminal, and information processing system
US9239674B2 (en) * 2010-12-17 2016-01-19 Nokia Technologies Oy Method and apparatus for providing different user interface effects for different implementation characteristics of a touch event
US10074345B2 (en) * 2012-02-20 2018-09-11 Pantech Inc. Mobile terminal having a multifaceted graphical object and method for performing a display switching operation
CN102710866B (en) * 2012-06-20 2014-05-07 宇龙计算机通信科技(深圳)有限公司 Terminal and collaborative control method
JP5613314B1 (en) 2013-11-14 2014-10-22 Ｊｆｅシステムズ株式会社 Gesture detection device, gesture detection program, gesture recognition device, and gesture recognition program
JP2015118618A (en) * 2013-12-19 2015-06-25 キヤノン株式会社 Information processing apparatus, information processing method, and computer program
CN104679434A (en) * 2015-03-17 2015-06-03 北京合生共济投资咨询有限责任公司 Method for switching client pages
CN105302468B (en) * 2015-11-10 2018-05-01 北京奇虎科技有限公司 Intelligent watch and its main interface method for handover control
JP6663131B2 (en) * 2016-01-28 2020-03-11 カシオ計算機株式会社 Display device, display control method and program
JP6115925B2 (en) * 2016-05-09 2017-04-19 京セラ株式会社 Portable terminal device, program, and display control method
WO2018144339A2 (en) * 2017-05-16 2018-08-09 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects

Also Published As

Publication number Publication date
CN114844981A (en) 2022-08-02
US11947793B2 (en) 2024-04-02
CN114844981B (en) 2023-10-27
US20220244843A1 (en) 2022-08-04

Similar Documents

Publication Publication Date Title
JP5759660B2 (en) Portable information terminal having touch screen and input method
US20160291864A1 (en) Method of interacting with a portable electronic device
EP2722730B1 (en) Mobile terminal and method for moving cursor thereof
US20140372914A1 (en) Two-factor rotation input on a touchscreen device
CN104272234A (en) Device and program for controlling display direction of images
JP2010026638A (en) Mobile type image display device, control method thereof, program, and information storage medium
US20150169180A1 (en) Rearranging icons on a display by shaking
WO2017166589A1 (en) Method and device for launching application of mobile terminal
JP2011022851A (en) Display terminal, image processing system, and image processing method
JP2015043135A (en) Information processor
EP3671412A1 (en) Touch operation response method and device
JP2014052950A (en) Information terminal
US9268362B2 (en) Method for controlling cursor
KR101451534B1 (en) Portable electronic device and method of controlling same
US11354031B2 (en) Electronic apparatus, computer-readable non-transitory recording medium, and display control method for controlling a scroll speed of a display screen
EP3671420A1 (en) Touch operation response method and apparatus
WO2012061917A1 (en) Motion gestures interface for portable electronic device
JP2017138843A (en) Portable information processing apparatus, display control method by the same, and computer-executable program
KR20140138101A (en) Mobile terminal based on 3D function key and Method for converting of display 3D function key
JP2022118367A (en) Portable terminal, display method and display program
JP5756682B2 (en) Information processing device
EP2634679A1 (en) Two-factor rotation input on a touchscreen device
US10901495B2 (en) Techniques for multi-finger typing in mixed-reality
KR101231105B1 (en) The ui for mobile devices based on motion sensors control system and a method
CN111813473A (en) Screen capturing method and device and electronic equipment

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210915

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20211104

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240702