JP2017167577A - Touch type input device, image forming apparatus, and method for controlling touch type input device - Google Patents

Touch type input device, image forming apparatus, and method for controlling touch type input device Download PDF

Info

Publication number
JP2017167577A
JP2017167577A JP2016049124A JP2016049124A JP2017167577A JP 2017167577 A JP2017167577 A JP 2017167577A JP 2016049124 A JP2016049124 A JP 2016049124A JP 2016049124 A JP2016049124 A JP 2016049124A JP 2017167577 A JP2017167577 A JP 2017167577A
Authority
JP
Japan
Prior art keywords
sensory
stimulus
expressed
initial
stimuli
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016049124A
Other languages
Japanese (ja)
Other versions
JP6579005B2 (en
Inventor
敏哉 正崎
Toshiya Masazaki
敏哉 正崎
洋一 来正
Yoichi Kurumasa
洋一 来正
伊藤 昌之
Masayuki Ito
昌之 伊藤
亮佑 西村
Ryosuke Nishimura
亮佑 西村
博 杉浦
Hiroshi Sugiura
博 杉浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2016049124A priority Critical patent/JP6579005B2/en
Publication of JP2017167577A publication Critical patent/JP2017167577A/en
Application granted granted Critical
Publication of JP6579005B2 publication Critical patent/JP6579005B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

PROBLEM TO BE SOLVED: To alleviate a reduction in operability due to non-development of a predetermined sensory stimulation.SOLUTION: A touch type input device 31 developing a sensory stimulation in response to an input made by a user comprises: a setting part 312 that sets any one of a plurality of sensory stimulations 71, 72, and 73 to an initial sensory stimulation; and a development control part 313 that, when the initial sensory stimulation cannot be developed after the input is made, develops any one of the plurality of sensory stimulations 71, 72, and 73 other than the initial sensory stimulation as a replacement of the initial sensory stimulation without receiving the user's instruction.SELECTED DRAWING: Figure 7

Description

本発明は、タッチ式入力装置、タッチ式入力装置を備えた画像形成装置およびタッチ式入力装置の制御方法に関する。   The present invention relates to a touch input device, an image forming apparatus including the touch input device, and a control method for the touch input device.

近年、操作のための入力手段としてタッチパネルディスプレイが広く用いられている。タブレットやスマートフォンなどの携帯型機器、およびコピー機やMFP(Multi-functional Peripheral :多機能機または複合機)などの据置き型機器もタッチパネルディスプレイを備えている。   In recent years, touch panel displays have been widely used as input means for operations. Portable devices such as tablets and smartphones, and stationary devices such as copiers and MFPs (Multi-functional Peripherals) also have touch panel displays.

タッチパネルディスプレイは、ソフトキーなどを配置した画面を表示するためのディスプレイと入力のためのタッチパッドとを一体化したタッチ式入力装置である。タッチパネルディスプレイを備えた機器は、ユーザがソフトキーにタッチすると、そのソフトキーに対応づけられている処理を実行する。   The touch panel display is a touch input device in which a display for displaying a screen on which soft keys and the like are arranged and a touch pad for input are integrated. When a user touches a soft key, a device provided with a touch panel display executes processing associated with the soft key.

一般に、タッチ式入力装置による入力では、ユーザは、ハードキーによる入力に際して感じるような操作感を得ることができない。すなわち、例えばソフトキーにタッチしても、キーを押し込む感触を体感することができない。   Generally, with an input using a touch-type input device, the user cannot obtain an operational feeling that can be felt when inputting with a hard key. That is, for example, even if a soft key is touched, it is impossible to experience the touch of pressing the key.

そこで、従来において、ユーザに操作感を与えるための工夫として、タッチによる入力が行われたことに反応して感覚刺激を発現させる機能が設けられている。すなわち、入力が行われたときに、聴感刺激として電子音を鳴らしたり、視覚刺激としてソフトキーを白黒反転させたり、触覚刺激として機器を振動させたりする。   Therefore, conventionally, as a device for giving an operational feeling to the user, a function of expressing sensory stimulation in response to an input by touch is provided. That is, when an input is performed, an electronic sound is generated as an auditory stimulus, a soft key is reversed in black and white as a visual stimulus, or a device is vibrated as a tactile stimulus.

入力が行われたときに視覚刺激を発現させるための先行技術として、特許文献1に記載の技術がある。特許文献1には、画像形成装置および携帯可能な表示装置の双方で画面を表示するリモートアクセスにおいて、表示装置の表示する画面における画像形成装置のタッチパネルのタッチ位置に対応する位置に、ポインタ画像を表示することが開示されている。   As a prior art for causing a visual stimulus to appear when an input is performed, there is a technique described in Patent Document 1. In Patent Literature 1, a pointer image is displayed at a position corresponding to the touch position of the touch panel of the image forming apparatus on the screen displayed by the display apparatus in remote access for displaying the screen on both the image forming apparatus and the portable display apparatus. Displaying is disclosed.

特開2015−14977号公報JP2015-14777A

感覚刺激が発現するはずであるのに実際には発現しないことが起こり得る。例えば、タッチ式入力装置に備わっている刺激発生源が、故障その他の何らかの原因で正常に動作しないことがある。感覚刺激が発現しない場合には、ユーザがタッチ式入力装置の動作についてもっている認識と現実との間に格差が生じることから、ユーザがタッチ式入力装置の動作について違和感をもったり戸惑ったりするおそれがある。つまり、従来は、感覚刺激が発現しないことに因って操作性が低下するという問題があった。   It can happen that sensory stimuli should be expressed but not actually. For example, the stimulus source provided in the touch input device may not operate normally due to a failure or some other cause. When sensory stimuli do not appear, there is a difference between the recognition that the user has about the operation of the touch input device and the reality, so the user may feel uncomfortable or confused about the operation of the touch input device There is. That is, conventionally, there has been a problem that operability is lowered due to the absence of sensory stimulation.

特許文献1の技術は、ポインタ画像を表示するディスプレイが正常に動作することを前提とするものであるので、正常に動作しなかった場合に生じる上述の問題を解決することができない。   The technique of Patent Document 1 is based on the premise that the display that displays the pointer image operates normally, and thus cannot solve the above-described problem that occurs when the display does not operate normally.

本発明は、上述の問題に鑑みてなされたもので、所定の感覚刺激が発現しないことに因る操作性の低下を緩和することを目的とする。   The present invention has been made in view of the above-described problems, and an object of the present invention is to alleviate a decrease in operability due to the absence of a predetermined sensory stimulus.

本発明の実施形態に係るタッチ式入力装置は、入力が行われたことに反応して感覚刺激を発現させるタッチ式入力装置であって、複数の感覚刺激のいずれかを初期の感覚刺激に設定する設定部と、入力が行われたときに、前記初期の感覚刺激を発現させることができない場合に、ユーザによる指示を受けることなく、前記複数の感覚刺激のうちの前記初期の感覚刺激以外のいずれかを、当該初期の感覚刺激の代替として発現させる発現制御部と、 を有する。   A touch-type input device according to an embodiment of the present invention is a touch-type input device that develops a sensory stimulus in response to input, and sets any one of a plurality of sensory stimuli as an initial sensory stimulus. The initial sensory stimulus other than the initial sensory stimulus of the plurality of sensory stimuli without receiving an instruction from the user when the initial sensory stimulus cannot be expressed when input is performed. An expression control unit that expresses either as an alternative to the initial sensory stimulus.

前記複数の感覚刺激は、例えば触覚刺激、聴覚刺激、および視覚刺激とされる。   The plurality of sensory stimuli are, for example, tactile stimuli, auditory stimuli, and visual stimuli.

好ましくは、優先順位として、前記触覚刺激に第1位が、前記聴覚刺激に第2位が、前記視覚刺激に第3位が、それぞれ定められる。前記発現制御部は、前記代替として、前記初期の感覚刺激以外のうちの前記優先順位が最も上位である感覚刺激を発現させればよい。   Preferably, as a priority order, the first place is determined for the tactile stimulus, the second place for the auditory stimulus, and the third place for the visual stimulus. The expression control unit may express the sensory stimulus having the highest priority among the sensory stimuli other than the initial sensory stimulus as the alternative.

他の態様において、タッチ式入力装置は、第1設定部と、第2設定部と、発現制御部と を有する。前記第1設定部は、ユーザによる指示に従って、複数の感覚刺激のそれぞれについて発現させるか発現させないかを設定する。前記第2設定部は、ユーザによる指示に従って、前記感覚刺激を発現させる複数の状況のそれぞれについて、前記複数の感覚刺激のいずれかを初期の感覚刺激に設定する。前記発現制御部は、入力が行われたときに、前記複数の状況のうちの当該入力に対応する状況について前記第2設定部によって設定されている前記初期の感覚刺激について、前記第1設定部によって発現させないと設定されている場合に、ユーザによる指示を受けることなく、当該初期の感覚刺激以外でありかつ前記第1設定によって発現させると設定されている感覚刺激のいずれかを当該初期の感覚刺激の代替として発現させる。   In another aspect, the touch input device includes a first setting unit, a second setting unit, and an expression control unit. The first setting unit sets whether to express each of the plurality of sensory stimuli according to an instruction from the user. The second setting unit sets one of the plurality of sensory stimuli as an initial sensory stimulus for each of a plurality of situations in which the sensory stimulus is developed in accordance with an instruction from a user. When the input is performed, the expression control unit sets the first setting unit for the initial sensory stimulus set by the second setting unit for a state corresponding to the input among the plurality of situations. If it is set not to be expressed by the first setting, any of the sensory stimuli other than the initial sensory stimulus and set to be expressed by the first setting without receiving an instruction from the user is set to the initial sense. Express as an alternative to stimulation.

本発明によると、所定の感覚刺激が発現しないことに因る操作性の低下を緩和することができる。   According to the present invention, it is possible to mitigate a decrease in operability due to the absence of a predetermined sensory stimulus.

本発明の一実施形態に係る操作パネルを備えた画像形成装置の外観の例を示す図である。1 is a diagram illustrating an example of an appearance of an image forming apparatus including an operation panel according to an embodiment of the present invention. 画像形成装置のハードウェア構成を示す図である。2 is a diagram illustrating a hardware configuration of an image forming apparatus. FIG. 感覚刺激が発現している状態を模式的に図である。It is a figure typically showing the state where sensory stimulation is expressing. 感覚刺激を発現する動作の設定のための入力画面の例を示す図である。It is a figure which shows the example of the input screen for the setting of the operation | movement which expresses a sensory stimulus. 感覚刺激を発現するタイミングの一例を示す図である。It is a figure which shows an example of the timing which expresses a sensory stimulus. 複数の感覚刺激の優先順位および代替の選択の例を示す図である。It is a figure which shows the example of the priority of several sensory stimuli, and alternative selection. 操作パネルの機能的構成を示す図である。It is a figure which shows the functional structure of an operation panel. 操作パネルにおける感覚刺激を発現する処理の流れを示す図である。It is a figure which shows the flow of the process which expresses the sensory stimulus in an operation panel. 振動処理の流れを示す図である。It is a figure which shows the flow of a vibration process. サウンド処理の流れを示す図である。It is a figure which shows the flow of a sound process.

図1には本発明の一実施形態に係る操作パネル31を備えた画像形成装置1の外観の例が、図2には画像形成装置のハードウェア構成が、それぞれ示されている。   FIG. 1 shows an example of the appearance of an image forming apparatus 1 including an operation panel 31 according to an embodiment of the present invention, and FIG. 2 shows a hardware configuration of the image forming apparatus.

画像形成装置1は、コピー機、プリンタ、およびファクシミリ機などの機能を集約したMFPである。図1のように、画像処理装置1は、操作パネル31、自動原稿送り装置(ADF:Auto Document Feeder)32、スキャナ33、プリンタ部34、および給紙部35を備えている。   The image forming apparatus 1 is an MFP that integrates functions such as a copier, a printer, and a facsimile machine. As shown in FIG. 1, the image processing apparatus 1 includes an operation panel 31, an automatic document feeder (ADF) 32, a scanner 33, a printer unit 34, and a paper feed unit 35.

操作パネル31は、タッチ式入力装置の例である。操作パネル31は、ユーザによる画像形成装置1に対する指示または情報の入力に用いられる。操作パネル31は、ユーザによる入力が行われたことに反応して感覚刺激を発現させる機能を有している。この操作パネル31の構成について後に詳述する。   The operation panel 31 is an example of a touch type input device. The operation panel 31 is used for inputting instructions or information to the image forming apparatus 1 by the user. The operation panel 31 has a function of expressing a sensory stimulus in response to input from the user. The configuration of the operation panel 31 will be described in detail later.

自動原稿送り装置32は、給紙トレイにセットされた1枚または複数枚の原稿シートを排紙トレイへ搬送し、搬送中に原稿シートの画像を光学的に読み取る。スキャナ33は、プラテンガラスの上に置かれた原稿シートから画像を光学的に読み取る。自動原稿送り装置32およびスキャナ33は、読み取った画像の各画素の階調値を表わす画像データを出力する。   The automatic document feeder 32 conveys one or more document sheets set on the sheet feed tray to a sheet discharge tray, and optically reads an image of the document sheet during conveyance. The scanner 33 optically reads an image from a document sheet placed on the platen glass. The automatic document feeder 32 and the scanner 33 output image data representing the gradation value of each pixel of the read image.

プリンタ部34は、コピー、ネットワークプリンティング(PCプリント)、およびファクシミリ受信において、入力された画像データに基づいて用紙に画像を印刷する画像形成部である。プリンタ部34は、例えば電子写真法によってフルカラーまたはモノクロの印刷画像を形成するプリンタエンジンを備えている。   The printer unit 34 is an image forming unit that prints an image on a sheet based on input image data in copying, network printing (PC printing), and facsimile reception. The printer unit 34 includes a printer engine that forms a full-color or monochrome print image by, for example, electrophotography.

給紙部35は、用紙を収納しておくための複数の給紙カセットと、各給紙カセットから用紙を繰り出すためのピックアップローラとを備えており、プリンタ部34に用紙を供給する。   The paper feed unit 35 includes a plurality of paper feed cassettes for storing paper and pickup rollers for feeding paper from each paper feed cassette, and supplies the paper to the printer unit 34.

図2のように、画像形成装置1は、上に述べた要素の他に、主制御部30、ファクシミリユニット36、ネットワークインタフェース37、および補助記憶装置38を備えている。   As shown in FIG. 2, the image forming apparatus 1 includes a main control unit 30, a facsimile unit 36, a network interface 37, and an auxiliary storage device 38 in addition to the elements described above.

主制御部30は、画像形成装置1の全体的な制御を受け持つ。主制御部30は、CPU30a、RAM30b、ROM30c、および画像処理部30dを備える。   The main control unit 30 is responsible for overall control of the image forming apparatus 1. The main control unit 30 includes a CPU 30a, a RAM 30b, a ROM 30c, and an image processing unit 30d.

ROM30cには、画像形成装置1をコピー機、ファクシミリ機、およびイメージリーダなどとして動作させるために、自動原稿送り装置32、スキャナ33およびプリンタ部34などを制御するプログラムが記憶されている。このプログラムは、必要に応じてRAM30bにロードされ、CPU30aによって実行される。   The ROM 30c stores a program for controlling the automatic document feeder 32, the scanner 33, the printer unit 34, and the like so that the image forming apparatus 1 operates as a copier, a facsimile machine, an image reader, and the like. This program is loaded into the RAM 30b as necessary and executed by the CPU 30a.

画像処理部30dは、自動原稿送り装置32またはスキャナ33から送られてきた画像データにシェーディング補正や色収差補正といった読取り光学系の特性に関わる処理を施す。さらに、画像データの圧縮/伸張、およびプリンタ部34に出力するラスタデータの生成などを行う。   The image processing unit 30d performs processing related to the characteristics of the reading optical system, such as shading correction and chromatic aberration correction, on the image data sent from the automatic document feeder 32 or the scanner 33. Further, compression / decompression of image data and generation of raster data to be output to the printer unit 34 are performed.

ファクシミリユニット36は、外部のファクシミリ端末との間でG3などのプロトコルを用いて画像データをやりとりする。ネットワークインターフェース37は、パーソナルコンピュータおよびスマートフォンといった外部の装置と通信回線を介して通信するためのインタフェースである。通信回線として、ローカルエリアネットワーク回線(LAN回線)、およびインターネットなどが用いられる。   The facsimile unit 36 exchanges image data with an external facsimile terminal using a protocol such as G3. The network interface 37 is an interface for communicating with external devices such as a personal computer and a smartphone via a communication line. As the communication line, a local area network line (LAN line), the Internet, or the like is used.

補助記憶装置38は、主制御部30から送られてくる画像データ、外部の装置から転送されてきたドキュメントなどを記憶する。補助記憶装置38として、ハードディスクドライブまたはSSD(Solid State Drive )などが用いられる。   The auxiliary storage device 38 stores image data sent from the main control unit 30, documents transferred from an external device, and the like. As the auxiliary storage device 38, a hard disk drive or an SSD (Solid State Drive) is used.

さて、操作パネル31は、タッチパネルディスプレイ31a、キーパネル31b、パネルコントローラ31c、バイブレータ31d、振動センサ31e、スピーカ31f、および音センサ31gを備えている。   The operation panel 31 includes a touch panel display 31a, a key panel 31b, a panel controller 31c, a vibrator 31d, a vibration sensor 31e, a speaker 31f, and a sound sensor 31g.

タッチパネルディスプレイ31aは、ユーザが指示または情報を入力するのための画面などを表示するフラット型ディスプレイと、その表示面に密着するタッチパッドとから構成される。タッチパネルディスプレイ31aは、ユーザによる入力に応じた信号をパネルコントローラ31cに送る。本実施形態において、タッチパネルディスプレイ31aは、入力が行われたことに反応してユーザの視覚によって知覚される視覚刺激を発現させるための刺激発生源でもある。   The touch panel display 31a includes a flat display that displays a screen for a user to input instructions or information, and a touch pad that is in close contact with the display surface. The touch panel display 31a sends a signal corresponding to the input by the user to the panel controller 31c. In the present embodiment, the touch panel display 31a is also a stimulus generation source for causing a visual stimulus perceived by the user's vision in response to input being performed.

キーパネル31bは、スターキーおよびストップキーなどのハードキーを有し、ハードキーが押されたことを示す信号をパネルコントローラ31cに送る。   The key panel 31b has hard keys such as a star key and a stop key, and sends a signal indicating that the hard key has been pressed to the panel controller 31c.

パネルコントローラ31cは、操作パネル31の動作を制御するとともに、印刷の実行の指示などのように操作パネル31以外の動作に関わるユーザからの指示を、主制御部30に通知する。パネルコントローラ31cは、制御用のプログラムを記憶する不揮発性メモリ、およびプログラムを実行するプロセッサなどを備えている。   The panel controller 31 c controls the operation of the operation panel 31 and notifies the main control unit 30 of an instruction from a user related to an operation other than the operation panel 31 such as an instruction to execute printing. The panel controller 31c includes a nonvolatile memory that stores a control program, a processor that executes the program, and the like.

バイブレータ31dは、入力が行われたことに反応してユーザの触覚によって知覚される触覚刺激を発現させるための刺激発生源である。バイブレータ31dは、例えばタッチパネルディスプレイ31aの背面側に配置され、タッチパネルディスプレイ31aにタッチしているユーザが体感できる程度の強さで操作パネル31を振動させる。   The vibrator 31d is a stimulus generation source for expressing a tactile stimulus perceived by a user's tactile sense in response to input. The vibrator 31d is disposed on the back side of the touch panel display 31a, for example, and vibrates the operation panel 31 with such a strength that a user touching the touch panel display 31a can experience it.

振動センサ31eは、バイブレータ31dによる操作パネル31の振動を検出する。振動センサ31eの出力に基づいて、バイブレータ31dが正常に動作したかどうかがパネルコントローラ31cによって判定される。   The vibration sensor 31e detects vibration of the operation panel 31 caused by the vibrator 31d. Based on the output of the vibration sensor 31e, the panel controller 31c determines whether or not the vibrator 31d has operated normally.

スピーカ31fは、入力が行われたことに反応してユーザの聴覚によって知覚される聴覚刺激を発現させるための刺激発生源であり、可聴域の音を出力する。スピーカ31fは、操作パネル31のハウジングの中に収められており、ハウジングの例えば背面に設けられた開口からスピーカ31fによる音が出る。   The speaker 31f is a stimulus generation source for generating an auditory stimulus perceived by the user's hearing in response to input, and outputs an audible sound. The speaker 31f is housed in the housing of the operation panel 31, and sound from the speaker 31f is emitted from an opening provided on the rear surface of the housing, for example.

音センサ31gは、例えばマイクロフォンであり、スピーカ31fの出力の音量を検出する。音センサ31gの出力に基づいて、スピーカ31fが正常に動作したかどうかがパネルコントローラ31cによって判定される。   The sound sensor 31g is a microphone, for example, and detects the volume of the output of the speaker 31f. Based on the output of the sound sensor 31g, the panel controller 31c determines whether or not the speaker 31f has operated normally.

図3には感覚刺激が発現している状態が模式的に示されている。   FIG. 3 schematically shows a state in which sensory stimulation is expressed.

操作パネル31は、感覚刺激として、触覚刺激、聴覚刺激、および視覚刺激を発現することができる。本実施形態において、触覚刺激はバイブレータ31dによる振動71であり、聴覚刺激はスピーカ31fにより出力されるサウンド(所定の音)72であり、視覚刺激はタッチパネルディスプレイ31aにより表示されるポインタ(所定の画像)73である。   The operation panel 31 can express tactile stimulation, auditory stimulation, and visual stimulation as sensory stimulation. In the present embodiment, the tactile stimulus is a vibration 71 by the vibrator 31d, the auditory stimulus is a sound (predetermined sound) 72 output from the speaker 31f, and the visual stimulus is a pointer (predetermined image) displayed on the touch panel display 31a. 73.

図3(A)〜(C)において、操作パネル31は、タッチパネルディスプレ31aの表示面に入力画面53を表示している。入力画面53は、ソフトキー84を有している。ユーザがこのソフトキー84にタッチしたとき、所定の感覚刺激を発現させる。   3A to 3C, the operation panel 31 displays an input screen 53 on the display surface of the touch panel display 31a. The input screen 53 has a soft key 84. When the user touches the soft key 84, a predetermined sensory stimulus is developed.

図4(A)においては、振動71が発現している。図4(B)においては、サウンド72が発現している。図4(C)においては、ポインタ73が発現している。つまり、ポインタ73が表示されている。図4(C)におけるポインタ73は、タッチ位置を中心とした同心円で表わされる波紋である。この波紋は、円が大きくなるように見せるアニメーションであってもよいし、複数の円からなる静止画像であってもよい。   In FIG. 4A, the vibration 71 is expressed. In FIG. 4B, the sound 72 is expressed. In FIG. 4C, the pointer 73 is expressed. That is, the pointer 73 is displayed. The pointer 73 in FIG. 4C is a ripple represented by a concentric circle centered on the touch position. This ripple may be an animation that makes a circle appear larger, or it may be a still image made up of a plurality of circles.

なお、ポインタ73は波紋の表示に限らず、他の図形の表示、ソフトキー84の色の変更、ソフトキー84の輝度の増大、点滅、ソフトキー84が押し込まれたように見せるアニメーションの表示など、他の視覚刺激であってもよい。   Note that the pointer 73 is not limited to the display of ripples, other graphics are displayed, the color of the soft key 84 is changed, the brightness of the soft key 84 is increased, blinking, and the animation is displayed as if the soft key 84 is pressed. Other visual stimuli may be used.

図4には感覚刺激を発現する動作の設定のための入力画面51,52の例が示されている。   FIG. 4 shows an example of input screens 51 and 52 for setting an operation for expressing a sensory stimulus.

本実施形態においては、感覚刺激を発現する状況として、ボタン押下75、ナビゲーション76、警告77、およびエラー78といった複数の状況が想定されている。感覚刺激を発現する状況とは、感覚刺激の発現の契機となるイベントであって、ユーザに対して何を示すために感覚刺激を発現させるかという発現の目的によって分類されている。   In the present embodiment, a plurality of situations such as a button press 75, a navigation 76, a warning 77, and an error 78 are assumed as situations in which sensory stimulation is expressed. The situation in which the sensory stimulus is expressed is an event that triggers the sensory stimulus, and is classified according to the purpose of the expression of what the sensory stimulus is expressed to indicate to the user.

すなわち、ボタン押下75は、ソフトキーがタッチされたというイベントである。これについては、タッチの操作感をユーザに与えるために感覚刺激が発現される。ナビゲーション76は、適切な入力に導くナビゲーションを行う画面において所定の入力がなされたというイベントである。これについては、タッチ位置の適否などをユーザに知らせるために感覚刺激が発現される。警告77は、好ましくない入力がなされたというイベントである。これについては、ユーザに入力内容の変更を促すために感覚刺激が発現される。エラー78は、誤った入力がなされたというイベントである。これについては、ユーザに入力の誤りを知らせるために感覚刺激が発現される。   That is, the button press 75 is an event that a soft key is touched. In this regard, a sensory stimulus is expressed in order to give the user a touch operation feeling. The navigation 76 is an event that a predetermined input is made on a screen for performing navigation leading to an appropriate input. For this, a sensory stimulus is expressed in order to inform the user of whether or not the touch position is appropriate. The warning 77 is an event that an undesirable input has been made. For this, a sensory stimulus is developed to prompt the user to change the input content. Error 78 is an event that an incorrect input has been made. For this, a sensory stimulus is developed to inform the user of an input error.

図4(A)に示す入力画面51は、3種の感覚刺激のうちの振動71およびサウンド72のそれぞれについて、発現させるか発現させないかをユーザが指定するための画面である。ポイント73については発現させるか発現させないか指定することができない。   The input screen 51 shown in FIG. 4A is a screen for the user to specify whether to express each of the vibration 71 and the sound 72 among the three types of sensory stimuli. It is not possible to specify whether the point 73 is expressed or not expressed.

入力画面51は、振動71を発現させること(有効)を指定するためのオンキー61、および発現させないこと(無効)を指定するためのオフキー62を有する。図では、発現させることが指定されており、それを表わすためにオンキー61が白黒反転によって強調されている。   The input screen 51 includes an on key 61 for designating that the vibration 71 is expressed (valid) and an off key 62 for designating that the vibration 71 is not expressed (invalid). In the figure, it is specified to express, and the ON key 61 is highlighted by black and white reversal to represent it.

また、入力画面51は、サウンド72を発現させること(有効)を指定するためのオンキー63b,63c,63d,63e,63f、および発現させないことを指定するためのオフキー63aを有する。オンキー63b,63c,63d,63e,63fは、サウンド72の音量レベルを5段階で指定するため選択キーでもある。図では、音量レベル3で発現させることが指定されており、それを表わすためにオンキー63dが他と異なる色で表示されている。   Further, the input screen 51 has on keys 63b, 63c, 63d, 63e, and 63f for designating that the sound 72 is expressed (valid), and an off key 63a for designating that the sound 72 is not expressed. The on keys 63b, 63c, 63d, 63e, and 63f are also selection keys for designating the volume level of the sound 72 in five stages. In the figure, the expression at the sound volume level 3 is specified, and the ON key 63d is displayed in a color different from the others in order to express it.

操作パネル31は、入力画面51におけるユーザによる指示に従って、振動71およびサウンド72のそれぞれについて、発現させるか発現させないかを設定する。この設定を「全体設定」と呼称する。全体設定は、第1設定の例である。   The operation panel 31 sets whether to express each of the vibration 71 and the sound 72 according to an instruction from the user on the input screen 51. This setting is referred to as “global setting”. The overall setting is an example of the first setting.

図4(B)に示す入力画面52は、上に述べた感覚刺激を発現させる複数の状況(イベント)のそれぞれについて、振動71、サウンド72、およびポインタ73のいずれを発現させるかをユーザが指定するための画面である。   In the input screen 52 shown in FIG. 4B, the user designates which of the vibration 71, the sound 72, and the pointer 73 is to be expressed for each of the plurality of situations (events) in which the sensory stimulation described above is expressed. It is a screen to do.

入力画面52は、ボタン押下75、ナビゲーション76、警告77、およびエラー78という複数のイベントのそれぞれに対応するドロップダウンリスト85,86,87,88を有する。これらドロップダウンリスト85,86,87,88のいずれにおいても、指定の選択肢は、振動71、サウンド72、ポインタ73、およびオフ(発現なし)70である。   The input screen 52 has drop-down lists 85, 86, 87, 88 corresponding to a plurality of events such as button press 75, navigation 76, warning 77, and error 78. In any of these drop-down lists 85, 86, 87, 88, the designated options are vibration 71, sound 72, pointer 73, and off (no expression) 70.

ただし、本実施形態において、全体設定において発現させないと設定されている感覚刺激は、各ドロップダウンリスト85,86,87,88における選択肢から除外され、選択できないことを表わすようにグレーアウト表示される。   However, in the present embodiment, sensory stimuli that are set not to be expressed in the overall setting are excluded from the options in the drop-down lists 85, 86, 87, and 88, and are grayed out to indicate that they cannot be selected.

操作パネル31は、入力画面52におけるユーザによる指示に従って、ボタン押下75、ナビゲーション76、警告77、およびエラー78のそれぞれについて、感覚刺激を発現させるか発現させないか、および発現させる場合にいずれの感覚刺激を発現させるかを設定する。この設定を「個別設定」と呼称し、発現させると設定する振動71、サウンド72、およびポインタ73のいずれを「初期の感覚刺激」と呼称する。個別設定は、第2設定の例である。   In accordance with an instruction from the user on the input screen 52, the operation panel 31 causes each of the button press 75, the navigation 76, the warning 77, and the error 78 to express sensory stimulation or not to generate any sensory stimulation. Set whether to express. This setting is referred to as “individual setting”, and any of vibration 71, sound 72, and pointer 73 that is set when expressed is referred to as “initial sensory stimulation”. The individual setting is an example of the second setting.

図4(B)の例では、ボタン押下75、ナビゲーション76、および警告77について振動71が設定され、エラー78についてサウンド72が設定される。   In the example of FIG. 4B, vibration 71 is set for button press 75, navigation 76, and warning 77, and sound 72 is set for error 78.

なお、入力画面51,52は、例えば画像形成装置1がユーザによる入力を待つ待機状態において表示される初期画面において、ユーザによって動作設定キーがタッチされたときに表示される。ユーザは、必要に応じて任意の時期に入力画面51を表示させて所望の指示を行い、それによって全体設定の内容または個別設定の内容を変更することができる。例えば、振動71についての全体設定として、発現させるを発現させないに変更することができる。その逆の変更をすることもできる。   The input screens 51 and 52 are displayed when, for example, the operation setting key is touched by the user on the initial screen displayed in a standby state in which the image forming apparatus 1 waits for input by the user. If necessary, the user can display the input screen 51 at an arbitrary time and give a desired instruction, thereby changing the contents of the entire settings or the contents of the individual settings. For example, the overall setting for the vibration 71 can be changed so that the expression is not expressed. The reverse is also possible.

図5には感覚刺激を発現するタイミングの一例が示されている。   FIG. 5 shows an example of timing at which a sensory stimulus is expressed.

図5においては、ユーザが入力画面54による入力を行っている。入力画面54は、印刷するドキュメントの各ページにウォーターマーク95を付加する場合に、ウォーターマーク95の選択および各ページにおける付加の位置などをユーザが指定するための画面である。   In FIG. 5, the user performs input on the input screen 54. The input screen 54 is a screen for the user to specify the selection of the watermark 95 and the addition position on each page when adding the watermark 95 to each page of the document to be printed.

付加の位置の指定は、ページのプレビュー画像90に重ねて表示されるウォーターマーク95をドラッグすることによって行われる。このドラッグに際して、個別設定によりナビゲーション76について設定されている初期の感覚刺激(ここでは振動71とする)が適時に発現される。   The designation of the additional position is performed by dragging the watermark 95 displayed so as to overlap the preview image 90 of the page. Upon this drag, the initial sensory stimulus (here, referred to as vibration 71) set for the navigation 76 by individual setting is expressed in a timely manner.

図5(A)において、ドラッグが開始されようとしている。この時点では振動71は発現されない。ユーザが例えば下方へドラッグし、図5(B)のように付加の可能な位置範囲90Aの下端縁(ボトム)にウォーターマーク95が接したとき、これ以上の下方へのドラッグはできないことを知らせるために、振動71が発現される。   In FIG. 5A, dragging is about to start. At this time, the vibration 71 is not expressed. For example, when the user drags downward and the watermark 95 is in contact with the lower edge (bottom) of the position range 90A that can be added as shown in FIG. Therefore, the vibration 71 is expressed.

また、ウォーターマーク95が付加の標準位置(例えばページの中央)にドラッグされると、ユーザによる指定の位置が標準位置であることを知らせるために、振動71が発現される。この他、サイズを指定するピンチ入力に際して、ピンチアウトにより位置範囲90Aからはみ出すサイズへの拡大が指示されたとき、またはピンチインにより下限サイズよりも小さいサイズへの縮小が指示されたときなどにも、振動71が発現される。   In addition, when the watermark 95 is dragged to an additional standard position (for example, the center of the page), a vibration 71 is generated to notify that the position designated by the user is the standard position. In addition, when a pinch input for designating a size is performed, when an instruction to expand to a size that protrudes from the position range 90A is instructed by a pinch out, or when a reduction to a size smaller than the lower limit size is instructed by a pinch in, etc. Vibration 71 is expressed.

ところで、所定の入力が行われて初期の感覚刺激を発現させるべきイベントが発生したときに、初期の感覚刺激を発現させることができない場合がある。そのような場合の1つとして、バイブレータ31dまたはスピーカ31fが故障その他の何らかの原因で正常に動作しない場合がある。他の1つとして、初期の感覚刺激に設定されている感覚刺激が、全体設定の内容の変更により発現させないに変更された場合がある。   By the way, there is a case where the initial sensory stimulus cannot be expressed when a predetermined input is performed and an event for generating the initial sensory stimulus occurs. As one of such cases, the vibrator 31d or the speaker 31f may not operate normally due to a failure or some other cause. As another one, there is a case where the sensory stimulus set as the initial sensory stimulus is changed so as not to be expressed by changing the contents of the entire setting.

操作パネル31は、所定の入力が行われことに反応して初期の感覚刺激を発現させることができない場合に、ユーザの指示を受けることなく、初期の感覚刺激の代替として初期の感覚刺激以外の感覚刺激を発現させる機能を有している。以下、この代替を発現させる仕組みを説明する。   When the operation panel 31 cannot express the initial sensory stimulus in response to the predetermined input, the operation panel 31 receives an instruction from the user and substitutes for the initial sensory stimulus as an alternative to the initial sensory stimulus. Has the function of expressing sensory stimulation. Hereinafter, a mechanism for expressing this alternative will be described.

図6には複数の感覚刺激の優先順位および代替の選択の例が示されている。   FIG. 6 shows an example of a plurality of sensory stimulus priorities and alternative selections.

代替とする感覚刺激を選択する際の優先順位として、図6(A)に示すように、触覚刺激(振動71)に第1位が、聴覚刺激(サウンド72)に第2位が、視覚刺激(ポインタ73)に第3位が、それぞれ定められている。この順位付けは、ユーザが最も感じるのは振動71でありその次に感じるのはサウンド72であるとの考えに基づいている。優先順位に従って、操作パネル31は、代替とする感覚刺激を次の通り選択する。   As priorities for selecting an alternative sensory stimulus, as shown in FIG. 6A, the first place is the tactile stimulus (vibration 71), the second place is the auditory stimulus (sound 72), and the visual stimulus. The third place is defined for each (pointer 73). This ranking is based on the idea that the vibration 71 is most felt by the user and the sound 72 is felt next. In accordance with the priority order, the operation panel 31 selects an alternative sensory stimulus as follows.

図6(B)のように、第1位の振動71が初期の感覚刺激であってかつこれを発現させることができない場合に、サウンド72およびポインタ73のうちの優先順位が上位である第2位のサウンド72を代替の感覚刺激とする。また、図6(C)のように、振動71もサウンド72も発現させることができない場合には、ポインタ73を代替の感覚刺激とする。   As shown in FIG. 6B, when the first vibration 71 is the initial sensory stimulus and cannot be expressed, the second of the sounds 72 and the pointer 73 having the highest priority. The sound 72 is used as an alternative sensory stimulus. In addition, as shown in FIG. 6C, when neither the vibration 71 nor the sound 72 can be expressed, the pointer 73 is used as an alternative sensory stimulus.

図6(D)のように、第2位のサウンド72が初期の感覚刺激であってかつこれを発現させることができない場合に、振動71およびポインタ73のうちの優先順位が上位である第1位の振動71を代替の感覚刺激とする。また、図6(E)のように、サウンド72も振動71も発現させることができない場合には、ポインタ73を代替の感覚刺激とする。   As shown in FIG. 6D, when the second-order sound 72 is the initial sensory stimulus and cannot be expressed, the first priority among the vibration 71 and the pointer 73 is higher. The position vibration 71 is used as an alternative sensory stimulus. As shown in FIG. 6E, when neither the sound 72 nor the vibration 71 can be expressed, the pointer 73 is used as an alternative sensory stimulus.

最下位(第3位)のポインタ73については、全体設定における設定の対象ではないので、全体設定の内容の変更によってポインタ73を発現させることができないという事態は生じない。ポインタ73を発現させるタッチパネルディスプレイ31aが故障することも起こり得るが、その場合にはタッチ入力そのものが行われないので、代替の感覚刺激を発現させる必要はない。   Since the lowermost (third) pointer 73 is not a setting target in the overall setting, there is no situation in which the pointer 73 cannot be expressed by changing the contents of the entire setting. Although the touch panel display 31a that develops the pointer 73 may break down, in that case, touch input itself is not performed, and thus it is not necessary to develop an alternative sensory stimulus.

図7には操作パネル31の機能的構成が示されている。操作パネル31には、全体設定部311、個別設定部312、および発現制御部313などが設けられる。これらの機能は、上に述べたパネルコントローラ31cのハードウェア構成により、および上に述べた制御用のプログラムがパネルコントローラ31cのプロセッサによって実行されることにより実現される。   FIG. 7 shows a functional configuration of the operation panel 31. The operation panel 31 includes an overall setting unit 311, an individual setting unit 312, an expression control unit 313, and the like. These functions are realized by the hardware configuration of the panel controller 31c described above, and when the control program described above is executed by the processor of the panel controller 31c.

全体設定部311は、図4(A)に示した入力画面51を用いたユーザによる指示に従って、複数の感覚刺激のそれぞれについて発現させるか発現させないかを設定する。つまり、全体設定を行う。全体設定部311は、第1設定部の例である。全体設定部311は、全体設定の設定内容を全体設定情報314として記憶する。   The overall setting unit 311 sets whether to express each of the plurality of sensory stimuli in accordance with an instruction from the user using the input screen 51 shown in FIG. That is, the entire setting is performed. The overall setting unit 311 is an example of a first setting unit. The overall setting unit 311 stores the setting contents of the overall setting as overall setting information 314.

個別設定部312は、図4(B)に示した入力画面53を用いたユーザによる指示に従って、感覚刺激を発現させる複数の状況(イベント)75〜78のそれぞれについて、複数の感覚刺激のいずれかを初期の感覚刺激に設定する。つまり、個別設定を行う。個別設定部312は、第2設定部の例である。個別設定部312は、個別設定の設定内容(つまりイベント別の初期の感覚刺激)を個別設定情報315として記憶する。   The individual setting unit 312 selects one of a plurality of sensory stimuli for each of a plurality of situations (events) 75 to 78 in which a sensory stimulus is expressed in accordance with an instruction from the user using the input screen 53 illustrated in FIG. To the initial sensory stimulus. That is, individual setting is performed. The individual setting unit 312 is an example of a second setting unit. The individual setting unit 312 stores the setting contents of the individual setting (that is, the initial sensory stimulus for each event) as the individual setting information 315.

発現制御部313は、タッチパネルディスプレイ31aによる入力が行われたときに、複数のイベントのうちの当該入力に対応するイベントを判別する。判別した状況ついて個別設定情報315を参照して、設定されている初期の感覚刺激を認識し、この初期の感覚刺激を発現させることができるかどうかを判定する。すなわち、バイブレータ31dまたはスピーカ31fに感覚刺激を発現させる制御を行い、振動センサ31eまたは音センサ31gの出力に基づいて、正常に動作したかどうかを確認する。正常に動作しなかった場合に、初期の感覚刺激を発現させることができないと判定する。また、全体設定情報314において発現させないと設定されている場合に、初期の感覚刺激を発現させることができないと判定する。そして、初期の感覚刺激を発現させることができない場合に、ユーザによる指示を受けることなく、初期の感覚刺激以外でありかつ全体設定によって発現させると設定されている感覚刺激のいずれかを初期の感覚刺激の代替として発現させる。   The expression control unit 313 determines an event corresponding to the input among a plurality of events when an input is made from the touch panel display 31a. With reference to the individual setting information 315 for the determined situation, the initial sensory stimulus that has been set is recognized, and it is determined whether or not the initial sensory stimulus can be expressed. That is, control is performed to cause the vibrator 31d or the speaker 31f to express sensory stimulation, and it is confirmed whether or not the device operates normally based on the output of the vibration sensor 31e or the sound sensor 31g. When it does not operate normally, it is determined that the initial sensory stimulus cannot be expressed. Further, when it is set not to be expressed in the overall setting information 314, it is determined that the initial sensory stimulus cannot be expressed. If the initial sensory stimulus cannot be expressed, any sensory stimulus other than the initial sensory stimulus and expressed by the overall setting without receiving an instruction from the user is used as the initial sensory stimulus. Express as an alternative to stimulation.

発現制御部313は、バイブレータ31dまたはスピーカ31fが正常に動作しなかったことを確認すると、ユーザによる指示を受けることなく、初期の感覚刺激(振動71またはサウンド72)についての全体設定の内容を「発現させない」に変更させる指令を全体設定部311に与える。この指令に従って、全体設定部311は、ユーザによる指示を受けることなく、全体設定情報314を変更する。   When the expression control unit 313 confirms that the vibrator 31d or the speaker 31f does not operate normally, the expression control unit 313 displays the contents of the entire setting for the initial sensory stimulus (vibration 71 or sound 72) without receiving an instruction from the user. A command for changing to “not to be expressed” is given to the entire setting unit 311. In accordance with this instruction, the overall setting unit 311 changes the overall setting information 314 without receiving an instruction from the user.

さらに、発現制御部313は、代替の感覚刺激を発現させたことを個別設定部312に通知する。この通知を受けると、個別設定部312は、ユーザによる指示を受けることなく、入力に対応するイベントについて、代替の感覚刺激を初期の感覚刺激に設定する。つまり、初期の感覚刺激を代替の感覚刺激に切り替えるように個別設定情報315を自動的に変更する。   Furthermore, the expression control unit 313 notifies the individual setting unit 312 that an alternative sensory stimulus has been developed. Upon receiving this notification, the individual setting unit 312 sets an alternative sensory stimulus as an initial sensory stimulus for the event corresponding to the input without receiving an instruction from the user. That is, the individual setting information 315 is automatically changed so that the initial sensory stimulus is switched to the alternative sensory stimulus.

以下、フローチャートを参照して操作パネル31における処理の流れを説明する。   Hereinafter, the flow of processing in the operation panel 31 will be described with reference to a flowchart.

図8には操作パネル31における感覚刺激を発現する処理の流れが、図9には振動処理の流れが、図10にはサウンド処理の流れが、それぞれ示されている。   FIG. 8 shows a flow of processing for expressing sensory stimulation on the operation panel 31, FIG. 9 shows a flow of vibration processing, and FIG. 10 shows a flow of sound processing.

図8において、タッチパネルディスプレイ31aによる所定の入力が行われるのを待つ(#11)。入力が行われると(#11でYES) 、当該入力に対応するイベントすなわち感覚刺激を発現させる状況を判別する(#12)。判別したイベントについての個別設定の内容がオフ(発現なし)70である場合には(#13でYES) 、図8のフローの処理を終える。   In FIG. 8, it waits for predetermined input by the touch panel display 31a (# 11). When an input is made (YES in # 11), an event corresponding to the input, that is, a situation in which a sensory stimulus is developed is determined (# 12). If the content of the individual setting for the determined event is OFF (no expression) 70 (YES in # 13), the process of the flow of FIG.

判別したイベントについての個別設定の内容がオフ(発現なし)70ではない場合には(#13でNO) 、次の通り個別設定の内容、すなわち設定されている初期の感覚刺激に応じた処理を実行する。   If the content of the individual setting for the determined event is not off (no expression) 70 (NO in # 13), the processing according to the content of the individual setting, that is, the initial sensory stimulus set as follows Run.

初期の感覚刺激がポインタ73である場合には、ポインタ73を発現させる(#14)。つまり、図3(C)の例のようにポインタ73を表示する。   If the initial sensory stimulus is the pointer 73, the pointer 73 is expressed (# 14). That is, the pointer 73 is displayed as in the example of FIG.

初期の感覚刺激が振動71である場合には、必要に応じて振動71の代替の感覚刺激を発現させる振動処理を実行する(#15)。   If the initial sensory stimulus is the vibration 71, a vibration process for expressing a sensory stimulus alternative to the vibration 71 is executed as necessary (# 15).

初期の感覚刺激がサウンド72である場合には、必要に応じてサウンド72の代替の感覚刺激を発現させるサウンド処理を実行する(#16)。   If the initial sensory stimulus is the sound 72, sound processing for expressing an alternative sensory stimulus for the sound 72 is executed as necessary (# 16).

図9において、全体設定の振動71についての設定が「発現させる(オン:ON)」であるかどうかをチェックする(#500)。「発現させる」と設定していない場合には(#500でNO) 、ステップ#505へ進む。   In FIG. 9, it is checked whether or not the setting for the vibration 71 in the overall setting is “express (ON: ON)” (# 500). If it is not set to “express” (NO in # 500), the process proceeds to step # 505.

「発現させる」と設定している場合には(#500でYES) 、振動71を発現させるようにバイブレータ31dを駆動し(#501)、バイブレータ31dの動作の正否を確認する(#502)。   If it is set to “express” (YES in # 500), the vibrator 31d is driven to generate the vibration 71 (# 501), and the correctness of the operation of the vibrator 31d is confirmed (# 502).

バイブレータ31dが正常に動作した場合には(#503でYES) 、図8のフローのステップ#12で判別したイベントについて、個別設定の内容、すなわち初期の感覚刺激を振動71に設定する(#508)。このとき、元々、振動71に設定されている場合には初期の感覚刺激は変更されない。しかし、元々はサウンド72が設定されている場合にステップ#508が実行されることもある。この場合には、初期の感覚刺激がサウンド72から振動71へ変更される。   When the vibrator 31d operates normally (YES in # 503), for the event determined in step # 12 of the flow of FIG. 8, the content of individual setting, that is, the initial sensory stimulus is set to the vibration 71 (# 508). ). At this time, when the vibration 71 is originally set, the initial sensory stimulus is not changed. However, step # 508 may be executed when the sound 72 is originally set. In this case, the initial sensory stimulus is changed from the sound 72 to the vibration 71.

いずれにしても、ステップ#508が実行されるのは、バイブレータ31dが正常に動作した場合であって、入力が行われたことに反応して感覚刺激が発現された場合である。   In any case, step # 508 is executed when the vibrator 31d operates normally and when a sensory stimulus is expressed in response to the input.

一方、バイブレータ31dが正常に動作しなかった場合には(#503でNO) 、ユーザの指示を受けることなく、振動71についての全体設定を「発現させない(オフ:OFF)」に強制的に切り替える(#504)。   On the other hand, when the vibrator 31d does not operate normally (NO in # 503), the entire setting for the vibration 71 is forcibly switched to “not expressed (OFF: OFF)” without receiving a user instruction. (# 504).

続いて、全体設定のサウンド72についての設定が「発現させる(オン:ON)」であるかどうかをチェックする(#505)。「発現させる」と設定されている場合には(#505でYES) 、サウンド処理を実行する(#506)。このステップ#506の処理は、図8のフローにおけるステップ#16のサウンド処理と同じ処理である。   Subsequently, it is checked whether or not the setting for the sound 72 of the overall setting is “express (ON: ON)” (# 505). If “express” is set (YES in # 505), sound processing is executed (# 506). The process of step # 506 is the same as the sound process of step # 16 in the flow of FIG.

全体設定のサウンド72についての設定が「発現させる」ではない場合には(#505でNO) 、振動71の代替として、ポインタ73を発現させる(#507)。そして、図8のフローのステップ#12で判別したイベントについて、個別設定の内容(初期の感覚刺激)をポインタ73に切り替える(#509)。   If the setting of the overall sound 72 is not “express” (NO in # 505), the pointer 73 is expressed as an alternative to the vibration 71 (# 507). Then, for the event determined in step # 12 of the flow of FIG. 8, the content of the individual setting (initial sensory stimulus) is switched to the pointer 73 (# 509).

図10において、全体設定のサウンド72についての設定が「発現させる(オン:ON)」であるかどうかをチェックする(#600)。「発現させる」と設定していない場合には(#600でNO) 、ステップ#605へ進む。   In FIG. 10, it is checked whether or not the setting for the sound 72 of the overall setting is “express (ON: ON)” (# 600). If it is not set to “express” (NO in # 600), the process proceeds to step # 605.

「発現させる」と設定している場合には(#600でYES) 、サウンド72を発現させるようにスピーカ31fを駆動し(#601)、スピーカ31fの動作の正否を確認する(#602)。   If it is set to “express” (YES in # 600), the speaker 31f is driven to express the sound 72 (# 601), and whether the operation of the speaker 31f is correct or not is confirmed (# 602).

スピーカ31fが正常に動作した場合には(#603でYES) 、図8のフローのステップ#12で判別したイベントについて、個別設定の内容(初期の感覚刺激)をサウンド72に設定する(#508)。このとき、元々、サウンド72に設定されている場合には初期の感覚刺激は変更されない。しかし、元々は振動71が設定されている場合にステップ#608が実行されることもある。この場合には、初期の感覚刺激が振動71からサウンド72へ変更される。   When the speaker 31f operates normally (YES in # 603), the individual setting content (initial sensory stimulus) is set in the sound 72 for the event determined in step # 12 of the flow of FIG. 8 (# 508). ). At this time, when the sound 72 is originally set, the initial sensory stimulus is not changed. However, step # 608 may be executed when the vibration 71 is originally set. In this case, the initial sensory stimulus is changed from the vibration 71 to the sound 72.

いずれにしても、ステップ#608が実行されるのは、スピーカ31fが正常に動作した場合であって、入力が行われたことに反応して感覚刺激が発現された場合である。   In any case, step # 608 is executed when the speaker 31f operates normally and when a sensory stimulus is expressed in response to the input.

一方、スピーカ31fが正常に動作しなかった場合には(#603でNO) 、ユーザの指示を受けることなく、サウンド72についての全体設定を「発現させない(オフ:OFF)」に強制的に切り替える(#504)。   On the other hand, if the speaker 31f does not operate normally (NO in # 603), the entire setting for the sound 72 is forcibly switched to “not expressed (OFF: OFF)” without receiving a user instruction. (# 504).

続いて、全体設定の振動71についての設定が「発現させる(オン:ON)」であるかどうかをチェックする(#605)。「発現させる」と設定されている場合には(#605でYES) 、振動処理を実行する(#606)。このステップ#606の処理は、図8のフローにおけるステップ#15の振動処理と同じ処理である。   Subsequently, it is checked whether or not the setting for the vibration 71 in the overall setting is “express (ON: ON)” (# 605). If “express” is set (YES in # 605), vibration processing is executed (# 606). The process of step # 606 is the same process as the vibration process of step # 15 in the flow of FIG.

全体設定の振動71についての設定が「発現させる」ではない場合には(#605でNO) 、サウンド72の代替として、ポインタ73を発現させる(#607)。そして、図8のフローのステップ#12で判別したイベントについて、個別設定の内容(初期の感覚刺激)をポインタ73に切り替える(#509)。   If the setting for the overall vibration 71 is not “express” (NO in # 605), the pointer 73 is expressed as an alternative to the sound 72 (# 607). Then, for the event determined in step # 12 of the flow of FIG. 8, the content of the individual setting (initial sensory stimulus) is switched to the pointer 73 (# 509).

以上の実施形態によると、イベントについて設定されている初期の感覚刺激を発現させることができない場合に代替の感覚刺激を発現させるので、所定の感覚刺激が発現しないことに因る操作性の低下を緩和することができる。   According to the above embodiment, since the alternative sensory stimulus is expressed when the initial sensory stimulus set for the event cannot be expressed, the operability is reduced due to the absence of the predetermined sensory stimulus. Can be relaxed.

バイブレータ31dまたはスピーカ31fが正常に動作しないことを検知したときに、全体設定における振動71またはサウンド72についての設定を「発現させない」に強制的に切り替えるので、バイブレータ31dまたはスピーカ31fが故障しているにも関わらず、所定の入力が行われる都度に動作を確認するという無駄な処理を省略することができる。   When it is detected that the vibrator 31d or the speaker 31f does not operate normally, the setting for the vibration 71 or the sound 72 in the overall setting is forcibly switched to “not to be expressed”, so the vibrator 31d or the speaker 31f is out of order. Nevertheless, it is possible to omit a useless process of checking the operation every time a predetermined input is performed.

上に述べた実施形態においては、代替の感覚刺激を発現させる場合に、初期の感覚刺激を代替の感覚刺激に切り替えるように、個別設定の内容を変更した。しかし、必ずしも切変更する必要はなく、個別設定の内容をユーザが入力画面52によって指定した内容のまま保持するようにしてもよい。   In the embodiment described above, the content of the individual setting is changed so that the initial sensory stimulus is switched to the alternative sensory stimulus when the alternative sensory stimulus is expressed. However, it is not always necessary to change the setting, and the content of the individual setting may be retained as the content specified by the user on the input screen 52.

上に述べた実施形態においては、全体設定の内容を個別設定の内容に対して優先させるようにした。これに限らず、全体設定と個別設定とを互いに独立した設定としてもよい。また、個別設定の内容を全体設定の内容に対して優先させるようにしてもよい。つまり、例えば振動71が全体設定において「発現させない(オフ:OFF)」に設定されている場合であっても、個別設定において「オン:ON」に設定されているイベントが発生したときには、振動71をお発現させるようにしてもよい。   In the embodiment described above, the contents of the overall settings are given priority over the contents of the individual settings. Not limited to this, the overall setting and the individual setting may be independent of each other. Further, the contents of the individual settings may be given priority over the contents of the entire settings. That is, for example, even when the vibration 71 is set to “not to be expressed (OFF: OFF)” in the overall setting, when the event set to “ON: ON” in the individual setting occurs, the vibration 71 You may make it express.

上に述べた実施形態においては、全体設定および個別設定の両方を行う構成を挙げた。しかし、いずれか片方(全体設定または個別設定)を行うように構成してもよい。例えば、個別設定のみを行う場合には、図9のフローにおけるステップ#500および図10のフローにおけるステップ#600を省略すればよい。   In the embodiment described above, the configuration in which both the global setting and the individual setting are performed has been described. However, it may be configured to perform either one (global setting or individual setting). For example, when only individual setting is performed, step # 500 in the flow of FIG. 9 and step # 600 in the flow of FIG. 10 may be omitted.

サウンド72の音量レベルを複数段階に指定可能としたように、振動71についても強度レベルを複数段階に指定可能としてもよい。イベントを細分化し、イベント別に振動71の強度レベル、サウンド72の音量レベル、およびポインタ73の種類(図形、点滅、発光色など)をユーザが指定することができるようにすることができる。   Just as the volume level of the sound 72 can be specified in a plurality of levels, the intensity level of the vibration 71 may be specified in a plurality of levels. The event can be subdivided so that the user can specify the intensity level of the vibration 71, the volume level of the sound 72, and the type of the pointer 73 (graphic, blinking, emission color, etc.) for each event.

発現可能な感覚刺激の数は、2以上であればよい。触覚刺激、聴覚刺激、および視覚刺激の任意の2つを発現可能な感覚刺激としてもよい。臭覚刺激を発現させてもよい。1つのイベントに対して複数種の感覚刺激を発現させてもよい。   The number of sensory stimuli that can be expressed may be two or more. A sensory stimulus that can express any two of a tactile stimulus, an auditory stimulus, and a visual stimulus may be used. An olfactory stimulus may be developed. Multiple types of sensory stimuli may be developed for one event.

全体設定部311、個別設定部312、および発現制御部313をパネルコントローラ31cに設けたが、これら機能の一部または全部を例えば主制御部30に設けてもよい。その場合にタッチ式入力装置は、操作パネル31と主制御部30とによって構成される。   Although the overall setting unit 311, the individual setting unit 312 and the expression control unit 313 are provided in the panel controller 31c, some or all of these functions may be provided in the main control unit 30, for example. In that case, the touch-type input device includes the operation panel 31 and the main control unit 30.

タッチ式入力装置は、画像形成装置1以外の機器に備わるものでもよい。その他、画像形成装置1およびタッチ式入力装置としての操作パネル31のそれぞれの全体または各部の構成、優先順位、処理の内容、順序、またはタイミングなどは、本発明の趣旨に沿って適宜変更することができる。   The touch input device may be provided in a device other than the image forming apparatus 1. In addition, the configuration, priority, processing contents, order, or timing of the entire or each part of the image forming apparatus 1 and the operation panel 31 as a touch-type input device may be appropriately changed in accordance with the spirit of the present invention. Can do.

1 画像形成装置
31 操作パネル(タッチ式入力装置)
71 振動(感覚刺激、触覚刺激)
72 サウンド(感覚刺激、聴覚刺激)
73 ポインタ(視覚刺激、聴覚刺激)
311 全体設定部(第1設定部)
312 個別設定部(第2設定部、設定部)
313 発現制御部
31a タッチパネルディスプレイ(刺激発生源)
31d バイブレータ(刺激発生源)
31f スピーカ(刺激発生源)
1 Image forming apparatus 31 Operation panel (touch input device)
71 Vibration (sensory stimulus, tactile stimulus)
72 Sound (sensory stimulation, auditory stimulation)
73 Pointer (visual stimulus, auditory stimulus)
311 Overall setting unit (first setting unit)
312 Individual setting unit (second setting unit, setting unit)
313 Expression control unit 31a Touch panel display (stimulation source)
31d Vibrator (stimulation source)
31f Speaker (stimulation source)

Claims (11)

入力が行われたことに反応して感覚刺激を発現させるタッチ式入力装置であって、
複数の感覚刺激のいずれかを初期の感覚刺激に設定する設定部と、
入力が行われたときに、前記初期の感覚刺激を発現させることができない場合に、ユーザによる指示を受けることなく、前記複数の感覚刺激のうちの前記初期の感覚刺激以外のいずれかを、当該初期の感覚刺激の代替として発現させる発現制御部と、
を有することを特徴とするタッチ式入力装置。
A touch input device that expresses sensory stimuli in response to input,
A setting unit for setting one of a plurality of sensory stimuli as an initial sensory stimulus;
If the initial sensory stimulus cannot be expressed when input is performed, any one of the plurality of sensory stimuli other than the initial sensory stimulus is not received without receiving an instruction from the user. An expression control unit to be expressed as an alternative to the initial sensory stimulation;
A touch input device characterized by comprising:
前記複数の感覚刺激の互いに異なる1つをそれぞれ発現させる複数の刺激発生源を備え、
前記発現制御部は、前記入力が行われたときに、前記複数の刺激発生源のうちの前記初期の感覚刺激を発現させる刺激発生源の動作が正常であるかないかを判定し、正常でないと判定した場合に、前記代替の感覚刺激を発現させる、
請求項1記載のタッチ式入力装置。
A plurality of stimulus generation sources that respectively express different ones of the plurality of sensory stimuli,
The expression control unit determines whether or not the operation of the stimulus generation source that expresses the initial sensory stimulus among the plurality of stimulus generation sources is normal when the input is performed. If determined, to express the alternative sensory stimulus,
The touch-type input device according to claim 1.
前記複数の感覚刺激は、触覚刺激、聴覚刺激、および視覚刺激であって、
優先順位として、前記触覚刺激に第1位が、前記聴覚刺激に第2位が、前記視覚刺激に第3位が、それぞれ定められており、
前記発現制御部は、前記代替として、前記初期の感覚刺激以外のうちの前記優先順位が最も上位である感覚刺激を発現させる、
請求項1または2記載のタッチ式入力装置。
The plurality of sensory stimuli are tactile stimuli, auditory stimuli, and visual stimuli,
As a priority order, the first place for the tactile stimulus, the second place for the auditory stimulus, and the third place for the visual stimulus are determined, respectively.
The expression control unit, as the alternative, expresses the sensory stimulus having the highest priority among the initial sensory stimuli,
The touch-type input device according to claim 1 or 2.
前記設定部は、前記発現制御部が前記代替の感覚刺激を発現させる場合に、ユーザによる指示を受けることなく、当該代替の感覚刺激を前記初期の感覚刺激に設定する、
請求項1ないし3のいずれかに記載のタッチ式入力装置。
The setting unit sets the alternative sensory stimulus as the initial sensory stimulus without receiving an instruction from the user when the expression control unit causes the alternative sensory stimulus to be expressed.
The touch-type input device according to claim 1.
入力が行われたことに反応して感覚刺激を発現させるタッチ式入力装置であって、
ユーザによる指示に従って、複数の感覚刺激のそれぞれについて発現させるか発現させないかを設定する第1設定部と、
ユーザによる指示に従って、前記感覚刺激を発現させる複数の状況のそれぞれについて、前記複数の感覚刺激のいずれかを初期の感覚刺激に設定する第2設定部と、
入力が行われたときに、前記複数の状況のうちの当該入力に対応する状況について前記第2設定部によって設定されている前記初期の感覚刺激について、前記第1設定部によって発現させないと設定されている場合に、ユーザによる指示を受けることなく、当該初期の感覚刺激以外でありかつ前記第1設定によって発現させると設定されている感覚刺激のいずれかを当該初期の感覚刺激の代替として発現させる発現制御部と、
を有することを特徴とするタッチ式入力装置。
A touch input device that expresses sensory stimuli in response to input,
A first setting unit configured to set whether or not to express each of the plurality of sensory stimuli according to an instruction by the user;
A second setting unit configured to set one of the plurality of sensory stimuli as an initial sensory stimulus for each of the plurality of situations in which the sensory stimulus is expressed according to an instruction by a user;
When the input is performed, the initial sensory stimulus set by the second setting unit for the situation corresponding to the input among the plurality of situations is set not to be expressed by the first setting unit. If any of the sensory stimuli other than the initial sensory stimulus is expressed by the first setting without receiving an instruction from the user, the sensory stimulus is expressed as an alternative to the initial sensory stimulus. An expression control unit;
A touch input device characterized by comprising:
複数の感覚刺激の互いに異なる1つをそれぞれ発現させる複数の刺激発生源を備え、
前記発現制御部は、前記入力が行われたときに、前記複数の刺激発生源のうちの当該入力に対応する状況について前記第2設定部によって設定されている前記初期の感覚刺激を発現させる刺激発生源の動作が正常であるかないかを判定し、正常でないと判定した場合に、当該初期の感覚刺激について前記第1設定部によって発現させると設定されている場合であっても、前記代替の感覚刺激を発現させる、
請求項5記載のタッチ式入力装置。
Comprising a plurality of stimulus sources each expressing a different one of a plurality of sensory stimuli,
The expression control unit, when the input is performed, a stimulus that causes the initial sensory stimulus to be expressed by the second setting unit for a situation corresponding to the input among the plurality of stimulus generation sources Whether the operation of the source is normal or not, and when it is determined that the source sensor is not normal, even if the initial sensory stimulus is set to be expressed by the first setting unit, the alternative Express sensory stimulation,
The touch input device according to claim 5.
前記複数の感覚刺激は、触覚刺激、聴覚刺激、および視覚刺激であって、
優先順位として、前記触覚刺激に第1位が、前記聴覚刺激に第2位が、前記視覚刺激に第3位が、それぞれ定められており、
前記発現制御部は、前記代替として、前記初期の感覚刺激以外のうちの前記優先順位が最も上位である感覚刺激を発現させる、
請求項5または6記載のタッチ式入力装置。
The plurality of sensory stimuli are tactile stimuli, auditory stimuli, and visual stimuli,
As a priority order, the first place for the tactile stimulus, the second place for the auditory stimulus, and the third place for the visual stimulus are determined, respectively.
The expression control unit, as the alternative, expresses the sensory stimulus having the highest priority among the initial sensory stimuli,
The touch-type input device according to claim 5 or 6.
前記第2設定部は、前記発現制御部が前記代替の感覚刺激を発現させる場合に、ユーザによる指示を受けることなく、前記入力に対応する状況について当該代替の感覚刺激を前記初期の感覚刺激に設定する、
請求項5ないし7のいずれかに記載のタッチ式入力装置。
The second setting unit converts the alternative sensory stimulus into the initial sensory stimulus for a situation corresponding to the input without receiving an instruction from the user when the expression control unit causes the alternative sensory stimulus to be expressed. Set,
The touch input device according to claim 5.
用紙に画像を形成する画像形成装置であって、
ユーザが前記画像の形成の条件を指定するための入力手段として、請求項1ないし8のいずれかに記載のタッチ式入力装置を備える、
ことを特徴とする画像形成装置。
An image forming apparatus for forming an image on paper,
The touch input device according to any one of claims 1 to 8 is provided as input means for a user to specify conditions for forming the image.
An image forming apparatus.
入力が行われたことに反応して感覚刺激を発現させるタッチ式入力装置の制御方法であって、
複数の感覚刺激のいずれかを初期の感覚刺激に設定し、
入力が行われたときに、前記初期の感覚刺激を発現させることができない場合に、ユーザによる指示を受けることなく、前記複数の感覚刺激のうちの前記初期の感覚刺激以外のいずれかを当該初期の感覚刺激の代替として発現させる、
ことを特徴とするタッチ式入力装置の制御方法。
A method for controlling a touch input device that develops sensory stimulation in response to input being performed,
Set one of multiple sensory stimuli as the initial sensory stimulus,
If the initial sensory stimulus cannot be expressed when the input is performed, any one of the plurality of sensory stimuli other than the initial sensory stimulus is received without receiving an instruction from the user. Expressed as an alternative to sensory stimulation of
A control method for a touch-type input device.
入力が行われたことに反応して感覚刺激を発現させるタッチ式入力装置の制御方法であって、
ユーザによる指示に従って、複数の感覚刺激のそれぞれについて発現させるか発現させないかを設定する第1設定と、
ユーザによる指示に従って、前記感覚刺激を発現させる複数の状況のそれぞれについて、前記複数の感覚刺激のいずれかを初期の感覚刺激に設定する第2設定と、を行い、
入力が行われたときに、前記複数の状況のうちの当該入力に対応する状況について前記第2設定部によって設定されている前記初期の感覚刺激について、前記第1設定によって発現させないと設定されている場合に、ユーザによる指示を受けることなく、当該初期の感覚刺激以外でありかつ前記第1設定によって発現させると設定されている感覚刺激のいずれかを当該初期の感覚刺激の代替として発現させる、
ことを特徴とするタッチ式入力装置の制御方法。
A method for controlling a touch input device that develops sensory stimulation in response to input being performed,
A first setting for setting whether to express each of the plurality of sensory stimuli according to an instruction from the user;
In accordance with an instruction from the user, for each of a plurality of situations in which the sensory stimulus is expressed, a second setting for setting any one of the plurality of sensory stimuli as an initial sensory stimulus is performed.
When the input is performed, the initial sensory stimulus set by the second setting unit for the situation corresponding to the input among the plurality of situations is set not to be expressed by the first setting. If any of the sensory stimuli other than the initial sensory stimulus and expressed by the first setting is expressed as an alternative to the initial sensory stimulus without receiving an instruction from the user,
A control method for a touch-type input device.
JP2016049124A 2016-03-14 2016-03-14 Touch-type input device, image forming apparatus, and control method for touch-type input device Active JP6579005B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016049124A JP6579005B2 (en) 2016-03-14 2016-03-14 Touch-type input device, image forming apparatus, and control method for touch-type input device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016049124A JP6579005B2 (en) 2016-03-14 2016-03-14 Touch-type input device, image forming apparatus, and control method for touch-type input device

Publications (2)

Publication Number Publication Date
JP2017167577A true JP2017167577A (en) 2017-09-21
JP6579005B2 JP6579005B2 (en) 2019-09-25

Family

ID=59913773

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016049124A Active JP6579005B2 (en) 2016-03-14 2016-03-14 Touch-type input device, image forming apparatus, and control method for touch-type input device

Country Status (1)

Country Link
JP (1) JP6579005B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019164485A (en) * 2018-03-19 2019-09-26 ソニー株式会社 Information processing device, information processing method and recording medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1146377A (en) * 1997-07-28 1999-02-16 Seiko Epson Corp Electronic device, notice method and recording medium recording control program of the electronic device
JPH11316635A (en) * 1998-02-18 1999-11-16 Seiko Epson Corp Portable information processor, control method and recording medium
JP2010081519A (en) * 2008-09-29 2010-04-08 Kyocera Corp Mobile terminal
US20150253852A1 (en) * 2014-03-07 2015-09-10 Canon Kabushiki Kaisha Portable apparatus, control method and program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1146377A (en) * 1997-07-28 1999-02-16 Seiko Epson Corp Electronic device, notice method and recording medium recording control program of the electronic device
JPH11316635A (en) * 1998-02-18 1999-11-16 Seiko Epson Corp Portable information processor, control method and recording medium
JP2010081519A (en) * 2008-09-29 2010-04-08 Kyocera Corp Mobile terminal
US20150253852A1 (en) * 2014-03-07 2015-09-10 Canon Kabushiki Kaisha Portable apparatus, control method and program
JP2015170213A (en) * 2014-03-07 2015-09-28 キヤノン株式会社 Handheld equipment, and control method and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019164485A (en) * 2018-03-19 2019-09-26 ソニー株式会社 Information processing device, information processing method and recording medium
US11170615B2 (en) 2018-03-19 2021-11-09 Sony Corporation Information processing apparatus, information processing method, and recording medium

Also Published As

Publication number Publication date
JP6579005B2 (en) 2019-09-25

Similar Documents

Publication Publication Date Title
US10165145B2 (en) Image processing apparatus, method for controlling image processing apparatus, and storage medium
EP3579534B1 (en) Image processing apparatus that executes job, control method therefor, and storage medium
JP2007142912A (en) Operation panel and customizing system thereof
US20180091674A1 (en) Image reading device and image forming apparatus
JP5148675B2 (en) Image processing apparatus, image processing system, image processing method, program, and recording medium thereof
JP6106153B2 (en) Image forming apparatus
JP2017211853A (en) Image forming apparatus
JP2000047532A (en) Image forming device, method for controlling display thereof, and recording medium
JP6579005B2 (en) Touch-type input device, image forming apparatus, and control method for touch-type input device
US10834278B2 (en) Image forming apparatus performing notification by voice, storage medium storing control program, and control method
US8988694B2 (en) Image forming apparatus, application executing method, and non-transitory computer-readable recording medium encoded with application executing program
US9922275B2 (en) Image forming apparatus comprising a punch mechanism forming a punch hole in a sheet on which an image is formed by an image forming unit
JP2009278373A (en) Image processor, image formation device, and computer program
JP2013077961A (en) Image forming apparatus and printer driver program
JP6354696B2 (en) Display device and image processing device
JP6465050B2 (en) Image forming apparatus
JP2009076959A (en) Image forming apparatus and system
JP2008117193A (en) Touch panel device and image processing unit having the same
JP2012094054A (en) Operation device and image forming apparatus
WO2024024643A1 (en) Image formation device
US10983673B2 (en) Operation screen display device, image processing apparatus, and recording medium
WO2024024642A1 (en) Image forming apparatus
US11985277B2 (en) Image forming apparatus and remote operation control method
JP2022141256A (en) Image forming apparatus and program
US11050900B2 (en) Electronic apparatus and image forming apparatus causing display to display operation procedure

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181214

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190724

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190730

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190812

R150 Certificate of patent or registration of utility model

Ref document number: 6579005

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150