JP2019067111A - 表示制御装置及びプログラム - Google Patents

表示制御装置及びプログラム Download PDF

Info

Publication number
JP2019067111A
JP2019067111A JP2017191548A JP2017191548A JP2019067111A JP 2019067111 A JP2019067111 A JP 2019067111A JP 2017191548 A JP2017191548 A JP 2017191548A JP 2017191548 A JP2017191548 A JP 2017191548A JP 2019067111 A JP2019067111 A JP 2019067111A
Authority
JP
Japan
Prior art keywords
display
input
sticky note
identification information
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017191548A
Other languages
English (en)
Other versions
JP6832822B2 (ja
Inventor
謙二 秋友
Kenji Akitomo
謙二 秋友
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2017191548A priority Critical patent/JP6832822B2/ja
Priority to CN201811142605.9A priority patent/CN109656435B/zh
Priority to US16/147,722 priority patent/US10768807B2/en
Publication of JP2019067111A publication Critical patent/JP2019067111A/ja
Application granted granted Critical
Publication of JP6832822B2 publication Critical patent/JP6832822B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】入力装置から受信された識別情報を利用することにより、適切なオブジェクトを表示したり、配置したりすることが出来ることを目的とする。【解決手段】入力装置から識別情報を受信する識別情報受信手段と、入力装置による手書き入力を受け付け可能な入力手段と、手書き入力からオブジェクトを生成するオブジェクト生成手段と、表示領域に、前記オブジェクトを表示させる制御を行う表示制御手段と、を備え、オブジェクト生成手段は、前記識別情報に基づいて、前記手書き入力から付箋オブジェクト又は描画オブジェクトを生成する。【選択図】図1

Description

本発明は表示部の表示領域にオブジェクトを表示させる制御をする表示制御装置等に関する。
近年、大型のディスプレイを設けた表示装置が普及しつつあることから、当該表示装置を電子黒板のように利用して、会議や授業が行われる場面が増えつつある。これらの表示装置を利用して、ブレインストーミングを行う場合には、アイデアをメモとして貼り付けていく方法(例えば、KJ法)を利用することが多い。
ここで、付箋のような表示を実現する方法として、例えば特許文献1には、現在表示中の画像の一部又は全部を移動対象画像として選択して移動させるための所定の選択移動操作、並びに現在表示中の画像の一部を移動禁止画像として選択するための所定の選択操作が受け付け可能になっており、所定の選択操作に応じて移動禁止画像が選択された状態で、上記所定の選択移動操作を受け付けた場合には、上記移動禁止画像を現在の表示位置にそのまま表示させた状態で、上記移動対象画像を移動させる表示制御を実行する発明が開示されている。
また、手書き入力された文字を縮小して表示する技術として、例えば特許文献2は、入力済みの手書きデータをブロックとしてイメージデータに変換し、イメージデータの行ピッチに対応する幅が表示画面上の所定の表示領域の行ピッチ以下となるように、イメージデータを、アスペクト比固定で縮小して縮小イメージデータを作成して、この縮小イメージデータを所定の表示領域にて行方向に順次配列して表示する発明が開示されている。
特開2014−92829号公報 特開2008−84136号公報
上述した特許文献1は、外見上は付箋のような表示がされているが、実際の付箋のように自由に移動したりすることが出来ず、使い勝手がよいものではなかった。
また、ブレインストーミング等では複数の利用者が、同じシートに文字や図形を書き込み、付箋として表示させたい場合がある。近年のディスプレイの大型化や、マルチタッチの検出といった表示装置の性能が向上したことにより、そのニーズは大きくなっている。
しかし、従来の装置では、複数の利用者が書き込むことは想定していないため、付箋のデータを書き込む場合に、その都度切り替える必要があった。また、利用者毎に付箋の種類(属性)を切り替える場合も、その都度メニュー等から選択する必要があり、使い勝手が良いものとは言えなかった。
とくに、ブレインストーミング等は、話の流れがあり、その都度適切にアイデアを出していくことが大切である。しかし、上述したように、その都度メニュー等で切り替える作業が入ると、話の流れが中断されてしまうという問題点があった。
上述した課題を解決するために、本発明の表示制御装置は、入力装置から受信された識別情報を利用することにより、適切なオブジェクトを表示したり、配置したりすることが出来ることを目的とするものである。
上述した課題に鑑み、本発明の表示制御装置は、
表示部の表示領域にオブジェクトを表示させる制御をする表示制御装置であって、
入力装置から識別情報を受信する識別情報受信手段と、
入力装置による手書き入力を受け付け可能な入力手段と、
前記手書き入力からオブジェクトを生成するオブジェクト生成手段と、
前記表示領域に、前記オブジェクトを表示させる制御を行う表示制御手段と、
を備え、
前記オブジェクト生成手段は、前記識別情報に基づいて、前記手書き入力から付箋オブジェクト又は描画オブジェクトを生成することを特徴とする。
本発明のプログラムは、
表示部の表示領域にオブジェクトを表示させる制御をする表示制御装置のコンピュータに、
入力装置から識別情報を受信する識別情報受信機能と、
入力装置による手書き入力を受け付け可能な入力機能と、
前記手書き入力からオブジェクトを生成するオブジェクト生成機能と、
前記表示領域に、前記オブジェクトを表示させる制御を行う表示制御機能と、
を実現させるためのプログラムであって、
前記オブジェクト生成機能は、前記識別情報に基づいて、前記手書き入力から付箋オブジェクト又は描画オブジェクトを生成することを特徴とする。
本発明の表示制御装置によれば、入力装置から受信された識別情報を利用することで、入力されたオブジェクトを識別情報に応じて適切に表示制御することができるようになる。
第1実施形態におけるシステム全体を説明するための図である。 第1実施形態における表示装置の機能構成を説明するための図である。 第1実施形態における入力モードテーブルの一例を説明するための図である。 第1実施形態における処理の概要を説明するための図である。 第1実施形態における動作例を説明するための図である。 第2実施形態における動作例を説明するための図である。 第3実施形態における処理の概要を説明するための図である。 第3実施形態における動作例を説明するための図である。 第4実施形態における動作例を説明するための図である。
以下、本発明の表示制御装置を用いた表示装置10について説明する。なお、各実施形態は本発明を説明する都合上記載したものであり、本発明の範囲が以下の実施形態に限定されるものではない。
[1.第1実施形態]
[1.1 全体構成]
まず、第1実施形態について説明する。図1は、本実施形態における表示装置10の外観を示す図である。表示装置10は、タッチ操作可能な装置であり、入力装置20を利用することにより、オブジェクトが入力可能である。
ここで、本実施形態にいうオブジェクトとは、1又は複数の表示画面に表示出来る単位であり、例えば、手書き入力された図形、文字(文字列)、アイコン、写真等の何れであってもよい。また、手書き入力された図形を1つのまとまりとして、移動、消去、属性変更が可能な付箋データ(付箋画像データ、メモデータ)についても、オブジェクトの1つである付箋オブジェクトとして扱うことが可能である。
すなわち、付箋オブジェクトとは、一般的な付箋紙のような機能を、表示画面上で実現するオブジェクトである。例えば、各オブジェクトが表示されている表示画面に重畳して付箋オブジェクトが表示される。
この付箋オブジェクトは、自由に貼り付けたり、取り除いたり(削除したり)することができる。また、背景の色を変えたり、大きさを変えたり、透過率を変更したりすることが可能である。
付箋オブジェクトは、例えば他のオブジェクトが存在するレイヤ(例えば、表示レイヤ)の上に、付箋レイヤを設け、当該レイヤに貼り付けられても良い。また、他のオブジェクトと同じレイヤに貼り付ける場合には、前面に表示されるように属性を持たせても良い。なお、一般的には付箋オブジェクトが、他のオブジェクトに優先して前面に表示されるが、利用者の設定により一般のオブジェクトと同様に扱われても良い。
[1.2 機能構成]
続いて、本実施形態における表示装置10の機能構成について図2に基づいて説明する。表示装置10は、制御部100と、表示部110と、タッチ検出部120と、位置サイズ判定部122と、オブジェクト生成部124と、画像処理部130と、通信部140と、記憶部150と、入力装置インタフェース(IF)160とを備えて構成される。
制御部100は、表示装置10の全体を制御するための機能部である。制御部100は、記憶部150に記憶されている各種プログラムを読み出して実行することにより各種機能を実現しており、例えばCPU(Central Processing Unit)等により構成されている。
表示部110は、オブジェクトやコンテンツ等を表示する機能部である。例えば、LCD(liquid crystal display:液晶ディスプレイ)や、有機ELディスプレイ(OLED)等により構成されている。また、表示部110の表示画面には、表示領域を有しており、表示領域に各種オブジェクトを配置し、表示することが可能である。
タッチ検出部120は、利用者からのタッチ操作を検出することにより、操作入力を実現するための機能部である。例えば、表示部110と一体に構成されてタッチパネル等により実現される。タッチ操作を検出方法としては、静電容量方式、電磁誘導方式、赤外線方式といった何れかの方法を用いて検出できれば良い。また、検出箇所としても、1点であっても良いし、複数点検出可能であっても良い。
また、本実施形態においては、入力装置20のタッチ操作を検出することにより、操作入力が実現される。入力装置20は、タッチ検出部120でタッチ操作が検出できれば良いことから、例えばタッチパネルの方式に対応して、感圧式に対応したタッチペンや、静電容量式に対応した導電素材を備えたタッチペンにより構成される。また、直接通信を行うアクティブ方式のタッチペンであってもよい。
また、入力装置20は、入力装置IF160を介して接続可能である。入力装置IF160としては、例えばBluetooth(登録商標)等の近距離無線通信方式や、独自の無線通信方式等を利用しても良い。また、アクティブ方式のタッチペンであれば、併せて入力装置20と、表示装置10とが通信できても良い。
すなわち、本実施形態においては、入力装置20の識別情報210を、表示装置10で受信可能であればよい。識別情報210は、入力装置20を一意に識別するための情報であればよく、固有IDや、装置ID等が利用される。
また、入力装置20は、その他にも圧力感知センサや、ジャイロセンサを内蔵し、圧力情報や姿勢情報、位置情報を併せて送信してもよい。
すなわち、入力装置20が、タッチ検出部120及び/又は入力装置IF160を介することで、少なくともタッチ操作した位置(タッチが検出された位置)と、識別情報とが表示装置10において取得可能で有れば良い。
位置サイズ判定部122は、入力された手書き入力データ(例えば、ストローク情報)に基づいて構成されるオブジェクト(例えば、入力装置20により入力された手書きオブジェクト)の位置やサイズを判定する。また、オブジェクト生成部124は、入力された手書き入力データから手書きオブジェクトや、その他のオブジェクトを作成する機能部である。入力されたストロークに基づく手書き入力データを、単に手書きの描画オブジェクトとして生成してもよいし、文字・記号に文字認識し、テキストオブジェクトを生成してもよい。
画像処理部130は、画像処理を実現するための機能部である。画像処理部130としては、例えば、画像に対して鮮鋭化処理や、ストロークデータに対してなめらかさを変える処理を行う等の種々の画像処理を行う機能部である。
また、入力された手書き入力データ(手書きオブジェクト)から文字認識を行ってテキスト文字(列)を出力したり、描画オブジェクトをベクトルデータや、ラスタデータに変換したりする処理を行ってもよい。
この位置サイズ判定部122、オブジェクト生成部124、画像処理部130は、必要に応じて処理毎にプログラムとして記憶部150に記憶され、必要に応じて読み出されて実行されることにより、実現されてもよい。
通信部140は、表示装置10が通信を行う為の機能部である。例えば、IEEE802.11a/b/g/nといった無線LANを利用したり、Bluetooth(登録商標)等の近距離無線通信を利用したりする。なお、LTE通信等により一般的な通信を行っても良い。
記憶部150は、表示装置10の動作に必要な各種プログラムや、各種データが記憶されている機能部である。記憶部150は、例えば、半導体メモリであるSSD(Solid State Drive)や、磁気ディスクであるHDD(Hard Disk Drive)等により構成されている。
また、記憶部150には、各種プログラムの他に、オブジェクトとして手書き入力データに基づいて生成される手書きオブジェクトが記憶される手書きオブジェクトデータ152と、手書きオブジェクトから生成される描画オブジェクトが記憶される描画オブジェクトデータ154と、付箋オブジェクトが記憶される付箋オブジェクトデータ156と、入力モードテーブル158とが記憶されている。
手書きオブジェクトデータ152は、手書き入力される手書き入力データが、ブロック化して手書きオブジェクトとして出力されたものが記憶される。例えば、利用者により手書き入力された手書き入力データ(ストローク情報)が集まることにより、一つのグループ化された図形オブジェクトとして記憶される。
描画オブジェクトデータ154は、描画オブジェクトとして表示領域に表示されるオブジェクトが記憶される。例えば、手書きオブジェクトがそのまま記憶されてもよいし、色情報や、線の太さといった属性が付加されて記憶されてもよい。また、入力モードによっては、例えば手書きオブジェクトから、矩形や円形の描画オブジェクトに変換して記憶してもよい。
付箋オブジェクトデータ156は、手書きオブジェクトから、所定の大きさに変換された付箋オブジェクトが記憶されている。具体的には、付箋オブジェクトは、均一の大きさである付箋サイズが決められている。また、付箋サイズに対応する付箋台紙が決められており、付箋台紙に手書きオブジェクトが含まれるように合成されて、付箋オブジェクトとなる。
付箋サイズとは、付箋オブジェクトのサイズとして所定のサイズが決められている。また、付箋サイズの付箋台紙が画像(図形)オブジェクトとして決められている。付箋台紙の描画が行われることにより、利用者に付箋オブジェクトであることを容易に視認させることができるようになっている。また、付箋サイズとして、例えば、縦80ピクセル、横160ピクセルと設定された場合は、当該サイズが解るような矩形の付箋台紙が設定される。なお、通常の矩形図形と異なることを示す識別表示がされてもよい。
なお、付箋サイズは、最初に付箋オブジェクトが生成されるときの大きさであり、付箋オブジェクトが生成された後は変更することができる。すなわち、付箋台紙の大きさを変えることにより、付箋オブジェクト全体の大きさが変わることとなる。したがって、付箋台紙に含まれて表示されている手書きオブジェクトの大きさも連動して変化することとなる。
また、手書きオブジェクトから付箋オブジェクトとなることで、移動や、属性変更、大きさ変更が容易に出来たり、表示/非表示の切り替えや、整列等が容易に出来たりすることとなる。
なお、本実施形態においては、手書き入力された図形に基づいて付箋オブジェクトが生成されるが、例えばテキスト文字列や、他のオブジェクト(例えば、画像ファイル等)から付箋オブジェクトが生成されてもよい。
また、付箋オブジェクトは、表示されている他のオブジェクト(例えば、図形や画像)に重畳的に表示されても良いし、単独で表示されても良い。また、本実施形態においては、付箋オブジェクトとして表しているが、例えばメモデータや、備忘データといった他の表し方をしてもよい。
なお、本実施形態では、説明の都合上、表示されるオブジェクトの種類としては描画オブジェクトと、付箋オブジェクトとについて説明するが、表示領域に表示出来るオブジェクトであれば、他のオブジェクトが記憶されてもよい。
例えば、スキャナ、デジタルカメラや、画像ファイル等からJPEGデータや、BMPデータといった画像ファイルに基づく画像オブジェクト、文字(記号)列からなるテキストオブジェクト(なお、文字には、利用者がタッチペンや手、マウス等で書いた文字である手書き文字と、ASCIIコードやJISコード、Unicode等で示されるテキスト文字とが含まれる。)、他のファイルで表示可能なコンテンツオブジェクトを、適宜記憶し、表示することが可能である。
入力モードテーブル158は、図3に示すように、入力装置20の識別情報(例えば、「PE01」)と、入力モード(例えば、「手書きペンモード」)とを対応づけて記憶しているテーブルである。
入力モードとは、手書きオブジェクトを、どのようなオブジェクトとして出力するのかを示すものである。例えば、手書きペンモードであれば、手書きオブジェクトは、描画オブジェクトとして出力され、付箋ペンモードであれば付箋オブジェクトとして出力される。なお、他にも例えばテキストペンモードである場合、手書きオブジェクトについてテキスト認識し、テキストオブジェクトとして出力する。
[1.3 処理の流れ]
続いて本実施形態における処理の流れについて図に基づいて説明する。
まず、手書き入力を検知する(ステップS102)。手書き入力が検知された場合は、入力された手書き検知の入力座標及び/又は識別情報を取得し(ステップS102;Yes→ステップS104)、手書き入力データとして出力される。
すなわち、手書き入力データとして取得されている座標、ストローク等と併せて、現在入力している入力装置20の識別情報を受信することができる。識別情報は、通常手書き入力が行われている間は受信されるものであるが、最初に一度だけ受信してもよい。また、受信された識別情報は、手書き入力データと併せて記憶されてもよいし、手書きオブジェクトに対応して記憶してもよい。
ここで、連続して手書き入力されている場合は、取得された入力座標に基づいて手書き入力データとしてそのまま出力される(ステップS106;No→ステップS104)。なお、このとき、入力装置20(タッチペン)の軌跡が手書き入力データとなり、入力装置20の軌跡に応じて表示領域に線が描画される。
ここで、手書き入力の中断していた時間が所定時間経過した場合(例えば、タッチアップしている時間が所定時間経過した場合)、手書き入力データが1つにブロック化され、手書きオブジェクトとして出力される(ステップS106;Yes→ステップS108)。
ここで、入力された手書きオブジェクトについて、入力装置20の識別情報に基づき、付箋ペンモードで入力されたか否かを判定する(ステップS110)。ここで、付箋ペンモード以外で入力されている場合(本実施形態では、「手書きペンモード」)は、手書きオブジェクトを描画オブジェクトとして生成して出力する(ステップS116)。すなわち、本実施形態の場合は、手書きオブジェクトをそのまま描画オブジェクトとして、表示領域に表示する。
また、入力モードが「付箋ペンモード」であれば(ステップS110;Yes)、手書きオブジェクトを、付箋サイズに調整する(ステップS112)。具体的には、所定の大きさである付箋サイズに収まる範囲で、手書きオブジェクトを縮小したり、拡大したりする。なお、このとき、単純に付箋サイズに収まらない場合には縮小表示することとしてもよいし、付箋サイズの最大に表示されるように、縮小表示又は拡大表示されることとしてもよい。
そして、調整された手書きオブジェクトと、付箋台紙とを併せて付箋オブジェクトとして生成し、出力される(ステップS114)。すなわち、表示領域に付箋オブジェクトが表示されることとなる。
ここで、付箋オブジェクトの大きさを示す付箋サイズは、付箋オブジェクトが生成される場合は、初期のサイズとなるように調整される。これにより、付箋オブジェクトが均一の大きさで出力され、表示画面に整列したときに、視認性よく並べることができる。
また、整列の方法としては、例えば左上から左方向に整列しても良いし、右上から下方向に整列してもよい。すなわち、どこから整列を開始し、どの方向に整列するかはシステムにより設定されてもよいし、利用者が設定してもよい。
そして、画面の再描画処理が行われる(ステップS118)。画面の再描画処理は、全体的な画面の再描画を行う。ここで、付箋オブジェクトと他のオブジェクトとが異なる動作をしてもよい。
例えば、オブジェクトがシートに配置されている場合、シートのページを切り替えることで表示されているオブジェクトが変化する。このシートのページを切り替えても、付箋オブジェクトはそのまま表示され続けるといった表示をしてもよい。
また、他のオブジェクトを拡大、縮小、移動といった操作を行った場合でも、付箋オブジェクトはそのまま同じ位置に表示を行ってもよい。
すなわち、付箋オブジェクトは、他のオブジェクトと連動して表示されてもよいし、他のオブジェクトと異なる表示がされてもよい。
[1.4 動作例]
つづいて、本実施形態における動作例について、図5を利用して説明する。図5は、本実施形態における表示画面W100の一例を示す図である。
図5(a)の表示画面W100には、既に付箋オブジェクトF100と、付箋オブジェクトF102とが整列して表示されている。付箋オブジェクトは、付箋台紙に手書きオブジェクトが収まって表示されている。
ここで、入力装置20によって、手書きオブジェクトH100が入力さる。具体的には、入力装置20の軌跡に応じて手書き入力データが入力され、タッチアップして所定時間が経過すると、手書きオブジェクトH100として表示される。
このとき、入力装置20の識別情報から、手書きオブジェクトH100は、付箋ペンモードで入力されたことが識別可能である。
図5(b)は、処理について説明するための模式図である。すなわち、手書きオブジェクトH100が含まれる領域R100が認識される。そして、付箋オブジェクトとして付箋サイズである領域R102の大きさに入るように、手書きオブジェクトは縮小され、領域R104の大きさとなる。
そして、図5(c)に示すように、付箋台紙に縮小された手書きオブジェクトが表示され、全体として付箋オブジェクトF104として表示される。付箋オブジェクトF104は、付箋オブジェクトF100、付箋オブジェクトF102と並んで表示されることとなる。
なお、付箋オブジェクトは整列して表示されているが、例えば位置を入れ替えたりすることもできるし、異なる場所に移動して表示することも可能である。また、色を変えたり、属性を変えたりすることも出来るし、この後大きさを変更することも可能である。
また、図5(b)では、手書きオブジェクトが含まれる領域R100が付箋サイズを示す領域R102より大きいため縮小表示されているが、小さい場合にはそのままでもよいし、付箋サイズの領域(すなわち、付箋台紙)の中で最大に表示されるように拡大表示されてもよい。
また、図5(a)の入力装置20の入力モードが「手書きペンモード」であれば、図5(a)のままである。すなわち、手書きオブジェクトH100は、描画オブジェクトとしてそのまま表示された状態となり、付箋オブジェクトには変換されない。
このように、本実施形態によれば、入力装置20(例えばタッチペン)により、自動的に手書き入力された図形が、手書きされた状態である描画オブジェクトとして表示されたり、付箋オブジェクトして表示されたりすることとなる。利用者としては、手書き入力のとき、いちいち入力モードを切り替えたり、指定したりすることなく、入力装置を変えるだけで容易に所望するオブジェクトを入力し、表示させることが可能となる。
[2.第2実施形態]
つづいて、第2実施形態について説明する。第1実施形態では、ステップS114において、付箋オブジェクトを整列して表示したが、本実施形態では、付箋オブジェクトを整列して表示しない場合について説明する。なお、第1実施形態と機能構成及び処理フローについて、同じ部分については、説明を省略し、異なる部分を中心に説明する。
図6は、第2実施形態における動作を説明した図であり、表示画面W200の一例を示した図である。
図6(a)に示すように、本実施形態においては付箋オブジェクトF200及び付箋オブジェクトF202は整列しないで表示されている。
ここで、手書きオブジェクトH200が含まれる領域R202がその位置で認識される。また、付箋オブジェクトとして表示される付箋サイズを示す領域R200により大きいため、縮小表示の処理が実行される。
縮小表示された様子を模式的に示すのが図6(b)である。図6(b)では、手書きオブジェクトが表示される領域が、領域R204の大きさに縮小表示される。すなわち、付箋オブジェクトが表示されるべき付箋サイズである領域R200の大きさに入るように縮小表示される。
そして、図6(c)に示すように、手書きオブジェクトは、付箋オブジェクトF204に縮小されて表示される。なお、手書きオブジェクトH200と、付箋オブジェクトF204の位置は、システム及び利用者により適宜設定可能である。例えば、左上や右上といった頂点座標が一致するように変換されたり、中心座標が一致するように変換されたりすればよい。
このように、本実施形態によれば、付箋オブジェクトを任意の位置に表示させることが可能となる。
[3.第3実施形態]
つづいて、第3実施形態について説明する。第3実施形態では、入力モードテーブル158に、更に属性を記憶させることで、属性毎に異なる付箋オブジェクトを表示させる実施形態である。
入力モードテーブル158は、第1実施形態では図3に示したように、識別情報に入力情報が対応づけて記憶されている。本実施形態では、更に属性が記憶される。
属性としては、利用者のIDであったり、付箋の色であったりしてもよい。また、手書き入力時の線の太さや、色といった属性で有ってもよい。本実施形態では、利用者情報を属性として記憶している。
また、表示装置10は、利用者毎に表示する属性を記憶している。例えば、利用者毎に付箋オブジェクトの色を記憶することで、異なる色の付箋オブジェクトを表示することが可能となる。
図7は、本実施形態における処理フローである。図7の処理フローは第1実施形態において図4で説明した処理フローを置き換えたものであり、同一の処理については同一の符号を付している。
図7の処理フローでは、手書きオブジェクトを付箋サイズ(付箋台紙に含まれる大きさ)に調整した後、識別情報から付箋の属性である付箋属性を決定している(ステップS202)。そして、手書きオブジェクトから、付箋オブジェクトを生成するときに、付箋属性に基づいた付箋オブジェクトを生成して出力する(ステップS204)。
図8は、第3実施形態における動作を説明した図であり、表示画面W300の一例を示した図である。
図8(a)に示すように、入力装置20Aで手書きオブジェクトH300が、入力装置20Bで手書きオブジェクトH302が、入力装置20Cで手書きオブジェクトH304がそれぞれ表示されている。
このとき、各入力装置20の識別情報に対応づけて、手書きオブジェクトもそれぞれ識別表示されている。本図では、線の太さで示しているが、例えば色(手書きオブジェクトH300は赤、手書きオブジェクトH302は青、手書きオブジェクトH304は黒)で識別表示されてもよい。
図8(b)は、各入力装置20がタッチアップされた後に、領域が認識されている。ここで、入力装置20Aと、入力装置20Bは、付箋ペンモードであり、入力装置20Cは手書きペンモードである。
この場合、図8(c)と併せて説明すると、手書きオブジェクトH300の領域R300が認識され、付箋オブジェクトF300が生成され、表示されている。また、手書きオブジェクトH302の領域R302が認識され、付箋オブジェクトF302が生成され、表示されている。
また、付箋オブジェクトは、属性に従って表示態様で生成され、表示されることとなる。例えば、手書きオブジェクトと同じ色で背景が出力されたり、入力装置20毎(識別情報毎)に設定された付箋オブジェクトの属性(付箋属性)に従った表示態様で表示されてもよい。また、手書きオブジェクトH304は、そのまま描画オブジェクトとして表示されている。
このように、本実施形態によれば、入力装置20の識別情報に応じて、付箋オブジェクトの表示態様を変えて表示させることが可能となる。
[4.第4実施形態]
つづいて、第4実施形態について説明する。第1実施形態では、ステップS112において、付箋サイズに収まるように、手書きオブジェクトを調整して表示した。本実施形態では、少なくとも一辺の大きさが含まれるように縮小するが、他辺の大きさに応じた付箋オブジェクトを生成する実施形態について説明する。なお、第1実施形態と機能構成及び処理フローについて、同じ部分については、説明を省略し、異なる部分を中心に説明する。
図9は、第4実施形態における動作を説明した図であり、表示画面W400の一例を示した図である。
図9(a)に示すように、本実施形態においては付箋オブジェクトF400及び付箋オブジェクトF402は整列して表示されている。
ここで、手書きオブジェクトH400が入力され、入力装置20の属性から付箋ペンモードで入力されたと判定された場合、手書きオブジェクトH400に基づいて、付箋オブジェクトが生成される。
図9(b)に示すように、手書きオブジェクトH400が含まれる領域はR400であり、付箋サイズの領域R402のサイズより大きくなっている。そこで、本実施形態では、縦サイズを付箋サイズと同じ大きさになるように縮小し、横サイズはそのまま付箋オブジェクトのサイズ(すなわち、付箋台紙の大きさ)を拡張することとする。
図9(c)のように、付箋オブジェクトF404は、他の付箋オブジェクトと比較すると横長となって生成され、表示されている。ここで、縦方向が同じ長さであることから、整列をしたとしても違和感無く表示することが可能である。
このように、本実施形態によれば、付箋オブジェクトを生成するときに、付箋サイズと少なくとも一辺が同じサイズとなるように縮小し、付箋オブジェクトが生成されることとなる。
これにより、手書きオブジェクトが極端に小さいサイズになるといったことを防ぐことが可能となり、また、整列方向によっては違和感無く表示させることが可能となる。
[5.適用例]
上述した各実施形態の表示制御装置を利用することで、利用者は入力装置に応じて適切なオブジェクトを表示させることが可能となる。
また、特定のペンで記入をすると自動的に固定サイズの付箋紙として貼り付けを行うことで、ユーザーは苦労して小さく文字を必要がなく、また整理がしやすいという利便性を得ることができる。
これは、例えば、表示装置を、電子黒板のような装置で利用する場合、垂直設置されており、タッチパネルの制約で手のひらをタッチパネルにつけてペン書きできない場合が多いため、付箋のサイズに小さく文字を書くのは難しい。
しかし、本実施形態の発明を利用すれば、ユーザーが付箋に対して小さく文字を書かなくても、後で整理しやすいように小さな付箋にアイデアをまとめることができる。
[6.変形例]
本発明は上述した各実施の形態に限定されるものではなく、種々の変更が可能である。すなわち、本発明の要旨を逸脱しない範囲内において適宜変更した技術的手段を組み合わせて得られる実施の形態についても本発明の技術的範囲に含まれる。
また、各機能はプログラムで構成されていても良いし、ハードウェアで構成されても良い。そして、プログラムで実現されている場合は、記録媒体に記録されており、当該記録媒体からプログラムを読み出して実行しても良いし、ネットワークに保存され、ダウンロードして実行しても良い。
また、上述した実施形態では、タッチ検出部として操作をタッチパネルとし、タッチ操作(タップ操作)を例に説明したが、例えばマウス等の外部入力装置で、クリック操作等により操作が行われてもよい。
また、上述した実施形態によれば、表示装置に表示制御装置が含まれていることとして説明したが別装置であってもよい。例えば、タッチパネルを有する表示装置に、表示制御装置としてコンピュータを接続してもよい。この場合、例えば表示装置とコンピュータとをUSB接続することにより、タッチパネルにおける入力座標をコンピュータで取得することができる。また、HDMI(登録商標)等で表示装置に出力することにより、付箋オブジェクト等を表示することができる。また、これらの制御信号と、表示制御信号を1つの信号線で接続してもよい。
また、上述した実施形態では、表示装置は、表示部と、操作入力部とを備えている例を説明したが、本実施形態に開示した発明を実施するためには、他の方式であってもよい事は勿論である。例えば、表示部110としてプロジェクタを利用し、タッチ検出部120として人感センサを利用してもよい。そして、タッチ検出部120、表示部110に制御用のコンピュータを接続することにより、表示システムとして実現されてもよい。
また、上述した実施形態は、説明の都合上、それぞれ別に説明している部分があるが、技術的に可能な範囲で組み合わせて実行してもよいことは勿論である。
このように、本明細書に記載した各実施形態は、矛盾の無い範囲で組み合わせて実行することができる。
また、実施形態において各装置で動作するプログラムは、上述した実施形態の機能を実現するように、CPU等を制御するプログラム(コンピュータを機能させるプログラム)である。そして、これら装置で取り扱われる情報は、その処理時に一時的に一時記憶装置(例えば、RAM)に蓄積され、その後、各種ROMやHDD、SSDの記憶装置に格納され、必要に応じてCPUによって読み出し、修正・書き込みが行なわれる。
また、市場に流通させる場合には、可搬型の記録媒体にプログラムを格納して流通させたり、インターネット等のネットワークを介して接続されたサーバコンピュータに転送したりすることができる。この場合、サーバコンピュータの記憶装置も本発明に含まれるのは勿論である。
また、各機能を備えたアプリケーションを、スマートフォンやタブレット、画像形成装置といった各種装置にインストールし、実行することで実現してもよい。
10 表示装置
100 制御部
110 表示部
120 タッチ検出部
122 位置サイズ判定部
124 オブジェクト生成部
130 画像処理部
140 通信部
150 記憶部
152 手書きオブジェクトデータ
154 描画オブジェクトデータ
156 付箋オブジェクトデータ
158 入力モードテーブル
20 入力装置
210 識別情報

Claims (8)

  1. 表示部の表示領域にオブジェクトを表示させる制御をする表示制御装置であって、
    入力装置から識別情報を受信する識別情報受信手段と、
    入力装置による手書き入力を受け付け可能な入力手段と、
    前記手書き入力からオブジェクトを生成するオブジェクト生成手段と、
    前記表示領域に、前記オブジェクトを表示させる制御を行う表示制御手段と、
    を備え、
    前記オブジェクト生成手段は、前記識別情報に基づいて、前記手書き入力から付箋オブジェクト又は描画オブジェクトを生成することを特徴とする表示制御装置。
  2. 前記付箋オブジェクトは、所定の付箋サイズの大きさで表示され、
    前記オブジェクト生成手段は、前記付箋オブジェクトを生成するときには、前記付箋サイズに含まれるように、前記オブジェクトを縮小することを特徴とする請求項1に記載の表示制御装置。
  3. 前記オブジェクト生成手段は、少なくとも一辺が付箋サイズになるように、前記オブジェクトを縮小することを特徴とする請求項2に記載の表示制御装置。
  4. 前記表示制御手段は、前記オブジェクトとして、付箋オブジェクトを表示する場合には前記表示領域に整列して表示させる制御を行うことを特徴とする請求項1又は2に記載の表示制御装置。
  5. 前記オブジェクト生成手段は、前記入力手段により、手書き入力が行われなくなってから所定時間経過したときに、前記オブジェクトを生成することを特徴とする請求項1から4の何れか一項に記載の表示制御装置。
  6. 前記識別情報と、入力モードとを対応づけて記憶する入力モードテーブルを更に有し、
    前記オブジェクト生成手段は、前記識別情報に基づいて入力モードテーブルを参照し、手書き入力時の入力モードが付箋ペンモードの場合は、前記オブジェクトを付箋オブジェクトとして生成し、それ以外の入力モードの場合は、描画オブジェクトとして生成することを特徴とする請求項1から5の何れか一項に記載の表示制御装置。
  7. 前記入力モードテーブルには、識別情報に対応づけて更に属性が記憶されており、
    前記表示制御手段は、前記オブジェクトを表示する場合には、前記属性に基づいて表示態様を決定し、表示させる制御を行うことを特徴とする請求項6に記載の表示制御装置。
  8. 表示部の表示領域にオブジェクトを表示させる制御をする表示制御装置のコンピュータに、
    入力装置から識別情報を受信する識別情報受信機能と、
    入力装置による手書き入力を受け付け可能な入力機能と、
    前記手書き入力からオブジェクトを生成するオブジェクト生成機能と、
    前記表示領域に、前記オブジェクトを表示させる制御を行う表示制御機能と、
    を実現させるためのプログラムであって、
    前記オブジェクト生成機能は、前記識別情報に基づいて、前記手書き入力から付箋オブジェクト又は描画オブジェクトを生成することを特徴とするプログラム。
JP2017191548A 2017-09-29 2017-09-29 表示制御装置及びプログラム Active JP6832822B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017191548A JP6832822B2 (ja) 2017-09-29 2017-09-29 表示制御装置及びプログラム
CN201811142605.9A CN109656435B (zh) 2017-09-29 2018-09-28 显示控制装置及记录介质
US16/147,722 US10768807B2 (en) 2017-09-29 2018-09-29 Display control device and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017191548A JP6832822B2 (ja) 2017-09-29 2017-09-29 表示制御装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2019067111A true JP2019067111A (ja) 2019-04-25
JP6832822B2 JP6832822B2 (ja) 2021-02-24

Family

ID=65897442

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017191548A Active JP6832822B2 (ja) 2017-09-29 2017-09-29 表示制御装置及びプログラム

Country Status (3)

Country Link
US (1) US10768807B2 (ja)
JP (1) JP6832822B2 (ja)
CN (1) CN109656435B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020071799A (ja) * 2018-11-02 2020-05-07 シャープ株式会社 情報処理装置、情報処理方法、及びプログラム
JP7356263B2 (ja) * 2019-05-29 2023-10-04 シャープ株式会社 情報処理装置、情報処理方法、及び情報処理プログラム
JP2022065419A (ja) * 2020-10-15 2022-04-27 セイコーエプソン株式会社 表示方法、及び表示装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007286780A (ja) * 2006-04-14 2007-11-01 Fuji Xerox Co Ltd 電子会議システム、電子会議支援プログラム及び方法、電子会議制御装置
JP2009015728A (ja) * 2007-07-06 2009-01-22 Sharp Corp 画像表示パネル装置
JP2011028621A (ja) * 2009-07-28 2011-02-10 Seiko Epson Corp 情報端末装置
JP2011054096A (ja) * 2009-09-04 2011-03-17 Canon Inc 情報処理装置
JP2012198798A (ja) * 2011-03-22 2012-10-18 Brother Ind Ltd 表示オブジェクト入力表示システム、表示オブジェクト入力表示プログラム
JP2012203643A (ja) * 2011-03-25 2012-10-22 Brother Ind Ltd 表示オブジェクト管理装置、表示オブジェクト管理プログラム
JP2012208593A (ja) * 2011-03-29 2012-10-25 Brother Ind Ltd 表示オブジェクト入力操作端末、表示オブジェクト管理装置、表示オブジェクト入力表示システム、表示オブジェクト入力表示方法、及び表示オブジェクト管理プログラム
JP2016122422A (ja) * 2014-12-25 2016-07-07 シャープ株式会社 表示システム、通信装置、及びコンピュータプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2939119B2 (ja) * 1994-05-16 1999-08-25 シャープ株式会社 手書き文字入力表示装置および方法
US7424154B2 (en) * 2003-11-10 2008-09-09 Microsoft Corporation Boxed and lined input panel
JP2006031192A (ja) * 2004-07-13 2006-02-02 Nec Corp 手書き電子情報記録システム
JP4305325B2 (ja) * 2004-08-11 2009-07-29 日本電気株式会社 付箋情報処理方法、付箋情報処理システム及び付箋情報処理プログラム
JP2008084136A (ja) 2006-09-28 2008-04-10 Kyocera Corp 携帯電子機器
CN101533317A (zh) * 2008-03-13 2009-09-16 三星电子株式会社 具备手写识别功能的快速记录装置和方法
JP4385169B1 (ja) * 2008-11-25 2009-12-16 健治 吉田 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート
JP5171386B2 (ja) * 2008-05-19 2013-03-27 キヤノン株式会社 コンテンツ管理装置、コンテンツ管理方法、プログラム及び記録媒体
JP5690317B2 (ja) 2012-11-01 2015-03-25 シャープ株式会社 情報表示装置及び情報表示方法
CN105426047B (zh) * 2015-11-17 2018-09-18 小米科技有限责任公司 缩略图展示方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007286780A (ja) * 2006-04-14 2007-11-01 Fuji Xerox Co Ltd 電子会議システム、電子会議支援プログラム及び方法、電子会議制御装置
JP2009015728A (ja) * 2007-07-06 2009-01-22 Sharp Corp 画像表示パネル装置
JP2011028621A (ja) * 2009-07-28 2011-02-10 Seiko Epson Corp 情報端末装置
JP2011054096A (ja) * 2009-09-04 2011-03-17 Canon Inc 情報処理装置
JP2012198798A (ja) * 2011-03-22 2012-10-18 Brother Ind Ltd 表示オブジェクト入力表示システム、表示オブジェクト入力表示プログラム
JP2012203643A (ja) * 2011-03-25 2012-10-22 Brother Ind Ltd 表示オブジェクト管理装置、表示オブジェクト管理プログラム
JP2012208593A (ja) * 2011-03-29 2012-10-25 Brother Ind Ltd 表示オブジェクト入力操作端末、表示オブジェクト管理装置、表示オブジェクト入力表示システム、表示オブジェクト入力表示方法、及び表示オブジェクト管理プログラム
JP2016122422A (ja) * 2014-12-25 2016-07-07 シャープ株式会社 表示システム、通信装置、及びコンピュータプログラム

Also Published As

Publication number Publication date
CN109656435B (zh) 2022-11-15
JP6832822B2 (ja) 2021-02-24
CN109656435A (zh) 2019-04-19
US10768807B2 (en) 2020-09-08
US20190102081A1 (en) 2019-04-04

Similar Documents

Publication Publication Date Title
US9811186B2 (en) Multi-touch uses, gestures, and implementation
US11460988B2 (en) Method of styling content and touch screen device for styling content
JP5627985B2 (ja) 情報処理装置、情報処理装置の制御方法、制御プログラム、および記録媒体
EP2770422A2 (en) Method for providing a feedback in response to a user input and a terminal implementing the same
CN103729055A (zh) 多显示设备、输入笔、多显示控制方法和多显示***
CN108733296B (zh) 书写笔迹的擦除方法、装置和设备
US10656790B2 (en) Display apparatus and method for displaying a screen in display apparatus
KR102075433B1 (ko) 필기 입력 장치 및 그 제어 방법
WO2017138223A1 (ja) 画像処理装置、画像処理システム及び画像処理方法
WO2014162604A1 (ja) 電子機器および手書きデータ処理方法
CN109656435B (zh) 显示控制装置及记录介质
KR100713407B1 (ko) 펜 컴퓨팅 시스템에서의 펜 입력 방법 및 장치
JP6100013B2 (ja) 電子機器および手書き文書処理方法
US10755461B2 (en) Display device, display method, and recording medium
JP2013012063A (ja) 表示制御装置
US20160132478A1 (en) Method of displaying memo and device therefor
US20150213320A1 (en) Electronic device and method for processing handwritten document
JP7496699B2 (ja) 表示装置
US10019423B2 (en) Method and apparatus for creating electronic document in mobile terminal
JP2020071799A (ja) 情報処理装置、情報処理方法、及びプログラム
JP2019079314A (ja) 表示システム、表示装置、端末装置及びプログラム
JP2018194801A (ja) 表示装置、表示方法及びプログラム
US10713422B2 (en) Method of editing document in mobile terminal and mobile terminal using the same
JP6760785B2 (ja) 表示システム、表示制御装置、および表示方法
JP2015191565A (ja) 表示入力装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200325

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201225

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210202

R150 Certificate of patent or registration of utility model

Ref document number: 6832822

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150