JP2019008365A - 表示装置及びプログラム - Google Patents

表示装置及びプログラム Download PDF

Info

Publication number
JP2019008365A
JP2019008365A JP2017120698A JP2017120698A JP2019008365A JP 2019008365 A JP2019008365 A JP 2019008365A JP 2017120698 A JP2017120698 A JP 2017120698A JP 2017120698 A JP2017120698 A JP 2017120698A JP 2019008365 A JP2019008365 A JP 2019008365A
Authority
JP
Japan
Prior art keywords
display
image
content
sheet
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017120698A
Other languages
English (en)
Inventor
季穂 坂本
Kiho Sakamoto
季穂 坂本
洋樹 棟朝
Hiroki Muneasa
洋樹 棟朝
小山 至幸
Chikayuki Koyama
至幸 小山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2017120698A priority Critical patent/JP2019008365A/ja
Priority to US16/009,348 priority patent/US10554787B2/en
Priority to CN201810632430.3A priority patent/CN109101146A/zh
Publication of JP2019008365A publication Critical patent/JP2019008365A/ja
Priority to US16/729,660 priority patent/US20200137197A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/75Indicating network or usage conditions on the user display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

【課題】コンテンツを他の装置に送信する場合に、送信する動作を利用者が視覚的に認識することができ、かつ、利用者にとって操作性の高い表示装置等を提供すること。【解決手段】コンテンツに基づいて生成された画像を表示画面に表示し、選択された選択画像に対する移動操作を検出する。そして、表示画面における予め定められた特定領域に選択画像が移動されたか否かを判定し、特定領域に選択画像が移動された場合には、選択画像の表示態様を変化させる。そして、特定領域に対応づけられている送信先に、選択画像に対応するコンテンツを送信する。【選択図】図8

Description

本発明は、表示装置等に関する。
従来から、複数の装置間で各種データを連携する技術が知られている。例えば、表示部が、データを示すアイコンをユーザによるタッチ操作に応じて移動可能に表示するとともに、データの送信対象となる各装置を示す複数の装置特定情報をアイコンの周囲に表示し、タッチセンサ部が、表示部に表示されたアイコンをユーザがタッチ操作により移動させた場合に、ユーザがアイコンを移動させた方向を検出し、装置特定情報検出部が、タッチセンサ部により検出された方向に表示されている装置特定情報を検出し、データ送受信制御部が、装置特定情報検出部により検出された装置特定情報に対するデータの送信を制御する発明が開示されている(例えば、特許文献1参照)。
また、ホーム画面において画像管理アプリケーションが実行されると、画像管理画面がディスプレイに表示される。画像管理画面には、画像データに対応するサムネイルアイコンが表示される。ユーザが任意のサムネイルアイコンを選択すると、シェア送信が有効にされたアドレスデータに基づいてシェア送信アイコン(SH)が表示される。この状態で、ユーザが、選択したサムネイルアイコンからシェア送信アイコンに向けてフリック操作を行うと、シェア送信アイコンと対応するアドレスデータに基づいて、サムネイルアイコンに対応する画像データが送信される発明が開示されている(例えば、特許文献2参照)。
特開2013−3742号公報 特開2014−135578号公報
しかし、上述した特許文献1では、近距離にある周辺機器を検出し、周辺機器に対してデータを送信する発明であり、周辺機器を検出する必要があり、容易にコンテンツを送信するという発明ではなかった。
また、上述した特許文献2では、送信する仕組みとしてメール等を想定しており、例えば表示されているコンテンツを他の装置に送信する場合に、利用者にとって使い勝手が良いものとは言えなかった。
また、従来のデータを連携する仕組みでは、送信側においてコンテンツが送信されたか否かといった点が、利用者に解りにくいという課題があった。
上述した課題を解決するために、本発明は、コンテンツを他の装置に送信する場合に、送信する動作を利用者が視覚的に認識することができ、かつ、利用者にとって操作性の高い表示装置等を提供することである。
上述した課題に鑑み、本発明の表示装置は、
コンテンツに基づいて生成された画像を表示画面に表示する表示手段と、
前記画像の中から選択画像を選択する画像選択手段と、
前記選択画像に対する移動操作を検出する操作検出手段と、
前記表示画面における予め定められた特定領域に前記選択画像が移動されたか否かを判定する移動判定手段と、
前記特定領域に前記選択画像が移動された場合には、前記選択画像の表示態様を変化させる画像変化手段と、
前記表示態様が変化した前記選択画像に対応するコンテンツを、前記特定領域に対応づけられている送信先に送信するコンテンツ送信手段と、
を備えることを特徴とする。
本発明のプログラムは、
コンピュータに、
コンテンツに基づいて生成された画像を表示画面に表示する表示機能と、
前記画像の中から選択画像を選択する画像選択機能と、
前記選択画像に対する移動操作を検出する操作検出機能と、
前記表示画面における予め定められた特定領域に前記選択画像が移動されたか否かを判定する移動判定機能と、
前記特定領域に前記選択画像が移動された場合には、前記選択画像の表示態様を変化させる画像変化機能と、
前記表示態様が変化した前記選択画像に対応するコンテンツを、前記特定領域に対応づけられている送信先に送信するコンテンツ送信機能と、
を実行させることを特徴とする。
コンテンツに基づいて生成された画像を表示画面に表示し、その画像の中から選択された選択画像に対する移動操作を検出する。そして、表示画面における予め定められた特定領域に選択画像が移動された場合には、選択画像の表示態様を変化させ、特定領域に対応づけられている送信先に、選択画像に対応するコンテンツを送信する。これにより、画像を選択して、特定領域に移動するだけで、選択された画像に対応するコンテンツを、特定領域に対応づけられている送信先に簡単に表示することができる。また、画像の表示態様が変化されることから、利用者にとって画像が送信されることを視認することが可能となる。
第1実施形態におけるシステム全体の外観を説明するための図である。 第1実施形態における表示装置の機能構成を説明するための図である。 第1実施形態における端末装置の機能構成を説明するための図である。 第1実施形態における共有サーバの機能構成を説明するための図である。 第1実施形態における端末装置のメインの動作を説明するための処理フローである。 第1実施形態における端末装置の送信処理を説明するための処理フローである。 第1実施形態における表示装置の処理を説明するための処理フローである。 第1実施形態における動作例を説明するための図である。 第1実施形態における動作例を説明するための図である。 第1実施形態における動作例を説明するための図である。 第2実施形態における動作例を説明するための図である。 第2実施形態における動作例を説明するための図である。 第3実施形態における動作例を説明するための図である。 第4実施形態における動作例を説明するための図である。 第5実施形態における表示装置の処理を説明するための処理フローである。 第5実施形態における端末装置の処理を説明するための処理フローである。 第5実施形態における動作例を説明するための図である。 第6実施形態における端末装置の送信処理を説明するための処理フローである。 第7実施形態における端末装置の送信処理を説明するための処理フローである。 第7実施形態における動作例を説明するための図である。 第8実施形態における動作例を説明するための図である。
以下、図面を参照して本発明を実施するための一実施形態について説明する。なお、説明の都合上、実施形態としては、本発明の表示装置をタッチパネルと一体となった表示装置に適用した場合を例に説明するが、利用者の操作入力により、オブジェクトが描画・配置可能な表示装置であれば、何れの装置であっても適用可能なことは勿論である。
[1.第1実施形態]
[1.1 全体構成]
まず、本発明のコンテンツ連携システムを適用したコンテンツ連携システム1を図1に示す。図1(a)は、外観の概要を示す図であり、コンテンツ連携システム1は、少なくとも表示装置10と、端末装置20とを有している。
ここで、本実施形態における表示装置10は、大型の表示装置を想定している。表示装置10としては、例えば、電子黒板(IWB:インタラクティブホワイトボード)や、大型のテレビ、テーブル形のディスプレイ等であってもよい。また、本実施形態では、例えば液晶ディスプレイ(LCD)を利用した表示装置を想定しているが、例えばプロジェクタ等の照射型の装置であってもよい。
また、本実施形態における端末装置20は、小型の表示装置を想定している。例えば、会議参加者や、生徒等が使用するタブレット型の情報端末装置、スマートフォン、コンピュータ等が想定される。
なお、表示装置10と、端末装置20と本実施形態は説明するが、すなわち、親装置(本実施形態における表示装置10)に、子装置(本実施形態における端末装置20)が接続される関係であればよい。親装置と子装置との関係は利用者により設定されるものであり、利用する場面により適宜設定されることとなる。
コンテンツ連携システム1の構成を説明するのが図1(b)である。表示装置10は、ネットワークNWに接続されている。また、端末装置20もネットワークNWに接続されており、ネットワークNWを介して表示装置10と通信可能である。本実施形態では、ネットワークに接続されたアクセスポイント(AP)40を介して端末装置20がネットワークNWに接続される。
また、本実施形態においては、共有サーバ30がネットワークNWに接続されており、表示装置10及び端末装置20と通信可能となっている。本実施形態では、コンテンツの共有を共有サーバ30に設定された共有フォルダを介して行っているが、表示装置10の中に共有フォルダを設定してもよいし、外部のクラウドサービスを利用することで、クラウドサーバに設定してもよい。
また、本実施形態における表示装置10及び端末装置20は、タッチ入力が可能なタッチパネルで構成されていることとして説明する。
ここで、タッチパネルにより、タッチや、フリック、スライドといった利用者からの操作入力を受け付けることができる。この、タッチ等の検出方式としては、静電容量方式のようなタッチパネルであってもよいし、感圧式のタッチパネルであってもよい。すなわち、タッチ等、利用者の操作入力を適宜受け付けることが可能な装置であればよい。
また、タッチする方法としては、利用者による指であってもよいし、ペンであってもよい。ペンの場合は、例えばペンを識別出来る一意の識別情報(例えば、シリアル番号や、MACアドレス等)を利用して、ペンの利用者を識別してもよい。
また、本実施形態においては、端末装置20と、表示装置10との間でコンテンツのやり取り、連携を容易にするシステムを説明している。ここで、コンテンツとは、表示装置10、端末装置20で利用可能な種々のデータのこといい、静止画ファイル(JPEG、GIF、PNG等の静止画像データ)、ドキュメントファイル(例えば、テキストファイルや、ワープロ・表計算・プレゼンテーションソフトといったドキュメントファイル、PDFファイル等)、動画ファイル(例えば、avi形式や、MPG形式等の動画像データ)、音声ファイル(例えば、mp3形式や、wav形式等の音声データ)等のデータを含むものである。
[1.2 機能構成]
つづいて、本実施形態における各装置の機能構成について説明する。
[1.2.1 表示装置]
表示装置10の機能構成について図2を用いて説明する。図2に示すように、表示装置10は、制御部100と、表示部110と、操作検出部120と、画像処理部130と、通信部140と、記憶部150とを備えて構成されている。
制御部100は、表示装置10の全体を制御するための機能部である。制御部100は、記憶部150に記憶されている各種プログラムを読み出して実行することにより各種機能を実現しており、例えばCPU(Central Processing Unit)等により構成されている。
また、制御部100としては、例えば、タッチパネルとして構成されている場合は表示画面(操作検出部120)を介して描画・入力された画像等のオブジェクトの表示や、他の画像入力装置から入力された画像の表示を制御したりする。
表示部110は、利用者に対して各種情報を表示したり、オブジェクトが描画・配置されたシートを表示したりするための機能部である。例えば、液晶ディスプレイ(LCD:liquid crystal display)や、有機ELディスプレイ等により構成されている。また、プロジェクタのような照射型/投影型の表示制御装置であってもよい。
操作検出部120は、利用者からの操作を検出するための機能部である。例えば、表示部110と一体に構成されるタッチパネル等により構成されている。操作の検出方式としては、静電容量方式であったり、抵抗膜方式等の感圧式や、赤外線方式、電磁誘導方式であったりと何れの方法であってもよい。
また、表示部110が照射型等の表示制御装置である場合は、操作検出部としては人感センサ等を利用して操作を検出してもよい。
画像処理部130は各種画像を処理するための機能部である。すなわち、コンテンツを表示部110に表示する場合に、各種処理を実行する。例えば、コンテンツとして静止画像を拡大、縮小表示したり、動画像を再生したりする。
また、コンテンツからサムネイル画像となるシートを生成したり、コンテンツに対して色調整処理、シャープネス処理等といった各種画像処理を施したりする。
通信部140は、ネットワークNWに接続するためのネットワークインタフェースである。通信方法としては、有線/無線を問わず、また、LAN/WANを問わない。すなわち、本実施形態においては、端末装置20、共有サーバ30と通信をすることができればよい。有線LANであれば、10BASE−T、100BASE−TX、1000BASE−Tといったイーサネット(登録商標)の規格や、無線LANであれば、IEEE802.11a/b/g/nといった規格、WANであればLTE、WiMAX、3G等が利用される。
なお、共有サーバ30を利用しないで直接端末装置20と通信する場合であれば、BluetoothやZigBeeといった近距離無線通信を利用してもよい。
記憶部150は、表示装置10の動作に必要な各種プログラムや、各種データが記憶されている機能部である。記憶部150は、例えば、SSD(Solid State Drive)等の半導体メモリや、HDD(Hard Disk Drive)等の磁気ディスクにより構成されている。
ここで、記憶部150には、共有フォルダ設定情報152が記憶されており、また、コンテンツ記憶領域154が確保されている。
共有フォルダ設定情報152は、コンテンツを端末装置20等の他の装置と共有するための記憶領域の一例として、共有フォルダの設定が記憶されている。例えば、「\\Server\share\user1」と記憶されている場合には、当該指定されたフォルダ(ディレクトリ)が共有フォルダとして設定される。
なお、共有するための記憶領域は、サーバや、装置の共有フォルダであっても良いし、外部のファイルサービスの情報(例えばクラウドサービスのアカウント情報)等であってもよい。また、フォルダに限らず、ドライブや装置、記憶媒体等、ファイル等が共有可能な記憶領域であれば良い。
コンテンツ記憶領域154には、コンテンツが記憶されている。コンテンツは、表示装置10で作成・編集されたコンテンツや、他の装置から受信されたコンテンツが記憶されている。
[1.2.2 端末装置]
端末装置20の機能構成について図3を用いて説明する。図3に示すように、端末装置20は、制御部200と、表示部210と、操作検出部220と、画像処理部230と、通信部240と、記憶部250とを備えて構成されている。
制御部200は、端末装置20の全体を制御するための機能部である。制御部200は、記憶部250に記憶されている各種プログラムを読み出して実行することにより各種機能を実現しており、例えばCPU(Central Processing Unit)等により構成されている。
また、制御部200としては、例えば、タッチパネルとして構成されている場合は表示画面(操作検出部220)を介して描画・入力された画像等のオブジェクトの表示や、他の画像入力装置から入力された画像の表示を制御したりする。
表示部210は、利用者に対して各種情報を表示したり、オブジェクトが描画・配置されたシートを表示したりするための機能部である。例えば、液晶ディスプレイ(LCD:liquid crystal display)や、有機ELディスプレイ等により構成されている。また、プロジェクタのような照射型/投影型の表示制御装置であってもよい。
操作検出部220は、利用者からの操作を検出するための機能部である。例えば、表示部210と一体に構成されるタッチパネル等により構成されている。操作の検出方式としては、静電容量方式であったり、抵抗膜方式等の感圧式や、赤外線方式、電磁誘導方式であったりと何れの方法であってもよい。
また、表示部210が照射型等の表示制御装置である場合は、操作検出部としては人感センサ等を利用して操作を検出してもよい。
画像処理部230は各種画像を処理するための機能部である。すなわち、コンテンツを表示部210に表示する場合に、各種処理を実行する。例えば、コンテンツとして静止画像を拡大、縮小表示したり、動画像を再生したりする。
また、コンテンツからサムネイル画像となるシートを生成したり、コンテンツに対して色調整処理、シャープネス処理等といった各種画像処理を施したりする。
通信部240は、ネットワークNWに接続するためのネットワークインタフェースである。通信方法としては、有線/無線を問わず、また、LAN/WANを問わない。すなわち、本実施形態においては、表示装置10、共有サーバ30と通信をすることができればよい。有線LANであれば、10BASE−T、100BASE−TX、1000BASE−Tといったイーサネットの規格や、無線LANであれば、IEEE802.11a/b/g/nといった規格、WANであればLTE、WiMAX、3G等が利用される。
なお、共有サーバ30を利用しないで直接表示装置10と通信する場合であれば、BluetoothやZigBeeといった近距離無線通信を利用してもよい。
記憶部250は、端末装置20の動作に必要な各種プログラムや、各種データが記憶されている機能部である。記憶部250は、例えば、SSD(Solid State Drive)等の半導体メモリや、HDD(Hard Disk Drive)等の磁気ディスクにより構成されている。
ここで、記憶部250には、共有フォルダ設定情報252が記憶されており、また、コンテンツ記憶領域254が確保されている。
共有フォルダ設定情報252は、コンテンツを表示装置10等の他の装置と共有するための共有フォルダの設定が記憶されている。例えば、「\\Server\share\user1」と記憶されている場合には、当該指定されたフォルダ(ディレクトリ)が共有フォルダとして設定される。
コンテンツ記憶領域254には、コンテンツが記憶されている。コンテンツは、端末装置20で作成・編集されたコンテンツや、他の装置から受信されたコンテンツが記憶されている。ここで、本実施形態におけるコンテンツとは、種々のデータをいい、例えば、テキストデータ、ドキュメントデータ、音声ファイル、画像ファイル(静止画像データ)、動画ファイル(動画像データ)等、種々のデータ形式で表されるものである。
[1.2.3 共有サーバ]
共有サーバ30の機能構成について図4を用いて説明する。図4に示すように、共有サーバ30は、制御部300と、ファイル共有制御部310と、通信部340と、記憶部350とを備えて構成されている。なお、必要に応じて、操作部や、表示部等を備えてもよい。
制御部300は、共有サーバ30の全体を制御するための機能部である。制御部300は、記憶部350に記憶されている各種プログラムを読み出して実行することにより各種機能を実現しており、例えばCPU(Central Processing Unit)等により構成されている。
ファイル共有制御部310は、ファイル共有サービスを提供するための機能部である。例えば、共有フォルダを設定したり、共有フォルダに対するアクセス権限を設定したりする機能部である。ファイル共有サービスとしては、例えばSMB、NetBEUI、WebDAV等や、FTP等により実現される。
通信部340は、ネットワークNWに接続するためのネットワークインタフェースである。通信方法としては、有線/無線を問わず、また、LAN/WANを問わない。すなわち、本実施形態においては、表示装置10、端末装置20と通信をすることができればよい。有線LANであれば、10BASE−T、100BASE−TX、1000BASE−Tといったイーサネットの規格や、無線LANであれば、IEEE802.11a/b/g/nといった規格、WANであればLTE、WiMAX、3G等が利用される。
記憶部350は、共有サーバ30の動作に必要な各種プログラムや、各種データが記憶されている機能部である。記憶部350は、例えば、SSD(Solid State Drive)等の半導体メモリや、HDD(Hard Disk Drive)等の磁気ディスクにより構成されている。
ここで、記憶部350には、共有フォルダ352が設定されており、共有フォルダの中にはコンテンツ354が記憶されている。
共有フォルダ352は、1又は複数設定することができる。共有フォルダ352は、表示装置10毎に設定されてもよいし、後述するトンネルトレイに対応させてもよい。
[1.3 処理の流れ]
つづいて、第1実施形態における処理の流れについて、図を用いて説明する。まず、各処理を実行する前に、表示装置10及び端末装置20において、共通の共有フォルダが設定される。
すなわち、共有サーバ30にあるフォルダの1つを共有フォルダとして設定する。共有フォルダは、表示装置10及び端末装置20から読み取り/書き込み等が行えるように共有設定がされている。そして、設定された共有フォルダは、共有フォルダ設定情報152、共有フォルダ設定情報252として、それぞれ記憶される。
[1.3.1 端末装置の処理]
まず、端末装置20における処理について、図5に基づいて説明する。まず、端末装置20の表示画面の所定の表示領域にトンネルトレイを表示する(ステップS102)。ここでいうトンネルトレイとは、ファイル連携をするための識別表示の一種であり、送信アイコンとして表示されている。表示画面の1箇所に、ファイル連携をするために本実施形態では円を表示する。この円は、表示画面において常に前面(最前面)に表示されていることとしてもよいし、所定の色(例えば、赤色や青色等)で表示されている。なお、トンネルトレイという表現は一例であり、ファイル連携を行う領域が解るような識別表示であれば、他の図形や、文字等であってもよいし、表示画面の所定領域(座標)が設定されてもよい。
すなわち、表示画面における特定領域を示すための表示がトンネルトレイである。トンネルトレイは、表示画面の中で任意の箇所に配置することができる。また、大きさや色等も利用者が自由に設定することが可能である。また、必要に応じてトンネルトレイとして表示せず、表示画面の特定領域をトンネルトレイと同等の機能を持たせてもよい。
つづいて、シートが表示される(ステップS104)。シートは、コンテンツを示す画像であり、端末装置20の表示画面に1又は複数表示可能である。シートは、端末装置20が記憶又は読み出し可能なコンテンツを示すものであり、端末装置20で生成されたコンテンツであってもよいし、他の装置から受信されたコンテンツであってもよい。
つづいて、シートの移動操作があったか否かを検出する(ステップS106)。例えば、タッチ操作をシート上で検出し、そのままドラッグ操作された場合に移動操作があったと検出する。なお、他の操作があった場合は、当該操作に応じた処理(例えば、複製処理、削除処理、印刷処理等)が実行されることとなるが、本実施形態ではその説明は省略する(ステップS106;No→ステップS108;Yes)。
シートの移動操作が継続して行われている間は、シートが移動表示される(ステップS110)。ここで、シート移動表示とは、シートが移動していることが解ればよい。例えば、表示されているシートの画像自体を移動表示してもよいし、シートの移動を示す識別表示(例えば、矩形表示)を移動表示してもよい。
ここで、移動操作の終了を検出すると(ステップS112;Yes)、移動操作が終了した座標を検出し、移動シートの位置がトンネルトレイ近傍であったか否かを判定する(ステップS114)。
ここで、移動シートの位置がトンネルトレイの近傍であるか否かの判定は種々の方法が考えられる。例えば、シートの中心座標が、トンネルトレイの座標に含まれていたり、トンネルトレイの座標近傍(例えば、トンネルトレイの矩形領域の座標より±5ピクセル等)に含まれていたりするかを判定してもよい。また、シートの領域(例えば、矩形領域)の何れかの座標を、トンネルトレイの座標と比較してもよい。
このように、移動シートがトンネルトレイの近傍となったか否かの判定は、設計事項として種々設定可能であるため、例えば、当たり判定と同じように、当業者が想定しうる判定方法であれば、何れの方法であってもよい。
移動したシートがトンネルトレイの近傍にある場合は、コンテンツ送信処理が実行される(ステップS114;Yes→ステップS116)。なお、移動したシートがトンネルトレイの近傍に無い場合には、通常の移動操作と判定し、移動先にシートを表示して本処理を終了する(ステップS114;No→ステップS118)。
また、移動操作としては、フリック操作であってもよい。すなわち、ステップS106において行われる移動操作がフリック操作を検出した場合、タッチ移動座標、移動速度を検出し、移動方向がトンネルトレイの表示されている方向であり、移動速度が所定の閾値以上であれば、コンテンツ送信処理が実行される。すなわち、シートをトンネルトレイに移動するには、ドラッグによる操作であってもよいし、フリック操作であってもよい。
[1.3.2 コンテンツ送信処理]
つづいて、端末装置20におけるコンテンツ送信処理について、図6を参照して説明する。まず、トンネルトレイの近傍に移動されたシートに対応するコンテンツを共有フォルダに送信する(ステップS122)。
ここで、共有フォルダにコンテンツを送信した後に、トンネルトレイ近傍に移動表示されているシートを消去し(ステップS124)、移動元の位置にシートを表示する(ステップS126)。
なお、上述した処理では、コンテンツを送信した後に、トンネルトレイ近傍に移動表示されているシートを消去しているが、逆の処理であっても良いことは勿論である。すなわち、トンネルトレイ近傍に移動表示されているシートを消去したあと(ステップS124)に、コンテンツを共有フォルダに送信してもよい(ステップS122)。
なお、移動元の位置にシートを表示するか否かは利用者が選択できてもよいし、設定により変更できることとしてもよい。例えば、シングルタッチで移動表示した場合には、移動元の位置にシートを表示する(すなわちコピー動作)が、マルチタッチで移動表示した場合には、移動元の位置にシートを表示しない(すなわち、移動動作)としてもよい。
また、その場合、シートに関連付けられているドロアー(例えば、図10のD130)に収納されてもよいし、表示画面の一部(例えば、予め設定されたサムネイル領域)のエリアに縮小表示してもよい。
[1.3.3 表示装置の処理]
つづいて、表示装置10の処理について、図7を参照して説明する。まず、表示装置10において、共有フォルダを設定する(ステップS152)。予め利用者により設定されていたり、管理者により設定されていたりする場合には、特に処理を実行する必要は無い。
ここで、表示装置10は、定期的に共有フォルダに、コンテンツが記憶されているかをチェック(確認)する(ステップS154)。この共有フォルダチェックは、所定時間毎(例えば、3秒毎、10秒毎や、30秒毎等)に確認する。この確認は、共有フォルダにコンテンツが記憶されるまで繰り返し実行される(ステップS156;No→ステップS154)。
ここで、共有フォルダにコンテンツが記憶されている(存在する)場合には(ステップS156;Yes)、当該コンテンツがサポート対象のコンテンツか否かを判定する(ステップS158)。
ここで、サポート対象のコンテンツとは、例えば、コンテンツが表示装置10で表示したり、再生したり、開いて利用出来るコンテンツであるか否かである。例えば、コンテンツを表示・編集するためのアプリケーションが存在していない場合や、対応するコーディックがインストールされていない場合には、サポート対象外のコンテンツと判定し、無視する(ステップS158;No→ステップS154)。
具体的にいくつかの例を説明すると、例えば共有フォルダに格納されたコンテンツが「dxfファイル」というコンテンツの場合、dxfファイルを利用出来るアプリケーションが、表示装置10にインストールされていない場合にはサポート対象外のコンテンツとなる。また、「aviファイル」というコンテンツであって、利用出来るアプリケーションはインストールされているが、当該ファイルのコーディックがインストールされていないために、再生できない場合にはサポート対象外のコンテンツとなる。
このようなサポート対象外のコンテンツは、上述したように無視するが、共有フォルダから削除してもよい。
つづいて、共有フォルダに格納されたコンテンツがサポート対象のコンテンツであった場合(ステップS158;Yes)、シート(画像)を生成する必要がある場合、シート(画像)を生成する(ステップS160;Yes→ステップS162)。例えば、コンテンツが静止画コンテンツの場合であって、静止画コンテンツ(静止画データ)をそのまま縮小表示してシートとする場合には、シート画像の生成は不要となることから、そのまま静止画コンテンツをシートとして利用してもよい(ステップS160;No)。また、当該コンテンツに既にプレビュー画像が含まれている場合は、当該プレビュー画像をそのままシート(画像)として使用してもよい。
なお、静止画コンテンツであっても、複数の静止画データが含まれている場合には、シート(画像)とする静止画を特定し、シートとして生成してもよい。
つづいて、コンテンツを共有サーバ30の共有フォルダから、表示装置10のフォルダにコピーする(ステップS164)。そして、共有フォルダからコンテンツを削除し(ステップS166)、当該コンテンツに対応するシートを表示装置10の表示画面に表示する(ステップS168)。
なお、上述したステップは、処理に矛盾が生じない範囲で前後してもよいことは勿論である。例えば、ステップS164は、ステップS158の後に実行してもよい。すなわち、最初にコンテンツを表示装置10にコピーし、その後コピーしたコンテンツに基づいてシートを生成してもよい。
[1.4 動作例]
つづいて、本実施形態における動作例について説明する。図8は端末装置20の表示画面の一例であり、図9は表示装置10の表示画面の一例である。
本実施形態における、表示装置10及び端末装置20は、コンテンツを表示することができる。表示装置10を例に取ると、まず、表示画面に設けられたワークエリアと呼ばれる領域に、コンテンツに対応するシートが表示されている。
シートはコンテンツに基づいて生成される画像データであり、コンテンツを示すプレビュー画像である。例えば、コンテンツがドキュメントファイルであれば、代表するページからプレビュー画像を、動画ファイルであれば、ある場面のキャプチャ画像を静止画として表示するか、またはシート上で再生して動画として表示することができる。
利用者は、外部アプリケーションまたはドロアーからコンテンツを表示画面に設けられたワークエリアにドラッグ&ドロップまたは選択して開く操作を実施することで、コンテンツをシートとして表示させることができる。コンテンツが静止画ファイルであれば当該静止画を表示し、動画ファイルであれば動画ファイルを表示し、また、複数ページを含むドキュメントファイルであれば、ページめくり可能なシートを表示する。
このように、利用者はシートを選択することにより、対応するコンテンツを表示することが可能となる。また、シートは移動、拡大、縮小、回転といったことが可能である。また、シート上で、ページ分割や、ページ連結といった操作を行うこととしてもよい。
図8(a)は、端末装置20に表示される表示画面W100の一例である。表示画面W100には、トンネルトレイT100が表示されている。また、表示画面のワークエリアには、コンテンツを示すシートC100が表示されている。当該シートは、移動、拡大、縮小、回転といった操作・表示が可能である。
ここで、利用者がシートC100をタッチ操作により選択し、方向P100に移動操作する。そうすると、シートC100は、移動表示され、図8(b)の状態に遷移する。
図8(b)の表示画面W110では、トンネルトレイT100の近傍にシートC100が移動表示されている。このとき、トンネルトレイT100は、シートC100より上に表示されている。
このとき、利用者が選択を解除する(タッチアップする)と、シートC100に対応するコンテンツは、共有フォルダに送信(コピー)される。共有フォルダとしては、共有フォルダ設定情報252に設定されている共有フォルダであり、本実施形態は、共有サーバ30の共有フォルダ352となる。
図9は表示装置10の動作例を説明するための図である。表示装置10は、定期的に共有フォルダを確認し、新たなコンテンツが記憶されていることを検出する。
新たなコンテンツの存在が確認できた場合に、表示装置10は、当該コンテンツに対応するシート(コンテンツのプレビュー画像に対応する画像)を生成する。そして、表示画面W120に表示させる。
例えば、本実施形態では、表示画面W120の下側からシートC120が表示される。そして、方向P120にスライド表示され、図9(b)のように、表示画面W120に表示されることとなる。このように、本実施形態では、端末装置20から送信されたコンテンツが、表示装置10で自動的に受信することが可能となる。
また、受信されたコンテンツに対応するシート画像が自動的に生成され、表示装置10の表示画面であるワークエリアに自動的に表示されることとなる。
なお、このときシートについて識別表示を行ってもよい。例えば、新たに取得したコンテンツであることを識別できるように表示態様をかえて表示するといったことをしても良い。例えば、一定時間枠の色を変えたり、強調表示をしたりするといったことが考えられる。また、透過度を変更したり、点滅表示をしたりといったことも考えられる。このように、シートを時間経過と共に識別表示することで、どれが新しいシートかを利用者に対して報知してもよい。
ここで、従前の表示装置の場合について、図10を参照に説明する。例えば、従前の表示装置であれば、表示装置のフォルダに対応づけて、ドロアーが表示されている。ドロアーを利用者が選択すると、ドロアーに対応するフォルダに含まれているコンテンツの一覧が表示されることとなる。
具体的には、図10(a)に示すように、ドロアーの一覧が、表示画面W130の下部一端に表示されている。ここで、利用者がドロアーD130を選択した場合に遷移する画面が図10(b)の状態である。
図10(b)は、ドロアーD130に含まれているコンテンツに対応するシートの縮小画像が領域R130に一覧表示されている。この時点で、コンテンツの一覧が表示される。ここで、利用者がコンテンツC130を選択し、方向P130に移動すると(すなわち、ワークエリアにコンテンツC130を移動すると)、コンテンツに対応するシートが生成され、ワークエリアに表示される。
このように、従前は表示装置10においてコンテンツが受信されたことが解らず、また、受信された場合でもコンテンツを選択してから表示させる必要があった。また、コンテンツに基づくシートを生成する場合、選択されたコンテンツのシートのみが表示されており、自動的にシートを生成し、表示させるといった機能は無かった。
本実施形態によれば、このように表示装置10と、端末装置20との間で容易にコンテンツの送受信(連携)を行うことが可能となる。また、表示装置10においても、利用者が意識することなく、コンテンツに対応するシートが生成・表示されるためどのようなコンテンツを受信したか容易に把握することができるようになった。
[2.第2実施形態]
つづいて、第2実施形態について説明する。第2実施形態は、第1実施形態における図6のステップS124において、シートを消去するときに、利用者にとって視認性が高い方法で行う実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一であり、処理フローも同一である。
図6のステップS124において、シートを消去するときに、種々の表示態様を行う場合の実施形態である。
図11は、本実施形態における、シートを消去する場合の表示画面W200の一例である。例えば、図11(a)で示すように、シートC200が、トンネルトレイT200の上で表示されている。ここで、選択状態が解除される(タッチアップ)されると、シートに対応するコンテンツが共有フォルダに送信される。
このとき、シートC200は、トンネルトレイT200の中心に向かって徐々に小さくなって行く表示が行われる。図11では、図11(b)のシートC202、図11(c)のシートC204、図11(d)のシートC206と徐々に小さくなっていることが解る。
すなわち、シートC200をトンネルトレイに重ねると、シートは徐々に大きさが小さくなっていく。これはシートの中心と、トンネルトレイとの中心とが同じとなり、シートが縮小表示されていく。そして、シートがトンネルトレイに収まる状態まで縮小表示される。トンネルトレイの中に収まった状態で消去させても良いし、そのまま継続して縮小表示してもよい。
これにより、利用者はトンネルトレイの中に、画像化したシートが吸い込まれていくように視認されることになる。これにより、コンテンツが送信されているイメージがより明確に認識できることとなる。
また、図12の表示画面W220では、シートが回転しながらトンネルトレイの中に吸い込まれるような表示が行われる。例えば、図12(a)で示すように、シートC220が、トンネルトレイT220の上に表示されている。ここで、選択状態が解除される(タッチアップ)と、シートに対応するコンテンツが共有フォルダに送信される。
このとき、シートC220は、トンネルトレイT220の中心に向かって徐々に回転されながら、かつ、小さくなっていく表示が行われる。図12では、図12(b)のシートC222、図12(c)のシートC224、図12(d)のシートC226と徐々に回転しながら小さくなっていることが解る。これにより、利用者はトンネルトレイの中に、シートが吸い込まれていくように視認されることになる。これにより、コンテンツが送信されているイメージがより明確に認識できることとなる。この場合も、少なくともシートはトンネルトレイの中に収まる大きさまでは縮小されるのが好ましい。
このように、本実施形態によれば、シートをトンネルトレイに投げ入れて、投げ入れたシートがトンネルに吸い込まれるようなイメージを利用者は視認することができる。これにより、直感的にコンテンツが送信された効果を確認することができる。
また、シートが少なくともトンネルトレイの中に収まる程度に縮小されることにより、利用者から見ると、トンネルに吸い込まれているように感じることができ、直感的にシートに対応するコンテンツが送信されているイメージで確認することができる。
また、シートが縮小されるのと併せて、透過表示するように表示態様を変化させてもよい。例えば、縮小表示に応じて透過度が増すことにより、徐々に消えていく表示を行うことが可能となる。
なお、シートがトンネルトレイの中に収まるのが理想であるが、トンネルトレイの大きさに近づいて縮小されることが重要であるため、シートがトンネルトレイからはみ出したからといって、直ちに効果がなくなる訳ではない。
[3.第3実施形態]
つづいて、第3実施形態について説明する。第2実施形態は、第1実施形態における図6のステップS114において、シートを移動し、トンネルトレイの近傍になったことを利用者にとって視認させることができる実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一であり、処理フローも同一である。
図13(a)の表示画面W300に示すように、シートC300を利用者がタッチダウンすることで選択し、トンネルトレイT300の方向に移動操作を行う。ここで、シートC300がトンネルトレイT300の近傍になると、シートC300の表示態様が変化する。
本実施形態では、図13(b)のように、トンネルトレイT300から遠い場合は表示に変化はないが、図13(c)のように、トンネルトレイT300の近傍になると、シートC310は小さく表示される。これにより、利用者がタッチアップすることにより選択状態が解除されると、シートC310に対応するコンテンツが共有フォルダに、すなわち、表示装置10に送信されるということを視認することができる。
なお、変化する表示態様としては、図13では大きさが小さくなっているが他のような表示態様の変化であってもよい。例えば、透過表示したり、点滅表示したり、輝度を上げたりとった表示態様を変化させるといったことが考えられる。また、吹き出し表示をしたり、音声出力を行ったり、警報音を出力したりといった報知を行うことも考えられる。
このように、本実施形態によれば、選択されたシートがトンネルトレイに近づくことにより、シートの表示態様が変化したり、報知を行ったりすることにより、利用者は現在移動中のシートが表示装置10に送信されることを明確に認識することができるようになる。
[4.第4実施形態]
つづいて、第4実施形態について説明する。第4実施形態は、第1実施形態における図6のステップS114において、シートを移動し、トンネルトレイの近傍になったことを利用者にとって視認させることができる実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一であり、処理フローも同一である。
図14(a)の表示画面W400に示すように、シートC400を利用者がタッチダウンすることで選択し、トンネルトレイT400の方向に移動操作を行う。ここで、シートC400がトンネルトレイT400の近傍になると、トンネルトレイT400の表示態様が変化する。
本実施形態では、図14(b)のように、シートC400がトンネルトレイの近傍となったことから、トンネルトレイの態様が変化したトンネルトレイT410が表示される。トンネルトレイの態様としては、例えば図14(b)のように大きさを大きくしたり、太く表示したりするといった表示態様の変更が行われている。それ意外にも、例えば透過度を変えたり、色を変えたり、点滅表示をしたりといった種々の表示態様が考えられる。
このように、本実施形態によれば、選択されたシートがトンネルトレイに近づくことにより、トンネルトレイの表示態様が変化することで、現在移動中のシートがトンネルトレイに到達している状態であること、すなわち、その状態でタッチアップすれば表示装置10に移動中のシートに対応するコンテンツが送信されることを、明確に認識することができるようになる。
[5.第5実施形態]
つづいて、第5実施形態について説明する。第5実施形態は、端末装置20から送信されたコンテンツが表示装置10において表示出来なかったり、再生できなかったりする場合、すなわち表示装置10のサポート対象外である場合について説明するための実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一である。
なお、サポート対象外のコンテンツとは、表示装置10で適切に表示したり、再生したり、編集したりすることができないファイルである。例えばコンテンツを表示するアプリケーションが表示装置10にインストールされていない場合や、コンテンツを表示・再生するコーディックがインストールされていない場合に該当する。
また、第1実施形態における図7の処理フローを図15に置き換えており、同一の処理フローには同一の符号を付して、その説明を省略する。
すなわち、図7において、表示装置10はサポート対象外のコンテンツが共有フォルダに記憶されている場合は、当該ファイルは無視して処理を行っていた。しかし、本実施形態では、表示装置10がサポート対象外のコンテンツが記憶されている場合(ステップS158;No)、サポート対象外信号を、コンテンツを記憶させた端末装置20に送信する(ステップS158;No→ステップS502)。
図16は、端末装置20において実行される処理である。まず、サポート対象外信号を表示装置10から受信した場合には(ステップS522;Yes)、当該サポート対象外となったコンテンツが、端末装置20に記憶されているか否かを確認する(ステップS524)。もし、当該コンテンツが移動操作等により、端末装置20に記憶されていない場合には、もう一度端末装置20に、共有フォルダからコンテンツをコピーしてもよい(ステップS524;Yes→ステップS526)。
そして、不要となった共有フォルダに記憶されているコンテンツを削除する(ステップS528)。なお、対応していないコンテンツは、本実施形態のように削除することとしてもよいし、利用者が削除しない限りはそのまま記憶していてもよい。
また、ステップS522において、サポート対象外信号を受信した場合、端末装置20は、その旨を表示部210に表示したり、音声ガイダンスを出力したり、警報音を出力したりと、その旨を報知してもよい。
本実施形態の動作例を、図17を参照して説明する。図17(a)の表示画面は、端末装置20から、表示装置10に対してコンテンツを送信したが、送り先装置である表示装置10側でサポートしていないコンテンツだった場合の報知画面(警告画面)である。
この場合、領域R500にメッセージが表示され、コンテンツが表示装置でサポート対象外であることが解る。また、図17(b)に示すように、仮に一度シートが削除されていたとしても、シートC500として復活してもよい。すなわち、一度シートに対応するコンテンツが削除されていたとしても、サポート対象外信号を受信した場合には、再びコンテンツが端末装置20にコンテンツがコピーされることとしてもよい。
[6.第6実施形態]
つづいて、第6実施形態について説明する。第6実施形態は、送信するコンテンツが表示装置10でサポート対象外だった場合、サポートされるコンテンツに変換して送信する場合について説明するための実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一である。
また、第1実施形態における図6の処理フローを図18に置き換えており、同一の処理フローには同一の符号を付して、その説明を省略する。
まず、コンテンツ送信処理が実行されるにあたり、送信コンテンツは送信先となる表示装置10でサポートされているコンテンツであるか否かを判定する(ステップS602)。ここで、表示装置10においてサポートされているコンテンツであるか否かの判定方法としては種々の方法が考えられる。
(1)表示装置10のサポートしているデータベースを端末装置20で記憶する。端末装置20は、コンテンツを送信する場合に、データベースにもとづいて、表示装置10においてサポートされているか否かを確認する。
(2)端末装置20がコンテンツを送信する場合に、表示装置10に当該コンテンツをサポートしているか否かを問い合わせる。問合せ結果に応じて、サポート対象であるか否かを判定する。なお、判定結果に基づいてデータベースを更新してもよい。
これらの方法により、表示装置10においてコンテンツがサポートされている場合には(ステップS602;Yes)、ステップS122、S124、S126と実行する。
他方、表示装置10においてコンテンツがサポートされていない場合には、送信するコンテンツを、表示装置10で表示・再生可能なコンテンツに変換可能かを判定する(ステップS604)。
ここで、送信するコンテンツを、表示装置10でサポート対象となっているコンテンツに変換可能であれば(ステップS604;Yes)、送信するコンテンツの形式を変換し(ステップS606)、変換後に共有フォルダに変換したコンテンツを送信する(ステップS608)。具体的には、例えばPDFファイルや、画像ファイルに変換したり、再生可能な動画像データに変換したり、出力可能な音声データに変換したりするといったことが考えられる。
他方、送信するコンテンツを表示装置10でサポートしているコンテンツの形式に変換できない場合はエラー表示を行い(ステップS604;No→ステップS610)、コンテンツを送信せずに本処理を終了する。
このように、本実施形態によれば、表示装置10でサポート対象外とされているコンテンツであっても、適切に表示等されることとなる。
なお、本実施形態では、送信コンテンツを変換可能な形式に変換するのを端末装置20で行っているが、例えば共有サーバ30で行ってもよい。例えば、コンテンツが共有フォルダに記憶された段階で、共有サーバ30は、送信先の表示装置10が当該コンテンツをサポートしているか否かを判定する。そして、サポート対象外である場合には、サポートしているコンテンツに形式を変換し、記憶するといった動作を行ってもよい。
この場合、例えば、PDFファイルや、JPGファイル等といった汎用性の高いコンテンツの形式に変換するといったことが考えられる。
[7.第7実施形態]
つづいて、第7実施形態について説明する。第7実施形態は、複数のコンテンツを選択し、送信する場合について説明するための実施形態である。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一である。
また、第1実施形態における図6の処理フローを図19に置き換えており、同一の処理フローには同一の符号を付して、その説明を省略する。
本実施形態においては、ワークエリアに表示されたシートは複数選択可能である。シートを複数選択する方法としては、順次タップしてもよいし、マルチタッチを利用してもよい。また、マルチ選択モードといったモードを切り替えてもよい。複数のシートを選択することにより、シート群(表示されている画像の画像群)として選択することができる。
そして、選択されているシートが複数の場合、すなわちシート群が選択されている場合(ステップS702;No)、シート群に含まれるシートについては順次表示態様を変化する処理を実行する。本実施形態では、トンネルトレイ上に移動させたシートを順次消去する処理を実行する(ステップS704)。なお、共有フォルダに送信するコンテンツは、順次送信されてもよいし、同時に送信されてもよい。
ここで、シートを順次消去する方法としては、種々の表示方法が考えられる。例えば、以下のような表示方法で消去する。
(1)まず移動前のシート座標に、シートn個目(nの初期値は1)を表示する。
(2)続いて、シートサイズを縮小して、シートn個目を表示する。
(3)シート透過度を増加して、シートn個目を表示する。
(4)シート位置をトンネルトレイの中心に近づけるように移動して、シートn個目を表示する。
(5)シートの中心座標が、トンネルトレイの中でなければ、(2)から処理を繰り返し実行する。
(6)シートの中心座標が、トンネルトレイの中になった場合には、総てのシートについて表示を行ったかを確認する。まだ総てのシートについて表示を行っていない場合には、nをインクリメントし、最初から処理を繰り返し実行する。
このように、複数のシートが順次吸い込まれるような表示を行うことができる。このとき、シートについては1枚ずつ表示を行ってもよいし、連続的に表示を行ってもよい。すなわち、n個目のシートが消去された後に、n+1個目のシートについて表示を変化させてもよいし、両方のシートに対して随時処理を実行してもよい。
なお、本実施形態では、シートの個数(コンテンツの数)として説明しているが、シートに対応するコンテンツのページ数で同様の処理を行ってもよい。すなわち、シートに対応するコンテンツがドキュメントファイル等のように複数ページから構成されている場合は、各ページのシートを生成し、同様に吸い込まれるような表示態様を変化させてもよい。
図20は、本実施形態の動作例を説明するための図である。図20(a)に示すように、表示画面W700に、シートC700と、シートC705が表示されている。利用者は、両方のシートを選択し、図20(b)に示すようにまとめてトンネルトレイT700に移動させている。
図20(c)は、トンネルトレイT700の上でタッチアップされた状態を示した図である。図20(c)において、シートC700が回転表示されつつ、徐々に縮小表示されている。このとき、シートC702は表示態様を変化させていない。
そして、ある程度シートC700の表示態様が変化した後に、シートC702の表示態様が変化する。図20(d)では、シートC702も回転表示されつつ、徐々に縮小表示されているが、シートC700の方が縮小表示されている。なお、この場合は、シートC700が完全に消去されてから、シートC702の回転表示等が行われてもよい。
[8.第8実施形態]
つづいて、第8実施形態について説明する。第8実施形態は、端末装置20が、複数の表示装置に接続される場合の実施形態について説明する。なお、本実施形態においては、第1実施形態と各装置の機能構成は同一であり、処理フローも同一である。
すなわち、共有フォルダ設定情報において、共有フォルダを設定しているが、この共有フォルダ設定をトンネルトレイ毎に設定する。
これにより、複数の共有フォルダを設定することが可能となり、それに応じて表示装置を切り替えるといったことが可能となる。
図21は、本実施形態における動作例を説明するための図である。図21(a)は、表示画面W800にトンネルトレイT800と、トンネルトレイT810とが表示されている。各トンネルトレイには異なる共有フォルダが設定されている。これにより、例えばトンネルトレイT800に設定された共有フォルダは第1の表示装置が、トンネルトレイT810に設定された共有フォルダは第2の表示装置が、それぞれ割り当てられている。
ここで、シートC800をトンネルトレイT810に移動表示したのが図21(b)である。なお、トンネルトレイT810が選択されていることが解るように、トンネルトレイの表示態様が変化している。
トンネルトレイの表示態様の変化としては、例えば枠の太さを変更したり、色を変更したりすることが考えられる。また、図21(c)に示すように、大きさを変えるといったことをしてもよい。
図21(c)のように、現在対象となっているトンネルトレイT800の大きさを大きくしたり、逆にトンネルトレイT810の大きさを小さくしたりするといったことが考えられる。このように、表示態様は複数組み合わせてもよいし、単独で行ってもよい。図21(c)に示した状態は一例であり、必ずしも両方の大きさを変更する必要は無いし、大きさを変えた場合は、枠線の太さはそのままであってもよい。
[9.第9実施形態]
つづいて、第9実施形態について説明する。第9実施形態は、端末装置20が、複数の表示装置に接続される場合の実施形態について説明する。なお、本実施形態においては、第8実施形態と各装置の機能構成は同一であり、処理フローも同一である。
第8実施形態においては、トンネルトレイを表示装置毎(共有フォルダ毎)に表示させたが、本実施形態では、トンネルトレイを1つに対して、複数の共有フォルダを設定する場合を説明する。
具体的には、共有フォルダ設定情報に、共有フォルダ設定に合わせて利用者識別情報を記憶させる。利用者識別情報としては、例えば、操作検出部120が操作を検出する電子ペンから、固有の識別情報を取得する。そして、固有の識別情報と対応づけて、共有フォルダ(表示装置)とを対応づけて記憶する。
この場合、例えばシートを第1の電子ペンでトンネルトレイに移動した場合は、第1の表示装置にシートに対応するコンテンツが送信される。また、シートを第2の電子ペンでトンネルトレイに移動した場合は、第2の表示装置にシートに対応するコンテンツが送信される。
このように、他の識別情報を利用することにより、トンネルトレイが1つであっても複数の表示装置(共有フォルダ)にコンテンツを送信することが可能となる。なお、本実施形態では利用者識別情報として電子ペンの識別情報を利用したが、他の識別情報を利用したり、操作によって切り替えられたりしてもよい。例えば、シングルタッチの場合は第1の表示装置、ダブルタッチの場合は第2の表示装置といった操作であってもよい。
[10.第10実施形態]
つづいて、第10実施形態について説明する。第10実施形態は、コンテンツを送信する処理を中止する場合の実施形態について説明する。
すなわち、上述の実施形態において、ステップS124等においてコンテンツが送信される場合に、シートが消去される表示態様が表示される。この表示態様を例えばタップすることにより、コンテンツ送信の処理を取り消す(中止する)ことが可能である。
例えば、第2実施形態における図12では、シートが回転表示し、かつ、縮小表示されている。このとき、シートや、トンネルトレイをタップすることにより、送信処理を取り消すことができる。
したがって、利用者は間違えたコンテンツを送信してしまったことに気がついたときは、容易な操作によってコンテンツの送信を中止することが可能となる。
[11.適用例]
上述した実施形態を提供したコンテンツ連携システムを適用することにより、以下のような場面で有効に活用することができる。
1.端末装置としてテーブル型の表示装置、表示装置として縦置き型の表示装置を使う場合、電子会議等において、意見の交換や共有が有効に行うことができる。
(1)端末装置(テーブル型の表示装置)で複数人がそれぞれメモシートに意見を記入する。
(2)表示装置(縦置き型の表示装置)に意見を記入したメモシートを表示する。
(1)(2)の流れをスムーズに行うことを想像すると、従来の、一辺に配置されたドロアーより、テーブル型の特徴である四辺からの操作を考慮し、真ん中にトンネルトレイを配置することで、利便性が高まる。
2.送信元として端末装置としてテーブル型の表示装置をホテルのロビーで使用するケースが考えられる。これにより、資料や、コンテンツ、写真の共有を容易に行うことができる。
(1)送信元である端末装置(テーブル型の表示装置)に複数人が写真や動画を表示(転送)する。
(2)受信元である表示装置(各自スマートフォンや外部ストレージサーバーのフォルダ)をトンネルトレイに設定する。
(3)自分の欲しいコンテンツを自分のトンネルトレイに投入する。
(4)相手の欲しがるコンテンツを相手のトンネルトレイに投入する。
(5)最後に受信の操作を施してコンテンツを受取る。
(3)、(4)の流れをスムーズに行うことを想像すると、トンネルトレイが可動式であることから有効に適用することができる。
3.ミーティングで使用するケースが考えられる。これにより、資料、コンテンツの仕分けが容易に行うことが可能となる。
(1)送信元である端末装置でミーティングを行うため資料を表示する。
(2)従来のドロアーとは別に「要確認フォルダ」をトンネルトレイに設定する。
(3)ミーティング中に出てきた要確認なシートをトンネルトレイに投入する。
(4)ミーティング終了後、席に戻って要確認資料を確認する。
トンネルトレイを使用することで、数多くある資料から必要な資料を区別して管理でき、(3)、(4)をスムーズに行うことができる。この場合、従来のドロアーはミーティングごとに用意して使用することを想定している。「あとで見る」のような、感覚が違う操作として、従来のドロアーと区別できるような、格納方法として、トンネルトレイを利押することが可能である。
[12.変形例]
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も特許請求の範囲に含まれる。
また、上述した実施形態では、操作検出部としてタッチパネルとし、タッチ操作(タップ操作)を例に説明したが、例えばマウス等の外部入力装置で、クリック操作等により操作が行われてもよい。
また、上述した実施形態では、表示部110と、操作検出部120とが一体となっているタッチパネルを例として説明したが、本実施形態に開示した発明を実施するためには、他の方式であってもよい事は勿論である。例えば、表示部110としてプロジェクタを利用し、操作検出部120として人感センサを利用してもよい。そして、操作検出部120、表示部110に制御用のコンピュータを接続することにより、表示システムとして実現されてもよい。
また、上述した実施形態は、説明の都合上、それぞれ別に説明している部分があるが、技術的に可能な範囲で組み合わせて実行してもよいことは勿論である。例えば、第5実施形態の操作を、他の実施形態と組み合わせて実行してもよい。
このように、本明細書に記載した各実施形態は、矛盾の無い範囲で組み合わせて実行することができる。
また、実施形態において各装置で動作するプログラムは、上述した実施形態の機能を実現するように、CPU等を制御するプログラム(コンピュータを機能させるプログラム)である。そして、これら装置で取り扱われる情報は、その処理時に一時的に一時記憶装置(例えば、RAM)に蓄積され、その後、各種ROMやHDD、SSDの記憶装置に格納され、必要に応じてCPUによって読み出し、修正・書き込みが行なわれる。
また、市場に流通させる場合には、可搬型の記録媒体にプログラムを格納して流通させたり、インターネット等のネットワークを介して接続されたサーバコンピュータに転送したりすることができる。この場合、サーバコンピュータの記憶装置も本発明に含まれるのは勿論である。
10 表示装置
100 制御部
110 表示部
120 操作検出部
130 画像処理部
140 通信部
150 記憶部
152 共有フォルダ設定部
154 コンテンツ記憶部
20 端末装置
200 制御部
210 表示部
220 操作検出部
230 画像処理部
240 通信部
250 記憶部
252 共有フォルダ設定部
254 コンテンツ記憶部
30 共有サーバ
300 制御部
310 ファイル共有部
340 通信部
350 記憶部
352 共有フォルダ
354 コンテンツ
40 アクセスポイント(AP)

Claims (9)

  1. コンテンツに基づいて生成された画像を表示画面に表示する表示手段と、
    前記画像の中から選択画像を選択する画像選択手段と、
    前記選択画像に対する移動操作を検出する操作検出手段と、
    前記表示画面における予め定められた特定領域に前記選択画像が移動されたか否かを判定する移動判定手段と、
    前記特定領域に前記選択画像が移動された場合には、前記選択画像の表示態様を変化させる画像変化手段と、
    前記表示態様が変化した前記選択画像に対応するコンテンツを、前記特定領域に対応づけられている送信先に送信するコンテンツ送信手段と、
    を備えることを特徴とする表示装置。
  2. 前記画像変化手段は、前記選択画像が、前記特定領域に含まれるように縮小表示を行うことで、前記表示態様を変化させることを特徴とする請求項1に記載の表示装置。
  3. 前記画像変化手段は、前記選択画像の回転表示を行う又は透過表示を行うことで前記表示態様を変化させることを特徴とする請求項2に記載の表示装置。
  4. 前記画像変化手段は、前記選択画像が前記特定領域の近傍に移動された場合には、前記選択画像を縮小表示し、前記選択画像に対する選択が解除された場合に、前記特定領域に含まれるように縮小表示を行うことを特徴とする請求項2又は3に記載の表示装置。
  5. 前記画像選択手段は、複数の前記画像を画像群として選択し、
    前記操作検出手段は、前記画像群の移動操作を検出し、
    前記画像変化手段は、前記画像群が前記特定領域に移動された場合は、前記画像群に含まれる選択画像について、順次表示態様を変化させることを特徴とする請求項1から4の何れか一項に記載の表示装置。
  6. 前記表示手段は、前記特定領域に送信アイコンを表示することを特徴とする請求項1から5の何れか一項に記載の表示装置。
  7. 前記画像変化手段は、前記選択画像が前記特定領域の近傍に移動された場合には、前記送信アイコンの表示態様を変化させることを特徴とする請求項6に記載の表示装置。
  8. 前記画像変化手段により、前記選択画像の表示態様を変化させているときに、利用者により処理の中止指示を受け付ける中止指示受付手段を更に備えることを特徴とする請求項1から7の何れか一項に記載の表示装置。
  9. コンピュータに、
    コンテンツに基づいて生成された画像を表示画面に表示する表示機能と、
    前記画像の中から選択画像を選択する画像選択機能と、
    前記選択画像に対する移動操作を検出する操作検出機能と、
    前記表示画面における予め定められた特定領域に前記選択画像が移動されたか否かを判定する移動判定機能と、
    前記特定領域に前記選択画像が移動された場合には、前記選択画像の表示態様を変化させる画像変化機能と、
    前記表示態様が変化した前記選択画像に対応するコンテンツを、前記特定領域に対応づけられている送信先に送信するコンテンツ送信機能と、
    を実行させるためのプログラム。
JP2017120698A 2017-06-20 2017-06-20 表示装置及びプログラム Pending JP2019008365A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017120698A JP2019008365A (ja) 2017-06-20 2017-06-20 表示装置及びプログラム
US16/009,348 US10554787B2 (en) 2017-06-20 2018-06-15 Display apparatus and recording medium
CN201810632430.3A CN109101146A (zh) 2017-06-20 2018-06-19 显示装置和记录介质
US16/729,660 US20200137197A1 (en) 2017-06-20 2019-12-30 Display apparatus and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017120698A JP2019008365A (ja) 2017-06-20 2017-06-20 表示装置及びプログラム

Publications (1)

Publication Number Publication Date
JP2019008365A true JP2019008365A (ja) 2019-01-17

Family

ID=64658527

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017120698A Pending JP2019008365A (ja) 2017-06-20 2017-06-20 表示装置及びプログラム

Country Status (3)

Country Link
US (2) US10554787B2 (ja)
JP (1) JP2019008365A (ja)
CN (1) CN109101146A (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006011757A (ja) * 2004-06-24 2006-01-12 Sony Corp データ転送装置及びデータ転送方法、並びにコンピュータ・プログラム
JP2008158676A (ja) * 2006-12-21 2008-07-10 Dainippon Screen Mfg Co Ltd サムネイル表示装置およびサムネイル表示プログラム
JP2011238200A (ja) * 2010-04-15 2011-11-24 Tokyo Anagram Co Ltd 情報処理装置、オブジェクト処理方法及びプログラム
WO2015005146A1 (ja) * 2013-07-12 2015-01-15 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
JP2015103250A (ja) * 2013-11-27 2015-06-04 イマージョン コーポレーションImmersion Corporation 身体媒介デジタルコンテンツ転送及び触覚フィードバックの方法並びに装置
JP2016192216A (ja) * 2012-01-26 2016-11-10 パナソニックIpマネジメント株式会社 携帯端末、テレビ放送受信装置及び機器連携方法
JP2017041249A (ja) * 2015-08-17 2017-02-23 テンテン テクノロジーズ リミテッドTenten Technologies Limited タッチスクリーンデバイスの直接接続を介した電子データのソーシャル共有のための改良されたユーザ体験
JP2017080616A (ja) * 2017-02-17 2017-05-18 株式会社平和 遊技機

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5745711A (en) * 1991-10-23 1998-04-28 Hitachi, Ltd. Display control method and apparatus for an electronic conference
US20020049978A1 (en) * 2000-10-20 2002-04-25 Rodriguez Arturo A. System and method for access and placement of media content information items on a screen display with a remote control device
US8789131B2 (en) * 2010-05-14 2014-07-22 Lg Electronics Inc. Electronic device and method of sharing contents thereof with other devices
KR101750898B1 (ko) * 2010-12-06 2017-06-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
JP5255674B2 (ja) 2011-06-14 2013-08-07 シャープ株式会社 データ送信操作機器、および、データ送信制御方法
US20140258903A1 (en) * 2011-09-28 2014-09-11 Sharp Kabushiki Kaisha Display device and display method for enhancing visibility
BR112014015131B1 (pt) * 2011-12-28 2022-05-24 Sony Corporation Dispositivo de exibição, método para controle de exibição de um dispositivo de exibição, e, mídia de armazenamento legível por computador
CN102646117B (zh) * 2012-02-20 2015-07-08 华为技术有限公司 文件数据传送的方法与装置
WO2013145802A1 (ja) * 2012-03-29 2013-10-03 オリンパスメディカルシステムズ株式会社 挿入装置及び回転筒状部材
KR20140090297A (ko) * 2012-12-20 2014-07-17 삼성전자주식회사 근거리 무선 통신(nfc)을 이용하는 화상 형성 방법 및 장치
JP6139138B2 (ja) 2013-01-09 2017-05-31 京セラ株式会社 携帯通信端末、送信制御プログラムおよび送信制御方法
KR20150142347A (ko) * 2014-06-11 2015-12-22 삼성전자주식회사 사용자 단말 및 이의 제어 방법, 그리고 멀티미디어 시스템

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006011757A (ja) * 2004-06-24 2006-01-12 Sony Corp データ転送装置及びデータ転送方法、並びにコンピュータ・プログラム
JP2008158676A (ja) * 2006-12-21 2008-07-10 Dainippon Screen Mfg Co Ltd サムネイル表示装置およびサムネイル表示プログラム
JP2011238200A (ja) * 2010-04-15 2011-11-24 Tokyo Anagram Co Ltd 情報処理装置、オブジェクト処理方法及びプログラム
JP2016192216A (ja) * 2012-01-26 2016-11-10 パナソニックIpマネジメント株式会社 携帯端末、テレビ放送受信装置及び機器連携方法
WO2015005146A1 (ja) * 2013-07-12 2015-01-15 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
JP2015103250A (ja) * 2013-11-27 2015-06-04 イマージョン コーポレーションImmersion Corporation 身体媒介デジタルコンテンツ転送及び触覚フィードバックの方法並びに装置
JP2017041249A (ja) * 2015-08-17 2017-02-23 テンテン テクノロジーズ リミテッドTenten Technologies Limited タッチスクリーンデバイスの直接接続を介した電子データのソーシャル共有のための改良されたユーザ体験
JP2017080616A (ja) * 2017-02-17 2017-05-18 株式会社平和 遊技機

Also Published As

Publication number Publication date
US20200137197A1 (en) 2020-04-30
CN109101146A (zh) 2018-12-28
US20180367643A1 (en) 2018-12-20
US10554787B2 (en) 2020-02-04

Similar Documents

Publication Publication Date Title
US11888804B2 (en) User interface enhancements and associated processes in email communication
US9250768B2 (en) Tablet having user interface
JP5759329B2 (ja) 会議関連コンテンツの伝送経路を指定するための方法およびシステム
CN105556495B (zh) 用于屏幕镜像的方法及其源设备
US10742573B2 (en) Method of providing message and user device supporting the same
US7861171B2 (en) Pointright based point-of-presence system and architecture
US20140368410A1 (en) Communication system and information processing device
JP7087270B2 (ja) 情報処理装置及び情報処理プログラム
JP6869122B2 (ja) コンテンツ連携システム、コンテンツ受信装置及びコンテンツ連携方法
US20230143275A1 (en) Software clipboard
AU2014312481A1 (en) Display apparatus, portable device and screen display methods thereof
JP6048408B2 (ja) 電子付箋の書込情報処理装置及び方法
US20200264829A1 (en) Information processing apparatus, information processing system, and information processing method
JP2014149714A (ja) 情報処理装置及び表示システム
KR20160053462A (ko) 단말장치 및 그 제어 방법
JP2017076207A (ja) 画像処理装置及び画像処理システム
US20170344168A1 (en) Display system, input device, display device, and display method
JP2019078807A (ja) 表示装置、表示方法及びプログラム
JP6209868B2 (ja) 情報端末、情報処理プログラム、情報処理システム、及び情報処理方法
JP2014085957A (ja) 表示処理装置、及び表示処理方法
US20220405710A1 (en) Information processing apparatus, non-transitory computer readable medium storing program, and information processing method
JP2019008365A (ja) 表示装置及びプログラム
JP2019139332A (ja) 情報処理装置、情報処理方法及び情報処理プログラム
TW201322102A (zh) 操作電腦物件之方法及其程式產品
US20190235734A1 (en) Information processing apparatus and non-transitory computer readable medium storing information processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200325

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210518

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210709

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220111