JP2013117944A - 電子デバイスおよびマルチパネルインターフェース表示方法 - Google Patents

電子デバイスおよびマルチパネルインターフェース表示方法 Download PDF

Info

Publication number
JP2013117944A
JP2013117944A JP2012203215A JP2012203215A JP2013117944A JP 2013117944 A JP2013117944 A JP 2013117944A JP 2012203215 A JP2012203215 A JP 2012203215A JP 2012203215 A JP2012203215 A JP 2012203215A JP 2013117944 A JP2013117944 A JP 2013117944A
Authority
JP
Japan
Prior art keywords
electronic device
interface
display
devices
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012203215A
Other languages
English (en)
Inventor
Yi-Shu Huang
▲い▼書 黄
運偉 ▲りょう▼
Yun-Wei Liao
Chih-Hao Hsu
志浩 徐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute for Information Industry
Original Assignee
Institute for Information Industry
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute for Information Industry filed Critical Institute for Information Industry
Publication of JP2013117944A publication Critical patent/JP2013117944A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4821End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】マルチパネルインターフェース表示を支援する電子デバイスを提供する。
【解決手段】電子デバイスは、操作インターフェースを提供するのに用いられる処理ユニットであって、操作インターフェースが複数のインターフェースコンポーネントから構成される、処理ユニット、ならびに、電子デバイスと少なくとも1台の他の電子デバイスのグループ連携処理を処理するのに用いられるマルチ機器グループ通信ユニットであって、該少なくとも1台の他の電子デバイスも対応する処理ユニットおよび対応するマルチ機器グループ通信ユニットを有している、マルチ機器グループ通信ユニット、を含み、処理ユニットが、電子デバイスおよび少なくとも1台の他の電子デバイスとグループ連携処理を行う機器の数に応じて、電子デバイスが表示するインターフェースコンポーネントのうちの少なくとも1つを調整する。
【選択図】図3

Description

本発明は、マルチパネルインターフェース(multi-panel interface)を支援する電子デバイスおよびマルチパネルインターフェース表示方法に関し、特に、複数の電子デバイス間に適用され、アプリケーションを支援して異なるインターフェースコンポーネントを複数の電子デバイスの複数のパネル上にそれぞれ表示させると共に、連携処理を進行する電子デバイスおよびマルチパネルインターフェース表示方法に関する。
科学技術の発達に伴い、携帯機器、特にスマートフォン、タブレットPC、ネットブック、およびラップトップPCなどが広く用いられるようになった。しかしながら、通信および携帯の利便性に関する設計上の考慮から、通常、携帯機器には面積のより小さい表示パネルが用いられる。そのため表示可能な面積に制限があり、例えば、表示サイズを縮小する、メニューを簡略化する、機能を少なくする必要がある、あるいは、複数ウィンドウの表示に適さないなど、インターフェースを使用する上で多くの制約があり、これらはいずれもユーザーの操作において不都合を生じさせている。さらに、規格およびオペレーティングシステムの違いから、携帯機器同士が互いに連携し合えないことが多く、ユーザーが複数の携帯機器を持っている場合に、それら複数の携帯機器をつなげて用いることができず、ユーザーは最適な使用環境を体験することができない。
よって、複数の携帯機器(例えば、タブレットPC、スマートフォン)間における表示および操作を統合して、より好ましい使用環境を実現させるマルチパネルユーザーインターフェースを支援する電子デバイスおよびマルチパネルインターフェース表示方法が必要とされている。
本発明は、マルチパネルインターフェース表示を支援する電子デバイスであって、複数のインターフェースコンポーネントから構成される操作インターフェースを提供するのに用いられる処理ユニット、ならびに、電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を実行するのに用いられるマルチ機器グループ通信ユニットであって、少なくとも1台の他の電子デバイスは、対応する処理ユニットおよび対応するマルチ機器グループ通信ユニットを有しているところのマルチ機器グループ通信ユニット、を含み、処理ユニットが、電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を行う機器の数に応じて、電子デバイスが表示するインターフェースコンポーネントのうちの少なくとも1つを調整する電子デバイスを提供する。
本発明はさらに、マルチパネルインターフェース表示を支援する電子デバイスに用いられるマルチパネルインターフェース表示方法であって、複数のインターフェースコンポーネントから構成される操作インターフェースを提供するステップ、電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を実行するステップ、 および電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を行う機器の数に応じて、電子デバイスに表示されるインターフェースコンポーネントのうちの少なくとも1つを調整するステップ、を含むマルチパネルインターフェース表示方法を提供する。
本発明に係る電子デバイスおよび方法は、複数の電子デバイスのディスプレイ(つまりマルチパネル)の組み合わせを利用することができ、アプリケーションの設計時に、インターフェースデザインにより大きな柔軟性を与えることができ、かつ異なるマルチパネルの組み合わせに応じて異なるインターフェースコンポーネントを設定することができるため、操作がより簡単・スムーズとなる。さらに、本発明におけるマルチ機器グループ通信ユニットは、異なる複数の電子デバイスのグループを形成し、各電子デバイス間の通信および情報交換を有効にサポートすることができ、これによって、速い応答および同期が達成されることとなる。
図1は、本発明の第1の実施形態による電子デバイスのブロック図である。 図2は、本発明の第2の実施形態による電子デバイスのブロック図である。 図3は、本発明の第3の実施形態による電子デバイスが行うグループ通信の説明図である。 図4は、本発明の第4の実施形態による電子デバイスが行うグループ通信の説明図である。 図5は、本発明の第5の実施形態によるマルチパネルを支援する操作インターフェースの第1の説明図である。 図6は、本発明の第5の実施形態によるマルチパネルを支援する操作インターフェースの第2の説明図である。 図7は、本発明の第5の実施形態によるマルチパネルを支援する操作インターフェースの第3の説明図である。 図8は、本発明の第6の実施形態による操作インターフェースの表示方式の第1の説明図である。 図9は、本発明の第6の実施形態による操作インターフェースの表示方式の第2の説明図である。 図10は、本発明の第6の実施形態による操作インターフェースの表示方式の第3の説明図である。 図11は、本発明の第6の実施形態による操作インターフェースの表示方式の第4の説明図である。 図12は、本発明の第7の実施形態による操作インターフェースの表示方式の第1の説明図である。 図13は、本発明の第7の実施形態による操作インターフェースの表示方式の第2の説明図である。 図14は、本発明の第7の実施形態による操作インターフェースの表示方式の第3の説明図である。 図15は、本発明の一実施形態によるマルチパネルインターフェース表示方法のフローチャートである。
本発明の上述した特徴および長所をより明らかに、かつ分かり易くするため、以下に好ましい実施形態を挙げ、図面と対応させながら詳細に説明していく。実施形態は例示的な説明にすぎず、本発明を限定するものではない。以下の実施形態において言及されるマルチパネルとは、複数の電子デバイスのディスプレイのことを示し、また、マルチパネルインターフェースとは、複数の電子デバイスのディスプレイ上に操作インターフェースの一部または全てのインターフェースコンポーネントを表示させることができる操作インターフェースのことを示す。
図1は、本発明の第1の実施形態による電子デバイスのブロック図を示している。電子デバイス100は、通信機能を備える機器(machine)、例えばパーソナルコンピュータ、ノートブック、ネットブック、スマートフォン、またはタブレットPCなどであり得るが、本発明はこれらに限定はされない。電子デバイス100は主に、処理ユニット110、マルチ機器グループ通信ユニット130、およびディスプレイパネル140を含んでいる。マルチ機器グループ通信ユニット130は主に、電子デバイス100と他の電子デバイス間のグループ連携処理を実行する。処理ユニット110は操作インターフェースを提供することができ、この操作インターフェースは複数のインターフェースコンポーネントから構成されるものである。処理ユニット110は、グループ連携処理を行う機器の数、つまり電子デバイス100とグループ連携処理を行う他の電子デバイスの機器の総数に応じて、電子デバイス100を調整し、ディスプレイパネル140上に操作インターフェース中のインターフェースコンポーネントの一部または全てを表示させることができる。他の電子デバイスは1台または複数台であってよく、例えば電子デバイス100Aである。各電子デバイスも、対応する処理ユニット、マルチ機器グループ通信ユニット、およびディスプレイスパネルをそれぞれ備えている。
処理ユニット110は、特定の論理回路を有する独自のプロセッサによって、または一般的な中央処理ユニット(central processing unit)によりマルチパネルインターフェースアプリケーションを読み取ることによって、実施することができる。一般的な中央処理ユニットを用いてマルチパネルインターフェースアプリケーションを読み取る実施形態では、マルチパネルインターフェースアプリケーションはメモリユニット(図1には未図示)に格納されてよく、該メモリユニットは不揮発性メモリ(例えばROM、ハードディスクなど)、または揮発性メモリ(例えばSRAM、DRAMなど)とすることができる。処理ユニット110は、メモリユニット中のマルチパネルインターフェースアプリケーションを読み取ると共に実行して、電子デバイス100上に操作インターフェースを提供し、かつ電子デバイス100が表示するインターフェースコンポーネントを調整、制御する。
図2は、本発明の第2の実施形態による電子デバイスのブロック図を示している。この実施形態において、電子デバイス100は、コンピュータシステム200を介して他の電子デバイスとグループ連携処理を行うことができる。当該実施形態では、マルチ機器グループ通信ユニット130は、マルチ機器通信管理モジュール131および動的デュアルチャネル伝送モジュール(dynamic dual-channel transmission module)132をさらに含んでいてよい。マルチ機器通信管理モジュール131は主に電子デバイス100とコンピュータシステム200間の通信を管理すると共に、コンピュータシステム200を介し他の電子デバイス(例えば電子デバイス100Aおよび100B)と通信して、電子デバイス100と他の電子デバイス100Aおよび100B間のグループ連携処理を実行するアプリケーションであり得る。動的デュアルチャネル伝送モジュール132は主に、2種の異なる性質のデータを動的に2つの伝送チャネルによりそれぞれ伝送するものであって、例えば、その第1の伝送チャネルから時間的制約のある緊急メッセージまたは制御信号を伝送し、第2の伝送チャネルから一般のデータまたはデータ量の大きいビデオ・オーディオデータを伝送する。これによって、より柔軟性のある伝送方式が提供され、大量のデータを伝送することで時間的制約のあるメッセージが遅延することが回避される。一実施形態において、動的デュアルチャネル伝送モジュール132は、ソフトウェアにネットワークインターフェースを組み合わせることにより実施することができ、デュアルチャネルは、例えば2つのソケット(SOCKET)接続である。また、コンピュータシステム200ならびに電子デバイス100Aおよび100Bも同様に、対応する処理ユニット、メモリユニット、マルチ機器グループ通信ユニット、およびディスプレイパネルをそれぞれ備えている。
別の実施形態において、一般的な中央処理ユニットによりメモリユニット中のアプリケーションを読み取ることによって実施する場合、メモリユニット120は、オペレーティングシステム(operating system)121、マルチ機器通信管理モジュール(multi-machine communication management module)131、およびマルチパネルインターフェースアプリケーション(multi-panel interface application)123を格納する。処理ユニット110はオペレーティングシステム121を実行して処理プラットフォームとし、さらにマルチ機器通信管理モジュール131およびマルチパネルインターフェースアプリケーション123を実行する。例えば、オペレーティングシステム121は、Android、iOS、Linux、Windowsなどであってよい。マルチ機器通信管理モジュール131は、複数の電子デバイスが互いに連携して動作するときに、複数の電子デバイス間の通信動作を処理して連携処理時における通信時間を減らすことのできるアプリケーションであり得る。複数の電子デバイスがコンピュータシステム200を介して複数の電子デバイスの通信を行う実施形態において、マルチ機器通信管理モジュール131はさらに、電子デバイス100のあるローカルネットワーク内にコンピュータシステム200が存在するかを検出することができる。コンピュータシステム200が存在している場合、電子デバイス100の処理ユニット110は、コンピュータシステム200を介してローカルネットワーク内の他の電子デバイス(例えば電子デバイス100Aおよび100B)と接続してグループ連携処理を行うと共に、コンピュータシステム200から機器の数を得ることができる。
処理ユニット110が提供する操作インターフェースは、複数のインターフェースコンポーネント(interface component)、例えば制御に用いられる拡張可能なインターフェースコンポーネント(extendable interface component)を含んでいてよく、かつこのインターフェースコンポーネントは、電子デバイス100と他の電子デバイスがグループ連携処理を行っているとき、異なる電子デバイスが備えるそれぞれ異なるディスプレイパネルに応じてマルチパネル表示を実行することができ、例えば、それぞれ異なるデバイスのパネルのサイズに応じて異なるインターフェースコンポーネントを表示する、または操作インターフェースが特定の数のインターフェースコンポーネントを含む場合に、電子デバイスの種類もしくはパネルサイズに応じ、特定の数のインターフェースコンポーネントを、連携処理を行っている電子デバイスに全て分配して表示させる。その詳細については後述する。
図3は、本発明の第3の実施形態による複数の電子デバイス間で行われるグループ通信の説明図を示しており、図3には2台の電子デバイスが示されているが、本発明はそれに限定はされない。図3を参照されたい。より詳細に説明すると、電子デバイス200Aのマルチ機器グループ通信ユニット(multi-machine group communication unit)130Aは、マルチ機器通信管理モジュール131Aおよび動的デュアルチャネル伝送モジュール132Aを含み得る。電子デバイス200Bの各構成要素は電子デバイス200Aに対応しているが、電子デバイス200Aおよび200Bは、処理ユニット110Aおよび110Bによってグループ連携処理を行う。当該実施形態において、処理ユニット110Aおよび110Bは、マルチパネルインターフェースアプリケーション123を実行することによって、操作インターフェースを提供すると共に、操作インターフェースのインターフェースコンポーネントの表示を調整することができる。簡単に言えば、マルチ機器通信管理モジュール131Aおよび131Bはそれぞれ、電子デバイス200Aおよび200Bのグループ連携処理を実行するのに用いられ、このうち、グループ連携処理とは、異なるコンピュータシステム間で接続を行うと共に、処理ユニット110Aおよび110Bによって操作インターフェース中に対応するインターフェースコンポーネントを表示させ、かつデータ同期化を行うということを意味する。電子デバイス200A中の処理ユニット110Aは、マルチパネルインターフェースアプリケーション123を実行すると、マルチ機器グループ通信ユニット130Aを介して他の電子デバイス(例えば電子デバイス200B)と通信することができる。さらに、グループ中の複数の電子デバイスは、2つの性質の異なる接続チャネル(第1の伝送チャネルおよび第2の伝送チャネル)を介して通信することができ、このうち、第1の伝送チャネルは例えばメッセージチャネル(message and control signal channel)であり、第2の伝送チャネルは例えばデータチャネル(data channel)であり、これらにより通信が行われる。メッセージチャネルは、時間的制約のある緊急メッセージまたは制御信号を伝送するものであり、データ量は比較的少ない。データチャネルは一般のデータ、例えば時間的制約のあまりないマルチメディアファイルまたはプログラムファイルを伝送するものであり、そのデータ量は通常比較的大きい。これら2つの伝送チャネルからそれぞれ異なるデータを伝送することによって、2種類のデータは伝送時に互いに干渉しないようになる、または伝送時間が遅延することがなくなる。図3に示されるように、電子デバイス200Aおよび200Bは、各自の動的デュアルチャネル伝送モジュール132Aおよび132Bによってグループ連携処理を行う。なお、電子デバイス200Aおよび200Bは、データの種類またはその要求に基づき、異なるチャネルを選んで異なるデータを伝送できるため、時間的制約のある情報の遅延が回避されることになる、という点に注目されたい。いくつかの実施形態において、メッセージチャネルは、グループが形成された後は接続状態が保たれ、一方データチャネルは、電子デバイス200Aまたは200Bが一般のデータの伝送を行う必要があるときに確立され、一般のデータの伝送が終了した後はデータチャネルを閉じることができる。
図4は、本発明の第4の実施形態による複数の電子デバイス間で行われるグループ通信の説明図を示している。この実施形態において、マルチ機器通信管理モジュール131は、電子デバイスの要求およびデータ伝送のタイプに応じて、接続を確立するプロトコル(例えば、伝送制御プロトコル(TCP)またはリアルタイムプロトコル(RTP))を動的に選択することができ、かつデータ伝送に必要な帯域幅などの設定を保証することができる。図4を参照されたい。複数の電子デバイスがグループ連携処理を行うときに、そのうちの電子デバイス200Aが制御端末となる場合、電子デバイス200B、200Cおよび200Dは、それぞれ各自のマルチ機器グループ通信ユニットによりデュアルチャネルの方式で電子デバイス200Aと接続する。別の実施形態では、動的デュアルチャネル伝送モジュール132は、Wifi、802.11x、Bluetooth、または赤外線などのインターフェースを支援するものであり、かつマルチ機器通信管理モジュール131は、ローカルネットワーク内に他の対応する電子デバイスが存在するかを検出して、グループ連携処理を行うことができる。対応する電子デバイスとは、対応する処理ユニットおよびマルチ機器グループ通信ユニットを備える電子デバイス、例えば電子デバイス200B、200Cおよび200Dのことを指す。グループ連携処理が確立された後、処理ユニットは、グループ中の電子デバイスの数に応じて、グループ連携処理中の機器の数を得ることができる。
図5〜7は、本発明の第5の実施形態によるマルチパネルを支援する操作インターフェースの説明図を示している。図1および図5〜7を同時に参照されたい。例えば、一般的な電子デバイスを用いてピクチャーを閲覧するときに、ユーザーは先ず異なる分類のピクチャーを見ることになる。ユーザーはそれら分類のうちの1つをクリックすることができ、このときユーザーは、その分類中の各ピクチャーのサムネイルを見ることになる。次いで、ユーザーは、ピクチャーのサムネイルのうちの1つを選択すべくクリックして、完全なピクチャーを見ることができる。しかしながら、ユーザーが別のピクチャーの分類を選択したい場合は、ピクチャーの分類の階層に戻らなければ、ピクチャーの分類を新たに選択することはできない。上述したピクチャーの分類、ピクチャーのサムネイル、およびピクチャーの表示などは、ピクチャー閲覧アプリケーションの操作インターフェース中のそれぞれ異なるインターフェースコンポーネントにより表示される。処理ユニットは、ピクチャーの分類、ピクチャーのサムネイル、およびピクチャーの表示などのそれぞれ異なるインターフェースコンポーネントを、異なる電子デバイス上にそれぞれ表示させることができる。
図5に示されるように、例えば、1台の電子デバイス300Aだけを用いてピクチャーを閲覧する場合、全てのインターフェースコンポーネントが電子デバイス300Aに表示され、その表示の方式は従来の技術と明らかな差異のないものである。図6に示されるように、別の電子デバイス300Bが、ユーザーが操作中の電子デバイス300Aに近付いたとき、これら2台の電子デバイス300Aおよび300Bは、本発明の方法によってグループ連携処理を行うことができ、電子デバイス300Aおよび300Bの処理ユニットはそれぞれ、ピクチャーの分類を電子デバイス300Aに表示させ、同時にピクチャーのサムネイルを電子デバイス300Bに表示させることができる。図7に示されるように、このときまた別の電子デバイス300Cが電子デバイス300Aおよび300Bに近付いてグループ連携処理を行う場合、電子デバイス300A、300Bおよび300Cの処理ユニットは、ピクチャーの分類、ピクチャーのサムネイルおよびピクチャーをそれぞれ電子デバイス300A、300Bおよび300Cに同時に表示させることができる。注目すべきは、電子デバイス300A、300Bおよび300Cは、各自の処理ユニットによりマルチパネルインターフェースアプリケーション123を実行し、マルチ機器グループ通信ユニットによりグループ連携処理を行って複数の異なる電子デバイス上に異なるインターフェースコンポーネントをそれぞれ表示させ、複数の電子デバイス間の操作信号をリアルタイムで通信し、表示を更新し、かつデータを同期させるのであって、異なる電子デバイスのディスプレイ上に複数のウィンドウをそれぞれ表示させるのではないという点である。各電子デバイスの処理ユニットはそれぞれに操作インターフェースを提供することができ、かつ各操作インターフェースは、グループ連携処理中にある機器の数に応じて、異なる数のインターフェースコンポーネントを表示させることができる。グループ連携処理を行う電子デバイスの数が変わると、処理ユニットはそれに応じて各電子デバイス上に表示されるインターフェースコンポーネントを調整することができる。例えば、電子デバイス300Aが、元は2つのインターフェースコンポーネントMおよびNを表示していた場合、機器の数が増えたとき、例えば、電子デバイス300Bを加えたとき、電子デバイス300Aはそのうち1つのインターフェースコンポーネントMを閉じ、それと同時に電子デバイス300Bが閉じられたインターフェースコンポーネントMを表示するようになる。また例えば、電子デバイス300A、300Bおよび300Cのグループにおいて、元は各自が3つのインターフェースコンポーネントP、QおよびRをそれぞれ表示していた場合に、機器の数が減ったとき、例えば電子デバイス300Bを除いたとき、電子デバイス300BはインターフェースコンポーネントQを閉じ、このときに電子デバイス300A(300Cでもよい)が閉じられたインターフェースコンポーネントQを追加して表示するようになる。よって、電子デバイス300AはインターフェースコンポーネントPおよびQを同時に表示しなければならず、処理ユニットは、インターフェースコンポーネントPおよびQの操作インターフェースにおける表示位置と表示サイズを調整する必要があるかもしれない。
別の実施形態において、本発明の電子デバイス100は、異なるデバイスの数に応じて、各電子デバイス上に表示されるインターフェースコンポーネントを動的に調整することができる。図8〜11は、本発明の第6の実施形態による操作インターフェースの表示方式の説明図を示している。図8に示されるように、処理ユニットは、マルチパネルインターフェースアプリケーション123を実行することにより操作インターフェースを提供し、該操作インターフェースは、異なる数の電子デバイスを支援するインターフェースコンポーネントUI1〜UINを格納している、つまり、インターフェースコンポーネントUI1〜UINが組み合わさってマルチパネルインターフェースアプリケーション123の操作インターフェースを構成する。図9に示されるように、1台の電子デバイス400Aだけの場合では、処理ユニットはインターフェースコンポーネントUI1〜UI3を電子デバイス400A上に同時に表示させ得る。図10に示されるように、2台の電子デバイス400Aおよび400Bがある場合では、処理ユニットは、インターフェースコンポーネントUI1およびインターフェースコンポーネントUI2の半分を電子デバイス400Aに表示させると共に、インターフェースコンポーネントUI3およびインターフェースコンポーネントUI2のもう半分を電子デバイス400Bに表示させ得る。図11に示されるように、3台の電子デバイス400A、400Bおよび400Cがある場合では、処理ユニットは、インターフェースコンポーネントUI1を電子デバイス400Aに表示させ、インターフェースコンポーネントUI2を電子デバイス400Bに表示させ、かつインターフェースコンポーネントUI3を電子デバイス400Cに表示させる。この実施形態において、マルチパネルインターフェースアプリケーションの操作インターフェースは、特定の数(この実施形態では3つ)のインターフェースコンポーネントを有しており、全てが電子デバイス400A、400Bおよび400Cに分配される。当業者には、上述の実施形態は本発明のインターフェースコンポーネントの1種の組み合わせ方を説明しているに過ぎず、本発明は異なる数の電子デバイスを支援することができ、また別の表示方式によって各電子デバイス上にインターフェースコンポーネントをそれぞれ表示させてもよいということが理解されるはずである。
別の実施形態において、処理ユニット110はさらにインターフェースコンポーネントの表示および非表示を調整することができ、かつ処理ユニット110によって表示されるおよび表示されないように調整されたインターフェースコンポーネントは、対応する電子デバイスにより表示されるおよび表示されないことになる。言い換えると、電子デバイスが1台だけである場合、全てのインターフェースコンポーネントは、完全に表示される、または一部が表示され得る。複数の電子デバイスがグループ連携処理を進行する場合は、処理ユニットは、機器の数に応じて、インターフェースコンポーネントの表示方式を調整することができる。例えば、電子デバイスが1台だけである場合、表示域が限られているため、一部インターフェースコンポーネントを隠すことができる(表示しない)。複数の電子デバイスがグループ連携処理を進行する場合は、表示域が大幅に拡大されるため、処理ユニット110はインターフェースコンポーネントを調整して、単一の電子デバイスにおいて隠されたインターフェースコンポーネントを対応する電子デバイス上に表示させることができる。当業者には、上述の実施形態は本発明のインターフェースコンポーネントを調整する1つの組み合わせ方を説明しているに過ぎず、これにより本発明を限定してはならないということが理解されるはずである。
図12〜14 は、本発明の第7の実施形態による操作インターフェースの表示方式の説明図を示している。図12〜14に示されるように、例えば、電子デバイス500Aおよび500BはタブレットPCであってよく、電子デバイス500Cはスマートフォンであってよく、いずれにもマルチパネルインターフェースアプリケーション123がインストールされており、その処理ユニットによって実行される。一実施形態において、電子デバイス500A(この実施形態では制御端末と見なすことができる)がマルチインターフェーステキスト編集プログラムを実行し、かつ電子デバイス500Bおよび500Cとグループ通信の連携処理を行うとき、電子デバイス500AはインターフェースコンポーネントUI4およびUI7を表示し、電子デバイス500BはインターフェースコンポーネントUI5を表示し、電子デバイス500CはインターフェースコンポーネントUI6およびUI7を表示する。インターフェースコンポーネントUI4はテキスト編集領域であり、インターフェースコンポーネントUI5はテキスト入力およびドローイングインターフェースであり、インターフェースコンポーネントUI6は、電子デバイス500Cがキャプチャーしたピクチャーもしくは色、または予め保存しておいたピクチャーであり、インターフェースコンポーネントUI7は、インターフェースコンポーネントUI6中のピクチャーの編集インターフェースである。ユーザーは、電子デバイス500Cを用いて所望のピクチャーをキャプチャーするまたは所望のピクチャーを読み取ることができ、電子デバイス500Cは、インターフェースコンポーネントUI6の位置にピクチャーを表示すると共に、ピクチャーを電子デバイス500Aに伝送する。電子デバイス500Aは、受け取ったピクチャーをインターフェースコンポーネントUI6の位置に表示する。なお、本発明の複数の電子デバイスはグループ通信の連携処理進行時、マルチパネル表示の操作インターフェースを支援するだけでなく、各電子デバイス間で伝送される一般のデータを同期させることができ、かつユーザーは異なる電子デバイスに表示される任意のインターフェースコンポーネント上で操作を行えるという点に注目すべきである。さらに、本発明のマルチパネルインターフェースアプリケーション123は市販のソフトウェア中で用いることができ、またマルチパネルインターフェースアプリケーション123により提供される操作インターフェースは市販のソフトウェアの操作インターフェースであるという点に注目すべきである。つまり、マルチパネルインターフェースアプリケーション123は一般的な市販のソフトウェアと統合させることができ、これにより市販のソフトウェアが複数の電子デバイスにそれぞれインストールされることになる。そして、本発明の方法によって、ユーザーは複数の電子デバイスにおいて同時に操作および表示することが可能となるが、使用上は単一の電子デバイスで操作するのと同じであり、データは同期して更新され、表示も同期して更新され得る。
図15は、本発明の一実施形態によるマルチパネルインターフェース表示方法のフローチャートを示している。図1および図15を同時に参照されたい。ステップS610において、処理ユニット110が操作インターフェースを提供し、このうち、操作インターフェースは複数のインターフェースコンポーネントから構成されるものである。ステップS620において、マルチ機器グループ通信ユニット130が電子デバイス100と少なくとも1台の他の電子デバイスのグループ連携処理を実行し、このうち、少なくとも1台の他の電子デバイスも対応する処理ユニットおよび対応するマルチ機器グループ通信ユニットを備えている。ステップS630において、処理ユニット110が、電子デバイス100および少なくとも1台の他の電子デバイス(例えば電子デバイス100A)とグループ連携処理を行う機器の数に応じて、電子デバイス100が表示するインターフェースコンポーネントのうちの少なくとも1つを調整する。電子デバイス100と他の電子デバイスが行うグループ連携処理についてのその他詳細および関連技術は、前述の実施形態を参照にできるため、ここでは説明しない。
本発明に係る電子デバイスおよび方法は、複数の電子デバイスのディスプレイ(つまりマルチパネル)の組み合わせを利用することができ、アプリケーションの設計時に、インターフェースデザインにより大きな柔軟性を与えることができ、かつ異なるマルチパネルの組み合わせに応じて異なるインターフェースコンポーネントを設定することができるため、操作がより簡単・スムーズとなるという点に注目されたい。さらに、本発明におけるマルチ機器グループ通信ユニットは、異なる複数の電子デバイスのグループを形成し、各電子デバイス間の通信および情報交換を有効にサポートすることができ、これによって速い応答および同期の機能が達成されることとなる。
以上の記載は本発明の好ましい実施形態に過ぎず、当然にこれによって本発明の実施の範囲を限定してはならない、すなわち、本発明の特許請求の範囲および詳細な説明の内容に基づいてする簡単かつ均等な変更および修飾はいずれも、本発明に係る特許がカバーする範囲に入る。さらに、本発明のいずれの実施形態または請求項も、本発明が開示する全ての目的、長所または特徴を達成するものである必要はない。また、要約および発明の名称は特許文献検索の用に供されるに過ぎず、本発明の権利範囲を限定するものではない。
100、100A〜100B、200A〜200D、300A〜300C、400A〜400C、500A〜500C…電子デバイス
110、110A、110B…処理ユニット
120…メモリユニット
121、121A、121B…オペレーティングシステム
123…マルチパネルインターフェースアプリケーション
130A、130B…マルチ機器グループ通信ユニット
131、131A、131B…マルチ機器通信管理モジュール
132、132A、132B…動的デュアルチャネル伝送モジュール
140…ディスプレイパネル
200、200A〜200D…コンピュータシステム
UI1〜UIN…インターフェースコンポーネント

Claims (14)

  1. マルチパネルインターフェース表示を支援する電子デバイスであって、
    複数のインターフェースコンポーネントから構成される操作インターフェースを提供するのに用いられる処理ユニット、ならびに、
    前記電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を実行するのに用いられるマルチ機器グループ通信ユニットであって、前記少なくとも1台の他の電子デバイスは、対応する前記処理ユニットおよび対応する前記マルチ機器グループ通信ユニットを有しているところのマルチ機器グループ通信ユニット、
    を含み、
    前記処理ユニットが、前記電子デバイスと前記少なくとも1台の他の電子デバイスとの前記グループ連携処理を行う機器の数に応じて、前記電子デバイスが表示する前記インターフェースコンポーネントのうちの少なくとも1つを調整する、電子デバイス。
  2. 前記マルチ機器グループ通信ユニットが、
    コンピュータシステムとの間の通信を管理するのに用いられ、かつ前記コンピュータシステムを介し前記少なくとも1台の他の電子デバイスと通信して、前記電子デバイスと前記少なくとも1台の他の電子デバイスとの前記グループ連携処理を実行するマルチ機器通信管理モジュール、ならびに、
    動的に第1の伝送チャネルから制御信号を伝送し、第2の伝送チャネルから一般のデータを伝送するのに用いられる動的デュアルチャネル伝送モジュール、
    を含む、請求項1に記載の電子デバイス。
  3. 前記マルチ機器グループ通信ユニットがさらに、前記電子デバイスのあるローカルネットワーク内に前記少なくとも1台の他の電子デバイスが存在しているかを検出するのに用いられ、前記少なくとも1台の他の電子デバイスが存在していることが検出されたとき、前記ローカルネットワーク内で検出された前記少なくとも1台の他の電子デバイスに前記処理ユニットが接続して前記グループ連携処理を行うと共に、前記機器の数を更新する、請求項1に記載の電子デバイス。
  4. 前記処理ユニットはさらに、前記他の電子デバイスのうちいずれかが前記グループ連携処理から抜けたと判断したときに、前記機器の数を更新すると共に、更新された前記機器の数に応じて、前記電子デバイスが表示する前記インターフェースコンポーネントのうちの少なくとも1つを再調整する、請求項1に記載の電子デバイス。
  5. 前記少なくとも1台の他の電子デバイスと前記電子デバイスとがネットワークを介し接続して前記グループ連携処理を行い、かつ前記マルチ機器通信管理モジュールがさらに、対応する前記操作インターフェースにより生成される前記一般のデータを、前記少なくとも1台の他の電子デバイスと前記電子デバイスとの間で同期させるのに用いられる、請求項2に記載の電子デバイス。
  6. 前記操作インターフェースが特定の数の前記インターフェースコンポーネントを含み、かつ前記特定の数の前記インターフェースコンポーネントが全て前記電子デバイスおよび前記少なくとも1台の他の電子デバイスに分配されて表示される、請求項1に記載の電子デバイス。
  7. 各前記インターフェースコンポーネントが前記電子デバイスおよび前記少なくとも1台の他の電子デバイスのうちの1つと対応しており、前記処理ユニットがさらに、各前記インターフェースコンポーネントの表示および非表示を調整し、かつ該表示および非表示が調整されたインターフェースコンポーネントをその対応する電子デバイスに表示および非表示させるのに用いられる、請求項1に記載の電子デバイス。
  8. マルチパネルインターフェース表示を支援する電子デバイスに用いられるマルチパネルインターフェース表示方法であって、
    複数のインターフェースコンポーネントから構成される操作インターフェースを提供するステップ、
    前記電子デバイスと少なくとも1台の他の電子デバイスとのグループ連携処理を実行するステップ、 および
    前記電子デバイスおよび前記少なくとも1台の他の電子デバイスと前記グループ連携処理を行う機器の数に応じて、前記電子デバイスに表示される前記インターフェースコンポーネントのうちの少なくとも1つを調整するステップ、
    を含むマルチパネルインターフェース表示方法。
  9. 前記電子デバイスの前記グループ連携処理を実行するステップが、
    少なくとも1台のコンピュータシステムとの間の通信動作を管理し、かつ、前記コンピュータシステムを介し前記少なくとも1台の他の電子デバイスと通信して、前記電子デバイスと前記少なくとも1台の他の電子デバイスの前記グループ連携処理を実行するステップ、および
    動的に第1の伝送チャネルから制御信号を伝送し、第2の伝送チャネルから一般のデータを伝送するステップ、
    を含む、請求項8に記載のマルチパネルインターフェース表示方法。
  10. 前記電子デバイスのあるローカルネットワーク内に前記少なくとも1台の他の電子デバイスが存在しているかを検出するステップ、
    前記少なくとも1台の他の電子デバイスが存在することを検出したとき、前記ローカルネットワーク内で検出された前記少なくとも1台の他の電子デバイスに接続して、前記グループ連携処理を行うと共に、前記機器の数を更新するステップ、
    をさらに含む請求項8に記載のマルチパネルインターフェース表示方法。
  11. 前記他の電子デバイスのうちいずれかが前記グループ連携処理から抜けたと判断したときに、前記機器の数を更新するステップ、および
    更新された前記機器の数に応じて、前記電子デバイスが表示する前記インターフェースコンポーネントのうちの少なくとも1つを再調整するステップ、
    をさらに含む請求項8に記載のマルチパネルインターフェース表示方法。
  12. 前記少なくとも1台の他の電子デバイスと前記電子デバイスがネットワークを介し接続して前記グループ連携処理を行い、かつ前記マルチ機器通信管理モジュールがさらに、対応する前記操作インターフェースにより生成される前記一般のデータを、前記少なくとも1台の他の電子デバイスと前記電子デバイスとの間で同期させるのに用いられる、請求項9に記載のマルチパネルインターフェース表示方法。
  13. 前記操作インターフェースが特定の数の前記インターフェースコンポーネントを含み、かつ前記特定の数の前記インターフェースコンポーネントが全て前記電子デバイスおよび前記少なくとも1台の他の電子デバイスに分配されて表示される、請求項8に記載のマルチパネルインターフェース表示方法。
  14. 各前記インターフェースコンポーネントが前記電子デバイスおよび前記少なくとも1台の他の電子デバイスのうちの1つに対応しており、かつ前記方法が、
    各前記インターフェースコンポーネントの表示および非表示を調整し、かつ該表示および非表示が調整されたインターフェースコンポーネントをその対応する電子デバイスに表示および非表示させるステップをさらに含む請求項8に記載のマルチパネルインターフェース表示方法。
JP2012203215A 2011-12-01 2012-09-14 電子デバイスおよびマルチパネルインターフェース表示方法 Pending JP2013117944A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW100144115A TWI501145B (zh) 2011-12-01 2011-12-01 電子裝置與多面板介面顯示方法
TW100144115 2011-12-01

Publications (1)

Publication Number Publication Date
JP2013117944A true JP2013117944A (ja) 2013-06-13

Family

ID=48495834

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012203215A Pending JP2013117944A (ja) 2011-12-01 2012-09-14 電子デバイスおよびマルチパネルインターフェース表示方法

Country Status (4)

Country Link
US (1) US20130141308A1 (ja)
JP (1) JP2013117944A (ja)
CN (1) CN103135953A (ja)
TW (1) TWI501145B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016099732A (ja) * 2014-11-19 2016-05-30 セイコーエプソン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9064281B2 (en) * 2002-10-31 2015-06-23 Mastercard Mobile Transactions Solutions, Inc. Multi-panel user interface
KR20160112143A (ko) 2015-03-18 2016-09-28 삼성전자주식회사 전자 장치 및 전자 장치에서의 디스플레이 패널의 화면 업데이트 방법
US11937167B1 (en) * 2018-03-12 2024-03-19 Cable Television Laboratories, Inc. Client modification of traffic table in multi channel Wi-Fi
CN113301539B (zh) * 2021-07-07 2021-11-26 北京京东方技术开发有限公司 数据传输方法、电子设备及计算机存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002287724A (ja) * 2001-03-26 2002-10-04 Sharp Corp 表示デバイス
JP2009294689A (ja) * 2008-06-02 2009-12-17 Sharp Corp 移動端末装置およびその制御方法、制御プログラム、コンピュータ読み取り可能な記録媒体ならびにマルチディスプレイシステム
JP2011017750A (ja) * 2009-07-07 2011-01-27 Sony Corp 情報処理装置、表示制御方法、およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030025738A1 (en) * 2001-07-31 2003-02-06 Eastman Kodak Company User interface including portable display for use with multiple electronic devices
TWI246055B (en) * 2003-05-30 2005-12-21 Inventec Multimedia & Telecom Multi-interface screen display system of multi-media equipment and display method thereof
US20070064984A1 (en) * 2005-09-19 2007-03-22 General Electric Company System and method for dynamic configuration of PACS workstation displays
TWI314281B (en) * 2006-05-16 2009-09-01 Sifeon Knowledge Technology Visual control device for controlling multi-window display system
US8963796B2 (en) * 2008-01-07 2015-02-24 Smart Technologies Ulc Method of launching a selected application in a multi-monitor computer system and multi-monitor computer system employing the same
TW200947295A (en) * 2008-05-02 2009-11-16 Foxnum Technology Co Ltd Display method for multi-window operation interface
JP2010026215A (ja) * 2008-07-18 2010-02-04 Panasonic Corp 再生装置
US20100328354A1 (en) * 2009-06-26 2010-12-30 Sony Computer Entertainment, Inc. Networked Computer Graphics Rendering System with Multiple Displays
JP2011197776A (ja) * 2010-03-17 2011-10-06 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20120262378A1 (en) * 2011-04-12 2012-10-18 Yang qing-wen Touch flat panel mobile communication terminal equipped with computer processing functions

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002287724A (ja) * 2001-03-26 2002-10-04 Sharp Corp 表示デバイス
JP2009294689A (ja) * 2008-06-02 2009-12-17 Sharp Corp 移動端末装置およびその制御方法、制御プログラム、コンピュータ読み取り可能な記録媒体ならびにマルチディスプレイシステム
JP2011017750A (ja) * 2009-07-07 2011-01-27 Sony Corp 情報処理装置、表示制御方法、およびプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016099732A (ja) * 2014-11-19 2016-05-30 セイコーエプソン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム

Also Published As

Publication number Publication date
CN103135953A (zh) 2013-06-05
TWI501145B (zh) 2015-09-21
US20130141308A1 (en) 2013-06-06
TW201324326A (zh) 2013-06-16

Similar Documents

Publication Publication Date Title
EP2839604B1 (en) Electronic tool and methods for meetings
US10469624B2 (en) User interface control in a networked audio system
TWI696385B (zh) 在各自連接至槽設備的複數個源設備之間共享資料
JP6598848B2 (ja) 複数のデバイスにおけるコンピューティング環境の提示
EP2756667B1 (en) Electronic tool and methods for meetings
US20130290882A1 (en) Method and apparatus for displaying a graphical user interface of a portable computation unit on an external display unit
KR20200078441A (ko) 데이터를 송수신하기 위한 멀티미디어 장치들간 출력 장치 공유 방법 및 시스템
TW201444359A (zh) 管理頻道索引內容的方法和系統以及應用該系統的電子裝置、電腦可讀取記錄媒體
US10965480B2 (en) Electronic tool and methods for recording a meeting
US10684972B2 (en) Method and system for making functional devices available to participants of meetings
TW201321999A (zh) 可協同複數個行動裝置進行協同編輯的電子裝置與方法
JP2013117944A (ja) 電子デバイスおよびマルチパネルインターフェース表示方法
US20160124582A1 (en) Terminal apparatus and method for controlling the same
KR20140093520A (ko) 휴대용 단말기의 컨텐츠 공유 시스템 및 이를 이용한 컨텐츠 공유방법
US20140082051A1 (en) Virtual file transmission system and method of transmitting virtual file thereof
US10623499B2 (en) Method and system for operating and controlling data, and user terminal
WO2020259153A1 (zh) 特效同步的方法、装置及存储介质
US20160080439A1 (en) Media Sharing Device
US20170127120A1 (en) User terminal and control method therefor
WO2023024800A1 (zh) 基于web的多终端设备互动方法、***、终端设备
EP2432189A2 (en) Method and system for providing users login access to multiple devices via a communication system
WO2022184063A1 (zh) 表格内容处理方法、装置、设备、存储介质
CN105378654A (zh) 服务简档维护
US20230161548A1 (en) Automated detection and securing of a network audio data stream
US20130121661A1 (en) Method of playing content on a digital media renderer and related computer system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131030

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131030

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140130

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140730