CN1607828A - 通信***和方法 - Google Patents

Abstract

一种通信终端，包括根据图像显示参数在显示装置上显示图像的显示装置；处理图像数据的处理器；以及发送或接收数据的通信接口，该通信接口通过网络与远程图像处理装置连接。防止发送不必要的数据，并且可减小终端的处理量，从而在通信过程中在终端之间通过共享的方式仅显示所关注的图像数据。当进行实时通信时，明确表示出在通信期间要发送图像数据的终端用户和要接收图像数据的终端用户将彼此关注哪部分图像数据。

Description

通信***和方法

相关申请的交叉引用

2003年10月15日递交的日本专利申请No.2003-355359。

技术领域

本发明涉及一种通信***，并具体涉及一种用于发送/接收静态图像数据和/或动态图像数据的通信***。

背景技术

通常，在使用无线网络通信过程中，在终端之间交换语音数据、手写数据和/或图像数据时，为了保证有效利用网络的有限通信频带，通过采用压缩静态图像数据/动态图像数据的技术，如JPEG或MPEG，减小要发送的数据量。并且，例如JP10-51773和其他文献中描述的技术，是一种关于使用网络有限通信频带在终端之间平滑地发送/接收动态图像数据的方法的常规技术。使用这种常规技术发送图像数据，并且就通信量而言当网络拥塞时，通过压缩图像数据的射频成分减少图像数据的数据大小。

当在城市中，移动电话、PDA(个人数字助理)等使用无线网络时，可保证足够大的通信带宽。还存在即使使用用于压缩静态图像数据或动态图像数据的技术标准化如JPEG或MPEG时，也难以发送所需图像数据的问题。

此外，与固定终端如个人电脑(PC)相比，PDA和其他手持终端具有相对较低的处理能力。因而，手持装置通常有处理固定终端发送的大量数据时产生的问题。此外，当使用移动电话或PDA发送/接收图像时，发送端与接收端之间输出屏幕分辨率(定义输出屏幕的垂直和/或水平点数)有可能不同。在此情形中，即使两终端的用户希望如同在彼此终端处那样观察图像数据的相同部分，相同部分也可能没有在另一终端处显示。

此外，当通过无线网络在终端之间进行实时通信时，重要的是各装置显示相同图像。假设例如两个用户在使用各自终端发送/接收语音数据的同时，谈论人物照片的整个图像。在此示例中，优选，尽管会稍有不清楚，不过所发送/接收的图像应当处于两终端可以观察照片的整个图像的状态。在另一个讨论图像特定部分的示例中，应当在两个装置上显示感兴趣的特定部分。

不过，在根据日本公开No.10-51773中所述的常规技术方法中，当就通信量而言网络发生拥塞时，压缩图像的射频成分。从而如果由于通信瓶颈导致没有显示出图像的某一特定部分时，使用常规技术方法是有问题的。

如上所述，当通过无线网络连接的终端之间进行实时通信时，除非根据通信条件或显示参数改变所用的显示方法，否则难以平滑地通信。显示参数包括通信期间接收图像数据的显示器的分辨率(即定义显示屏幕的垂直和/或水平点数)以及有关发送装置要将哪一部分图像发送给接收装置的信息，从而该装置的使用者可以将注意力集中在图像的相同部分上。

发明内容

本发明的实施例具有如下特征：

-当在终端之间进行实时通信时，其中，每个终端具有用以定义输出屏幕的垂直和/或水平点数或像素数不同的显示装置，可明确表示出发送端将哪一部分图像数据发送给接收端；

-发送图像数据的终端首先考虑所关注的图像数据部分，并输出接收图像数据的终端的分辨率(即定义输出屏幕的垂直和/或水平点数)，然后减小图像数据的大小或者抽取出其一部分，并发送图像数据；以及

-从而，由于可避免发送不必要的数据，通信过程中可减少终端的处理量，终端之间仅以共享方式显示关注的图像数据部分。

根据本实施例，可如下实现上述目的：用于在终端之间发送/接收数据的通信***中，其中：

-首先，在通信之前，每个终端发送/接收有关定义另一输出显示屏幕的垂直和水平点数的信息；

-从而，将要开始发送的终端获得有关在通信中相配合的另一终端输出显示屏幕的垂直和水平点数的信息；以及

-上述终端通过任意选择发送/接收图像数据，发送/接收图像数据和手写数据，发送/接收图像数据和语音数据，以及发送/接收图像数据、手写数据和语音数据的组合彼此通信。

根据本实施例，当具有用以定义彼此显示装置输出屏幕的不同的垂直和/或水平点数的两个或更多终端彼此发送/接收静态图像数据或动态图像数据时，可减少不必要数据的发送，实现平滑通信。

在一个实施例中，通信终端包括根据图像显示参数在显示装置上显示图像的显示装置；处理图像数据的处理器；和发送或接收数据的通信接口，该通信接口通过网络与远程图像处理装置连接。通信终端将显示参数发送给远程图像处理装置，以通信终端与远程图像处理装置之间开始图像数据通信操作。显示参数发送给远程图像处理装置之后，通信终端首先从远程图像处理装置接收第一图像的第一图像数据，该第一图像为第一原始图像的改变版本。根据通信终端提供给远程图像处理装置的显示参数改变第一图像。

在另一实施例中，通信终端包括显示装置，根据图像第一显示参数在显示装置上显示图像；处理图像数据的处理器；以及发送或接收数据的通信接口，该通信接口设计成通过网络与远程手持通信终端连接。该通信终端从手持通信终端接收第二显示参数，第二显示信息提供手持通信终端用于在手持通信终端的显示区域上显示该信息的有关分辨率和图像尺寸的信息。通信终端根据接收自手持通信终端的第二显示参数由原始图像产生第一图像，用第一图像数据表示第一图像。第一图像数据发送给手持通信终端。

在又一实施例中，一种用于操作具有显示装置和处理器的通信终端的方法，包括将显示装置的显示参数发送给远程图像处理装置，以在通信终端与远程图像处理装置之间开始图像数据通信操作；以及在显示参数发送给远程图像处理装置之后通信终端从远程图像处理装置接收第一图像的第一图像数据，所述第一图像为第一原始图像的改变版本。根据通信终端提供给远程图像处理装置的显示参数改变第一图像。

附图说明

图1说明在本发明实施例中图像缩小/提取的概要；

图2为表示本发明上述实施例中通信***总体结构的方块图；

图3为表示终端硬件配置的方块图；

图4为表示终端软件配置的方块图；

图5说明终端显示屏结构的一个例子；

图6说明终端显示屏结构的另一个例子；

图7表示装置信息管理模块控制为每个终端准备的显示装置屏幕尺寸的表格的示例图；

图8说明有关受终端控制的图像数据的控制图表的结构；

图9所示的流程图说明终端彼此通信时终端的处理操作；

图10所示的另一流程图说明终端彼此通信时终端的处理操作；

图11所示的流程图说明图9步骤803中装置信息管理模块的处理操作；

图12所示的流程图说明图9步骤815中图像处理管理模块的处理操作；

图13所示的流程图说明图9步骤817中图像获取模块的处理操作；

图14所示的流程图说明图9步骤819中图像处理模块的处理操作；

图15所示的流程图说明图14步骤1203中缩小图像产生模块的处理操作；

图16所示的流程图说明图9步骤821、825中图像数据接收模块的处理操作；

图17所示的流程图说明图9步骤829、831中图像数据发送模块的处理操作；

图18所示的流程图说明图10步骤835中语音发送模块的处理操作；

图19所示的流程图说明图10步骤835中语音接收模块的处理操作；

图20所示的流程图说明图10步骤835中手写数据发送模块的处理操作；

图21所示的流程图说明图10步骤839中手写数据接收模块的处理操作；以及

图22所示的流程图说明图10步骤842中显示控制模块的处理操作。

具体实施方式

下面将参照附图详细描述根据本发明的通信***的实施例。

图1说明根据本发明实施例图像缩小/抽取的概要。

在图1中，上面一行中所示的图像数据1为作为发送端的终端101的显示装置上显示的图像数据的一个例子。假设一帧图像数据1的尺寸表示发送端101的显示装置的尺寸或分辨率(即垂直和/或水平显示点/象素数)。还假设终端101的使用者将全部或部分图像数据1发送给安装有显示装置的终端102(接收端)，该显示装置具有尺寸如下面一行中附图左端粗线所表示的显示区域2(即垂直和/或水平显示点数)。

在一种实施方式中，发送端101为个人电脑，接收端102为便携式或手持装置。手持装置是一种在使用者手中进行操作的装置，例如移动电话或个人数字助理。在其他实施方式中这些终端具有其它类型的装置。

在上面的示例中，如果根据常规技术将图像数据1从终端101发送到终端102，则终端102接收到的图像的尺寸将比显示区域2的尺寸大三倍。从而，如图1的左下端所示，在接收端102的显示区域2中仅显示出所发送图像的一部分。

在本发明中，当进行通信时，在发送端的显示器上明确显示出通信期间将要发送哪部分图像数据。此外，发送端考虑到所关注的图像数据部分以及接收端显示装置的尺寸(即垂直和水平显示点数)。此后，发送端减小图像数据的大小或者抽取出其一部分，并发送经过这样处理的图像数据。因此，可防止发送不必要的数据，而这样可减小终端的处理量，从而通信期间在终端之间以共享方式仅显示所关注的图像数据部分。

即，在图1的例子中，发送端101设定终端102的显示装置的尺寸(即垂直和水平显示点数)，和通信期间关注的图像部分。在处理图像数据之后，终端101发送数据。例如，如果关注整个图像，则终端101将尺寸减小的图像的图像数据5发送给终端102，从而处于终端102的显示区域4的范围内。如果注意力放在一部分图像上，则终端101发送所抽取出的处于显示区域4范围内的图像数据7。

图2所示的方块图表示本发明上述实施例中通信***的总体结构。图2表示终端101与102通过网络103通信的结构原理。可将大量要进行通信的终端与网络103连接。

在图2中，均可使用PC、PDA、移动电话、机顶盒等构成终端101和102，并且这两个终端可以为允许安装下述硬件配置和软件配置的任何装置。终端101和102均具有多个图像数据存储区域。均可以配置有用于保存手写数据的手写平面，和用于保存显示图像数据、摄像机采集的图像数据和作为经过处理的图像数据的尺寸缩小的图像数据的图像平面。例如，如果终端101和102用以定义相应输出屏幕的垂直和/或水平点数不同，即使终端101发送其可显示的图像数据，如果终端102显示装置的屏幕上显示的垂直和水平点数小于终端101，则终端102也仅显示一部分图像数据。

在本发明上述实施例中，为了解决这一问题，终端首先彼此通知显示装置的显示区域的尺寸(即屏幕上显示的垂直和水平点数)。然后，要发送图像数据的终端根据要接收图像数据的终端的显示区域的尺寸信息执行图像数据处理，然后开始发送。可通过在发送端减小整个图像的尺寸，通过在发送端抽取一部分图像，或者通过使用其他方法实现图像数据处理。从而，在终端间通信过程中，具有用以定义显示装置输出屏幕的不同垂直和/或水平点数的终端之间可输出所期望的图像部分。因而可实现平滑通信。

图3所示的方块图表示终端的硬件配置。在图3中，附图标记201表示中央处理单元，附图标记202为存储装置，附图标记203为语音输入装置，附图标记204为语音输出装置，附图标记205为手写数据输入装置。附图标记206表示显示装置，附图标记207为设置值输入装置，附图标记208为通信控制I/O(输入/输出)装置，附图标记209为辅助存储装置，附图标记210为总线，附图标记211为图像显示装置。

如图3中所示，每一个终端101，102包括多种功能部件201-209和211，每个部件与总线210连接。下面对这些功能部件中的每一个进行描述。

中央处理单元201从存储装置202读出数据，对所读出的数据进行处理，将经过处理的数据写入存储装置202，并进行其他处理。存储装置202保存中央处理单元201读出/写入的数据。语音输入装置203将输入的语音数据保存到存储装置202中，语音输出装置204将接收自存储装置202的语音数据输出。手写数据输入装置205将用户用笔输入的数据保存到存储装置202中。显示装置206显示接收自中央处理单元201的数据。设置值输入装置207接收用户使用按钮等输入的数据，并将数据输出至存储装置202。通信控制I/O装置208a通过网络接收数据，并在网络上输出中央处理单元201保存在存储装置202中的数据。总线210用作终端彼此之间发送/接收数据的内部部件。图像输入装置211将使用诸如未示出的摄像机采集到的图像输出至存储装置202。

图4为表示终端软件配置的方块图。在图4中，附图标记301表示控制模块，附图标记302表示语音发送模块，附图标记303为语音接收模块，附图标记304为图像数据发送模块，附图标记305为图像数据接收模块。附图标记306表示手写数据发送模块，附图标记307为手写数据接收模块。附图标记308表示图像获取模块，附图标记309为图像处理管理模块，附图标记310为图像处理模块，附图标记311为装置信息管理模块，附图标记312为显示控制模块。

如图4中所示，每个终端101、102包括多个软件部件302至311，每个部件与控制模块301和显示控制模块312连接，这两个模块也可以是软件部件。下面将描述这些软件部件中的每一个。

控制模块301控制软件部件302至311的操作。语音发送模块302发送语音数据，语音接收模块303接收语音数据。图像数据发送模块304发送静态图像数据或动态图像数据，图像数据接收模块305接收并处理静态图像数据或动态图像数据。手写数据发送模块306发送手写数据，手写数据接收模块307接收并处理手写数据。图像获取模块308从摄像机等获取图像数据。图像处理管理模块309根据用于定义接收端显示装置尺寸的信息(即输出屏幕的垂直和水平点数)控制发送端在发送图像数据之前是处理静态图像数据或动态图像数据。根据用以定义接收端显示装置尺寸(即输出屏幕的垂直和水平点数)的信息，图像处理模块310改变发送端将要发送的静态图像数据或动态图像数据的数据大小。装置信息管理模块311控制，属于包括装置信息管理模块311的终端以及另一终端的多个显示装置的每一输出屏幕的垂直和水平点数。换言之，装置信息管理模块311管理发送或接收端彼此通知的用以定义显示装置尺寸的信息时所需的信息(即输出屏幕的垂直和水平点数)。显示控制模块312根据不同类型的数据如静态图像数据或动态图像数据以及手写数据产生叠加屏幕数据，并控制显示部件上的显示。

图5说明终端显示屏结构的一个例子。图5中的例子表示一种适于在显示屏幕上显示的输入按钮、用于执行多种功能的按钮以及其他元件的结构。从而，使用该例子的显示装置构造成触摸板或者可以具有未示出的指示装置。

如图5中所示，该显示屏包括在定义显示屏幕整个显示区域尺寸的显示画面401内显示出的各种元件。即，这些元件包括：用于显示文本和应用程序名称的区域402；为用户提供输入的基于软件的按钮的显示区域403；用于显示图像数据、手写数据和文本数据的图像数据显示区域404；当图像数据的尺寸大于图像数据显示区域404的尺寸时用于改变显示位置的滚动条405和406；终端之间开始通信的开始通信按钮407；终端之间停止通信的结束通信按钮408；开始输入手写数据的开始手写按钮409；结束手写数据输入的结束手写按钮410；在开始通信时清除通信目的终端的名称和地址的目标清除按钮411；使用与终端一起的摄像机获取图像的图像获取按钮412；用于确定是否要将图像数据的尺寸减小到终端整个显示区域大小的显示改变按钮413(即输出屏幕的垂直和水平点数)；以及用于退出应用程序的退出按钮414。

图6说明终端显示屏结构的另一个例子。图6中的例子表示设置在显示屏幕整个显示区域外部的输入按钮，用于执行多种功能的按钮，以及其他元件的配置。

如图6中所示，该显示屏设计成在定义显示屏整个显示区域尺寸的显示画面内具有用于显示图像数据、手写数据和文本数据的显示区域502。该显示屏在图像数据显示区域502内还具有，当图像数据的尺寸大于图像数据显示区域502时用于改变显示位置的滚动条503和504。此外，在显示画面501外部设有数字键505，用于选择待发送的图像，并用于输入文本数据等。尽管图6中仅表示出数字键505，不过在该位置可以设置图5中所述的多种按钮。此外，可使用记录笔从图像数据显示区域502输入文本数据。

图7表示装置信息管理模块311为每个终端准备的显示装置屏幕尺寸的表格。

图7中所示的表格包括记录，每条记录包括“连接ID”601，“水平输出尺寸”602和“垂直输出尺寸”603。“连接ID”601为唯一识别某一终端的ID号。“连接ID”还可以为对话ID。因此，终端可以保存并控制包括该终端在内的所有当前连接终端的显示屏的水平和垂直尺寸(即定义每个显示屏的垂直和水平点数)。

图8表示有关受终端控制的图像数据的控制图表的结构。根据图8中所示的控制图表，每一个终端101、102对图3中所示的图像输入装置211输入/接收的静态图像数据或动态图像数据进行管理。

在图8中“ID”701为图像的ID，“水平显示位置”702表示显示图像的起始水平坐标，“垂直显示位置”703表示显示图像的起始垂直坐标。“水平显示尺寸”704表示图像的水平尺寸，“垂直显示尺寸”705表示图像的垂直尺寸。“平面地址”706表示图像所在的位置，“数据大小”707表示图像的数据大小，以及“已发送/已接收”708表示图像数据是否已经发送到所连接的终端。

图9和10所示的流程图说明当终端彼此之间发送/接收静态图像数据或动态图像数据进行通信时终端的处理操作。图11至22所示的流程图详细解释图10的流程图中主要步骤。下面，以一连串步骤的方式解释这些步骤的流程。

(1)在开始连接之前，要开始通信的终端的用户输入目的地，即要进行通信的另一终端的地址。目的地为IP地址，电话号码，名称或者能唯一识别另一终端的任何其他数据。在输入目的地时，屏幕上显示与另一终端有关的输入数据，并发送连接请求(步骤S801和S802)。

(2)在开始通信并建立语音对话时，启动装置信息管理模块311。根据图11的流程图，装置信息管理模块311发送包含管理模块311的显示装置的屏幕尺寸信息。此处屏幕尺寸信息指图7所述的作为显示装置的尺寸信息。通过发送，装置信息管理模块311获得开始通信的第一终端的屏幕尺寸信息(步骤803，901，902)。

(3)同时，如果在步骤902的处理之后接收到连接请求，或者步骤804中没有输入目的地，则终端判断是否开始交谈。如果开始交谈，则建立用于发送/接收语音数据的语音对话。可以确定是否在终端之间任意建立语音对话。(步骤804，805)

(4)在语音对话建立之后或者没有开始交谈之前可以结束交谈，并且如果结束交谈，则语音对话终止。在此情形中，可由两终端中的任何一个终止语音对话。(步骤806，807)。

(5)开始通信的终端可以判断是否开始用于发送/接收手写数据的手写对话。如果要发送/接收手写数据，则建立手写对话。可以确定终端之间是否任意建立手写对话。(步骤808，809)。

(6)在手写对话建立之后或者开始手写前可结束手写，并且如果结束手写，则手写对话终止。在此情形中，可由两终端中的任何一个终止手写对话。(步骤810，811)。

(7)当还希望开始与另一终端通信时，通过清除目的地并指定新目的地，该终端可以开始与第二终端通信。(步骤812，813)。

(8)然后，判断是否改变调节屏幕发送标记的特定设置，该发送标记用于判断是否减小图像尺寸或者抽取出其一部分，并且发送尺寸减小格式的图像数据。如果要改变设置，则启动图像处理管理模块309。可由两终端中的任何一个启动图像处理管理模块309。(步骤814，815)。

(9)图像处理管理模块309根据图12的流程图将经处理格式的图像数据发送给尺寸减小的屏幕(较小屏幕)等。为此，判断是否显示调节屏幕，并且如果要显示调节屏幕，则打开处理屏幕发送(ON)。如果要以非处理格式发送图像数据，则关闭处理屏幕发送(OFF)。(步骤1001到1003)。即，首先判断在发送给接收端之前是否调节图像数据(步骤1001)。如果结果为是，则调节图像数据或者打开处理屏幕发送(步骤1003)。如果结果为否，则不调节图像数据或者关闭处理屏幕发送(步骤1002)。

(10)此后，判断来自摄像机等的任何输入图像数据是否要发送给当前的通信目的终端。如果要发送图像数据，则启动图像获取模块308，以开始获取图像数据(步骤816，817)。

(11)根据图13的流程图，图像获取模块308获取从摄像机等输入的图像数据，并将图像数据保存到临时平面或者临时数据存储区域。(步骤1101，1102)。即，获取图像数据(步骤1101)，并在临时平面中产生图像(步骤1102)。

(12)然后，判断是否要改变保存在临时平面中的任何图像的图像尺寸。根据由图像处理管理模块309控制的调节图像发送标记的状态确定是否改变图像尺寸。如果调节图像发送标记为ON，则启动图像处理模块310。(步骤818，819)

(13)根据图14的流程图，如果临时平面中不存在要调节的图像，则图像处理模块310获取图像数据，并且在临时平面中显示图像数据。在临时平面中显示图像数据之后，启动设置于图像处理模块310中用于调节图像数据的缩小图像产生模块(未示出)。(步骤1201至1203)。即，获取图像数据(步骤1201)；在临时平面中显示图像数据(步骤1202)；启动缩小图像模块(步骤1203)；并在更小屏幕的临时平面中显示缩小的图像数据(步骤1204)。

(14)根据图15的流程图，缩小图像产生模块获取当前通信目的终端的显示装置信息。然后，缩小图像产生模块判断图像缩小是否必需(例如，要发送的图像数据的缩小量)。并且如果缩小并非必需，则终止处理。(步骤1301)

(15)如果在步骤1301中，判断结果为图像缩小是必需的，则判断是否通过仅抽取出可显示范围，不改变图像尺寸，从而将图像处理成相同分辨率的图像。(步骤1302)

(16)如果在步骤1302中，判断要产生的缩小图像为相同分辨率的图像，则通过仅抽取出当前通信目的终端除可显示出范围的图像，不改变图像尺寸，从而产生相同分辨率的图像。(步骤1303)即，选择整个图像的相关部分进行传输。

(17)如果在步骤1302中，判断缩小图像不为相同分辨率的图像，则产生具有水平和垂直尺寸缩小的图像，以适合当前通信目的终端的显示装置信息中定义的显示装置尺寸范围。因而，可显示整个图像。(步骤1304)

在一个实施例中，发送端自动选择是否执行步骤1304或1305。并且，终端用户可在通信开始期间进行判断。

(18)上述过程中图像尺寸减小之后，选择是否压缩缩小的图像，并且如果不压缩图像，则处理终止。如果要压缩图像数据，则使用适当的压缩方法进行压缩。与是否进行图像压缩无关，随后在临时平面中显影步骤1303或1304处理期间产生的图像数据。(步骤1305，1306，1204)

(19)然后，判断是否从当前通信目的终端接收到图像接收请求，如果已经接收到图像接收请求，则启动图像数据接收模块305。(步骤820，821)

(20)根据图16的流程图，图像数据接收模块305首先接收图像数据和附属于所接收图像数据的ID数据(步骤1401)。如果接收到的图像数据为压缩图像数据，则将图像数据解码，然后在临时平面中显影(步骤1402)。之后，在图像数据控制图表中记录所接收图像数据的ID和其他图像信息(步骤1403)。

(21)判断是否选择待显示的图像，如果选择待显示的图像，那么判断是否显示从当前通信目的终端保存的图像中选择出的图像。如果要显示从当前通信目的终端保存的图像中选择出的图像，则将图像发送请求发送给当前通信目的终端(步骤822至824)。

(22)之后，启动图像数据接收模块305，并且等待目的终端发送的图像数据。图像数据接收模块305的处理操作与使用图16中所示流程图描述的操作相同(步骤825)。

(23)如果在步骤823中，判断要发送目的终端中保存的图像数据，则将图像接收请求发送给当前通信目的终端。然后，根据当前通信目的终端的显示装置信息判断是否进行图像尺寸调节，并且如果要执行图像尺寸调节，则启动图像处理模块310。图像处理模块310的处理操作与使用图14中所示流程图描述的操作相同(步骤826至828)。

(24)如果在步骤827中，判断无需执行图像尺寸调节，或者在步骤828中执行图像尺寸调节之后，启动图像数据发送模块304。(步骤829)

(25)根据图17的流程图，图像数据发送模块304在临时平面中显影图像尺寸经过调节或者未经调节发送的图像数据，然后发送附有ID数据的图像数据。在发送之后，将有关所发送图像数据的信息记录到图像数据控制图表中(步骤1501至1503)。

(26)然后，判断是否接收到图像发送请求，并且如果已经接收到图像发送请求，则启动图像数据发送模块304，并发送图像数据。图像数据发送模块304的处理操作与使用图17中所示流程图描述的操作相同(步骤830，831)。

(27)此后，判断是否接收到图像接收请求，并且如果已经接收到图像接收请求，则启动图像数据接收模块305，并接收图像数据。图像数据接收模块305的处理操作与使用图16中的流程图描述的操作相同(步骤832，833)。

(28)下面，判断是否已经建立语音对话，并且如果已经建立语音对话，则启动语音发送模块302和语音接收模块303(步骤834，835)。

(29)根据图18的流程图，语音发送模块302获取语音数据，按照适当的编码机制压缩获得的语音数据，并通过信息包格式发送经过编码的语音数据(步骤1601至1604)。

(30)判断是否存在要获取的下一语音数据，并且如果不存在语音数据，则结束发送过程。如果存在下一语音数据，则控制返回步骤1601，其中再次获取语音数据，并打包。通过这种方式继续语音数据发送过程(步骤1605)。

(31)根据图19的流程图，语音接收模块303接收经过打包编码的语音数据，并从信息包获取经过编码的语音数据。之后，语音接收模块303将获取的语音数据解码，输出语音数据(步骤1701至1704)。

(32)判断是否存在下一要接收的语音数据，并且如果不存在语音数据，则接收过程结束。如果存在下一要接收的语音数据，则控制返回步骤1701，其中再次接受经过打包编码的语音数据。按照这种方式继续语音数据输出过程(步骤1705)。

(33)判断是否终止语音对话，并且如果要终止对话，则结束语音发送模块302和语音接收模块303中的处理(步骤836，837)。

(34)下面，判断是否建立手写对话，并且如果建立手写对话，则启动手写数据发送模块306和手写数据接收模块307(步骤838，839)。

(35)根据图20的流程，手写数据发送模块306判断是否存在手写数据，并且如果存在手写数据，则获取手写数据并将数据发送给当前通信目的终端。然后，手写数据发送模块306将手写数据添加到手写平面，并更新和输出手写数据(步骤1801至1804)。

(36)如果在步骤1804中的处理之后，或者在步骤1801的判断过程中，不存在手写数据，则进一步判断是否获取下一手写数据。如果不存在下一手写数据，则结束该发送过程。如果存在下一手写数据，则控制返回步骤1801，其中再次获取手写数据。通过这种方式继续手写数据的发送过程(步骤1805)。

(37)根据图21的流程，手写数据接收模块307判断是否已经接收到手写数据，并且如果已经接收到手写数据，则获取手写数据。此外，手写数据接收模块307将手写数据添加到手写平面，启动显示控制模块312，并更新和输出手写数据(步骤1901至1903)。

(38)如果在步骤1903的处理之后或者在步骤1901判断期间，不存在手写数据，则进一步判断是否接收下一手写数据。如果不存在下一要接收的手写数据，则结束该处理。如果存在下一要接收的手写数据，则控制返回步骤1901，由此再次继续手写数据的接收过程(步骤1904)。

(39)判断是否要终止手写会话，并且如果要终止对话，则结束手写数据发送模块306和手写数据接收模块307中的处理(步骤840，841)。

(40)然后，启动显示控制模块312。根据图22的流程，显示控制模块312通过叠加临时平面中保存的图像与保存手写数据的手写平面中的图像，产生合成图像。之后，显示控制模块312在共享平面中显影合成图像，将共享平面中所产生的图像发送给终端显示屏(步骤842，2001，2002)。

在本发明上述实施例的处理过程中，当根据接收端输出显示屏的尺寸信息缩小图像数据(即输出屏幕的垂直和水平显示点数)以及然后发送时，发送端还根据特定的图像数据缩小比例更新手写数据坐标，并发送经过更新的手写数据。从而在以定义显示装置输出屏的垂直和水平点数不同的终端之间可显示图像的相同部分。

终端通过执行上述处理，在向/从用以定义终端显示装置输出屏幕的垂直和/或水平点数不同的两个或多个终端发送/接收两种数据(语音数据和手写数据)中至少一种和静态图像数据或动态图像数据的实时通信期间，可在通信前发送/接收有关通信目的终端的显示装置尺寸的信息(即输出屏幕的垂直和水平显示点数)。因而，例如，如果通信目的终端中显示装置屏幕的垂直和水平点数与发送端不同，则通过发送尺寸减小形式或者部分抽取形式的图像数据，可减小不必要数据的发送，从而实现平滑通信。

可以将本发明上述实施例中的处理过程设计成处理程序，并且可通过存储到记录介质如HD，DAT，FD，MO，DVD-ROM或CD-ROM中/上的形式提供该处理程序。还可通过通信介质如因特网或者任何其他适当的通信网络提供该处理程序。

已经就特定实施例描述了本发明。在不偏离本发明精神的条件下可修改、变型或改变这些特定实施例。因而，应当使用所附权利要求解释本发明的范围。

Claims (20)

1、一种通信终端，包括：

显示装置，用于根据图像显示参数在该显示装置上显示图像；

处理该图像数据的处理器；以及

发送或接收数据的通信接口，该通信接口通过网络与远程图像处理装置连接，

其中该通信终端将所述显示参数发送给所述远程图像处理装置，以在所述通信终端与所述远程图像处理装置之间开始图像数据通信操作，

其中在所述显示参数发送给所述远程图像处理装置之后，所述通信终端从所述远程图像处理装置接收第一图像的第一图像数据，所述第一图像为第一原始图像的修改版本，并且

其中按照所述通信终端提供给所述远程图像处理装置的所述显示参数改变所述第一图像。

2、如权利要求1所述的通信终端，其特征在于该第一图像为所述第一原始图像的第一部分，所述第一原始图像包括第二部分，其中所述通信终端不接收所述第一原始图像的第二部分的图像数据。

3、如权利要求1所述的通信终端，其特征在于所述第一图像为所述第一原始图像的尺寸缩小的图像。

4、如权利要求1所述的通信终端，其特征在于该显示参数包括所述显示装置的显示区域尺寸。

5、如权利要求4所述的通信终端，其特征在于该显示参数包括所述显示装置的图像分辨率信息。

6、如权利要求1所述的通信终端，其特征在于所述第一图像的图像分辨率小于所述第一原始图像的图像分辨率。

7、如权利要求6所述的通信终端，其特征在于该显示参数包括所述显示装置的图像分辨率信息，并且所述第一图像的图像分辨率与所述通信终端提供给所述远程图像处理装置的显示装置的显示参数相应。

8、如权利要求1所述的通信终端，其特征在于所述第一图像为所述第一原始图像的第一部分，该第一原始图像包括第二部分，其中手持通信终端不接收所述第一原始图像的第二部分的图像数据，所述第一原始图像的该第一部分为所述远程图像处理装置的用户所选择的所述第一原始图像的一部分。

9、如权利要求8所述的通信终端，其特征在于在所述远程图像处理装置的显示区域上进行所述第一部分的选择。

10、如权利要求1所述的通信终端，其特征在于该通信终端接收与所述第一图像数据相应的音频数据。

11、如权利要求1所述的通信终端，其特征在于该通信从所述远程图像处理装置接收与第二图像相应的第二图像数据，该第二图像数据为第二原始图像的一种修改版本，其中在所述远程图像处理装置处改变第一和第二原始图像，以产生第一和第二图像数据。

12、如权利要求11所述的通信终端，其特征在于所述第一图像与所述第一和第二原始图像具有相同分辨率，所述第二图像具有比所述第一或第二原始图像低的分辨率。

13、如权利要求1所述的通信终端，其特征在于该通信终端为包括移动电话和个人数字助理在内的手持装置。

14、一种通信终端，包括：

显示装置，用于根据图像第一显示参数在该显示装置上显示图像；

处理该图像数据的处理器；以及

发送或接收数据的通信接口，该通信接口通过网络与远程手持通信终端连接，

其中该通信终端从所述手持通信终端接收第二显示参数，该第二显示信息提供有关手持所述通信终端在手持通信终端的显示区域上显示的图像分辨率和尺寸的信息，

其中该通信终端根据接收自所述手持通信终端的第二显示参数由原始图像产生第一图像，用第一图像数据表示第一图像，并且

其中第一图像数据发送给所述手持通信终端。

15、一种用于操作具有显示装置和处理器的通信终端的方法，该方法包括：

将该显示装置的显示参数发送给远程图像处理装置，以在所述通信终端与远程图像处理装置之间开始图像数据通信操作；并且

在所述显示参数发送给远程图像处理装置之后，该通信终端从所述远程图像处理装置接收第一图像的第一图像数据，该第一图像为第一原始图像的修改版本，

其中根据所述通信终端提供给所述远程图像处理装置的所述显示参数改变第一图像。

16、如权利要求15所述的方法，其特征在于该通信终端为用户握在手中进行操作的手持装置。

17、如权利要求16所述的方法，其特征在于该第一图像为第一原始图像的尺寸缩小的图像。

18、如权利要求16所述的方法，其特征在于该显示参数包括所述显示装置的显示区域尺寸。

19、如权利要求16所述的方法，其特征在于该显示参数包括所述显示装置的图像分辨率信息。

20、如权利要求16所述的方法，其特征在于该第一图像的分辨率小于第一原始图像的分辨率。

Images