CN1197335C - 通信*** - Google Patents

通信*** Download PDF

Info

Publication number
CN1197335C
CN1197335C CNB008030693A CN00803069A CN1197335C CN 1197335 C CN1197335 C CN 1197335C CN B008030693 A CNB008030693 A CN B008030693A CN 00803069 A CN00803069 A CN 00803069A CN 1197335 C CN1197335 C CN 1197335C
Authority
CN
China
Prior art keywords
communication
data
group
communication data
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB008030693A
Other languages
English (en)
Other versions
CN1338176A (zh
Inventor
近藤哲二郎
大月知之
石桥淳一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1338176A publication Critical patent/CN1338176A/zh
Application granted granted Critical
Publication of CN1197335C publication Critical patent/CN1197335C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567Multimedia conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N7/144Constructional details of the terminal equipment, e.g. arrangements of the camera and the display camera and display on the same optical axis, e.g. optically multiplexing the camera and display for eye to eye contact
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2203/00Aspects of automatic or semi-automatic exchanges
    • H04M2203/20Aspects of automatic or semi-automatic exchanges related to features of supplementary services
    • H04M2203/2038Call context notifications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2207/00Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place
    • H04M2207/08ISDN systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/563User guidance or feature selection
    • H04M3/564User guidance or feature selection whereby the feature is a sub-conference

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种远程电信会议***包括:组决定信息产生单元,用于检测与会者HM1对相应于另一远程电信会议设备TCD的监视器的注意度,并根据检测的结果产生对相应于监视器的其余的远程电信会议设备TCD进行分组的信息;以及信息处理单元,用于根据信息分组远程电信会议设备,产生表示每一与会成员HM所属的组的组信息,并将来自根据组信息分组的每一分组远程电信会议设备TCD的图像数据和/或音频数据进行处理。

Description

通信***
技术领域
本发明涉及在至少三个通信设备中执行通信的通信***。
背景技术
在传统的远程电信会议***中,在多个远程会议室中的图像和语音通过网络彼此互通,并且其余的会议室中的图像和声音被呈现在每一会议室中,因此就能够这样进行一个会议,即好象所有的与会者都坐在一张桌子周围。
在传统的远程电信会议***中,各个会议室中的与会者能够同时发言。因此,在传统的远程电信会议***中,当多个与会者同时发言时,很难听到由其他的谈论***的特殊的谈论。
而且,在传统的远程电信会议***中,所有会议室中的图像都是以相同的亮度和相同的图像质量来呈现的。因此,在传统的远程电信会议***中,没有考虑到用较高的亮度或更仔细地来观看一个期望的会议室中的图像。
此外,在传统的远程电信会议***中,也没有考虑到,例如,当多个主题存在时,每一与会者就某一主题所做的谈论可以被同一主题的其他与会者容易地听见和看见。
发明概述
针对本领域的上述状态,本发明的一个目的在于提供一种通信***、一个分组设备、一种分组方法、一种将分组程序记录于其上的记录介质、一种信息处理设备、一种信息处理方法、一种将信息处理程序记录于其上的记录介质、一种通信设备、一种通信方法、以及一种将通信程序记录于其上的记录介质,这些使得能够容易地听见或看见同一主题的各个与会者所做的谈论。
根据本发明的通信***包括:至少三个通信设备,每一个具有注意度预测信息获得装置,用于获取用于为从每一其他的通信设备互通的通信数据的检测注意度的注意度预测信息,以及通信数据输出装置,用于将根据组信息处理的通信数据输出到相应的呈现设备;注意度检测设备,具有注意度检测装置,用于根据注意度预测信息检测注意度,以及注意度输出装置,用于输出注意度;分组设备,具有分组装置,用于根据注意度执行对通信数据的分组,以及组信息输出装置,用于输出指示分组结果的组信息;以及处理设备,具有处理装置,用于根据组信息处理从其余的通信设备发送到每一通信设备的通信数据,以及处理的数据输出装置,用于将处理装置处理的通信数据输出。
而且,根据本发明的通信***包括:至少三个通信设备,每一个具有注意度预测信息获得装置,用于获取用于为从每一其他的通信设备互通的通信数据的检测注意度的注意度预测信息、以及通信数据输出装置,用于将根据组信息处理的通信数据输出到相应的呈现设备;注意度检测设备,具有注意度检测装置,用于根据注意度预测信息检测注意度,以及注意度输出装置,用于输出注意度;分组设备,具有分组装置,用于根据注意度执行对通信数据的分组,以及组信息输出装置,用于输出指示分组结果的组信息;以及处理设备,具有处理装置,用于根据组信息处理从其余的通信设备发送到每一通信设备的通信数据,以及处理的数据输出装置,用于将处理装置处理的通信数据输出。
根据本发明的分组设备用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组设备包括:分组装置,用于根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出装置,用于输出指示着分组装置分组结果的组信息。
根据本发明的分组方法用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组方法包括:分组步骤,根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤分组结果的组信息。
根据本发明的记录介质用在包括至少三个通信设备的通信***中,并且在其上已经记录有计算机可控的分组程序,分组程序用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组程序包括:分组步骤,根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤分组结果的组信息。
在根据本发明的包括信息处理设备和至少三个通信设备的通信***中的信息处理设备包括:接收装置,用于接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组装置,用于根据注意度执行对通信数据的分组;处理装置,用于根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据发送给每一通信设备。
在信息处理设备中,接收装置接收从每一通信设备发送的、与每一通信设备相关的用户反应信息,以取代注意度,并且信息处理设备还包括注意度检测装置,用于根据用户反应信息为每一通信数据检测注意度。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法包括:接收步骤,接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组步骤,根据注意度执行对通信数据的分组;处理步骤,根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据发送给每一通信设备。
在信息处理方法中,在接收步骤中,接收从每一通信设备发送的、与每一通信设备相关的用户反应信息以取代注意度,并且信息处理方法还包括注意度检测步骤,根据用户反应信息为每一通信数据检测注意度。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的信息处理程序。信息处理程序包括:接收步骤,接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组步骤,根据注意度执行对通信数据的分组;处理步骤,根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据发送给每一通信设备。
在其上记录有信息处理程序的记录介质中,在接收步骤中,接收从每一通信设备发送的、与每一通信设备相关的用户反应信息以取代注意度,并且信息处理方法还包括注意度检测步骤,根据用户反应信息检测每一通信数据的注意度。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的通信设备包括:接收装置,用于接收来自其余的通信设备的通信数据并接收指示着从信息处理设备发送的通信数据所属的组的组信息;信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;注意度输出装置,用于将注意度输出到信息处理设备;处理装置,用于根据组信息处理通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的通信方法包括:第一接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;注意度输出步骤,将注意度输出到信息处理设备;第二接收步骤,接收指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据输出到呈现设备。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的通信程序。通信程序包括:第一接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;注意度输出步骤,将注意度输出到信息处理设备;第二接收步骤,接收指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据输出到呈现设备。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理设备包括:接收装置,用于接收从每一通信设备发送的通信数据的注意度;分组装置,用于根据注意度对通信数据进行分组;以及组信息输出装置,用于输出指示着分组装置的分组结果的组信息。
在信息处理设备中,接收装置接收从每一通信设备发送的通信数据以取代注意度,并且信息处理设备还包括注意度检测装置,用于检测用于每一通信数据的用户的注意度。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法包括:接收步骤,接收从每一通信设备发送的通信数据的注意度;分组步骤,根据注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤的分组结果的组信息。
在信息处理方法中,在接收步骤中,接收从每一通信设备发送的通信数据以取代注意度,并且信息处理方法还包括注意度检测步骤,检测用于每一通信数据的用户的注意度。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的信息处理程序。信息处理程序包括:接收步骤,接收从每一通信设备发送的通信数据的注意度;分组步骤,根据注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤的分组结果的组信息。
在其上记录有信息处理程序的记录介质中,在接收步骤中,接收从每一通信设备发送的通信数据以取代注意度,并且信息处理程序还包括注意度检测步骤,检测用户对每一通信数据的注意度。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信设备包括:接收部分,用于接收来自其余的通信设备的通信数据;信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;分组装置,用于根据注意度分组通信数据;处理装置,用于根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信方法包括:接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;分组步骤,根据注意度分组通信数据;处理步骤,根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出步骤,将在处理步骤处理的通信数据输出到呈现设备。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的通信程序。该通信程序包括:接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;分组步骤,根据注意度分组通信数据;处理步骤,根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出步骤,将在处理步骤处理的通信数据输出到呈现设备。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信设备包括:信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;通信装置,用于接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息,并将用户反应信息发送到信息处理设备;处理装置,用于根据组信息处理通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信方法包括:信息获得步骤,用于获得对来自通信设备的每一通信数据的用户反应信息;发送步骤,将用户反应信息发送到信息处理设备;接收步骤,接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将处理步骤处理的通信数据输出到呈现设备。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的通信程序。该通信程序包括:信息获得步骤,用于获得对来自通信设备的每一通信数据的用户反应信息;发送步骤,将用户反应信息发送到信息处理设备;接收步骤,接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将处理步骤处理的通信数据输出到呈现设备。
附图的简单说明
图1是显示作为本发明的实施例的远程电信会议***的示例结构的方框图;
图2是显示构成远程电信会议***的远程电信会议设备的示例结构的方框图;
图3是用于说明与会者的注意方向和根据注意方向产生的组决定信息的示意图,其中上部分示出了作为指示与会者的方向以及周期的持续时间的信息的周期检测,以及下部分示出了相应于所检测的周期的指示着与会者正在注意监视器设备的信息的产生;
图4是用于说明与会者注意的方向和开关按压信息、以及根据注意的方向和开关按压信息产生的组决定信息的示意图,其中上部分示出了作为指示与会者的方向以及周期的持续时间的信息的周期检测,中间部分示出了每一检测的周期当与会者按压开关时所提供的信号,以及下部分示出了相应于开关按压信号是“ON”信号的周期指示着与会者正在注意监视器设备的信息的产生;
图5是显示构成远程电信会议***的服务器的示例结构的方框图;
图6示出了在初始状态中的注意目标表;
图7示出了在初始状态中的组表;
图8是显示在通信开始时注意目标表和组表的初始化处理流程的流程图;
图9是显示产生组决定信息的时间的处理流程的流程图;
图10示出了反映组决定信息的注意目标表;
图11是显示将注意目标表的内容反映到组表的处理的流程的流程图;
图12示出了针对与会者HM1在图11的流程图的步骤S32的处理结束时的组表;
图13示出了针对与会者HM1在图11的流程图的步骤S32的处理结束时的注意目标表;
图14示出了针对与会者HM1在图11的流程图的步骤S38的处理结束时的组表;
图15示出了针对与会者HM1在图11的流程图的步骤S38的处理结束时的注意目标表;
图16示出了针对与会者HM2在图11的流程图的步骤S32的处理结束时的组表;
图17示出了针对与会者HM2在图11的流程图的步骤S32的处理结束时的注意目标表;
图18示出了针对与会者HM3在图11的流程图的步骤S38的处理结束时的组表;
图19示出了针对与会者HM3在图11的流程图的步骤S38的处理结束时的注意目标表;
图20示出了针对与会者HM4在图11的流程图的步骤S32的处理结束时的组表;
图21示出了针对与会者HM4在图11的流程图的步骤S32的处理结束时的注意目标表;
图22示出了针对与会者HM4在图11的流程图的步骤S37的处理结束时的组表;
图23示出了针对与会者HM4在图11的流程图的步骤S37的处理结束时的注意目标表;
图24示出了针对与会者HM5在图11的流程图的步骤S36的处理结束时的组表;
图25示出了针对与会者HM5在图11的流程图的步骤S36的处理结束时的注意目标表;
图26是显示用于执行声音的信息处理的信息处理部分的示例结构的方框图;
图27是显示在执行音频质量控制的情况下,音频处理器的示例结构的方框图;
图28示出了在执行音频质量控制的情况下,音频处理器的输入音频信号的频率特性;
图29示出了在执行音频质量控制的情况下,音频处理器的的频率控制特性;
图30示出了在执行音频质量控制的情况下,音频处理器的输出音频信号的频率特性;
图31是显示用于执行图像的信息处理的信息处理部分的示例结构的方框图;
图32是显示在执行图像质量控制的情况下,图像处理器的示例结构的方框图;
图33是显示用于执行图像和声音的信息处理的信息处理部分的示例结构的方框图;
图34是显示眼睛检测处理的流程的流程图;
图35是用于说明眼睛两端的位置检测的示意图;
图36是用于说明检测鼻孔位置的范围的示意图;
图37是用于说明眼睛的两端的位置、鼻孔的位置、眼球的中心位置的示意图;
图38是用于说明检测眼睛的方向的示意图;
图39是用于说明寻找线的方法的示意图,该线用于使像素的特定集的第二矩最小化;
图40是显示面孔方向检测处理的流程的流程图;
图41示出了在面孔方向检测中的原始图像;
图42示出了在面孔方向检测中的另一原始图像;
图43是用于说明在面孔方向检测中的头发区域和皮肤区域的示意图;
图44是用于说明在面孔方向检测中的另一头发区域和另一皮肤区域的示意图;
图45是用于说明在头发区域和皮肤区域中的块(mass)的中心的示意图;
图46是用于说明在另一头发区域和另一皮肤区域中的块的中心的示意图;
图47示出了在面孔方向检测中的差值和角度之间的示例关系;
图48是显示从其侧面看具体例子的监视器设备的简略透视图;
图49是显示具体例子的监视器设备的简略正视图;
图50是显示实际设备的示例结构的方框图,该实际设备实现了在远程电信会议***中的每一远程电信会议设备的信号处理设备和服务器;
图51示出了远程电信会议设备的另一个例子的简略结构,其中在屏幕上显示了与会者的图像并且通过扬声器使声音图像正常;
图52示出了远程电信会议设备的另一个例子的简略结构,其中在屏幕上显示了与会者的图像并且两个与会者出席;
图53示出了远程电信会议设备的另一个例子的简略结构,其中在屏幕上显示了与会者的图像,两个与会者出席,并且通过双耳式耳机(headphone)使声音图像正常;
图54示出了远程电信会议设备的另一个例子的简略结构,其中只传递与会者的声音;
图55是显示作为本发明的第二实施例的远程电信会议***的示例结构的方框图;
图56是显示构成远程电信会议***的远程电信会议设备的示例结构的方框图;
图57是显示构成作为本发明的第三实施例的远程电信会议***的远程电信会议设备的示例结构的方框图,其中远程电信会议设备用作分组设备;
图58是显示构成远程电信会议***的远程电信会议设备的示例结构的方框图,其中远程电信会议设备不用作分组设备;
图59是显示构成作为本发明的第四实施例的远程电信会议***的远程电信会议设备的示例结构的方框图;
图60是显示构成远程电信会议***的服务器的示例结构的方框图;
图61是显示作为本发明的第五实施例的远程电信会议***的示例结构的方框图;
图62是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器作用分组设备;
图63是显示构成构成远程电信会议***的服务器的示例结构的方框图,其中服务器作用处理设备;
图64是显示构成作为本发明的第六实施例的远程电信会议***的远程电信会议设备的示例结构的方框图;
图65是显示构成远程电信会议***的服务器的示例结构的方框图;
图66是显示构成作为本发明的第七实施例的远程电信会议***的服务器的示例结构的方框图;其中服务器用作注意度检测设备;
图67是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作分组设备;
图68是显示构成作为本发明的第八实施例的远程电信会议***的远程电信会议设备的示例结构的方框图;
图69是显示构成远程电信会议***的服务器的示例结构的方框图;
图70是显示构成作为本发明的第九实施例的远程电信会议***的服务器的示例结构的方框图;其中服务器用作注意度检测设备和分组设备;
图71是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作处理设备;
图72是显示构成作为本发明的第十实施例的远程电信会议***的服务器的示例结构的方框图,其中服务器用作注意度检测设备;
图73是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作分组设备和处理设备;
图74是显示作为本发明的第十一实施例的远程电信会议***的示例结构的方框图;
图75是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作注意度检测设备;
图76是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作分组设备;
图77是显示构成远程电信会议***的服务器的示例结构的方框图,其中服务器用作处理设备。
实施发明的最好形式
以下,参照附图来详细说明本发明的优选实施例。
这些实施例适用于能够主持多个远程地点的与会者的会议的远程电信会议***。检测每一与会者的注意度,并且根据检测的结果,产生用于决定每一与会者参与的组主题的组决定信息。根据组决定信息执行分组,并且产生指示着每一与会者所属的组的组信息。根据组信息,在相应于每一其余的与会者的图像数据和音频数据上执行所需的调整处理。因此,能够使参与同一主题的与会者的谈论显著容易地被听见或看见。
首先,将描述作为第一实施例的远程电信会议***。
图1所示的是远程电信会议***的简略结构。在该远程电信会议***中,远程电信会议设备TCD1至TCDn放置在相应于与会者HM1至HMn所在多个地点(1至n个地点),并且通过通信网络NT连接远程电信会议设备TCD1至TCDn,通信网络NT由例如ISDN(综合服务数字网)来构成。
在下面的描述中,当不需区别单个与会者时,与会者HM1至HMn简称为与会者HM。类似地,当不需区别单个远程电信会议设备时,远程电信会议设备TCD1至TCDn简称为远程电信会议设备TCD。尽管ISDN被用作图1的通信网络NT,也可以使用其他的传输介质,如有线电视网、因特网或数字卫星通信。
每一远程电信会议设备TCD可以接收相应于与会者HM的图像数据和音频数据,并通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余与会者HM的图像数据和音频数据。即,每一远程电信会议设备TCD能够监视图像和声音。
在该远程电信会议***中的每一远程电信会议设备TCD具有图2所示的结构。由于远程电信会议设备TCD1至TCDn具有相同的结构,图2示出了作为多个远程电信会议设备TCD1至TCDn的代表设备的远程电信会议设备TCD1的详细示例结构。
远程电信会议设备TCD1具有:至少一个信号处理设备SPD1,连接到通信网络NT,用于执行与在远程电信会议***中的其余的远程电信会议设备TCD2至TCDn的通信并对将发送和接收的信号执行信号处理,将在以后描述;以及监视器设备MD2至MDn,用于以相应于远程电信会议设备TCD2至TCDn的方式,显示和/或展示从远程电信会议***中的其余的远程电信会议设备TCD2至TCDn发送的与会者HM2至HMn的图像数据和音频数据。
在下列描述中,当不需区分单个监视器设备时,将监视器设备MD2至MDn简称为监视器设备MD。
在远程电信会议设备TCD1中的信号处理设备SPD1具有:网络连接端子TN1,连接到通信网络NT;信息发送/接收部分TRB1,用于执行发送信息至通信网络NT和从通信网络NT接收信息;构成处理设备的信息处理部分PB1,用于对提供到监视器设备MD2至MDn的信号执行信息处理,将在以后描述;构成注意度检测设备的组决定信息产生部分JB1,用于产生组决定信息,组决定信息用于对参与会议的相同主题的与会者进行分组,将在以后描述;输出端子TO2至TOn,用于将要提供到单个监视器设备MD2至MDn的信号;输入端子TI2至TIn,用于将要从单个监视器设备MD2至MDn提供的信号;以及输出端子TS,用于来自开关SW的信号,开关SW产生组决定使用的开关按压信息,将在以后描述。
尽管将在以后描述监视器设备MD2至MDn的详细结构,但是每一监视器设备MD2至MDn具有作为主要部件的:至少一个扬声器,提供在监视器设备MD的机壳的前面上;显示设备,其屏幕面对预定的方向,具体地就是与会者HM1的方向。在监视器设备MD2至MDn的至少一个监视器设备MD上提供有:麦克风,用于拾取远程电信会议设备TCD1的周围的声音以及与会者HM1产生的谈论的语音;以及诸如照相机的照相设备,用于拍摄与会者HM1的图像。最好,具有提供于其上的麦克风和照相设备的监视器设备是安置在与会者HM1的前面的监视器设备,即图2中的监视器设备MDm。当然,在远程电信会议设备TCD1中,能够在所有的监视器设备MD2至MDn上提供麦克风和照相设备。此外,在远程电信会议设备TCD1中,麦克风和照相设备可以安置在期望的位置。
通过信号处理设备SPD1和通信网络NT将照相设备拍摄的图像数据和麦克风拾取的音频数据发送到远程电信会议设备TCD2至TCDn。
在监视器设备MD2至MDn上,基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像被显示,并且相似地从扬声器输出基于从相应的远程电信会议设备TCD2至TCDn发送的音频数据的声音。具体地,在监视器设备MD2至MDn中的监视器设备MD2的显示屏幕上,显示通过通信网络NT提供的、基于由远程电信会议设备TCD2的照相设备拾取的图像数据的图像,即显示基于与会者HM2和周围环境的图像数据的图像;通过监视器设备MD2的扬声器输出通过通信网络NT提供的、基于由远程电信会议设备TCD2的麦克风拾取的音频数据的声音,即输出基于与会者HM2产生的谈论的音频数据的声音。相似地,在监视器设备MD3的显示屏幕上,显示基于由远程电信会议设备TCD3的照相设备拾取的、发送到监视器设备MD3的图像数据的图像;从扬声器输出基于由远程电信会议设备TCD3的麦克风拾取的、并发送到监视器MD3的音频数据的声音。相同的操作可以应用到其余的监视器设备MD。显示和输出从相应的远程电信会议设备TCD发送的图像和声音。作为通过通信网络NT在远程电信会议设备TCD1至TCDn中发送的和接收的图像数据,也可以考虑静止的图像数据和活动的图像数据。
以这样的方式安置监视器设备MD2至MDn,就好象在具有远程电信会议设备TCD1的会议室中的与会者HM1和在远程地点的其余的与会者HM2至HMn(在监视器MD2至MDn的显示器上显示的其余的与会者HM2至HMn)是坐在一张桌子周围举行会议一样,如图2所示。在下列情况中,即在远程电信会议***中有六个远程电信会议设备TCD并且在每一远程电信会议设备中有五个监视器设备MD的情况下,在一个远程电信会议设备TCD中的五个监视器设备MD可以按照下面的方式安置,即与会者HM和监视器设备MD形成等边六角形。
在每一远程电信会议设备TCD的信号处理设备SPD中的组决定信息产生部分JB产生组决定信息,用于以下列方式对参与会议的相同主题的与会者进行分组。在下面的描述中,作为相应于远程电信会议设备TCD1至TCDn的组决定信息产生部分JB1至JBn的代表,说明在远程电信会议设备TCD1的信号处理设备SPD中的组决定信息产生部分JB 1的操作。
组决定信息产生部分JB1根据从例如位于与会者HM1的前面的监视器设备MD的照相设备提供的图像数据,检测与会者HM1的注意度,并根据检测的结果产生用于决定与会者HM1正在参与的组主题的组决定信息,将在以后描述。与会者HM1的注意度不仅以与会者HM1正在注意监视器设备MD2至MDn中的一个还是另一方向的方式,即以0或1的数字方式,来表示注意的存在和不存在,而且还即以模拟方式或梯度(gradually)表示集中到监视器设备MD2至MDn的注意的程度。
将在以后详细描述的组决定信息产生部分JB1在每一预定时间间隔上分析从监视器设备MDm的照相设备提供的与会者HM1的图像数据,并检测与会者HM1所面对的方向。
具体地,组决定信息产生部分JB1首先检测时段Ij作为指示着与会者HM1所面对的方向以及该方向的持续时间的信息,如图3的上部所示。Ij中的“j”是相应于其余的与会者HM2至HMn的从2至n中选择的值,并且0不相应于与会者HM2至HMn中的任何一个。组决定信息产生部分JB1检测时段I2,即与会者HM1面向其上显示有与会者HM2的图像的监视器设备MD2的方向的持续时间;时段I3,即与会者HM1面向其上显示有与会者HM3的图像的监视器设备MD3的方向的持续时间;时段Im,即与会者HM1面向其上显示有与会者HMm的图像的监视器设备MDm的方向的持续时间;时段In-1,即与会者HM1面向其上显示有与会者HMn-1的图像的监视器设备MDn-1的方向的持续时间;时段In,即与会者HM1面向其上显示有与会者HMn的图像的监视器设备MDn的方向的持续时间;以及时段I0,即与会者HM1不面向监视器设备MD2至MDn的任何一个的持续时间。
随后,组决定信息产生部分JB1特别在检测的时段I2至In以及I0中检测持续时间为Tcont或更长的时段。如果检测到持续时间为Tcont或更长的时段,组决定信息产生部分JB1产生如图3的下部分所示的信息(Hi:Aj),表明与会者HM1正在注意相应检测的时段的监视器设备(显示有与会者的图像)。(Hi:Aj)中的“i”相应于与会者HMi中的“i”。在该实施例中,i=1。(Hi:Aj)中的“j”是相应于其余的与会者HM2至HMn的从2至n中选择的值,并且0不相应于与会者中的任何一个。在图3中的例子中,在从I2至In和I0中检测出时段I3、I0和I2的作为持续时间Tcont或更长的时段情况下,组决定信息产生部分JB1产生信息(H1:A3),指示着相应于检测的时段I3与会者HM1正在注意监视器设备MD3、信息(H1:A0),指示着相应于检测的时段I0与会者HM1没有注意任何监视器设备或与会者HM1正在注意不是监视器设备MD的事情、以及信息(H1:A2),指示相应于检测的时段I2与会者HM1正在注意监视器设备MD2,这三个信息作为组决定信息。
组决定信息产生部分JB1还可以根据来自指示与会者HM1正在注意的开关SW的开关按压信息和检测的时段Ij一起产生用于决定组的组决定信息。具体地,在这种情况下,组决定信息产生部分JB1检测时段Ij作为指示着与会者HM1所面对的方向和该方向持续的时间的信息,如图4的上部所示,并且针对所检测的时段I2至In和I0当与会者HM1按压开关SW、提供显示在图4的中部的、指示着开关的按压的“ON”信号时,组决定信息产生部分JB1产生如图4的下部所示的信息(H1:Aj),指示着与会者HM1正在注意相应于开关按压信号是“ON”信号的时段的监视器设备(显示有与会者的图像)。在图4的例子中,在从时段I2至In中检测的时段I3和I4作为开关按压信号是“ON”的时段的情况下,组决定信息产生部分JB1产生信息(H1:A3),指示着相应于检测的时段I3与会者HM1正在注意监视器设备MD3、以及信息(H1:A4),指示着相应于检测的时段I4与会者HM1正在注意监视器设备MD4,作为组决定信息。
此外,与会者HM1他/她自己能够清楚地指定与会者HM1正在注意的方向。例如,提供相应于各个与会者HM2至HMn的按钮和相应于HM1没有正在注意任何与会者的情况的按钮,并且与会者HM1他/她自身按压这些按钮,于是指定与会者HM1正在注意的团体。在这种情况下,这些按钮的每一个的按压信息是上述的组决定信息。
通过如上所述的、根据与会者HM1的行为和指定,组决定信息产生部分JB1检测与会者HM1正在注意监视器设备MD2至MDn(与会者HM2至HMn)中的一个而产生的组决定信息,被提供给信号处理设备SPD1中的信息发送/接收部分TRB1,并被进一步通过通信网络NT从网络连接端子TN1发送到服务器SV,将在以后描述。
服务器SV如图5所示建立,并用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组并且产生指示着与会者HM所属的组的组信息的分组设备。
在图5中,服务器SV具有:网络连接端子11,连接到通信网络NT;信息发送/接收部分10,用于执行通信网络NT发送信息和从通信网络NT接收信息;以及组决定部分GJD,用于根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行组决定,并用于根据组决定的结果产生指示着每一与会者所属的组的组信息以及将组信息发送到远程电信会议设备TCD1至TCDn的每一个的信息处理部分PB。
信息发送/接收部分10通过通信网络NT接收从远程电信会议设备TCD1至TCDn发送的每一个组决定信息,并将组决定信息提供给组决定部分GJD。另一方面,信息发送/接收部分10通过通信网络NT将组决定部分GJD产生的组信息发送到远程电信会议设备TCD1至TCDn。
组决定部分GJD根据每一组决定信息执行和与会者HM1至HMn通过远程电信会议设备TCD1至TCDn参与会议的所属的、即与会者参与的主题的有关的决定和更新,并根据组决定和更新的结果产生指示着每一与会者HM所属的组的组信息。
将在以后描述的每一远程电信会议设备TCD1至TCDn将从服务器SV发送的组信息提供给信息处理部分PB,并且接着使信息处理部分PB根据组信息产生用于调整声音大小、音频质量、图像质量等的参数,将在以后描述,从而执行图像和声音的调整。
各种组决定的条件可以考虑在服务器SV中使用。此后,将描述在使“利用在正在注意的人和正在被注意的人之间的关系的规定,由该关系直接或间接联系的人被作为一个组对待”有效的条件被使用的情况下,根据服务器SV的组决定部分GJD中的组决定信息进行的组决定和更新处理的细节。
组决定部分GJD拥有注意目标表,注意目标表包括:“与会者号”,即相应于远程电信会议***中的每一与会者的号码;“注意目标号”,即指示着使用远程电信会议设备TCD1至TCDn的与会者HM1至HMn正在注意的一个与会者的号码;以及“至组表的注册”,指示着至组表的注册状态,如图6所示。组决定部分GJD还拥有一组表,组表包括“组号”,用于指示着给予对在远程电信会议***中存在的每一组的号码;属于每一组的“与会者号”,;以及“成员”,指示着属于每一组的与会者。如图7所示。
在接收组决定信息之前,组决定部分GJD执行通信开始时间的初始化处理,如图8所示。
具体地,如图8所示,如步骤S11的处理,组决定部分GJD首先执行对图6所示的注意目标表的准备和初始化。在该初始化中,相应于在远程电信会议***中的与会者的号码,即图7中的H1至Hn,被设置成图6中的注意目标表中的“与会者号码”。并且指示着使用远程电信会议设备TCD1至TCDn的每一与会者HM1至HMn正没有注意任何人的号码A0被设置成所有与会者的“注意目标号”。而且,指示着没有被注册到组的与会者的“×”被设置成所有与会者的“到组表的注册”。
接着,组决定部分GJD执行图7所示的组表的准备和初始化,如步骤S12的处理。在这个初始化中,组成参与远程电信会议***的远程电信会议设备TCD1至TCDn的组G1至Gn被设置成图7的组表中的“组号”。并且指示着没有人参与任一组的0被设置成所有组的“与会者人数”。而且,“成员”的部分被留成空白,指示着没有构成任一组的成员。
在接收到组决定信息时,组决定部分GJD开始产生组决定信息的时间的处理,如图9所示。
具体地,在接收到组决定信息时,首先,实际上组决定部分GJD将组决定信息反映到注意目标表,如步骤S21的处理,如图9所示。的组决定信息的反映是指例如响应信息(Hi:Aj),即关于号Hi表示的与会者HMi正在注意相应于号Aj的另一个与会者HMj的效果(effect)的信息,在与会者号Hi的条目(entry)中的“注意目标号”被改成Aj,如图10所示。在这种情况中,所有的与会者的“到组表的注册”被初始化成“×”。在图10的例子中,根据由“与会者号”H1表示的与会者HM1正在注意的注意目标,相应于与会者HM3的A3被设置成“注意目标号”,并且根据由“与会者号”H2表示的与会者HM2正在注意的注意目标,指示着与会者没有注意任何人的A0被设置成“注意目标号”。相似地,由于与会者HM3注意与会者HM5,所以A5被设置成“注意目标号”,并且与会者HM4注意与会者HM2,所以A2被设置成“注意目标号”。有关其他的与会者的“注意目标号”的设置将不再详细描述。
如步骤S22的处理,组决定部分GJD设置0作为所有组的“与会者人数”,并设置空白作为组表中的所有组的“成员”,与图7的例子相似。
在步骤S21和S22的设置之后,按照“与会者号”H1至Hn的每一与会者的顺序,组决定部分GJD将注意目标表的内容反映到组表,如步骤S23的处理。
如图11所示的是图9的流程图中步骤S23的将注意目标表的内容反映到组表的处理的细节。在图11中,“注册”意味着注册到组表,“与会者自己的条目”意味着在注意目标表中的与会者他/她自己的条目,“注意目标”意味着在与会者的自己条目中的注意目标,“注意目标”条目意味着在注意目标表中的注意目标的条目,以及“注意目标组”意味着注意目标作为一个成员被注册到的组。在实际操作中的注册是一个一个增加在组表中的与会者的人数、对组表中的成员增加相应的号码,并将在注意目标表中的到组表的注册的内容从“×”变为“○”。此后,将在每一远程电信会议设备TCD中的该要求称为要求1。这些是在与会者号Hi的注意目标号是A0,即号Hi的与会者没有注意任何其余的与会者的情况下,仅有的要求。
如果与会者号Hi的注意目标号不是A0,则要求将注意目标号注册到组表中,于是将在注意目标表中的注意目标条目中的到组表的注册的内容变为“○”,并且与会者号Hi和注意目标被注册为在组表中的相同组。此后,将每一远程电信会议设备TCD中的这样的要求称为要求2。
参考图11的流程图,确认这样的要求是否得到满足。
首先,如图11所示,组决定部分GJD决定在注意目标表中的与会者号Hi的与会者自己的条目中的到组表的注册是否是“○”,如步骤S31的处理。如果在步骤S31中的与会者自己的条目中的“注册”是“○”,则注册到组表得到保证,并且因此满足要求1。于是如果在步骤S31的决定结果是是,则组决定部分GJD不执行有关将与会者Hi注册到组表的操作,而移到步骤S33的处理。另一方面,如果在与会者自己的条目中的“注册”是“×”,并且因此在步骤S31上的决定结果是否,则组决定部分GJD移到步骤S32的处理。
在移到步骤S32的处理时,组决定部分GJD将与会者他/她自己,即与会者号注册到在组表中与会者的人数是0的最少人数的组中,然后移到步骤S33的处理。
作为这些步骤S31和S32的结果,在后续步骤S33的处理之前,在任何情况下,要求1得到满足。
在移到步骤S33的处理中,组决定部分GJD确认注意目标号是否是A0。由于在注意目标号是A0的情况下所有的要求已经得到满足,所以如果在步骤S33的决定是否,则组决定部分GJD结束系列处理。在另一方面,如果注意目标号不是A0并且在步骤S33的决定结果是否,则组决定部分GJD移到步骤S34的处理以满足要求2。
在移到步骤S34的处理中,组决定部分GJD决定在注意目标条目中的到组表的注册的内容是否为“○”。
如果在注意目标条目中的注册是“×”,则肯定注意目标条目没有注册到组表。因此,如果在步骤S34的决定结果是否,则组决定部分GJD移到步骤S38的处理将该注意目标注册到作为与会者的组的相同组,即,与会者自己的组,并将在注意目标条目中的到组表的注册的内容改变为“○”。由于通过该步骤S38的处理要求2是一定得到满足的,所以组决定部分GJD结束系列处理。
另一方面,如果在步骤S34决定在注意目标条目的注册是“○”并且注意目标已经被注册,则剩余的要求仅是要求2的后一半,即保证与会者号Hi和注意目标是在相同的组。于是,如果在步骤S34的决定结果是是,则组决定部分GJD在下一步骤S35参考组表搜索注意目标组,并在步骤S36确认与会者号Hi和注意目标是否在相同的组。
如果在步骤S36确认与会者号和注意目标在相同的组,则要求2已经得到满足。因此,如果在步骤S36的决定的结果是是,则组决定部分GJD结束系列处理。
另一方面,如果在步骤S36的决定结果是否,则必须使与会者号Hi和注意目标属于相同的组。因此,如步骤S37的处理,组决定部分GJD合并与会者号和注意目标分别所属的两个组。具体地,在两个组中具有较大号的组被合并到具有较小号的组。更具体地,具有较大号的组的与会者的人数被添加到具有较小号的组的与会者中,并且具有较大号的组的成员被添加到具有较小号的组的成员中。于是具有较大号的组的与会者的人数变成0,并且具有较大号的组的成员被清除。结果,要求2得到满足并且所有要求得到满足。因此,组决定部分GJD结束系列处理。
在这种方式中,组决定部分GJD结束对在注意目标表中具有与会者号Hi的与会者的条目进行反映的要求的确认。
在结束对与会者号Hi的条目的反映之后,在做其它之前立即要求对与会者号Hi-1的条目的反映,以及与会者号Hi的条目的反映。对于与会者号H1的条目,由于直到那时仍没有其余的条目被反映,所以仅反映与会者号H1的条目是足够的。
同时,在反映与会者号Hi的条目的情况下的操作中包括到组表的新注册,在组表中的两个组的合并,并且在注意目标表中的到组表的注册的内容变为“○”。在这种情况下,不出现根据上至紧在与会者号Hi之前的与会者号Hi-1中的条目所注册的号的删除,将到组表的注册变为“×”,以及对属于相同组的两个号的分离。因此,不出现下面的情况,即与会者号Hi的反映处理不满足对在上至紧在与会者号Hi之前的与会者号Hi-1的处理中满足的要求。因此,应该理解,对所有的与会者号Hi,在图11中所示的关于与会者号Hi的条目的处理结束之后,对所有的与会者号H1至Hi的条目的要求得到满足。
现在将参考具体的例子描述在执行图11的流程图的处理的情况下注意目标表和组表的内容的变换。在这个例子中,组表是处于如图7所示的初始状态,并且组决定信息被反映的注意目标表如图10所示。现在将描述在这种情况下的注意目标表和组表的变换。
首先,将说明与会者HM1(与会者号H1)的条目的反映。
由于到组表的注册的内容是“×”,所以在图11中步骤S31上的决定结果是否,并且在后面的步骤S32上执行至与会者号H1的条目的注册。作为在步骤S32的处理结果,在组表中,对于具有最小号的组的组号G1的与会者的人数是1,以及指示着与会者他/她自己的与会者号H1被注册为成员,如图12所示。在这种情况中的注意目标表中,与与会者号H1有关的到组表的注册的内容是“○”,如图13所示。
下面,在步骤S33的决定的结果是是,并且指示着与会者HM3的注意目标号A3被提供作为注意目标的情况中,与会者号H3的条目的到组表的注册的内容是“×”,如图13所示,并且因此在步骤S34的决定结果是否。结果在步骤S38,注意目标的与会者号H3被注册到组G1,即与会者自己的组。因此,在组表中,与组号G1有关的与会者的人数是2,并且组的成员是H1和H3,如图14所示。在注意目标表中,和与会者号H1和H3有关的到组表的注册的内容是“○”,如图15所示。
因此,结束与会者HM1(与会者号H1)的条目的反映。
现在将说明与会者HM2(与会者号H2)的条目的反映。
在反映与会者号H2的条目的情况中,由于此时到组表的注册的内容是“×”,所以在图11中的步骤S31的决定结果是否,并且在后面的步骤S32上执行到与会者号H2的条目的注册。如步骤S32的处理结果中,在组表中,与具有最小号的组后面的组G2有关的与会者的人数是1,以及指示着与会者他/她自己的与会者号H2被注册为成员,如图16所示。在这种情况中的注意目标表中,和与会者号H2有关的到组表的注册的内容是“○”,如图17所示。而且在和与会者号H2有关的注意目标号是A0的情况中,条目的反映处理结束于该点,如图17的例子中所示。
现在将说明与会者HM3(与会者号H3)的条目的反映。
在反映与会者号H3的条目的情况中,作为与会者号H1的已经进行过的条目反映处理的结果,在这点的到组表的注册的内容是“○”,如图1 7所示,并且由此在图11中的步骤S31的决定结果是是。而且如果与会者号H3的与会者HM3正在注意与会者HM5,则在步骤S33的决定结果是是。在这点上,由于与注意目标的与会者号H5有关的到组表的注册的内容是“×”,如图17所示,则在图11中的步骤S34的决定结果是否。
因此,在步骤S38,注意目标的与会者号H5被注册到与会者号H3的与会者自己的组的组号G1中。因此,在组表中,与组号G1有关的与会者的人数被更新到3,并且组的成员更新到H1、H3、H5,如图18所示。在注意目标表中,和与会者号H5有关的到组表的注册的内容更新到“○”,如图19所示。
因此,结束与会者HM3(与会者号H3)的条目的反映。
现在将说明与会者HM4(与会者号H4)的条目的反映。
在反映与会者号H4的条目的情况中,由于在这点的到组表的注册的内容是“×”,所以在图11中的步骤S31的决定结果是否,并且在后面的步骤S32上执行到与会者号H4的条目的注册。如步骤S32的处理结果中,在组表中,与已经建立的组G1和G2后面的组号G3有关的与会者的人数是1,以及指示着与会者他/她自己的与会者号H4被注册为成员,如图20所示。在这种情况中的注意目标表中,和与会者号H4有关的到组表的注册的内容是“○”,如图21所示。
下面,在步骤S33的决定的结果是是,并且指示着与会者HM2的注意目标号A2被作为注意目标提供的情况中,在该点的注意目标表中与会者号H2的条目的到组表的注册的内容是“○”,如图21所示,并且因此在步骤S34的决定结果是是。
接着,在步骤S35上通过搜索与注意目标的与会者号H2有关的组号,找到注意目标的与会者号H2的组号G2。由于此时和与会者号H4有关的组号是G3,而注意目标的与会者号H2的组号是G2,所以在后续的步骤S36的决定结果是否。在后续步骤S37中,与会者号H4的组号G3被合并到注意目标的与会者号H2的组号G2中,G2是较小的号。
因此,在组表中,与组号G2有关的与会者的人数更新到2,并且组的成员更新到H2、H4,如图22所示。如图23所示更新注意目标表。具体地,从图21所示的表中,注意目标表被保留不变。
于是,结束与会者HM4(与会者号H4)的条目的反映。
最后,将描述与会者HM5(与会者号H5)的条目的反映。
在反映与会者号H5的条目的情况下,由于在这点的到组表的注册的内容是“○”,如图23所示,所以在图11中的步骤S31的决定结果是是,而且如果与会者号H5的与会者HM5正在注意与会者HM3,则在步骤S33的决定结果是是。在这点上,由于与注意目标的与会者H3有关的到组表的注册的内容是“○”,如图23所示,则在图11中的步骤S34的决定结果是是。
接着,在步骤S35上通过搜索与注意目标的与会者号H3有关的组号,找到注意目标的与会者号H3的组号G1。由于与注意目标的与会者号H3有关的组号是G1,并且与会者号H5已经注册到组表G1,所以在后续的步骤S36的决定结果是是。
接着,如图24所示更新组表,并且如图25所示更新注意目标表。具体地,从图22所示的表中,组表保留不变,并且从图23所示的表中,注意目标表保留不变。
当通过上述处理结束了涉及注意目标表中的所有的与会者号的信息的反映时,在注意目标表中的“至组表的注册”的条目的所有部分都是“○”,并且所有的与会者号被注册作为组表中的任何一个组的成员。
在结束所有的这样的信息反映时,上述的组决定部分GJD产生有关注意目标表和组表的信息作为指示着与会者HM所属的组,即每一与会者正在参与的主题的组信息。
组信息被从服务器SV发送到每一远程电信会议设备TCD。对于发送内容和发送目的地,考虑将所有的在组表中的与会者的人数不是0的组结构发送到所有地点上的远程电信会议设备TCD,或者将在每一地点的与会者HM所属的组结构发送到每一地点的远程电信会议设备。
现在将描述接收到从每一远程电信会议设备TCD发送的图像数据和音频数据以及从在远程电信会议***中的服务器SV发送的上述组信息的远程电信会议设备TCD的操作。在该描述中,图2所示的远程电信会议设备TCD1的操作将作为远程电信会议设备TCD1至TCDn的代表设备来描述。
在接收通过通信网络NT发送的信号中,在远程电信会议设备TCD1中的信息发送/接收部分TRB1将相应于远程电信会议设备TCD2至TCDn的图像数据和音频数据分别从信号中进行分离,并提取上述的组信息。信息发送/接收部分TRB1将每一分离的图像数据和音频数据提供到信息处理部分PB1,并将已提取的组信息提供给信息处理部分PB1。
根据组信息,信息处理部分PB1计算用于执行相应于远程电信会议设备TCD2至TCDn的图像数据和/或音频数据的信息处理的参数。而且,根据这样计算的参数,信息处理部分PB1对相应于远程电信会议设备TCD2至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并且将每一调整的图像数据和音频数据提供给分别由远程电信会议设备TCD2至TCDn提供的每一监视器设备MD2至MDn。
现在将描述信息处理部分PB1的内容调整处理的具体例子。
作为调整处理的第一个例子,根据从组信息产生的参数,可以实施放大,特别是从其余的远程电信会议设备TCD2至TCDn发送到远程电信会议设备TCD1的图像数据和音频数据中的音频数据的处理。
图26示出了在作为调整处理的第一个例子,根据从组信息产生的参数放大音频数据的情况中,远程电信会议设备TCD1中的信息处理部分PB1的主要部分的简略结构。
在图26中,将由信息发送/接收部分TRB1分离的相应于远程电信会议设备TCD2至TCDn的音频数据提供到远程电信会议设备TCD1中的信息处理部分PB1的端子21,并且将来自信息发送/接收部分TRB1的组信息提供到端子22。在图26的例子中,由于图像数据经过信息处理部分PB1,接着被提供到相应的监视器设备MD2至MDn,为简单起见,省略图像数据的路径。
将相应于远程电信会议设备TCD2至TCDn的音频数据提供到相应于监视器设备MD2至MDn而配置的音频处理器AP2至APn。在下列描述中,在不需区分单个音频处理器时,将音频处理器AP2至APn简单地称为音频处理器AP。
音频处理参数计算部分20根据组信息识别远程电信会议设备TCD1的与会者HM1所属的组,即,与会者HM1正在参与的主题。接着,音频处理参数计算部分20产生一个参数,用于仅提升相应于与会者HM1所属的组的声音的音量,并用于降低其余的声音的音量。具体地,音频处理参数计算部分20通过计算找到音频放大因子,作为放大在与会者HM1所属的组中的与会者HM所产生的谈论的语音以及抑制由其余的与会者HM产生的谈论的语音的参数。相应于监视器设备MD2至MDn从音频处理参数计算部分20输出的音频放大因子的信息被提供到相应于监视器设备MD2至MDn而配置的音频处理器AP2至APn。
因此,音频处理器AP2至APn根据音频放大因子的信息分别执行调整处理以便放大或抑制施加于此的音频数据。由音频处理器AP2至APn调整处理后的音频数据,从相应的输出端子AO2至AOn输出,以及被提供到在图2所示的信号处理设备SPD1中的相应的输出端子TO2至TOn。
将从信号处理设备SPD1中的输出端子TO2至TOn输出的音频数据提供到相应于监视器设备MD2至MDn的扬声器。因此,相应于与会者HM1所属的组,即参与该主题的组的监视器设备MD的扬声器产生的声音的音量变得较大并且容易听见,而相应于与会者HM1不属于的组,即不参与该主题的组的监视器设备MD的扬声器产生的声音的音量被减小。
在调整处理中,基于下列原因,仅对如上所述的相应于与会者HM1他/她自己所属的组的声音进行放大。
例如,在多个与会者使用远程电信会议设备举行会议的情况下,由于在远程电信会议***中利用了通信网络,如果同时存在多个主题,与会者他/她自己想听见的主题的声音可能被其余的主题的语音打扰,所以该语音可能很难被听见。为了解决这个问题,可以考虑仅使与会者他/她自己正在注意的一个与会者的谈论的语音变得容易听见,并且降低其余的与会者的谈论的音量。但是,在典型的会议中,由于多个与会者对相同的主题发表谈论,如果仅如上所述,使与会者他/她自己正在注意的一个与会者的谈论的语音变得容易听见而且降低其余的与会者的谈论的音量,则参与相同主题的与会者的与会者他/她自己没有注意的其他的与会者的谈论的音量也被降低。因此没有被注意的与会者的谈论是很难听见的,并且存在无法听见那个谈论的危险。
于是,在这个实施例中,参与相同主题的与会者被分组,并且当即使有注意该与会者,也不降低由属于该组的与会者产生的谈论的音量;而降低参与其余的主题的组的与会者产生的谈论的音量。
在调整处理的第一个例子中,作为与会者HM1参与相同主题的与会者的语音被变得易于听见,而其余的主题的语音被变得小些以便不打扰作为与会者HM1参与相同主题的与会者的谈论。
现在将描述调整处理的第二个例子。与调整处理的第一个例子的比较中,在第一个例子中,与会者HM产生的谈论的语音的音量根据组信息被放大或抑制,在调整处理的第二个例子中,信息处理部分PB1还可以根据组信息调整与会者HM产生的谈论的语音的特征频率。
在作为调整处理的第二个例子中的调整语音的频率特征的情况中,图26中所示的音频处理参数计算部分20计算一个滤波参数,用于调整由与会者HM2至HMn产生的谈论的语音的单个的特征频率。并将滤波参数提供到音频处理器AP2至APn。
图27示出了在作为调整处理的第二个例子中的,根据由组信息产生的参数,执行调整声音的频率特征的处理的情况中,音频处理器AP的示例结构。
在图27中,从信息发送/接收部分TRB1通过端子21提供的并具有图28所示的频率特征的音频数据被输入到端子32,并且从音频处理参数计算部分20提供的具有图29所示的频率特征的滤波参数K(t)被提供到端子31。图29所示的Fmax表示输入声音的最大频率,该最大频率具有固定值。通过端子32输入的音频数据以及通过端子31输入的滤波参数K(t)被输入到LPF(低通滤波器),该LPF是音频处理器AP的基本构成组件。
LPF对从端子32输入的具有图28所示的特征的音频数据执行具有从端子31输入的如图29所示的K(t)·Fmax的截止频率的低通滤波处理。因此,具有图30所示的特征的输出音频数据从LPF中提供。将输出音频数据从端子33通过相应的输出端子AO提供到监视器设备MD的扬声器。控制从扬声器输出的声音的频率特征使得该声音在与会者HM1所属的组中容易被听见。
在调整处理的第二个例子中,作为与会者HM1他/她自己参与相同的主题的与会者的语音被变得易于听见,而参与其余的主题的与会者的谈论的语音对作为与会者HM1他/她自己参与相同的主题的与会者的谈论的阻碍变得小一些。
现在将描述调整处理的第三个例子。作为调整处理的第三个例子,根据从组信息中产生的参数,可以实施调整特别地,对从其余的远程电信会议设备TCD2至TCDn发送到远程电信会议设备TCD1的图像数据和音频数据中的图像数据的处理。
图31示出了在根据从组信息产生的参数调整图像数据的情况中,在远程电信会议设备TCD1中的信息处理部分PB1的基本部分的简略结构。
在图31中,相应于由信息发送/接收部分TRB1分离的远程电信会议设备TCD2至TCDn的图像数据被提供到在远程电信会议设备TCD1中的信息处理部分PB1的端子24。并且来自信息发送/接收部分TRB1的组信息被提供到端子25。在图31的例子中,由于音频数据保持不变地通过信息处理部分并被提供到相应的监视器设备MD2至MDn。为简单起见将音频数据的路径省略。
将相应于远程电信会议设备TCD2至TCDn的图像数据提供到相应于监视器设备MD2至MDn提供的图像处理器VP2至VPn,组信息被提供到图像处理参数计算部分23。
图像处理参数计算部分23根据组信息识别远程电信会议设备TCD1的与会者HM1所属的组,即,与会者HM1正在参与的主题。接着,图像处理参数计算部分23产生一个参数,用于仅提升相应于与会者HM1所属的组的图像的亮度和色彩电平,并用于降低其余与会者的图像的亮度和色彩电平。具体地,图像处理参数计算部分23找到图像质量调整值计算,作为放大在与会者HM1所属的组中的与会者HM的图像的亮度和色彩电平以及抑制由其余的与会者HM的图像的亮度和色彩电平的参数。相应于监视器设备MD2至MDn从图像处理参数计算部分23输出的图像质量调整值被提供到相应于监视器设备MD2至MDn提供的图像处理器VP2至VPn。
因此,图像处理器VP2至VPn根据图像质量调整值分别执行调整处理以便放大或抑制提供于此的图像数据的亮度和色彩电平。调整处理后的图像数据由图像处理器VP2至VPn执行调整处理,并由相应的输出端子VO2至VOn输出以及被提供到在图2所示的信号处理设备SPD1中的相应的输出端子TO2至TOn。
将从信号处理设备SPD1中的输出端子TO2至TOn输出的图像数据提供到相应于监视器设备MD2至MDn的显示器。因此,相应于与会者HM1所属的组,即参与该主题的组的监视器设备MD的显示器上显示的图像变得较亮并且容易看见,而相应于与会者HM1不属于的组,即不参与该主题的组的监视器设备MD的显示器上显示的图像被变暗。
在调整处理的第三个例子中,作为参与与会者HM1相同的主题的与会者的图像被变得易于看见,而参与其余的主题的与会者的图像被变得难于看见,于是,能够更清楚地看见作为参与与会者HM1相同的主题的与会者。
图32示出了在根据从组信息中产生的参数执行图像质量调整处理的情况中,图像处理器VP的示例结构。在图32的例子中,实施R(红)、G(绿)、B(兰)的原色数据的增益的调整作为图像处理。
在图32中,信息发送/接收部分TRB1通过端子24提供的原色数据R、G、B被输入到端子35、36、37,并且从图像处理参数计算部分23提供的图像质量调整值V(t)被输入到端子34。通过端子35、36、37输入的原色数据和通过端子34输入的图像质量调整值V(t)被输入到图像处理器VP。
图像处理器VP使用从端子34输入的图像质量调整值V(t)对从端子35、36、37输入的R、G、B原色数据执行图像处理。因此,作为使用图像质量调整值V(t)对R、G、B原色数据执行电平调整的结果的数据从图像处理器VP提供。图像处理后的R、G、B数据分别从相应的端子38、39、40输出,并通过输出端子VO2至VOn被提供到图2所示的信号处理设备SPD1中的相应的输出端子TO2至TOn。
现在将描述调整处理的第四个例子。作为调整处理的第四个例子,根据组信息中产生的参数,能够对其余的远程电信会议设备TCD2至TCDn发送到远程电信会议设备TCD1的图像数据和音频数据二者执行调整处理。具体地,在调整处理的第四个例子中,作为根据组信息的信息处理,音量、音频质量和图像质量的调整是组合执行的,而不是分开执行的。
图33示出了在根据从组信息中产生的参数执行图像数据和音频数据二者的调整的情况下,在远程电信会议设备TCD1中的信息处理部分PB1的基本部分的简略结构。
在图33中,相应于由信息发送/接收部分TRB1分离的远程电信会议设备TCD2至TCDn的图像数据和音频数据被提供到远程电信会议设备TCD1中信息处理部分PB1的端子28,并且来自信息发送/接收部分TRB1的组信息被提供到端子29。
相应于远程电信会议设备TCD2至TCDn的图像数据被提供到图像处理单元26,并且相应于远程电信会议设备TCD2至TCDn的音频数据被提供到音频处理单元27。组信息被提供到图像处理单元26和音频处理单元27。
图像处理单元26具有图31所示的图像处理器VP2至VPn。因此,与图31的情况类似,相应于远程电信会议设备TCD2至TCDn的图像数据被提供给图像处理器VP2至VPn。输入到图像处理单元26的组信息被提供到图31所示的图像处理参数计算部分23。
另一方面,音频处理单元27具有图26所示的音频处理器AP2至APn。因此,与图26的情况类似,相应于远程电信会议设备TCD2至TCDn的音频数据被提供给音频处理器AP2至APn。输入到音频处理单元27的组信息被提供到图26所示的音频处理参数计算部分20。
已经由图像处理单元26执行了与图31所示处理相似的图像质量调整处理的图像数据,以及已经执行了与图26的处理相似的音量或音频质量调整处理的音频数据通过相应的输出端子SO2至SOn分别被提供到图2所示的信号处理设备SPD1中的相应的输出端子TO2至TOn。
信号处理设备SPD1中的输出端子TO2至TOn输出的图像数据和音频数据被提供到相应的监视器设备MD2至MDn的显示器和扬声器。因此,相应于与会者HM1所属的组,即参与相同主题的组的监视器设备MD的显示器上显示的图像被变得易于看见,并且该组的语音被变得易于听见。另一方面,在相应于与会者HM1不属于的组,即没有参与该主题的组的监视器设备MD的显示器上显示的图像被变暗,并且该组的语音被变得妨碍小一些。
在调整处理的第四个例子中,作为与会者HM1参与相同主题的与会者的图像被变得易于看见并且他们的语音被变得易于听见,而参与其余主题的与会者的图像被变得难于看见,并且他们的语音被变得妨碍小一些。
作为对声音的信息处理,除了使用频率的低通滤波器将不属于相同组的与会者的语音变小或将该语音的最大频率变低以外,可以考虑将音量和频率二者都改变。而且,作为声音的信息处理,除了当属于相同组的与会者不在属于相同组时立即改变音量和最大频率以外,反之亦然,考虑以特定的时间常数逐渐改变音量和最大频率。
作为图像的信息处理,不仅考虑减小不属于相同组的与会者的图像的亮度,而且考虑使用消色差的颜色或点亮图像的颜色来着色不属于相同组的与会者的图像以处理色差和亮度二者,或者调整图像的分辨率或清晰度。而且作为图像的信息处理,除了当属于相同组的与会者不再属于相同组时立即改变图像的亮度和色彩外,反之亦然,考虑以特定的时间常数逐渐改变亮度和色彩。
而且,在如上所述以特定的时间常数逐渐改变声音和图像的情况下,考虑同步控制声音和图像的改变、将声音或图像的改变延迟一预定时间段,或对声音和图像使用不同的时间常数。
在本申请人提交的日本专利申请No.H10-287506中描述了根据注意度调整音量的技术。
现在将描述:图2的组决定信息产生部分JB1根据从在例如与会者HM1前面的监视器设备MDm的照相设备提供的图像数据,检测与会者HM1正在注意的方向,即监视器设备MD2至MDn中的一个或另一个方向的处理的具体例子。
作为由远程电信会议设备TCD1中的组决定信息产生部分JB1执行的,检测与会者HM1注意的方向的方向检测处理的第一个例子,可以实施对与会者HM1的眼睛的方向,即眼睛方向的检测。
图34示出了在组决定信息产生部分JB1中执行眼睛检测的情况下的处理的流程。
如图34所示,如步骤S41的处理,组决定信息产生部分JB1接收由位于例如与会者HM1的前面的监视器设备MDm上的照相设备拾取的图像数据,并接着如步骤S42的处理,使用所提供的图像的色彩信息检测与会者HM1的面孔图像中眼睛的轮廓。具体地,组决定信息产生部分JB1从所提供的图像的色彩信息中提取诸如皮肤、白以及虹膜的色彩区域,并找到所提取的色彩区域的边界,因此检测右眼的轮廓E和左眼的轮廓E如图35所示。在图35中,仅示出一只眼睛。
下面,如步骤S43的处理,组决定信息产生部分JB1根据在步骤S42中发现的眼睛的轮廓E找到右眼的左端点和右端点F1、F2的位置以及左眼的左端点和右端点F1、F2的位置,并参照左、右眼的左端点和右端点F1、F2,确定用于搜索在图36中所示的鼻孔的搜索范围NE,进而在搜索范围NE内检测鼻孔NH的位置。具体地,组决定信息产生部分JB1找到构成左、右眼的轮廓E的一组像素的块(mass)Q的中心以及最小化构成左、右眼的轮廓E的该组像素的次级力矩(moment)(与该线有关的惯量)的线M,如图35所示。而且,组决定信息产生部分JB1从构成眼睛的轮廓E的该组像素中找到在线M的方向上从块Q的中心起的具有最大距离L1、L2的位置上的像素,即在块Q的中心左边和右边的每边上的一个像素,并找到这些像素位置作为左、右端点F1、F2。接着,如图36所示,组决定信息产生部分JB1参照在上面找到的右眼的左、右端点F1、F2的位置和左眼的左、右端点F1、F2的位置决定搜索范围NE,搜索范围NE用于搜索在左、右端点F1、F2下面的鼻孔。在这种情况中,由于鼻孔NH的图像看起来比其余部分的图像暗,所以组决定信息产生部分JB1在搜索范围内检测具有较低的亮度的图像部分作为鼻孔NH的位置。
下面,如步骤S44的处理,组决定决定信息产生部分JB1根据右眼的左、右端点F1、F2的位置和左眼的左、右端点F1、F2的位置以及鼻孔NH的位置之间的几何位置关系估计眼球EB的中心位置EC以及眼球EB的半径r,如图37所示。
进一步,如步骤S45的处理,组决定信息产生部分JB1使用在右眼的轮廓E和左眼的轮廓E中的图像的亮度信息,检测瞳孔EA的中心位置EAC,如图36所示。
下面,如步骤S46的处理,组决定信息产生部分JB1计算连接在步骤S44上检测的眼球EB的中心位置EC和在步骤S45上检测的瞳孔EA的中心位置EAC的矢量EC,并执行方向决定以便决定矢量EV指向的监视器设备MD2至MDn中的一个作为眼睛的方向,如图38所示。
通过这个处理流程,组决定信息产生部分JB1检测与会者HM1的眼睛。
可以通过例如下面的算术运算计算最小化诸如轮廓E的一组具体像素的次级力矩的线M。
在这种情况中,使用由下列方程(1)表示的线M,如图39所示。
x sinθ-y cosθ+ρ=0    ...(1)
如果在轮廓E的像素的集中的每一点(xi,yi)和线M之间的距离用Ri表示,则与线M有关的次级力矩可以由下面的式(2)表示:
m = Σ i R i 2 = Σ i ( xi sin θ - yi cos θ + ρ ) 2 . . . ( 2 )
即,最小化次级力矩的线M是使式(2)中m最小化的线M。结果,为了最小化式(2)中的m,使用满足下面式(3)和(4)的条件的式2中的θ和ρ。
θ:SIN2θ=b/(b2+(a-c)2)
    COS2θ=(a-c)/(b2+(a-c)2)    ...(3)
ρ:ρ=-x0sinθ+y0cosθ     ...(4)
式(4)(x0sinθ-y0cosθ+ρ=0)表示它通过该像素集的块的中心。
在式(3)和(4)中,a、b、c由下列的式(5)、(6)和(7)表示。(x0,y0)是该像素集的块的中心。
a = Σ i ( xi - x 0 ) 2 . . . ( 5 )
b = 2 Σ i ( xi - x 0 ) ( yi - y 0 ) . . . ( 6 )
c = Σ i ( yi - y 0 ) 2 . . . ( 7 )
现在将描述由远程电信会议设备TCD1中的组决定信息产生部分JB1执行的、对与会者HM1注意的方向的方向检测处理的第二个例子。在方向检测处理的第二个例子中,可以使用如下所述的与会者HM1的面孔方向的检测。
图40示出了在组决定信息产生部分JB1中执行面孔方向检测的情况中的处理的流程。
如图40所示,如步骤S51的处理,向组决定信息产生部分JB1提供如图41和42所示的面孔的原始图像数据,该原始图像数据是来自位于与会者HM1的前面的监视器设备MDm上提供的照相设备的。并且接着如步骤S52的处理,使用提供于此的面孔图像的色彩信息检测皮肤区域和头发区域。即,组决定信息产生部分JB1从所提供的面孔的图像的色彩信息中提取,例如皮肤和头发的色彩区域。并根据所提取的色彩区域检测皮肤区域se和头发区域he,如图43和44所示。
下面,如步骤S53的处理,组决定信息产生部分JB1执行构架(framework)的设置,该构架用于检测皮肤区域se和头发区域he的和区域fe(=se+he)的块fq的中心以及皮肤区域se的块sq的中心,如图45和46所示。例如通过指定在图像的垂直方向上的范围来执行构架的设置。具体地,在范围的指定中,参考皮肤区域se和头发区域he的和区域fe的上端re,指定在参考上端re之下的部分const a至部分const a+const b的范围。
接着,如步骤S54的处理,组决定信息产生部分JB1在步骤S53设置的构架的范围内找到头发区域he和皮肤区域se的和区域fe的块fq的中心以及皮肤区域se的块sq的中心。对于这些块的中心,可以考虑在后阶段上的处理中使用水平分量和垂直分量二者或者使用水平分量和垂直分量之一。在该描述中,作为例子仅使用水平分量。
在步骤S54中找到头发区域he和皮肤区域se的和区域fe的块fq的中心之后,如步骤S55的处理,组决定信息产生部分JB1通过从皮肤区域se的块sq的中心值中减去头发区域he和皮肤区域se的和区域fe的块fq的中心值来找到一个差值。
下面,如步骤S56的处理,组决定信息产生部分JB1从在步骤S55找到的差值中检测面孔的方向。作为从该差值中检测面孔的方向的处理,可以使用下面两种方法之一。假设差值由X表示并且面孔方向的角度由Y表示。并且设定在与会者HM1面对监视器设备MDm的照相设备的方向的情况下,角度为0度。在用于步骤S56的处理的一个示例方法中,在面孔方向检测处理之前,事先获得与差值X和面孔方向Y有关的统计并且找到面孔方向角度Y的值与差值X的关系作为平均值,因此准备如图47所示的显示相应的关系的图。根据图47所示的相应关系,从在步骤S55找到的差值X中找到面孔方向角度Y。在用于步骤S56的处理的另一个示例方法中,根据下面的式(8)使用在步骤S55找到的差值X计算面孔方向角度Y。
Y=a*sin(X)    ...(8)
通过上述的处理的流程,组决定信息产生部分JB1检测与会者HM1的面孔的方向。
在本申请人提交的日本专利申请No.H11-253853中描述了面孔方向检测处理。
作为检测与会者HM1面对的方向的另一个示例方法,考虑使用通过将红外线投射在与会者HM1的面孔上并接着接收从与会者HM1的面孔上反射的红外线所产生的图像,来执行方向的检测。
现在将参考图48和49描述在图2所示的远程电信会议设备TCD1中的监视器设备MD2至MDn的每一个的示例结构。图48是监视器设备MD的侧面的简略透视图,以及图49是监视器设备的简略正视图。
如图48和49所示,每一监视器设备MD2至MDn具有机壳50、在机壳50的前面即在监视器设备MD的前面提供的扬声器53、具有面对预定方向,即在图48和49的例子中向上安置的屏幕54的显示器55、半镜(halfmirror)52,用于反射从显示器55的屏幕54发射的、由图48中的点划线指示的光BO并引导该光到达监视器设备MD的前面,以及用于发送从从监视器设备MD的前面入射的由图48中的点划线指示的光BI、以及安置在半镜52后面的由支撑部分58支撑的诸如摄像机的照相设备56,这是其主要的构成部件。在监视器设备MD的机壳的上表面上,提供有由支撑部分57支撑的麦克风51。可以考虑在监视器设备MD2至MDn中仅在位于与会者HM1的前面的监视器设备上提供麦克风51,即在图2的例子中的监视器设备MDm。
在每一监视器设备MD2至MDn中的照相设备56拾取在此的通过半镜52发送的诸如与会者HM1的光图的入射光,该入射光在图48中由点划线BI指示,并且将该入射光转换成图像数据。从照相设备56输出的图像数据被提供到信号处理设备SPD1中的信息发送/接收部分TRB1,并通过通信网络NT被发送到远程电信会议设备TCD2至TCDn。特别地,从在监视器设备MD2至MDn中的位于与会者HM1前面的监视器设备MDm的照相设备56输出的图像数据也被提供到信号处理设备SPD1中的组决定信息产生部分JB1,并且被用于在上述的产生组决定信息中的面孔方向的检测或眼睛的检测中。
在每一监视器设备MD2至MDn中的麦克风51将诸如远程电信会议设备TCD1的周围的声音以及与会者的语音转换成音频数据。从麦克风51输出的音频数据被提供到信号处理设备SPD1中的信息发送/接收部分TRB1,并通过通信网络NT被发送到远程电信会议设备TCD2至TCDn。
在监视器设备MD2至MDn中的监视器设备MD2的显示器55的屏幕54上,显示基于由相应于与会者HM1例如在远程电信会议设备TCD2中的提供的监视器设备MD1的照相设备56拾取的、并通过通信网络NT提供的图像数据的图像,即基于与会者HM2和周围场景的图像数据的图像。从远程电信会议设备TCD1中的监视器设备MD2的扬声器53,输出基于由相应于与会者HM1在远程电信会议设备TCD2中的提供的监视器设备MD1的麦克风51拾取的、通过通信网络NT提供的音频数据的声音,即基于与会者HM2产生的谈论的音频数据的声音。相似地,在监视器设备MD3的显示器53的屏幕上,显示基于由相应于与会者HM1在远程电信会议设备TCD3中的提供的监视器设备MD1的照相设备56拾取的、并被发送到那里的图像数据的数据。从扬声器53,输出基于由相应于与会者HM1在远程电信会议设备TCD3中的提供的监视器设备MD1的麦克风51拾取的、并被发送到那里的音频数据的声音。相似地,对于其余的监视器设备MD,分别显示和输出从相应的远程电信会议设备TCD发送的图像和声音。
每一监视器设备MD2至MDn被如此构成使得从显示器55的屏幕54发射的光被半镜52反射进入到图48的点划线BO指示的方向中,并前进到与会者HM1,如图48所示。因此,由于其是被半镜52反射的,所以显示在显示器55的屏幕54上的在另一边的与会者HM的面孔的图像是可以以原始的正确状态被虚拟地识别的镜向图像。图49中的RV代表由于在显示器55的屏幕54上显示的另一边上的与会者HM的镜向图像被半镜52反射而获得的图像,即在另一边的与会者HM的面孔的虚拟图像。
在将另一边的与会者HM的镜向图像的显示到监视器设备MD的显示器55的屏幕54上的过程中,通过半镜52可以将随镜向图像的眼睛的位置变化的虚拟图像的眼睛的位置和照相设备56的透镜的主点(principal point)变得充分地一致。因此使与会者HM1的眼睛与在另一边的与会者HM的眼睛相会。
具体地,例如,在远程电信会议设备TCD1中,与会者HM1正在向监视器设备MDm方向看,并正在观看与会者HMm的图像,并且在远程电信会议设备TCDm中,与会者HMm正在向监视器设备MD1的方向看,并正在观看与会者HM1的图像。在这种情况中,远程电信会议设备TCD1中的监视器设备MDm的显示器55的屏幕54上显示的是与会者HMm的面孔等的镜向图像。在监视器设备MDm的照相设备56中,正面向监视器设备MDm的与会者HM1的图像被提取,并且将它的图像数据发送到远程电信会议设备TCDm等。而且,在这种情况中,在远程电信会议设备TCDm中的监视器设备MD1的显示器55的屏幕54上显示的是与会者HM1的面孔等的镜向图像。在监视器设备MD1的照相设备56中,正面向监视器设备MD1的与会者HMm的图像被提取,并且将它的图像数据发送到远程电信会议设备TCD1等。
在如上所述的状态中,在远程电信会议设备TCD1端,当在监视器设备MDm的显示器55的显示屏幕54上显示在另一边的与会者HMm的镜向图像时,随镜向图像的眼睛的位置变化的虚拟图像的眼睛的位置和照相设备56的透镜的主点变得充分地一致,而在远程电信会议设备TCDm端,当在监视器设备MD1的显示器55的显示屏幕54上显示在另一边的与会者HM1的镜向图像时,随镜向图像的眼睛的位置变化的虚拟图像的眼睛的位置和照相设备56的透镜的主点变得充分地一致。因此,在远程电信会议设备TCD1中,与会者HM1的眼睛和在另一边的与会者HMm的虚拟图像的眼睛相会,在远程电信会议设备TCDm中,与会者HMm的眼睛和在另一边的与会者HM1的虚拟图像的眼睛相会。
在典型的传统电信会议***中,与会者直接看到在显示器的屏幕上显示的图像,即真实的图像,而不是在本实施例中由半镜形成的虚拟图像。例如在接近显示器屏幕的较上、较下、左和右边的一个位置上安置照相设备。因此,在典型的传统电信会议***中,与会者的眼睛被定向到在显示器的屏幕上显示的图像(真实图像)上,并转移对照相设备的透镜的定向。从而,在显示器的屏幕上显示的在另一边的与会者的眼睛不会被定向到在一个边上的与会者的情况,并且不能象在本实施例中那样,两边的与会者的眼睛相会时的会话。
另一方面,在本实施例的远程电信会议***中,由于在每一远程电信会议设备TCD中的监视器设备MD是按照图48和49所示构成,对于在一个边的与会者以及在另一边的与会者来说,在彼此看见对方的眼睛时,即如上所述的他们的眼睛相会时,能够进行会话。
同时,在该远程电信会议***中,在这样安置远程电信会议设备TCD中的多个监视器设备MD,即看起来好象远程电信会议设备TCD2至TCDn的与会者HM2至HMn与与会者HM1一起围坐在一张桌子边的情况中,即在安置监视器设备MD使得在远程电信会议设备TCD2至TCDn的地点上的与会者HM2至HMn的相对位置被保留的情况中,不仅能够实现如上所述的眼睛的相会,而且还可以确认其余的与会者HM正在面对的人是谁。
图50示出了在远程电信会议***中,实现在每一远程电信会议设备TCD的信号处理设备SPD和服务器SV的实际设备的示例结构。这些设备可以由例如个人计算机来实现。
图50所示的结构包括:CPU 60,用于控制每一部分;ROM 61,在其中存储有例如BIOS(基本输入输出***)和各种初始化值;RAM 62,用于暂时存储各种程序和数据以及算术运算的中间数据;硬盘驱动器(HDD)64,用于存储OS(操作***)、各种应用程序(计算机程序)和其他的数据;可移动介质驱动器65,在其中装载有诸如CD-ROM、CD-R、CD-RW、DVD-ROM、DVD-RAM、DVD-R、DVD-RW以及可移动硬盘或半导体存储器之类的各种类型的可移动介质66;以及通信接口(I/F)部分63,用于连接到IEEE1394标准或USB的外部总线以及各种类型的外部连接终端。尽管未示出,在图50的结构中,可以提供诸如由用户操作的鼠标和键盘的输入操作设备,以及用于显示信息的监视器。
在HDD 64中的硬盘上或在ROM 61中事先存储、或者由可移动介质66或通过通信接口部分63的通信提供了这些实现远程电信会议***中的信号处理设备SPD的功能的应用程序,特别是在组决定信息产生部分JB中方向检测功能和产生组决定信息的功能、在信息处理部分PB中的信息处理功能、以及在服务器SV中的组决定处理功能和产生组信息的功能。
由可移动介质66和通信接口部分63提供的应用程序被存储在HDD 64的硬盘上,接着被从在HDD 64的硬盘上读出并被暂时存储在RAM 62中。因此,CPU 60根据暂时存储在RAM 62中的应用程序执行如上所述的远程电信会议***中的各种操作。
在图51中示出了远程电信会议设备TCD1的另一个示例结构。
在图51中的示例结构中,作为显示其余的远程电信会议设备TCD2至TCDn的与会者HM2至HMn的图像的显示装置,提供了一个单独弯曲的屏幕71,而不是提供相应于其余的与会者HM2至HMn的监视器设备MD2至MDn,并且这些图像由例如投影机显示在屏幕71上。
即,在图51的结构中,其余的与会者HM2至HMn的图像被显示在屏幕71上,就好象其余的与会者HM2至HMn和与会者HM1一起围坐在一张单独的桌子边举行会议一样。
例如在与会者HM1的前面安置有照相设备74和麦克风75。照相设备74拾取的与会者HM1的图像数据以及麦克风75收集的与会者HM1的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。在图51的结构中,由照相设备74拾取的与会者HM1的图像数据也被提供到信号处理设备SPD1中的组决定信息产生部分JB1。
另一方面,对于从其余的远程电信会议设备TCD2至TCDn发送的与会者HM2至HMn的音频数据,在控制音频数据的各个声音映射(image)以使之变得正常接近与会者HM2至HMn的映射之后,将音频数据提供到安置在屏幕71的左和右侧的扬声器72、73,并从这里输出。因此,在屏幕71上显示的与会者HM2至HMn的图像的位置以及与会者HM2至HMn产生的评论(语音)的位置彼此充分地一致。
图52中示出了远程电信会议设备TCD1的另一个示例结构。
特别地,图52示出了远程电信会议设备TCD1的示例结构,其中与图51所示的结构相似提供一个单独的弯曲的屏幕81,并且其中能够有两个与会者HM1a、HM1b出席会议。
在图52的结构中,在屏幕81上显示其余的与会者HM2至HMn的图像,就好象其余的与会者HM2至HMn和两个出席的与会者HM1a、HM1b一起围坐在一张桌子边举行会议一样。
在与会者HM1a的前面安置有例如照相设备84和麦克风86。照相设备84拾取的与会者HM1a的图像数据以及麦克风86收集的与会者HM1a的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。在与会者HM1b的前面安置有例如照相设备85和麦克风87。照相设备85拾取的与会者HM1b的图像数据以及麦克风87收集的与会者HM1b的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。
而且在图52的结构中,由照相设备84拾取的与会者HM1a的图像数据和由照相设备85拾取的与会者HM1b的图像数据也被提供到信号处理设备SPD1中的组决定信息产生部分JB1。在图52的结构中,组决定信息产生部分JB1分别检测与会者HM1a、HM1b注意的方向,并接着从与会者HM1a、HM1b分别注意的方向的检测结果的平均值中产生上述的组决定信息。因此,在这种情况中,服务器SV从方向检测的结果的平均值中产生的组决定信息中产生上述的组信息。此外,除了使用与会者HM1a、HM1b分别注意的方向的检测结果的平均值外,能够从与会者HM1a、HM1b分别注意的方向的检测结果中产生单个的组决定信息,并将组决定信息发送到服务器SV,以及在服务器SV上从单个的组决定信息产生单个组信息。在这种情况中,信息处理部分PB分别从组信息中计算与会者HM1a、HM1b的音量、音频质量和图像质量的参数,并且当调整图像和声音时,使用和与会者HM2至HMn有关的与会者HM1a、HM1b的参数的平均值。
另一方面,对于从其余的远程电信会议设备TCD2至TCDn发送的与会者HM2至HMn的音频数据,在控制单个声音映射以使之变得正常接近在屏幕81上显示的与会者HM2至HMn的映射之后,将音频数据提供到安置在屏幕81的左和右端的扬声器82、83,并从这里输出。因此,在屏幕81上显示的与会者HM2至HMn的图像的位置以及与会者HM2至HMn产生的评论(语音)的位置彼此充分地一致。
图53中还示出了远程电信会议设备TCD1的另一个示例结构。
具体地,图53示出的示例结构,与图52所示的结构相似提供一个单独的弯曲的屏幕81,并且其中能够有两个与会者HM1a、HM1b出席会议,同时代替在图52的结构提供的扬声器82、83而提供给与会者HM1a、HM1b的是单个双耳式耳机92、93。
在图53的结构中,在屏幕91上显示其余的与会者HM2至HMn的图像,就好象其余的与会者HM2至HMn和两个出席的与会者HM1a、HM1b一起围坐在一张桌子边举行会议一样。
在与会者HM1a的前面安置有例如照相设备94和麦克风96。照相设备94拾取的与会者HM1a的图像数据以及麦克风96收集的与会者HM1a的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。
在与会者HM1b的前面安置有例如照相设备95和麦克风97。照相设备95拾取的与会者HM1b的图像数据以及麦克风97收集的与会者HM1b的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。
另一方面,对于从其余的远程电信会议设备TCD2至TCDn发送的与会者HM2至HMn的音频数据,在控制单个声音映射以使之变得正常接近在屏幕91上显示的与会者HM2至HMn的映射之后,将音频数据提供到分别戴在与会者HM1a、HM1b头上的单个双耳式耳机92、93,并从这里输出。因此,在屏幕91上显示的与会者HM2至HMn的图像的位置以及与会者HM2至HMn产生的评论(语音)的位置彼此充分地一致。
而且在图53的结构中,由照相设备94拾取的与会者HM1a的图像数据和由照相设备95拾取的与会者HM1b的图像数据也被提供到信号处理设备SPD1中的组决定信息产生部分JB1。在图53的结构中,和图52的例子相似,组决定信息产生部分JB1分别检测与会者HM1a、HM1b注意的方向,并接着从与会者HM1a、HM1b分别注意的方向的检测结果的平均值中产生上述的组决定信息。因此,服务器SV从方向检测的结果的平均值中产生的组决定信息中产生上述的组信息。同样在图53的例子中,也能够从与会者HM1a、HM1b分别注意的方向的检测结果中产生单个的组决定信息,并接着将组决定信息发送到服务器SV,以及在服务器SV上从单个的组决定信息产生单个组信息,而不是使用与会者HM1a、HM1b分别注意的方向的检测结果的平均值。在这种情况中,信息处理部分PB分别从组信息中计算与会者HM1a、HM1b的音量、音频质量和图像质量的参数。当调整图像时,信息处理部分PB使用与会者HM1a、HM1b的参数的平均值准备由与会者HM1a、HM1b所共享的图像。当调整声音时,信息处理部分PB通过使用单个参数准备分离的声音,并将准备的声音分别提供到与会者HM1a、HM1b的双耳式耳机。根据单个参数,还能够准备与会者HM1a、HM1b的分离的图像,并接着通过使用特殊的屏幕呈现分离的图像。
图54中还示出了远程电信会议设备TCD1的另一个示例结构。
在图54的结构中,对其余的远程电信会议设备TCD2至TCDn的与会者HM2至HMn的图像数据是不进行通信的,并且仅对音频数据进行通信。在图54的结构中,安置了用于输出其余的与会者HM2至HMn的单个语音的扬声器SK2至SKn,就好象其余的与会者HM2至HM1和与会者HM1围坐在一张单独的桌子边举行会议一样。但是在接近用于输出与会者HM2至HMn的音频数据的扬声器SK2至SKn的地方安置了相片PT2至PTn或表示与会者HM2至HMn的插图。
例如在与会者HM1的前面安置有照相设备101和麦克风102。麦克风102收集的与会者HM1的音频数据通过通信网络NT被发送到其余的电信会议设备TCD2至TCDn。在图54的结构中,由照相设备101拾取的与会者HM1的图像数据被提供到信号处理设备SPD1中的组决定信息产生部分JB1。
另一方面,分别从远程电信会议设备TCD2至TCDn发送的与会者HM2至HMn的音频数据从相应的扬声器SK2至SKn被输出。
如上所述,在作为本发明第一实施例的远程电信会议***中,检测与会者HM的注意度,并且根据检测的结果,远程电信会议设备TCD中的组决定信息产生部分JB产生用于决定每一与会者HM正在参与的组的主题的组决定信息。接着服务器SV执行根据组决定信息的分组,并且产生指示着每一与会者HM所属的组的组信息。接着,在远程电信会议***中,根据组信息,远程电信会议设备TCD中的信息处理部分PB对相应于其余的远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。因此,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
现在将描述作为本发明的第二实施例的远程电信会议***。
该远程电信会议***具有和作为第一实施例描述的远程电信会议***的结构相似的基本结构。但是,在具有图55中所示的基本结构的远程电信会议***中,提供用做上述的分组设备的服务器SV以实现在每一远程电信会议设备TCD中的分组设备的功能。因此,等价于第一实施例的远程电信会议***的那些构成部件用相同的标号表示,并不在进一步详细描述。
在该远程电信会议***中,如图55所示,对在多个地点(1至n)上出现的相应的与会者HM1至HMn分配远程电信会议设备TCD1至TCDn,远程电信会议设备TCD1至TCDn通过由例如ISDN组成的通信网络NT彼此相连。
每一远程电信会议设备TCD可以在那里提取相应于到那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余与会者HM的图像数据和音频数据。
在远程电信会议***中的每一远程电信会议设备TCD具有如图56所示的结构。由于远程电信会议设备TCD1至TCDn具有相同的结构,所以图56示出了远程电信会议设备TCD1的示例结构的细节作为多个远程电信会议设备TCD1至TCDn的代表设备。下文,将描述远程电信会议设备TCD1。
如上所述,远程电信会议设备TCD1至少具有信号处理设备SPD1和监视器设备MD2至MDn。
在远程电信会议设备TCD1中的信号处理设备SPD1具有如上所述的网络连接端子TN1、信息发送/接收部分TRB1、信息处理部分PB1、组决定信息产生部分JB1、输出端子TO2至TOn、输入端子TI2至TIn以及输入端子TS。该信号处理设备SPD1还具有等价于在上述服务器SV中的组决定部分GJD的组决定部分GJD1。
每一监视器设备MD2至MDn具有图48和49所示的相似的结构。在监视器设备MD2至MDn的至少一个监视器设备上提供的照相设备拾取的图像数据以及在至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD1和通信网络NT被发送到远程电信会议设备TCD2至TCDn,如上所述。
在监视器设备MD2至MDn的显示器上,显示基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像,如上所述。相似地,从麦克风输出基于从相应的远程电信会议设备发送TCD2至TCDn的音频数据的声音。
如上所述,远程电信会议设备TCD1的信号处理设备SPD1的组决定信息产生部分JB1产生组决定信息。
组决定信息产生部分JB1例如根据从安置在与会者HM1前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测与会者HM1的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB1执行上述的方向检测处理。
由组决定信息产生部分JB1产生的组决定信息被提供到信号处理设备SPD1的信息发送/接收部分TRB1,并通过通信网络NT被发送到远程电信会议设备TCD2至TCDn。组决定信息产生部分JB1产生的组决定信息还被提供到代替上述的服务器SV的组决定部分GJD1。
远程电信会议设备TCD1中的信号处理设备SPD1的组决定部分GJD1和上述的服务器SV中的组决定部分GJD相似。但是,根据从组决定信息产生部分JB1提供的组决定信息以及从远程电信会议设备TCD2至TCDn发送的组决定信息,组决定部分GJD1执行组决定,并根据组决定的结果产生指示着与会者HM1所属的组信息,而不是根据来自远程电信会议设备TCD1至TCDn的单个组决定信息收集产生与会者的组信息。特别地,远程电信会议设备TCD1从组决定信息产生部分JB1接收涉及远程电信会议自身的与会者的组决定信息,即在这种情况中的与会者HM1,并且还从信息发送/接收部分TRB1接收涉及其余的与会者HM2至HMn的组决定信息,其中信息发送/接收部分TRB1通过通信网络NT接收从远程电信会议设备TCD2至TCDn发送的信号。
组决定部分GJD1保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时间的初始化处理,作为接收来自组决定信息产生部分JB1和远程电信会议设备TCD2至TCDn的组决定信息的预处理。在接收来自组决定信息产生部分JB1和远程电信会议设备TCD2至TCDn的组决定信息时,组决定部分GJD1执行产生图9所示的组决定信息时的处理。组决定部分GJD1将所产生的组信息提供到信号处理设备SPD1的信息处理部分PB1。
远程电信会议设备TCD1中的信号处理设备SPD1的信息处理部分PB1计算参数,该参数用于根据从组决定部分GJD1提供的组信息,对相应于远程电信会议设备TCD2至TCDn的图像数据和/或音频数据执行信息处理,如上所述。而且,信息处理部分PB1根据上述计算获得的参数对相应于远程电信会议设备TCD2至TCDn所分离的图像数据和/或音频数据执行所需的调整,并将调整处理后的图像数据和音频数据提供到相应于远程电信会议设备TCD2至TCDn提供的监视器设备MD2至MDn。
在这样的远程电信会议***中,远程电信会议设备TCD中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果产生用于决定每一与会者HM参与的组的主题的组决定信息,以及远程电信会议设备TCD的组决定部分GJD根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息,接着,在远程电信会议***中,远程电信会议设备TCD中的信息处理部分PB根据组信息对相应于其余的远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第二实施例中的远程电信会议***中,由于分组设备的功能可以在每一远程电信会议设备TCD中实现,并且每一远程电信会议设备TCD产生的组信息由所有的远程电信会议设备TCD共享,所以不需要提供作为分组设备功能的服务器SV。因此,该远程电信会议***不需要具有作为后备(backyard)的服务器,故使得可能举行具有简单结构的远程电信会议。当然,在该远程电信会议***中,在参与相同的主题的与会者产生的谈论可以被特别地变得易于听见,并且这些与会者的图像可以被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
现在将描述作为本发明的第三实施例的远程电信会议***。
该远程电信会议***具有和图55所示的第二实施例的远程电信会议***的结构相似的基本结构,其中没有提供如上所述的分组设备的功能的服务器SV。该分组设备的功能由一个远程电信会议设备TCD来实现,并且该分组设备的功能不在其余的远程电信会议设备TCD中提供。因此,等价于在作为第二实施例描述的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在该远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
在下面的描述中,假设远程电信会议设备TCD1具有分组设备的功能。
远程电信会议设备TCD1具有至少一个信号处理设备SPD1和监视器设备MD2至MDn,如图57所示。
远程电信会议设备TCD1中的信号处理设备SPD1具有如上所述的网络连接端子TN1、信息发送/接收部分TRB1、信息处理部分PB1、组决定信息产生部分JB1、组决定部分GJD1、输出端子TO2至TOn、输入端子TI2至TIn以及输入端子TS。
每一监视器设备MD2至MDn具有与图48和49所示的相似的结构。由在监视器设备MD2至MDn的至少一个监视器设备MD上提供的照相设备拾取的图像数据和由至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD1和通信网络NT被发送到远程电信会议设备TCD2至TCDn,如上所述。
在监视器设备MD2至MDn的显示器上,显示基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像,如上所述。相似地,从扬声器输出基于从相应于远程电信会议设备TCD2至TCDn发送的音频数据的声音。
如上所述,远程电信会议设备TCD1中的信号处理设备SPD1的组决定信息产生部分JB1产生组决定信息。
组决定信息产生部分JB1例如根据从安置在与会者HM1前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测与会者HM1的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB1执行上述的方向检测处理。
由组决定信息产生部分JB1产生的组决定信息被提供到组决定部分GJD1,即组决定信息产生部分JB1将所产生的组决定信息仅提供到组决定部分GJD1,与在第二实施例的远程电信会议***中的组决定信息产生部分JB1不同。
远程电信会议设备TCD1中的信号处理设备SPD1的组决定部分GJD1根据从组决定信息产生部分JB1提供的组决定信息以及从远程电信会议设备TCD2至TCDn发送的组决定信息,执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。具体地,远程电信会议设备TCD1从组决定信息产生部分JB1接收涉及远程电信会议自身的与会者的组决定信息,即在这种情况中的与会者HM1,并且还从信息发送/接收部分TRB1接收涉及其余的与会者HM2至HMn的组决定信息,其中信息发送/接收部分TRB1通过通信网络NT接收从远程电信会议设备TCD2至TCDn发送的信号。
组决定部分GJD1保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自组决定信息产生部分JB1和远程电信会议设备TCD2至TCDn的组决定信息的预处理。在收到来自组决定信息产生部分JB1和远程电信会议设备TCD2至TCDn的组决定信息时,组决定部分GJD1执行产生图9所示的组决定信息时的处理。组决定部分GJD1产生的组信息被提供到信号处理设备SPD1的信息处理部分PB1,并且通过通信网络NT还被从信息发送/接收部分TRB1发送到远程电信会议设备TCD2至TCDn。即,不象在第二实施例的远程电信会议***中的组决定部分GJD1,而是组决定部分GJD1将所产生的组信息不仅发送到信息处理部分PB1而且还发送到远程电信会议设备TCD2至TCDn。
远程电信会议设备TCD1中的信号处理设备SPD1的信息处理部分PB1计算参数,该参数用于根据从组决定部分GJD1提供的组信息,对相应于远程电信会议设备TCD2至TCDn的图像数据和/或音频数据执行信息处理,如上所述。而且,信息处理部分PB1根据上述计算获得的参数对相应于远程电信会议设备TCD2至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并将调整处理后的图像数据和音频数据提供到相应于远程电信会议设备TCD2至TCDn提供的监视器设备MD2至MDn。
另一方面,在远程电信会议***中的每一远程电信会议设备TCD2至TCDn具有图58所示的结构。由于远程电信会议设备TCD2至TCDn具有相同的结构,图58示出了作为多个远程电信会议设备TCD2至TCDn的代表设备的远程电信会议设备TCD2的示例结构的细节。下面将描述远程电信会议设备TCD2。
与远程电信会议设备TCD1相似,远程电信会议设备TCD2具有至少一个信号处理设备SPD2和监视器设备MD1、MD3至MDn。
远程电信会议设备TCD2中的信号处理设备SPD2具有网络连接端子TN2、信息发送/接收部分TRB2、信息处理部分PB2、组决定信息产生部分JB2、输出端子TO1、TO3至TOn、输入端子TI1、TI3至TIn以及输入端子TS。
每一监视器设备MD1、MD3至MDn具有与图48和49所示的相似的结构。由在监视器设备MD1、MD3至MDn中的至少一个监视器设备MD上提供的照相设备拾取的图像数据和由至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD2和通信网络NT被发送到远程电信会议设备TCD1、TCD3至TCDn,如上所述。
在监视器设备MD1、MD3至MDn的显示器上,显示基于从相应的远程电信会议设备TCD1、TCD3至TCDn发送的图像数据的图像,如上所述。相似地,从扬声器输出基于从相应远程电信会议设备TCD1、TCD3至TCDn发送的音频数据的声音。
如上所述,远程电信会议设备TCD2中的信号处理设备SPD2的组决定信息产生部分JB2产生组决定信息。
组决定信息产生部分JB2例如根据从安置在与会者HM2前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测与会者HM2的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB2执行上述的方向检测处理。
由组决定信息产生部分JB2产生的组决定信息被提供到信号处理设备SPD2的信息发送/接收部分TRB2。
远程电信会议设备TCD2中的信号处理设备SPD2的信息处理部分PB2计算参数,该参数用于根据从远程电信会议设备TCD1发送和信息发送/接收部分TRB2接收的组信息,对相应于远程电信会议设备TCD1、TCD3至TCDn的图像数据和/或音频数据执行信息处理,如上所述。而且,信息处理部分PB2根据上述计算获得的参数对相应于远程电信会议设备TCD1、TCD3至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并将调整处理后的图像数据和音频数据提供到相应于远程电信会议设备TCD1、TCD3至TCDn提供的监视器设备MD1、MD3至MDn。
在这种远程电信会议***中,远程电信会议设备TCD中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果产生用于决定每一与会者HM参与的组主题的组决定信息。并且远程电信会议设备TCD1中的组决定部分GJD1根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息。接着在远程电信会议***中,根据组信息,所有的远程电信会议设备TCD中的信息处理部分PB对相应于其余的远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第三实施例的远程电信会议***中,由于在一个远程电信会议设备TCD中能够实现分组设备的功能,并且所有的远程电信会议设备共享该远程电信会议设备TCD产生的组信息,所以不需提供作为分组设备功能的服务器SV。因此,该远程电信会议***不需要具有作为后备的服务器,故使得可能举行具有简单结构的远程电信会议。特别地,由于提供作为分组设备功能的仅一个远程电信会议设备TCD已经足够,所以远程电信会议***能够以低成本构成。当然,在该远程电信会议***中,在参与相同的主题的与会者产生的谈论可以被特别地变得易于听见,并且这些与会者的图像可以被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD能够通过例如图50所示的个人计算机实现。每一远程电信会议设备TCD也可以如图51至54所示构成。
下面将描述作为本发明的第四实施例的远程电信会议***。
该远程电信会议***具有和图2所示的第一实施例的远程电信会议***的结构相似的基本结构,但是,分组设备和具有上述信息处理部分的处理设备的功能在一个服务器SV中实现,并且分组设备和处理设备的功能不在远程电信会议设备TCD中提供。因此,等价于在第一实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图59所示的结构,由于远程电信会议设备TCD1至TCDn具有相同的结构,图59示出了作为多个远程电信会议设备TCD1至TCDn的代表设备的远程电信会议设备TCD1的示例结构的细节。此后,将描述远程电信会议设备TCD1。
远程电信会议设备TCD1具有至少一个信号处理设备SPD1和监视器设备MD2至MDn,如上所述。
远程电信会议设备TCD1中的信号处理设备SPD1具有如上所述的网络连接端子TN1、信息发送/接收部分TRB1、组决定信息产生部分JB1、输出端子TO2至TOn、输入端子TI2至TIn以及输入端子TS。即远程电信会议设备TCD1中的信号处理设备SPD1不具有上述的信息处理部分PB1和组决定部分GJD1。
每一监视器设备MD2至MDn具有与图48和49所示的相似的结构。由在监视器设备MD2至MDn的至少一个监视器设备MD上提供的照相设备拾取的图像数据和由至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD1和通信网络NT被发送到远程电信会议设备TCD2至TCDn,如上所述。
在监视器设备MD2至MDn的显示器上,显示基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像,如上所述。相似地,从扬声器输出基于从相应于远程电信会议设备TCD2至TCDn发送的音频数据的声音。
如上所述,远程电信会议设备TCD1中的信号处理设备SPD1的组决定信息产生部分JB1产生组决定信息。
组决定信息产生部分JB1例如根据从安置在与会者HM1前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测与会者HM1的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB1执行上述的方向检测处理。
由组决定信息产生部分JB1产生的组决定信息被提供到信号处理设备SPD1的信息发送/接收部分TRB1,并通过网络连接端子TN1被从通信网络NT发送到服务器SV。
服务器SV如图60所示建立,并用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组的分组设备,并且接着产生指示着每一与会者HM所属的组的组信息。服务器SV还用作根据所产生的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图60中,服务器SV具有上面描述的网络连接端子11以及上面描述的信息发送/接收部分10,服务器SV还具有组决定部分GJD和信息处理部分PB。
信息发送/接收部分10通过通信网络NT接收从远程电信会议设备TCD1至TCDn发送的每一组决定信息,并将组决定信息提供给组决定部分GJD。在收到通过通信网络NT发送到那的信号时,信息发送/接收部分10从接收的信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将分离的各自的图像数据和音频数据提供到信息处理部分PB。而且,信息发送/接收部分10将由信息处理部分PB调整的图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
组决定部分GJD根据如上所述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自远程电信会议设备TCD2至TCDn的组决定信息的预处理。在收到来自远程电信会议设备TCD2至TCDn的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息处理部分PB。
根据从组决定部分GJD提供的组信息,如上所述,信息处理部分PB计算用于对相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据的执行信息处理的参数。而且,根据上述计算获得的参数,信息处理部分PB对相应于远程电信会议设备TCD1至TCDn分离的图像数据和音频数据执行所需的调整处理,并且通过信息发送/接收部分10、网络连接端子11和通信网络NT将调整处理后的图像数据和音频数据提供给相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,远程电信会议设备TCD中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生仅用于决定每一与会者HM正在参与的组的主题的组决定信息。在该远程电信会议***中,接着服务器SV中的组决定部分GJD根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息。接着,根据组信息,服务器SV中的信息处理部分PB对相应于各自远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第四实施例的远程电信会议***中,分组设备和处理设备的功能能够在一个服务器SV中实现。因此能够减轻加在远程电信会议***中的各个远程电信会议设备TCD上的处理,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第五实施例的远程电信会议***。
该远程电信会议***具有和第四实施例描述的远程电信会议***的结构相似的基本结构,其中,分组设备和处理设备的功能不在远程电信会议设备TCD中提供,但是分组设备和处理设备的功能分别在两个服务器SV1、SV2中实现,如图61所示。因此,等价于在第四实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图59所示的结构,即每一远程电信会议设备TCD具有信号处理设备SPD中的组决定信息产生部分JB,由此产生如上所述的组决定信息。由组决定信息产生部分JB产生的组决定信息通过通信网络NT被发送到服务器SV1。
服务器SV1如图62所示构成并用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组的分组设备,并接着产生指示着指示着每一与会者HM所属的组的组信息。
在图62中,服务器SV1具有上述的网络连接端子11和上述的信息发送/接收部分101。服务器SV1还具有组决定部分GJD。
信息发送/接收部分101通过通信网络NT接收从远程电信会议设备TCD1至TCDn发送的每一组决定信息,并将组决定信息提供给组决定部分GJD。信息发送/接收部分101还将由组决定部分GJD产生的组信息通过网络连接端子111和通信网络NT发送到服务器SV2。
组决定部分GJD根据如上所述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自远程电信会议设备TCD1至TCDn的组决定信息的预处理。在收到来自远程电信会议设备TCD1至TCDn的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息发送/接收部分101
另一方面,服务器SV2如图63所示构成,并用作根据从服务器SV1发送的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图63中,服务器SV2具有上述的网络连接端子112和上述的信息发送/接收部分102。服务器SV2还具有信息处理部分PB。
信息发送/接收部分102通过通信网络NT接收从服务器SV1发送的组信息,并将组信息提供给信息处理部分PB。在收到从远程电信会议设备TCD1至TCDn发送的信号过程时,信息发送/接收部分102从所接收的信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将分离的各个图像数据和音频数据提供到信息处理部分PB。而且,信息发送/接收部分102将信息处理部分PB调整的各个图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
信息处理部分PB计算参数,该参数用于根据从信息发送/接收部分102提供的组信息,对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理。而且,信息处理部分PB根据上述计算获得的参数对相应于远程电信会议设备TCD1至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并通过信息发送/接收部分102、网络连接端子112和通信网络NT将调整处理后的图像数据和音频数据发送到相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,所有远程电信会议设备TCD中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果产生仅用于决定每一与会者HM参与的组的主题的组决定信息。在该远程电信会议***中,服务器SV1中的组决定部分GJD根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息。而且,服务器SV2中的信息处理部分PB根据组信息对相应于各个远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第五实施例的远程电信会议***中,分组设备和处理设备的功能可以分别在两个服务器SV1、SV2中实现。因此能够减轻加在远程电信会议***中的各个远程电信会议设备TCD上的处理,则使结构得到简化。加在服务器SV1、SV2上的处理也能够减轻,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV1、SV2能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第六实施例的远程电信会议***。
该远程电信会议***具有和图2所示的第一实施例的远程电信会议***的结构相似的基本结构,其中提供上述的服务器SV。但是,具有上述组决定信息产生部分的注意度检测设备和分组设备的功能在一个服务器SV中实现,并且注意度检测设备和分组设备的功能不在远程电信会议设备TCD中提供。因此,等价于在第一实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在这样的远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
该远程电信会议***中的每一远程电信会议设备TCD具有如图64所示的结构。由于远程电信会议设备TCD1至TCDn具有相同的结构,图64示出了作为多个远程电信会议设备TCD1至TCDn的代表设备的远程电信会议设备TCD1的示例结构的细节。下面,将描述远程电信会议设备TCD1。
远程电信会议设备TCD1具有至少一个信号处理设备SPD1和监视器设备MD2至MDn,如上所述。
远程电信会议设备TCD1中的信号处理设备SPD1具有如上所述的网络连接端子TN1、信息发送/接收部分TRB1、信息处理部分PB1、输出端子TO2至TOn、输入端子TI2至TIn以及输入端子TS。即远程电信会议设备TCD1中的信号处理设备SPD1不具有上述的组决定信息产生部分JB1和组决定部分GJD1。
每一监视器设备MD2至MDn具有与图48和49所示的相似的结构。由在监视器设备MD2至MDn的至少一个监视器设备MD上提供的照相设备拾取的图像数据和由至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD1和通信网络NT被发送到远程电信会议设备TCD2至TCDn,如上所述。
在监视器设备MD2至MDn的显示器上,显示基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像,如上所述。相似地,从扬声器输出基于从相应于远程电信会议设备TCD2至TCDn发送的音频数据的声音。
远程电信会议设备TCD1中的信号处理设备SPD1的信息接收/发送部分TRB1接收从服务器SV发送的组信息,并将组信息提供到信息处理部分PB1。在收到通过通信网络NT发送的信号时,信息发送/接收部分TRB1从信号中分离相应于远程电信会议设备TCD2至TCDn的图像数据和音频数据,并将每一分离的图像数据和音频数据提供到信息处理部分PB1。而且,信息发送/接收部分TRB1将从位于与会者HM1前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息通过网络连接端子TN1和通信网络NT发送到服务器SV。
根据从服务器SV通过通信网络NT发送和由信息发送/接收部分TRB1接收的组信息,远程电信会议设备TCD1中的信号处理设备SPD1的信息处理部分PB计算用于对相应于远程电信会议设备TCD2至TCDn的图像数据和/或音频数据执行信息处理的参数。而且,根据上述计算获得的参数,信息处理部分PB1对相应于远程电信会议设备TCD2至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并且将调整处理后的图像数据和音频数据提供相应于远程电信会议设备TCD2至TCDn提供的监视器设备MD2至MDn。
同时,服务器SV如图65所示建立,并用作产生在会议过程中分组参与相同主题的与会者的组决定信息的注意度检测设备。服务器SV还用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组与会者,并且接着产生指示着每一与会者HM所属的组的组信息的分组设备。
在图65中,服务器SV具有上面描述的网络连接端子11以及上面描述的信息发送/接收部分10,服务器SV还具有组决定信息产生部分JB和组决定部分GJD。
信息发送/接收部分10接收从远程电信会议设备TCD1至TCDn通过通信网络NT发送的由位于与会者HM的前面的监视器设备MDm的照相设备提供的图像数据以及开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。信息发送/接收部分10还将由组决定部分GJD产生的组信息通过网络连接端子11和通信网络NT发送到远程电信会议设备TCD1至TCDn。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测每一与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
由组决定信息产生部分JB产生的组决定信息被提供到组决定部分GJD。
组决定部分GJD根据组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组的组信息,如上所述。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自组决定信息产生部分JB的组决定信息的预处理。在收到来自组决定信息产生部分JB的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息发送/接收部分10。
在这样的远程电信会议***中,服务器SV中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生用于决定每一与会者HM参与的组的主题的组决定信息,并且服务器SV中的组决定部分GJD根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息。接着,在该远程电信会议***中,根据组信息,所有的远程电信会议设备TCD中的信息处理部分PB对相应于其余的远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第六实施例的远程电信会议***中,注意度检测设备和分组设备的功能能够在一个服务器SV中实现。因此在该远程电信会议***中,能够减轻加在远程电信会议设备TCD上的处理,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第七实施例的远程电信会议***。
该远程电信会议***具有与第六实施例中描述的远程电信会议***的结构相似的基本结构,其中注意度检测设备和分组设备的功能不在远程电信会议设备TCD中提供。但是注意度检测设备和分组设备的功能分别在两个服务器SV1、SV2中提供。因此,等价于在第六实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在该远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图64所示的结构。即,每一远程电信会议设备TCD具有信号处理设备SPD中的信息处理部分PB,由此计算用于根据通过通信网络NT从服务器SV2发送的和由信息发送/接收部分TRB接收的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的参数,并接着根据这样计算的参数对相应于远程电信会议设备TCD1至TCDn分离的图像数据和/或音频数据执行所需的调整处理。每一远程电信会议设备TCD将从例如位于与会者HM的前面的监视器设备MD的照相设备提供的图像数据和来自上述开关的开关按压信息通过网络连接端子TN1和通信网络NT发送到服务器SV1。
服务器SV1如图66所示构成并用作在会议期间用于分组参与相同主题的与会者的组决定信息的注意度检测设备。
在图66中,服务器SV1具有上述的网络连接端子111和上述的信息发送/接收部分101。服务器SV1还具有组决定信息产生部分JB。
信息发送/接收部分101接收从远程电信会议设备TCD1至TCDn通过通信网络NT发送的从位于与会者HM的前面的监视器设备MDm的照相设备提供的图像数据以及开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。信息发送/接收部分101还将由组决定信息部分JB产生的组决定信息通过网络连接端子111和通信网络NT发送到服务器SV2。。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测每一与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
组决定信息产生部分JB将产生的组决定信息提供到信息发送/接收部分101
另一方面,服务器SV2如图67所示构成并用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组的分组设备,并接着产生指示着每一与会者HM所属的组的组信息。
在图67中,服务器SV2具有上述的网络连接端子112和上述的信息发送/接收部分102。服务器SV2还具有组决定部分GJD。
信息发送/接收部分102通过通信网络NT接收从服务器SV1发送的每一组决定信息,并将组决定信息提供给组决定部分GJD。信息发送/接收部分102通还将组决定部分GJD产生的组信息通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
组决定部分GJD根据上述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自服务器SV1的组决定信息的预处理。在收到来自服务器SV1的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息的时间的处理。组决定部分GJD将所产生的组信息通过信息发送/接收部分102、网络连接端子112和通信网络NT提供到远程电信会议设备TCD1至TCDn。
在这样的远程电信会议***中,服务器SV1中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生用于决定每一与会者HM参与的组的主题的组决定信息,并且服务器SV2中的组决定部分GJD根据组决定信息执行分组,并且产生指示着每一与会者HM所属的组的组信息。而且,根据组信息,所有的远程电信会议设备TCD中的信息处理部分PB对相应于各个远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第七实施例的远程电信会议***中,注意度检测设备和分组设备的功能能够分别在两个服务器SV1、SV2中实现。因此能够减轻加在该远程电信会议***中的远程电信会议设备TCD上的处理,则使结构得到简化。还能够减轻加在服务器SV1、SV2上的处理,使得结构得以简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV1、SV2能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第八实施例的远程电信会议***。
该远程电信会议***具有和图2所示的第一实施例描述的远程电信会议***的结构相似的基本结构,其中提供上述的服务器SV。但是,注意度检测设备、分组设备和处理设备的功能在一个服务器SV中实现,并且注意度检测设备、分组设备和处理设备的功能不在远程电信会议设备TCD中提供。因此,等价于在第一实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图68所示的结构,由于远程电信会议设备TCD1至TCDn具有相同的结构,图68示出了作为多个远程电信会议设备TCD1至TCDn的代表设备的远程电信会议设备TCD1的示例结构的细节。下文,将描述远程电信会议设备TCD1。
远程电信会议设备TCD1具有至少一个信号处理设备SPD1和监视器设备MD2至MDn,如上所述。
远程电信会议设备TCD1中的信号处理设备SPD1具有如上所述的网络连接端子TN1、信息发送/接收部分TRB1、输出端子TO2至TOn、输入端子TI2至TIn以及输入端子TS。即远程电信会议设备TCD1中的信号处理设备SPD1不具有上述的组决定信息产生部分JB1、信息处理部分PB1和组决定部分GJD1。
每一监视器设备MD2至MDn具有与图48和49所示的相似的结构。由在监视器设备MD2至MDn的至少一个监视器设备MD上提供的照相设备拾取的图像数据和由至少一个监视器设备MD上类似提供的麦克风拾取的音频数据通过信号处理设备SPD1和通信网络NT被发送到远程电信会议设备TCD2至TCDn,如上所述。
在监视器设备MD2至MDn的显示器上,显示基于从相应的远程电信会议设备TCD2至TCDn发送的图像数据的图像,如上所述。相似地,从扬声器输出基于从相应于远程电信会议设备TCD2至TCDn发送的音频数据的声音。
远程电信会议设备TCD1中的信号处理设备SPD1的信息发送/接收部分TRB1将从安置在例如与会者HM1前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息通过网络连接端子TN1和通信网络NT发送服务器SV。
同时,服务器SV如图69所示建立,并用作产生对在会议中参与相同的主题的与会者进行分组的组决定信息的注意度检测设备。该服务器SV还用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息对与会者分组的分组设备,并且接着产生指示着每一与会者HM所属的组的组信息。而且,服务器SV还用作根据所产生的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图69中,服务器SV具有上面描述的网络连接端子11以及上面描述的信息发送/接收部分10,服务器SV还具有组决定信息产生部分JB、组决定部分GJD和信息处理部分PB。
信息发送/接收部分10接收通过通信网络NT从远程电信会议设备TCD1至TCDn发送的由位于与会者HM前面的监视器设备MDm的照相设备提供的图像数据和开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。在收到通过通信网络NT发送的信号时,信息发送/接收部分10从信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将每一分离的图像数据和音频数据提供到信息处理部分PB。而且,信息发送/接收部分10将由信息处理部分PB调整的图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
由组决定信息产生部分JB产生的组决定信息被提供到组检测部分GJD。
组决定部分GJD根据组决定信息执行组决定并根据组决定产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自组决定信息产生部分JB的组决定信息的预处理。在收到来自组决定信息产生部分JB的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息处理部分PB。
根据从组决定部分GJD发送的组信息,信息处理部分PB计算用于对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的参数。而且,根据上述计算获得的参数,信息处理部分PB对相应于远程电信会议设备TCD1至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并且通过信息发送/接收部分10、网络连接端子11和通信网络NT将调整处理后的图像数据和音频数据提供给相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,服务器SV中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生用于决定每一与会者HM参与的组的主题的组决定信息。接着服务器SV中的组决定部分GJD执行根据组决定信息的分组,并且产生指示着每一与会者HM所属的组的组信息。接着,根据组信息,服务器SV中的信息处理部分PB对相应于各自远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第八实施例的远程电信会议***中,注意度检测设备、分组设备和处理设备的功能能够在一个服务器SV中实现。因此,在远程电信会议***中,能够减轻加在各个远程电信会议设备TCD上的处理,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第九实施例的远程电信会议***。
该远程电信会议***具有和第八实施例描述的远程电信会议***的结构相似的基本结构,其中在远程电信会议设备TCD中不提供注意度检测设备、分组设备和处理设备的功能。但是,注意度检测设备、分组设备的功能和处理设备的功能分别在两个服务器SV1、SV2中实现。因此,等价于在第八实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在该远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图68所示的结构,即每一远程电信会议设备TCD通过网络连接端子TN1和通信网络NT将从例如位于与会者HM的前面的监视器设备MD的照相设备提供的图像数据以及来自上述开关SW的开关按压信息发送到服务器SV1。
服务器SV1如图70所示建立,并用作产生对在会议中参与相同的主题的与会者进行分组的组决定信息的注意度检测设备。该服务器SV1还用作根据从远程电信会议设备TCD1至TCDn发送的组决定信息执行分组的分组设备,并且接着产生指示着每一与会者HM所属的组的组信息。
在图70中,服务器SV1具有上面描述的网络连接端子111以及上面描述的信息发送/接收部分101,服务器SV1还具有组决定信息产生部分JB、组决定部分GJD。
信息发送/接收部分101通过通信网络NT接收从远程电信会议设备TCD1至TCDn发送的由位于与会者HM前面的监视器设备MDm的照相设备提供的图像数据和开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。信息发送/接收部分101还通过网络连接端子111和通信网络NT将组决定部分GJD产生的组信息发送到服务器SV2。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测每一与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
组决定信息产生部分JB将所产生的组决定信息提供到组决定部分GJD。
组决定部分GJD根据如上所述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自组决定信息产生部分JB的组决定信息的预处理。在收到来自组决定信息产生部分JB的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息的时间的处理。组决定部分GJD将所产生的组信息通过信息发送/接收部分101、网络连接端子111和通信网络NT提供到服务器SV2。
另一方面,服务器SV2如图71所示建立,并用作根据从服务器SV1发送的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图71中,服务器SV2具有上面描述的网络连接端子112以及上面描述的信息发送/接收部分102,服务器SV2还具有组决定信息处理部分PB。
信息发送/接收部分102通过通信网络NT接收从服务器SV1发送的组信息,并将组信息提供到信息处理部分PB。在收到通过通信网络NT发送的信号时,信息发送/接收部分102从信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将每一分离的图像数据和/或音频数据提供到信息处理部分PB。而且,信息发送/接收部分102将由信息处理部分PB调整的图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
信息处理部分PB根据从信息发送/接收部分102发送的组信息,计算用于对相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据执行信息处理的参数。而且,信息处理部分PB根据上述计算获得的参数对相应于远程电信会议设备分离的图像数据和/或音频数据执行所需的调整处理,并将调整处理后的图像数据和音频数据通过信息发送/接收部分102、网络连接端子112和通信网络NT提供到相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,服务器SV1中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生用于决定每一与会者HM参与的组的主题的组决定信息,并服务器SV1中的组决定部分GJD执行根据组决定信息的分组,并且产生指示着每一与会者HM所属的组的组信息。接着,根据组信息,服务器SV2中的信息处理部分PB对相应于各自远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第九实施例的远程电信会议***中,注意度检测设备和分组设备的功能以及处理设备的功能能够分别在两个服务器SV1、SV2中实现。因此,能够减轻加在远程电信会议***中的各个远程电信会议设备TCD上的处理,则使结构得到简化。加在服务器SV1、SV2上的处理也能够得到减轻,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV1、SV2能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第十实施例的远程电信会议***。
该远程电信会议***具有和第八实施例描述的远程电信会议***的结构相似的基本结构,其中在远程电信会议设备TCD中不提供注意度检测设备、分组设备和处理设备的功能。但是,注意度检测设备的功能以及分组设备和处理设备的功能分别在两个服务器SV1、SV2中实现。因此,等价于在第八实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在该远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图68所示的结构,即每一远程电信会议设备TCD通过网络连接端子TN1和通信网络NT将从例如位于与会者HM的前面的监视器设备MD的照相设备提供的图像数据以及来自上述开关SW的开关按压信息发送到服务器SV1。
服务器SV1如图72所示建立,并用作产生对在会议中参与相同的主题的与会者进行分组的组决定信息的注意度检测设备。
在图72中,服务器SV1具有上面描述的网络连接端子111以及上面描述的信息发送/接收部分101,服务器SV1还具有组决定信息产生部分JB。
信息发送/接收部分101接收通过通信网络NT从远程电信会议设备TCD1至TCDn发送的由位于与会者HM前面的监视器设备MDm的照相设备提供的图像数据以及开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。信息发送/接收部分101还通过网络连接端子111和通信网络NT将组决定信息产生部分JB产生的组决定信息发送到服务器SV2。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测每一与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
组决定信息产生部分JB将所产生的组决定信息提供到信息发送/接收部分101
另一方面,服务器SV2如图73所示建立,并用作根据从远程电信会议设备TCD1至TDCn发送的组决定信息执行分组的分组设备,并接着产生指示着每一与会者HM所属的组的组信息。服务器SV2还用作根据从组决定部分GJD提供的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图73中,服务器SV2具有上面描述的网络连接端子112以及上面描述的信息发送/接收部分102,服务器SV2还具有组决定部分GJD和信息处理部分PB。
信息发送/接收部分102通过通信网络NT接收从服务器SV1发送的组决定信息,并将组决定信息提供到组决定部分GJD。在收到通过通信网络NT发送的信号时,信息发送/接收部分102还从信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将每一分离的图像数据和音频数据提供到信息处理部分PB。而且,信息发送/接收部分102将由信息处理部分PB调整的图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
组决定部分GJD根据如上所述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自服务器SV1的组决定信息的预处理。在收到来自服务器SV1的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息处理部分PB。
信息处理部分PB根据从组决定部分GJD发送的组信息,计算用于对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的参数。而且,信息处理部分PB根据上述计算获得的参数对相应于远程电信会议设备TCD1至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并将调整处理后的图像数据和音频数据通过信息发送/接收部分102、网络连接端子112和通信网络NT提供到相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,服务器SV1中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生仅用于决定每一与会者HM参与的组的主题的组决定信息,接着,服务器SV2中的组决定部分GJD执行根据组决定信息的分组,并且产生指示着每一与会者HM所属的组的组信息,并且根据组信息,服务器SV2中的信息处理部分PB对相应于各自远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第十实施例的远程电信会议***中,注意度检测设备的功能以及分组设备和处理设备的功能能够分别在两个服务器SV1、SV2中实现。因此,能够减轻加在远程电信会议***中的各个远程电信会议设备TCD上的处理,则使结构得到简化。加在服务器SV1、SV2上的处理也能够得到减轻,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV1、SV2能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
下面将描述作为本发明的第十一实施例的远程电信会议***。
该远程电信会议***具有和第八实施例描述的远程电信会议***的结构相似的基本结构,其中在远程电信会议设备TCD中不提供注意度检测设备、分组设备和处理设备的功能。但是,如在图74所示的简略结构所示,注意度检测设备以及分组设备和处理设备的功能分别在三个服务器SV1、SV2、SV3中实现。因此,等价于在第八实施例的远程电信会议***中的构成组件用相同的数字来表示并将不再详细描述。
在该远程电信会议***中,每一远程电信会议设备TCD能够在那里拾取相应于那里的与会者HM的图像数据和音频数据,接着通过通信网络NT将与会者HM的图像数据和音频数据发送到其余的远程电信会议设备TCD,并接收和呈现从其余的远程电信会议设备TCD发送的其余的与会者HM的图像数据和音频数据。
远程电信会议***中的每一远程电信会议设备TCD具有如图68所示的结构,即每一远程电信会议设备TCD通过网络连接端子TN1和通信网络NT将从例如位于与会者HM的前面的监视器设备MD的照相设备提供的图像数据以及来自上述开关SW的开关按压信息发送到服务器SV1。
服务器SV1如图75所示建立,并用作产生对在会议中参与相同的主题的与会者进行分组的组决定信息的注意度检测设备。
在图75中,服务器SV1具有上面描述的网络连接端子111以及上面描述的信息发送/接收部分101,服务器SV1还具有组决定信息产生部分JB。
信息发送/接收部分101通过通信网络NT接收从远程电信会议设备TCD1至TCDn发送的由位于与会者HM前面的监视器设备MDm的照相设备提供的图像数据以及开关按压信息,并将图像数据和开关按压信息提供到组决定信息产生部分JB。信息发送/接收部分101还通过网络连接端子111和通信网络NT将组决定信息产生部分JB产生的组决定信息发送到服务器SV2。
组决定信息产生部分JB产生组决定信息,如上所述。
组决定信息产生部分JB例如根据从安置在与会者HM前面的监视器设备MDm的照相设备提供的图像数据和来自上述开关SW的开关按压信息检测每一与会者HM的注意度,并根据检测的结果产生上述的组决定信息,如图3和4所示。在这个操作中,组决定信息产生部分JB执行上述的方向检测处理。
组决定信息产生部分JB将所产生的组决定信息提供到信息发送/接收部分101
服务器SV2如图76所示建立,并用作根据从服务器SV1发送的组决定信息执行分组的分组设备,并接着产生指示着每一与会者HM所属的组信息。
在图76中,服务器SV2具有上面描述的网络连接端子112以及上面描述的信息发送/接收部分102,服务器SV2还具有组决定部分GJD。
信息发送/接收部分102通过通信网络NT接收从服务器SV1发送的每一组决定信息,并将组决定信息提供到组决定部分GJD。信息发送/接收部分102还将由组决定部分GJD产生的组信息通过网络连接端子112和通信网络NT发送到服务器SV3。
组决定部分GJD根据如上所述的每一组决定信息执行组决定,并根据组决定的结果产生指示着每一与会者HM所属的组的组信息。
组决定部分GJD保持图6所示的注意目标表和图7所示的组表,并执行图8所示的通信开始时的初始化处理,作为接收来自服务器SV1的组决定信息的预处理。在收到来自服务器SV1的组决定信息时,组决定部分GJD执行产生图9所示的产生组决定信息时的处理。组决定部分GJD将所产生的组信息提供到信息发送/接收部分102
服务器SV3如图77所示建立,并用作根据从服务器SV2发送的组信息对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的处理设备。
在图77中,服务器SV3具有上面描述的网络连接端子113以及上面描述的信息发送/接收部分103,服务器SV3还具有信息处理部分PB。
信息发送/接收部分103通过通信网络NT接收从服务器SV2发送的组信息,并将组信息提供到信息处理部分PB。在收到通过通信网络NT发送的信号时,信息发送/接收部分103从信号中分离相应于远程电信会议设备TCD1至TCDn的图像数据和音频数据,并将分离的每一图像数据和音频数据提供到信息处理部分PB。而且信息发送/接收部分103将由信息处理部分PB调整的图像数据和音频数据通过通信网络NT发送到远程电信会议设备TCD1至TCDn。
信息处理部分PB根据从信息发送/接收部分103发送的组信息,计算用于对相应于远程电信会议设备TCD1至TCDn的图像数据和/或音频数据执行信息处理的参数。而且,信息处理部分PB根据上述计算获得的参数对相应于远程电信会议设备TCD1至TCDn分离的图像数据和/或音频数据执行所需的调整处理,并将调整处理后的图像数据和音频数据通过信息发送/接收部分103、网络连接端子113和通信网络NT提供到相应于远程电信会议设备TCD1至TCDn提供的监视器设备MD1至MDn。
在这样的远程电信会议***中,服务器SV1中的组决定信息产生部分JB检测与会者HM的注意度,并且根据检测的结果,产生仅用于决定每一与会者HM参与的组的主题的组决定信息。接着,服务器SV2中的组决定部分GJD执行根据组决定信息的分组,并且产生指示着每一与会者HM所属的组的组信息。并且根据组信息,服务器SV3中的信息处理部分PB对相应于各自远程电信会议设备TCD的图像数据和/或音频数据执行所需的调整处理。
如上所述,在作为本发明的第十一实施例的远程电信会议***中,注意度检测设备、分组设备和处理设备的功能能够分别在三个服务器SV1、SV2、SV3中实现。因此,能够减轻加在远程电信会议***中的各个远程电信会议设备TCD上的处理,则使结构得到简化。加在服务器SV1、SV2、SV3上的处理也能够得到减轻,则使结构得到简化。当然,在该远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
远程电信会议***中的每一远程电信会议设备TCD的信号处理设备SPD以及服务器SV1、SV2、SV3能够通过例如图50所示的个人计算机来实现。每一远程电信会议设备TCD也可以如图51至54所示的构成。
如上所述,在作为本发明的实施例的远程电信会议***中,即使在同时有多个与会者发表谈论的情况下,在与会者所属的组中产生的谈论能够被变得特别易于听见,并且该组的图像被变得易于看清。因此,远程电信会议***能够为每一与会者提供足够信息和舒适度。
本发明不局限于上述的实施例。例如,尽管在上述所有的实施例中,监视器设备MD和信号处理设备SPD被分别构成,但能够在每一或一个监视器设备MD中提供信号处理设备SPD的功能。
尽管在上述所有的实施例中作为方向检测的特定例子,眼睛的检测和面孔方向的检测是分开执行的,但是能够在同一时间上执行这两个方向的检测。
而且,尽管在上述所有的实施例中,在一个时间点上一个与会者仅属于一个组,但是能够定义诸如该与会者主要属于一个组以及与会者不做任何谈论但想获得信息的组,并使每一与会者属于多个组之类的多个组,这样根据每一与会者在另一边上所属的组,控制和处理诸如声音和图像。在这种情况中,如果在相应于各个与会者的监视器设备上提供照明单元,可以考虑根据另一与会者在另一边上的所属的组来控制照明单元。
而且,尽管基于组决定信息的组决定结果用于产生上述所有实施例的组信息,组决定的结果仍还可以用于各种目的。
例如,作为使用组决定的结果的另一种方法,可以考虑会前注册多个讨论的主题和每一主题所需的与会者,并根据每一会话的组决定结果,通过图像和声音呈现在会议中的在每一组中能够讨论的主题。在这种情况中,如果存在就某一主题的由大多数必须的与会者组成的组,尽管该主题的所有必须的与会者不都呈现,那些在组中未出现的必须的与会者,以及主题自身能够通过图像和声音被呈现。
仍作为使用组决定的结果的另一种方法,可以考虑远程电信会议设备TCD的娱乐作用。即仍作为使用组决定的结果的另一种方法,可以考虑在会前注册每一与会者感兴趣的领域,并在会议期间检查组中与会者的兴趣集中的领域,以及提供一个涉及具有高注意度的领域的主题。在采用该方法的情况中,例如,可以将在接近会议期间举行的棒球比赛的结果呈现到包括注册为棒球迷的许多与会者的组中。
因此,在不脱离本发明的范围下,得到各种改变和变型是当然的事情。
工业上的可应用性
如上详述,根据本发明的通信***包括:至少三个通信设备,每一个具有注意度预测信息获得装置,用于获取用于为从每一其他的通信设备通信的通信数据检测注意度的注意度预测信息、以及通信数据输出装置,用于将根据组信息处理的通信数据输出到相应的呈现设备;注意度检测设备,具有注意度检测装置,用于根据注意度预测信息检测注意度、以及注意度输出装置,用于输出注意度;分组设备,具有分组装置,用于根据注意度执行对通信数据的分组、以及组信息输出装置,用于输出指示着分组结果的组信息;以及处理设备,具有处理装置,用于根据组信息处理自其余的通信设备发送到每一通信设备的通信数据、以及处理的数据输出装置,用于将处理装置处理的通信数据输出。
因此,在根据本发明的通信***中,在至少三个通信设备中执行通信的情况中,根据由每一通信设备发送的通信数据的注意度,由多个通信设备发送的通信数据被进行分组,并且根据多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
而且,根据本发明的通信***包括:至少三个通信设备,每一个具有注意度预测信息获得装置,用于获取用于为从每一其他的通信设备通信的通信数据检测注意度的注意度预测信息、以及通信数据输出装置,用于将根据组信息处理的通信数据输出到相应的呈现设备;注意度检测设备,具有注意度检测装置,用于根据注意度预测信息检测注意度、以及注意度输出装置,用于输出注意度;分组设备,具有分组装置,用于根据注意度执行对通信数据的分组、以及组信息输出装置,用于输出指示着分组结果的组信息;以及处理设备,具有处理装置,用于根据组信息处理自其余的通信设备发送到每一通信设备的通信数据,以及处理的数据输出装置,用于将处理装置处理的通信数据输出。
因此,在根据本发明的通信***中,在至少三个通信设备中执行通信的情况中,由多个通信设备发送的通信数据被根据由每一通信设备发送的通信数据的注意度进行分组,并且根据多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的分组设备用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组设备包括:分组装置,用于根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出装置,用于输出指示着分组装置分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的分组设备,能够根据由每一通信设备发送的通信数据的注意度对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的分组方法用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组方法包括:分组步骤,根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的分组方法,能够根据由每一通信设备发送的通信数据的注意度对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质用在包括至少三个通信设备的通信***中,并且在其上已经记录有计算机可控的分组程序,分组程序用于对从其余的通信设备通信给每一通信设备的通信数据进行分组。分组程序包括:分组步骤,根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组装置分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的其上记录有分组程序的记录介质,能够根据由每一通信设备发送的通信数据的注意度对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括信息处理设备和至少三个通信设备的通信***中的信息处理设备包括:接收装置,用于接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组装置,用于根据注意度执行对通信数据的分组;处理装置,用于根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据发送给每一通信设备。
因此,在至少三个通信设备中执行通信的情况中使用该信息处理设备,能够根据由每一通信设备发送的通信数据的注意度对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在信息处理设备中,接收装置接收从每一通信设备发送的、与每一通信设备相关的用户反应信息,以取代注意度,并且信息处理设备还包括注意度检测装置,用于根据用户反应信息检测通信数据的注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用该信息处理设备,能够检测对每一通信设备发送的通信数据的注意度,接着对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法包括:接收步骤,接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组步骤,根据注意度执行对通信数据的分组;处理步骤,根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据发送给每一通信设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的信息处理方法,能够根据由每一通信设备发送的通信数据的注意度对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在信息处理方法中,在接收步骤中,接收从每一通信设备发送的、与每一通信设备相关的用户反应信息以取代注意度,并且信息处理方法还包括注意度检测步骤,根据用户反应信息检测每一通信数据的注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用该信息处理方法,能够检测对每一通信设备发送的通信数据的注意度,接着对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的信息处理程序。信息处理程序包括:接收步骤,接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;分组步骤,根据注意度执行对通信数据的分组;处理步骤,根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据发送给每一通信设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的其上记录有信息处理程序的记录介质,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在其上记录有信息处理程序的记录介质中,在接收步骤中,接收从每一通信设备发送的、与每一通信设备相关的用户反应信息以取代注意度,并且信息处理方法还包括注意度检测步骤,根据用户反应信息检测通信数据的注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用其上记录有信息处理程序的记录介质,能够检测由每一通信设备发送的通信数据的注意度,接着,对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的通信设备包括:接收装置,用于接收来自其余的通信设备的通信数据并接收指示着从信息处理设备发送的通信数据所属的组的组信息;信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;注意度输出装置,用于将注意度输出到信息处理设备;处理装置,用于根据组信息处理通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信设备,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的通信方法包括:第一接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;注意度输出步骤,将注意度输出到信息处理设备;第二接收步骤,接收指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信方法,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的通信程序。通信程序包括:第一接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;注意度输出步骤,将注意度输出到信息处理设备;第二接收步骤,接收指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将在处理步骤中处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用其上记录有通信程序的记录介质,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理设备包括:接收装置,用于接收从每一通信设备发送的通信数据的注意度;分组装置,用于根据注意度对通信数据进行分组;以及组信息输出装置,用于输出指示着分组装置的分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的信息处理设备,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在信息处理设备中,接收装置接收从每一通信设备发送的通信数据以取代注意度,并且信息处理设备还包括注意度检测装置,用于检测对每一通信数据的用户注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用信息处理设备,能够检测对每一通信设备发送的通信数据的注意度,接着对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法包括:接收步骤,接收从每一通信设备发送的通信数据的注意度;分组步骤,根据注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤的分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的信息处理方法,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在信息处理方法中,在接收步骤中,接收从每一通信设备发送的通信数据以取代注意度,并且信息处理方法还包括注意度检测步骤,检测对每一通信数据的用户注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用信息处理方法,能够检测对每一通信设备发送的通信数据的注意度,接着对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的信息处理程序。信息处理程序包括:接收步骤,接收从每一通信设备发送的通信数据的注意度;分组步骤,根据注意度对通信数据进行分组;以及组信息输出步骤,输出指示着分组步骤的分组结果的组信息。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的其上记录有信息处理程序的记录介质,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
在其上记录有信息处理程序的记录介质中,在接收步骤中,接收从每一通信设备发送的通信数据以取代注意度,并且信息处理程序还包括注意度检测步骤,检测对每一通信数据的用户注意度。
因此,在至少三个通信设备中执行通信的情况中通过使用其上记录有信息处理程序的记录介质,能够检测对每一通信设备发送的通信数据的注意度,接着对由多个通信设备发送的通信数据根据注意度进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信设备包括:接收部分,用于接收来自其余的通信设备的通信数据;信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;分组装置,用于根据注意度分组通信数据;处理装置,用于根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信设备,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信方法包括:接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;分组步骤,根据注意度分组通信数据;处理步骤,根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出步骤,将在处理步骤处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信方法,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质已经在其上记录有在至少三个通信设备执行通信的通信***中的计算机可控的通信程序。该通信程序包括:接收步骤,接收来自其余的通信设备的通信数据;信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;分组步骤,根据注意度分组通信数据;处理步骤,根据每一通信数据所属的组处理每一通信数据;以及处理的数据输出步骤,将在处理步骤处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的其上记录有通信程序的记录介质,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的在至少三个通信设备中执行通信的通信***中的通信设备包括:信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;通信装置,用于接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息,并将用户反应信息发送到信息处理设备;处理装置,用于根据组信息处理通信数据;以及处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信设备,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的包括一个信息处理设备和至少三个通信设备的通信***中的通信方法包括:信息获得步骤,用于获得对来自通信设备的每一通信数据的用户反应信息;发送步骤,将用户反应信息发送到信息处理设备;接收步骤,接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将处理步骤处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的通信方法,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。
根据本发明的记录介质已经在其上记录有在包括一个信息处理设备和至少三个通信设备的通信***中的计算机可控的通信程序。该通信程序包括:信息获得步骤,用于获得对来自通信设备的每一通信数据的用户反应信息;发送步骤,将用户反应信息发送到信息处理设备;接收步骤,接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息;处理步骤,根据组信息处理通信数据;以及处理的数据输出步骤,将处理步骤处理的通信数据输出到呈现设备。
因此,在至少三个通信设备中执行通信的情况中通过使用根据本发明的其上记录有通信程序的记录介质,能够根据对每一通信设备发送的通信数据的注意度,对由多个通信设备发送的通信数据进行分组,并根据由多个通信设备发送的通信数据的分组处理来自其余的通信设备的通信数据。因此,例如,在远程电信会议***中,正在参与相同的主题的与会者产生的谈论能够被变得特别易于听见,并且这些与会者的图像能够被变得易于看见。

Claims (123)

1.一种通信***,包括:
至少三个通信设备,每一个具有注意度预测信息获得装置,用于获取用于为从每一其他的通信设备互通的通信数据的检测注意度的注意度预测信息、以及通信数据输出装置,用于将根据组信息处理的通信数据输出到相应的呈现设备;
注意度检测设备,具有注意度检测装置,用于根据注意度预测信息检测注意度,以及注意度输出装置,用于输出注意度;
分组设备,具有分组装置,用于根据注意度执行对通信数据的分组、以及组信息输出装置,用于输出指示着分组结果的组信息;以及
处理设备,具有处理装置,用于根据每一通信数据所属的组处理每一通信数据,以及处理的数据输出装置,用于将处理装置处理的通信数据输出。
2.如权利要求1的通信***,其中分组装置根据注意度的改变进行分组。
3.如权利要求1的通信***,其中通信设备具有注意度检测设备。
4.如权利要求1的通信***,其中通信设备具有注意度检测和处理设备。
5.如权利要求1的通信***,其中至少三个所述的通信设备的每一个具有注意度检测设备、分组设备和处理设备。
6.如权利要求1的通信***,其中至少三个所述的通信设备中的一个通信设备具有注意度检测设备、分组设备和处理设备。
7.如权利要求1的通信***,其中通信设备具有处理设备。
8.如权利要求1的通信***,其中注意度检测设备具有分组设备和处理设备。
9.一种分组设备,用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组,该分组设备包括:
分组装置,用于根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及
组信息输出装置,用于输出指示着分组装置分组结果的组信息。
10.如权利要求9的分组设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则分组装置将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
11.如权利要求9的分组设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则分组装置将第一通信数据和第二通信数据放入相同的组。
12.如权利要求9的分组设备,其中如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,分组装置将第一组和第二组统一成一个组。
13.一种分组方法,用在包括至少三个通信设备的通信***中,并且适用于对从其余的通信设备通信给每一通信设备的通信数据进行分组,该分组方法包括:
分组步骤,根据来自其余的通信设备的每一通信数据的、相应于每一通信设备的每一用户的注意度对通信数据进行分组;以及
组信息输出步骤,输出指示着分组步骤分组结果的组信息。
14.如权利要求13的分组方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,第一通信数据和由其余的通信设备发送的第二通信数据被放入相同的组。
15.如权利要求13的分组方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则将第一通信数据和第二通信数据放入相同的组。
16.如权利要求13的分组方法,其中在分组步骤中,如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,则将第一组和第二组统一成一个组。
17.一种在包括信息处理设备和至少三个通信设备的通信***中的信息处理设备,包括:
接收装置,用于接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;
分组装置,用于根据注意度执行对通信数据的分组;
处理装置,用于根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及
处理的数据输出装置,用于将处理装置处理的通信数据发送给每一通信设备。
18.如权利要求17的信息处理设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则分组装置将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
19.如权利要求17的信息处理设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则分组装置将第一通信数据和第二通信数据放入相同的组。
20.如权利要求17的信息处理设备,其中如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,分组装置将第一组和第二组统一成一个组。
21.如权利要求17的信息处理设备,其中与不属于预定组的通信数据相比,处理装置以一种相对加强的状态处理属于预定组的通信数据。
22.如权利要求17的信息处理设备,其中通信数据包括音频数据,并且处理装置处理该音频数据。
23.如权利要求22的信息处理设备,其中处理装置通过调整音频数据的音量处理音频数据。
24.如权利要求22的信息处理设备,其中处理装置通过调整音频数据的音频质量处理音频数据。
25.如权利要求17的信息处理设备,其中通信数据包括图像数据,并且处理装置处理该图像数据。
26.如权利要求25的信息处理设备,其中处理装置通过调整图像数据的图像质量处理图像数据。
27.如权利要求17的信息处理设备,其中,接收装置接收从每一通信设备发送的、与每一通信设备相关的用户反应信息,以取代注意度,并且
信息处理设备还包括注意度检测装置,用于根据用户反应信息为每一通信数据检测注意度。
28.如权利要求27的信息处理设备,其中注意度检测装置检测用户注意的存在和不存在。
29.如权利要求27的信息处理设备,其中注意度检测装置检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
30.如权利要求27的信息处理设备,其中注意度检测装置根据用户的指令检测与来自其他通信设备的通信数据有关的用户的注意度。
31.一种在包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法,该方法包括:
接收步骤,接收来自每一通信设备的通信数据以及接收从每一通信设备发送的、并且和从除该通信设备自身外的其余的通信设备发送的通信数据相关的注意度;
分组步骤,根据注意度执行对通信数据的分组;
处理步骤,根据通信数据所属的组,处理从除该通信设备自身外的其余的通信设备发送的、与每一通信设备相关的通信数据;以及
处理的数据输出步骤,将在处理步骤中处理的通信数据发送给每一通信设备。
32.如权利要求31的信息处理方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,第一通信数据和由其余的通信设备发送的第二通信数据被放入相同的组。
33.如权利要求31的信息处理方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则将第一通信数据和第二通信数据放入相同的组。
34.如权利要求31的信息处理方法,其中在分组步骤中,如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,则将第一组和第二组统一成一个组。
35.如权利要求31的信息处理方法,其中在处理步骤中,与不属于预定组的通信数据相比,以一种相对加强的状态处理属于预定组的通信数据。
36.如权利要求31的信息处理方法,其中通信数据包括音频数据,并且在处理步骤处理音频数据。
37.如权利要求36的信息处理方法,其中在处理步骤中,通过调整音频数据的音量处理音频数据。
38.如权利要求36的信息处理方法,其中在处理步骤中,通过调整音频数据的音频质量处理音频数据。
39.如权利要求31的信息处理方法,其中通信数据包括图像数据,并且在处理步骤处理图像数据。
40.如权利要求39的信息处理方法,其中在处理步骤中,通过调整图像数据的图像质量处理图像数据。
41.如权利要求39的信息处理方法,其中在接收步骤中,接收从每一通信设备发送的、与每一通信设备相关的用户反应信息以取代注意度,并且
信息处理方法还包括注意度检测步骤,根据用户反应信息检测通信数据的注意度。
42.如权利要求41的信息处理方法,其中在注意度检测步骤中,检测用户的注意的存在和不存在。
43.如权利要求41的信息处理方法,其中在注意度检测步骤中,检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
44.如权利要求41的信息处理方法,其中在注意度检测步骤中,根据用户的指令检测与来自其他通信设备的通信数据有关的用户的注意度。
45.一种在包括一个信息处理设备和至少三个通信设备的通信***中的通信设备,该通信设备包括:
接收装置,用于接收来自其余的通信设备的通信数据并接收指示着从信息处理设备发送的通信数据所属的组的组信息;
信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;
注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;
注意度输出装置,用于将注意度输出到信息处理设备;
处理装置,用于根据组信息处理通信数据;以及
处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
46.如权利要求45的通信设备,其中注意度检测装置检测用户的注意的存在和不存在。
47.如权利要求45的通信设备,其中注意度检测装置检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
48.如权利要求45的通信设备,其中注意度检测装置根据用户的指令检测与来自其他通信设备的通信数据有关的用户的注意度。
49.如权利要求45的通信设备,其中与不属于预定组的通信数据相比,处理装置以一种相对加强的状态处理属于预定组的通信数据。
50.如权利要求45的通信设备,其中通信数据包括音频数据,并且处理装置处理音频数据。
51.如权利要求50的通信设备,其中处理装置通过调整音频数据的音量处理音频数据。
52.如权利要求50的通信设备,其中处理装置通过调整音频数据的音频质量处理音频数据。
53.如权利要求50的通信设备,其中通信数据包括图像数据,并且处理装置处理图像数据。
54.如权利要求53的通信设备,其中处理装置通过调整图像数据的图像质量处理图像数据。
55.如权利要求45的通信设备,其中,呈现设备具有输入装置,用于输入从每一其余的通信设备发送的通信数据;以及呈现装置,用于呈现相应于每一其余的通信设备的通信数据。
56.一种在包括一个信息处理设备和至少三个通信设备的通信***中的通信方法,该方法包括:
第一接收步骤,接收来自其余的通信设备的通信数据;
信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;
注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;
注意度输出步骤,将注意度输出到信息处理设备;
第二接收步骤,接收指示着从信息处理设备发送的通信数据所属的组的组信息;
处理步骤,根据组信息处理通信数据;以及
处理的数据输出步骤,将在处理步骤中处理的通信数据输出到呈现设备。
57.如权利要求56的通信方法,其中在注意度检测步骤,检测用户的注意的存在或不存在。
58.如权利要求56的通信方法,其中在注意度检测步骤中,检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
59.如权利要求56的通信方法,其中在注意度检测步骤中,根据用户的指令检测与来自其余的通信设备的通信数据有关的用户的注意度。
60.如权利要求56的通信方法,其中与不属于预定组的通信数据相比,以一种相对加强的状态处理属于预定组的通信数据。
61.如权利要求56的通信方法,其中通信数据包括音频数据,并且在处理步骤处理音频数据。
62.如权利要求61的通信方法,其中在处理步骤中,通过调整音频数据的音量处理音频数据。
63.如权利要求61的通信方法,其中在处理步骤中,通过调整音频数据的音频质量处理音频数据。
64.如权利要求56的通信方法,其中通信数据包括图像数据,并且在处理步骤处理图像数据。
65.如权利要求64的通信方法,其中在处理步骤中,通过调整图像数据的图像质量处理图像数据。
66.一种在包括一个信息处理设备和至少三个通信设备的通信***中的信息处理设备,该信息处理设备包括:
接收装置,用于接收从每一通信设备发送的通信数据的注意度;
分组装置,用于根据注意度对通信数据进行分组;以及
组信息输出装置,用于输出指示着分组装置的分组结果的组信息。
67.如权利要求66的信息处理设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则分组装置将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
68.如权利要求66的信息处理设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则分组装置将第一通信数据和第二通信数据放入相同的组。
69.如权利要求66的信息处理设备,其中如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,分组装置将第一组和第二组统一成一个组。
70.如权利要求66的信息处理设备,其中接收装置接收从每一通信设备发送的通信数据以取代注意度,并且
信息处理设备还包括注意度检测装置,用于检测对每一通信数据的用户注意度。
71.如权利要求70的信息处理设备,其中注意度检测装置检测用户注意的存在和不存在。
72.如权利要求70的信息处理设备,其中注意度检测装置检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
73.如权利要求70的信息处理设备,其中注意度检测装置根据用户的指令检测与来自其余的通信设备的通信数据有关的用户的注意度。
74.一种在包括一个信息处理设备和至少三个通信设备的通信***中的信息处理方法,该方法包括:
接收步骤,接收从每一通信设备发送的通信数据的注意度;
分组步骤,根据注意度对通信数据进行分组;以及
组信息输出步骤,输出指示着分组步骤的分组结果的组信息。
75.如权利要求74的信息处理方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
76.如权利要求74的信息处理方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则将第一通信数据和第二通信数据放入相同的组。
77.如权利要求74的信息处理方法,其中在分组步骤中,如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,将第一组和第二组统一成一个组。
78.如权利要求74的信息处理方法,其中在接收步骤中,接收从每一通信设备发送的通信数据以取代注意度,并且
信息处理方法还包括注意度检测步骤,用于检测对每一通信数据的用户注意度。
79.如权利要求78的信息处理方法,其中在注意度检测步骤,检测用户注意的存在和不存在。
80.如权利要求78的信息处理设备,其中在注意度检测步骤,检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
81.如权利要求78的信息处理设备,其中在注意度检测步骤,根据用户的指令检测与来自其余的通信设备的通信数据有关的用户的注意度。
82.一种在至少三个通信设备中执行通信的通信***中的通信设备,该通信设备包括:
接收部分,用于接收来自其余的通信设备的通信数据;
信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;
注意度检测装置,用于根据用户反应信息检测对每一通信数据的注意度;
分组装置,用于根据注意度分组通信数据;
处理装置,用于根据每一通信数据所属的组处理每一通信数据;以及
处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
83.如权利要求82的通信设备,其中注意度检测装置检测用户的注意的存在和不存在。
84.如权利要求82的通信设备,其中注意度检测装置检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
85.如权利要求82的通信设备,其中注意度检测装置根据用户的指令检测与来自其余通信设备的通信数据有关的用户的注意度。
86.如权利要求82的通信设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则分组装置将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
87.如权利要求82的通信设备,其中如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则分组装置将第一通信数据和第二通信数据放入相同的组。
88.如权利要求82的通信设备,其中如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,分组装置将第一组和第二组统一成一个组。
89.如权利要求82的通信设备,其中与不属于预定组的通信数据相比,处理装置以一种相对加强的状态处理属于预定组的通信数据。
90.如权利要求82的通信设备,其中通信数据包括音频数据,并且处理装置处理音频数据。
91.如权利要求90的通信设备,其中处理装置通过调整音频数据的音量处理音频数据。
92.如权利要求90的通信设备,其中处理装置通过调整音频数据的音频质量处理音频数据。
93.如权利要求82的通信设备,其中通信数据包括图像数据,并且处理装置处理图像数据。
94.如权利要求93的通信设备,其中处理装置通过调整图像数据的图像质量处理图像数据。
95.如权利要求82的通信设备,其中,呈现设备具有输入装置,用于输入从每一其余的通信设备发送的通信数据;以及呈现装置,用于呈现相应于每一其余的通信设备的通信数据。
96.一种在至少三个通信设备中执行通信的通信***中的通信方法,该方法包括:
接收步骤,接收来自其余的通信设备的通信数据;
信息获得步骤,获得对来自通信设备的每一通信数据的用户反应信息;
注意度检测步骤,根据用户反应信息检测对每一通信数据的注意度;
分组步骤,根据注意度分组通信数据;
处理步骤,根据每一通信数据所属的组处理每一通信数据;以及
处理的数据输出步骤,将在处理步骤处理的通信数据输出到呈现设备。
97.如权利要求96的通信方法,其中在注意度检测步骤,检测用户的注意的存在和不存在。
98.如权利要求96的通信方法,其中在注意度检测步骤,检测用户的举止,并根据用户的举止检测与来自其余的通信设备的通信数据有关的用户的注意度。
99.如权利要求96的通信方法,其中在注意度检测步骤,根据用户的指令检测与来自其余的通信设备的通信数据有关的用户的注意度。
100.如权利要求96的通信方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,则将第一通信数据和由其余的通信设备发送的第二通信数据放入相同的组。
101.如权利要求96的通信方法,其中在分组步骤中,如果与由相应于任一用户的一个通信设备发送的第一通信数据有关的其余通信设备的注意度比预定值高,并且与由其余的通信设备发送的第二通信数据有关的一个通信设备的注意度比预定值高,则将第一通信数据和第二通信数据放入相同的组。
102.如权利要求96的通信方法,其中在分组步骤中,如果相对于分组在第一组的第一通信数据,相应于分组在第二组的第二通信数据的用户的注意度高于预定值,将第一组和第二组统一成一个组。
103.如权利要求96的通信方法,其中在处理步骤中,与不属于预定组的通信数据相比,以一种相对加强的状态处理属于预定组的通信数据。
104.如权利要求96的通信方法,其中通信数据包括音频数据,并且在处理步骤处理音频数据。
105.如权利要求104的通信方法,其中在处理步骤中,通过调整音频数据的音量处理音频数据。
106.如权利要求104的通信方法,其中在处理步骤中,通过调整音频数据的音频质量处理音频数据。
107.如权利要求96的通信方法,其中通信数据包括图像数据,并且在处理步骤处理图像数据。
108.如权利要求107的通信方法,其中在处理步骤中,通过调整图像数据的图像质量处理图像数据。
109.一种在包括信息处理设备和至少三个通信设备中的通信***中的通信设备,该通信设备包括:
信息获得装置,用于获得对来自通信设备的每一通信数据的用户反应信息;
通信装置,用于接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息,并将用户反应信息发送到信息处理设备;
处理装置,用于根据组信息处理通信数据;以及
处理的数据输出装置,用于将处理装置处理的通信数据输出到呈现设备。
110.如权利要求109的通信设备,其中与不属于预定组的通信数据相比,处理装置以一种相对加强的状态处理属于预定组的通信数据。
111.如权利要求109的通信设备,其中通信数据包括音频数据,并且处理装置处理音频数据。
112.如权利要求109的通信设备,其中处理装置通过调整音频数据的音量处理音频数据。
113.如权利要求111的通信设备,其中处理装置通过调整音频数据的音频质量处理音频数据。
114.如权利要求109的通信设备,其中通信数据包括图像数据,并且处理装置处理图像数据。
115.如权利要求114的通信设备,其中处理装置通过调整图像数据的图像质量处理图像数据。
116.如权利要求109的通信设备,其中,呈现设备具有输入装置,用于输入从每一其余的通信设备发送的通信数据;以及呈现装置,用于呈现相应于每一其余的通信设备的通信数据。
117.一种在包括信息处理设备和至少三个通信设备中执行通信的通信***中的通信方法,该方法包括:
信息获得步骤,用于获得对来自通信设备的每一通信数据的用户反应信息;
发送步骤,将用户反应信息发送到信息处理设备;
接收步骤,接收来自信息处理设备的通信数据和指示着从信息处理设备发送的通信数据所属的组的组信息;
处理步骤,根据组信息处理通信数据;以及
处理的数据输出步骤,将处理步骤处理的通信数据输出到呈现设备。
118.如权利要求117的通信方法,其中在处理步骤中,与不属于预定组的通信数据相比,以一种相对加强的状态处理属于预定组的通信数据。
119.如权利要求117的通信方法,其中通信数据包括音频数据,并且在处理步骤处理音频数据。
120.如权利要求119的通信方法,其中在处理步骤,通过调整音频数据的音量处理音频数据。
121.如权利要求119的通信方法,其中在处理步骤,通过调整音频数据的音频质量处理音频数据。
122.如权利要求117的通信方法,其中在处理步骤,通信数据包括图像数据,并且
在处理步骤处理图像数据。
123.如权利要求122的通信方法,其中在处理步骤,通过调整图像数据的图像质量处理图像数据。
CNB008030693A 1999-11-24 2000-11-24 通信*** Expired - Fee Related CN1197335C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP333487/1999 1999-11-24
JP33348799 1999-11-24

Publications (2)

Publication Number Publication Date
CN1338176A CN1338176A (zh) 2002-02-27
CN1197335C true CN1197335C (zh) 2005-04-13

Family

ID=18266622

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB008030693A Expired - Fee Related CN1197335C (zh) 1999-11-24 2000-11-24 通信***

Country Status (5)

Country Link
EP (1) EP1146721A4 (zh)
JP (1) JP4487467B2 (zh)
KR (1) KR100697757B1 (zh)
CN (1) CN1197335C (zh)
WO (1) WO2001039479A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2849974B1 (fr) * 2003-01-15 2005-08-26 France Telecom Procede de communication interpersonnelle via un reseau de telecommunication.
JP5436743B2 (ja) * 2006-03-30 2014-03-05 京セラ株式会社 通信端末装置および通信制御装置
JP2007282072A (ja) * 2006-04-11 2007-10-25 Fuji Xerox Co Ltd 電子会議システム、電子会議支援プログラム、電子会議支援方法、電子会議システムにおける情報端末装置
CN105933557A (zh) * 2016-04-25 2016-09-07 四川联友电讯技术有限公司 一种同步语音会议中与会人员的音量智能调整方法及***
JP2017103801A (ja) * 2017-01-19 2017-06-08 株式会社Jvcケンウッド 通信端末、通信端末の制御方法、通信端末の制御プログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07131539A (ja) * 1993-11-08 1995-05-19 Nippon Telegr & Teleph Corp <Ntt> マルチメディア通信システム
JPH09275533A (ja) * 1996-04-08 1997-10-21 Sony Corp 信号処理装置
US6128649A (en) 1997-06-02 2000-10-03 Nortel Networks Limited Dynamic selection of media streams for display
US6288739B1 (en) * 1997-09-05 2001-09-11 Intelect Systems Corporation Distributed video communications system
JP4501037B2 (ja) * 1998-02-17 2010-07-14 ソニー株式会社 通信制御システムと通信装置および通信方法

Also Published As

Publication number Publication date
JP4487467B2 (ja) 2010-06-23
EP1146721A4 (en) 2005-08-24
EP1146721A1 (en) 2001-10-17
WO2001039479A1 (fr) 2001-05-31
CN1338176A (zh) 2002-02-27
KR100697757B1 (ko) 2007-03-21
KR20010101860A (ko) 2001-11-15

Similar Documents

Publication Publication Date Title
CN1615646A (zh) 通信装置
CN1203662C (zh) 自动灰度等级补正装置以及方法
CN1263302C (zh) 远程会议***和远程会议支持方法
CN1268122C (zh) 显示方法及投影机
CN1176548C (zh) 信息接收记录重放装置、信息接收记录重放方法
CN1269081C (zh) 图象角度检测装置及具备该装置的扫描线内插装置
CN1774031A (zh) 图像处理装置及图像处理方法、以及计算机程序
CN101036386A (zh) 频道订约建议装置、方法、程序和集成电路
CN1922630A (zh) 图象处理装置、图象处理***、图象处理方法、图象处理程序及集成电路装置
CN1961572A (zh) 广播***、广播台装置、接收装置及广播方法
CN1947150A (zh) 虹彩注册方法、虹彩注册装置及虹彩注册程序
CN1969292A (zh) 用户轮廓管理***
CN1148031C (zh) 多媒体信息通信***
CN1801814A (zh) 一种离线消息发送和接收方法
CN101047822A (zh) 缩略图生成装置及摄像装置
CN1262986C (zh) 图象处理方法及图象处理装置
CN1756173A (zh) 音频信号传输***及方法、服务器、终端设备和记录介质
CN1490733A (zh) 服务提供方法
CN1742482A (zh) 合成图像输出设备以及合成图像传送设备
CN1197335C (zh) 通信***
CN1545303A (zh) 承载和控制相分离的通信网络中多方会议业务的实现方法
CN1823298A (zh) 对象决定装置和摄像装置
CN1703726A (zh) 图像处理装置、图像显示装置、图像处理方法以及图像显示方法
CN1864426A (zh) 通信***、基站、终端电台、通信装置、通信管理方法、控制程序和记录它的计算机可读记录介质
CN101047525A (zh) 智能型ivr接口网关数据处理方法

Legal Events

Date Code Title Description
C06 Publication
C10 Entry into substantive examination
PB01 Publication
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20050413

Termination date: 20131124