CN114845078A - 通话方法及电子设备 - Google Patents
通话方法及电子设备 Download PDFInfo
- Publication number
- CN114845078A CN114845078A CN202210530846.0A CN202210530846A CN114845078A CN 114845078 A CN114845078 A CN 114845078A CN 202210530846 A CN202210530846 A CN 202210530846A CN 114845078 A CN114845078 A CN 114845078A
- Authority
- CN
- China
- Prior art keywords
- call
- target
- service request
- component
- call service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 175
- 230000006854 communication Effects 0.000 title claims abstract description 145
- 238000004891 communication Methods 0.000 title claims abstract description 144
- 238000012545 processing Methods 0.000 claims abstract description 86
- 230000006870 function Effects 0.000 claims description 54
- 230000015654 memory Effects 0.000 claims description 43
- 238000011156 evaluation Methods 0.000 claims description 26
- 238000004590 computer program Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 abstract description 93
- 230000003993 interaction Effects 0.000 description 70
- 230000000875 corresponding effect Effects 0.000 description 55
- 238000012546 transfer Methods 0.000 description 37
- 238000004458 analytical method Methods 0.000 description 33
- 239000010410 layer Substances 0.000 description 21
- 230000005540 biological transmission Effects 0.000 description 20
- 238000010586 diagram Methods 0.000 description 17
- 230000002452 interceptive effect Effects 0.000 description 17
- 238000010295 mobile communication Methods 0.000 description 14
- 238000005516 engineering process Methods 0.000 description 13
- 230000004044 response Effects 0.000 description 12
- 230000000007 visual effect Effects 0.000 description 12
- 238000012790 confirmation Methods 0.000 description 11
- 238000007726 management method Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 6
- 230000011664 signaling Effects 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 4
- 230000001413 cellular effect Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 210000004027 cell Anatomy 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000011144 upstream manufacturing Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1818—Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1073—Registration or de-registration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1096—Supplementary features, e.g. call forwarding or call holding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
- H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
- H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
- H04M1/6041—Portable telephones adapted for handsfree use
- H04M1/6058—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
- H04M1/6066—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone including a wireless connection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
Abstract
一种通话方法及电子设备;涉及终端技术领域,参与通话过程的分布式设备将各自具有的能力进行划分并进行注册。在通话过程中,能够根据已注册的能力选择最适用的能力对应的设备处理通话业务,提高用户使用体验。该方法包括:第一设备建立与至少一个第二设备的通信连接,并接收各个第二设备的能力的注册信息。在接收到通话业务时,能够根据自身的能力信息以及第二设备的能力的注册信息,选择包含处理该通话业务能力的目标设备,处理通话业务并接收反馈信息。
Description
技术领域
本申请实施例涉及终端技术领域,尤其涉及一种通话方法及电子设备。
背景技术
在分布式***中,多个电子设备之间能够实现协同工作。比如,电子设备(如手机,平板等),通过无线通信技术,能够利用蓝牙耳机等可穿戴设备实现音频数据的采集和播放,方便用户操作。又比如,电子设备利用投屏技术,将本地显示屏显示内容通过无线通信技术发送至大屏设备进行显示,方便用户观看。
但是,在上述两个场景中,电子设备之间只能进行单一的音频数据或者视频数据传输实现协同工作,无法适用于目前视频通话过程中,音频数据和视频数据同步实时传输的场景。并且,只能按照固定规则选择协同工作的电子设备,忽略无线连接的稳定性,影响用户使用体验。
发明内容
本申请实施例提供的通话方法及电子设备,参与通话过程的分布式设备将各自具有的能力进行划分并进行注册。在通话过程中,能够根据已注册的能力选择最适用的能力对应的设备处理通话业务,提高用户使用体验。
为达到上述目的,本申请实施例采用如下技术方案:
第一方面,本申请实施例提供一种通话方法,应用于第一电子设备,该方法可以包括:建立与至少一个第二设备的通信连接。接收至少一个第二设备的能力的注册信息。接收第一通话业务请求。根据第一设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第一通话业务请求的第一目标设备;第一目标设备为第一设备或至少一个第二设备中的一个设备。发送第一通话业务请求至第一目标设备。接收第一目标设备对处理第一通话业务请求的第一反馈信息。
其中,第一设备能够接收到第二设备的能力的注册信息,注册信息例如包括第二设备能够在通话过程中实现的功能。示例性的,第二设备为手机,手机中的移动通信模块能够实现拨打电话的网络功能,手机中的音频模块能够实现播放音频的语音播放功能,则手机可以将实现网络功能的移动通信模块以及实现语音播放功能的音频模块向第一设备进行注册。那么后续,第一设备在接收到通话业务时,能够调用相应模块对应的设备执行通话业务。如第一设备选择手机的音频模块播放音频。
如此,在分布式通话***中,各个设备可以将自身所具备的能力进行注册,设置用于接收注册信息的第一设备。进而在需要处理通话业务时,第一设备能够根据已注册的能力,选择最适合处理当前通话业务的设备。进而实现灵活处理通话业务,提高用户使用体验。
在一种可能的实现方式中,根据第一设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第一通话业务请求的第一目标设备,包括:根据第一设备的能力信息以及至少一个第二设备的能力的注册信息,将第一设备的能力和第二设备的能力按照功能类别进行分组,设置每一组别对应的评价指标以及每一评价指标对应的权重。选择用于处理第一通话业务请求的第一组别,利用评价指标和评价指标对应的权重,对第一组别中的第一设备的能力和/或第二设备的能力进行评分,选择第一目标设备,第一目标设备在第一组别中的能力的评分为最高评分。
示例性的,设备能力依靠设备中的功能模块实现,按照不同能力,可以将设备划分为不同的组件构成的设备。根据不同能力能够实现的功能,将能力进行分组,即进行组件的分组。根据不同类别的组件在通话过程中实现的功能,以及影响其工作的因素,为不同类别的组件预配置对应的指标以及指标权重,用于评价同类别组件中的各个组件,获得其中的最优组件。比如,通话控制器根据指标以及对应的权重,对同类别组件中的各个组件进行评分,将获得的分数进行排序,分数最高的组件作为最优组件。通话控制器按照通话过程执行顺序,依次确定各类别组件中的最优组件,则获得一组最优组件,能够获得更好的通话业务处理结果。
在一种可能的实现方式中,在接收第一目标设备对处理第一通话业务请求的第一反馈信息之后,该方法还包括:根据第一反馈信息,确定第二通话业务请求;第二通话业务请求不同于第一通话业务请求。根据第一设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第二通话业务请求的第二目标设备;第二目标设备为第一设备或至少一个第二设备中的一个设备。发送第二通话业务请求至第二目标设备。接收第二目标设备对处理第二通话业务请求的第二反馈信息。
示例性的,假设第一通话业务请求为号码解析请求,第一目标设备中包含号码解析组件。在第一目标设备利用号码解析组件处理号码解析请求后,会将解析结果发送至第一设备,即第一反馈信息为号码解析结果。之后,第一设备根据号码解析结果,确定第二通话业务请求为号码拨打请求,则将该号码拨打请求发送至选定的包含号码拨打能力的第二目标设备,即第二目标设备中包含目标网络组件,能够进行号码拨打。
在一种可能的实现方式中,第一目标设备与第二目标设备为不同的第二设备,第一目标设备用于直接接收第二目标设备发送的通话数据。
示例性的,假设第一目标设备中包含目标网络组件,第二目标设备中包含目标用户交互组件,如果目标用户交互组件与目标网络组件间具备进行直接通信的条件,那么在目标用户交互组件与目标网络组件之间建立直接通信通道。在后续通话过程中,目标用户交互组件与目标网络组件之间能够直接传输通话数据,不必再利用第一设备进行通话数据中转,减少通话数据的跨设备传输,提高通话效率。其中,通话数据例如包括音频数据,视频数据,控制命令等。
在一种可能的实现方式中,接收第一通话业务请求之后,方法还包括:根据第一通话业务请求,选择与第一通话业务请求关联的第一目标设备。
在一些实施例中,不同类别的组件(即能力)间可以建立订阅关系,组成组件组合。其中,组件间建立订阅关系即为组件间建立静态的关联关系。在通话控制器选择组件组合中的一个组件后,根据订阅关系,通话控制器直接确定选择组件组合中的其他组件,不必再执行相应组件类别的组件评分过程。或者,基于上述指标对各组件评分后,再基于订阅关系,提高具有订阅关系的组件被选中的权重,再次进行评分,即基于指标和订阅关系进行两次评分后,确定最终选择的组件。
其中,具有订阅关系的组件可以位于同一个电子设备中,也可以位于不同的电子设备中。例如,电子设备接收用户输入的号码信息,则同样利用该电子设备为用户播放通话语音数据,能够为用户提供更好的使用体验,因此,可以将电子设备中的输入组件和用户交互组件间建立订阅关系。进而后续,在已选择该输入组件的情况下,选择用户交互组件时,能够直接根据订阅关系,确定选择该用户交互组件。
在一种可能的实现方式中,第一设备与至少一个第二设备中的至少一个第二设备之间的设备形态不同。
示例性的,不同设备形态的设备组成分布式通话***,实现基于能力调用对应的设备执行通话过程。
在一种可能的实现方式中,第一设备的能力信息的数量为一个或多个,同一个第二设备的能力的注册信息的数量为一个或多个。
示例性的,设备中包含的能力的数量可以为一个或多个,基于通话业务请求,选择所需能力对应的设备,实现灵活调度设备。并且,根据能力调度设备,可以使得原互不感知的设备能够建立直连通道,提高通话效率。
在一种可能的实现方式中,第一通话业务请求为号码解析请求、号码拨打请求、视频播放和/或采集请求、音频播放和/或采集请求中的任一项。
示例性的,通话场景例如包括语音通话场景,视频通话场景,运营商号码拨打场景,虚拟号码拨打场景。因此,基于不同的通话场景,需要处理不同的通话业务。
在一种可能的实现方式中,第一目标设备为第一设备,发送第一通话业务请求至第一目标设备,接收第一目标设备对处理第一通话业务请求的第一反馈信息,包括:第一目标设备中的第一模块发送第一通话业务请求至第一目标设备中的第二模块。第一模块接收第二模块对处理第一通话业务请求的第一反馈信息。
在一种可能的实现方式中,第一目标设备为至少一个第二设备中的目标第二设备,发送第一通话业务请求至第一目标设备,接收第一目标设备对处理第一通话业务请求的第一反馈信息,包括:第一设备发送第一通话业务请求至目标第二设备。第一设备接收目标第二设备对处理第一通话业务请求的第一反馈信息。
示例性的,第一设备根据通话业务请求,自身的能力信息以及第二设备的能力的注册信息,确定的目标组件可以位于自身(即第一设备)中,也可以位于第二设备中。那么,若目标组件位于第一设备中,则处理通话业务的过程为第一设备内组件间的交互。若目标组件位于某一个目标第二设备中,则第一设备将该通话业务请求发送至目标第二设备中进行处理。
第二方面,本申请实施例提供一种电子设备,包括:处理器和存储器,存储器与处理器耦合,存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当处理器从存储器中读取计算机指令,使得电子设备执行如下操作:建立与至少一个第二设备的通信连接。接收至少一个第二设备的能力的注册信息。接收第一通话业务请求。根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第一通话业务请求的第一目标设备;第一目标设备为电子设备或至少一个第二设备中的一个设备。发送第一通话业务请求至第一目标设备。接收第一目标设备对处理第一通话业务请求的第一反馈信息。
在一种可能的实现方式中,根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第一通话业务请求的第一目标设备,包括:根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,将电子设备的能力和第二设备的能力按照功能类别进行分组,设置每一组别对应的评价指标以及每一评价指标对应的权重。选择用于处理第一通话业务请求的第一组别,利用评价指标和评价指标对应的权重,对第一组别中的电子设备的能力和/或第二设备的能力进行评分,选择第一目标设备,第一目标设备在第一组别中的能力的评分为最高评分。
在一种可能的实现方式中,当处理器从存储器中读取计算机指令,还使得电子设备执行如下操作:根据第一反馈信息,确定第二通话业务请求;第二通话业务请求不同于第一通话业务请求。根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第二通话业务请求的第二目标设备;第二目标设备为电子设备或至少一个第二设备中的一个设备。发送第二通话业务请求至第二目标设备。接收第二目标设备对处理第二通话业务请求的第二反馈信息。
在一种可能的实现方式中,第一目标设备与第二目标设备为不同的第二设备,第一目标设备用于直接接收第二目标设备发送的通话数据。
在一种可能的实现方式中,当处理器从存储器中读取计算机指令,还使得电子设备执行如下操作:根据第一通话业务请求,选择与第一通话业务请求关联的第一目标设备。
在一种可能的实现方式中,电子设备与至少一个第二设备中的至少一个第二设备之间的设备形态不同。
在一种可能的实现方式中,电子设备的能力信息的数量为一个或多个,同一个第二设备的能力的注册信息的数量为一个或多个。
在一种可能的实现方式中,第一通话业务请求为号码解析请求、号码拨打请求、视频播放和/或采集请求、音频播放和/或采集请求中的任一项。
在一种可能的实现方式中,第一目标设备为电子设备,发送第一通话业务请求至第一目标设备,接收第一目标设备对处理第一通话业务请求的第一反馈信息,包括:第一目标设备中的第一模块发送第一通话业务请求至第一目标设备中的第二模块。第一模块接收第二模块对处理第一通话业务请求的第一反馈信息。
在一种可能的实现方式中,第一目标设备为至少一个第二设备中的目标第二设备,发送第一通话业务请求至第一目标设备,接收第一目标设备对处理第一通话业务请求的第一反馈信息,包括:发送第一通话业务请求至目标第二设备。接收目标第二设备对处理第一通话业务请求的第一反馈信息。
此外,第二方面的电子设备的技术效果可以参考第一方面的通话方法的技术效果,此处不再赘述。
第三方面,本申请实施例提供一种电子设备,包括:处理模块,接收模块和发送模块。其中,处理模块,用于建立与至少一个第二设备的通信连接。接收模块,用于接收至少一个第二设备的能力的注册信息。接收模块,还用于接收第一通话业务请求。处理模块,还用于根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第一通话业务请求的第一目标设备;第一目标设备为电子设备或至少一个第二设备中的一个设备。发送模块,用于发送第一通话业务请求至第一目标设备。接收模块,还用于接收第一目标设备对处理第一通话业务请求的第一反馈信息。
在一种可能的实现方式中,处理模块,具体用于根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,将电子设备的能力和第二设备的能力按照功能类别进行分组,设置每一组别对应的评价指标以及每一评价指标对应的权重。选择用于处理第一通话业务请求的第一组别,利用评价指标和评价指标对应的权重,对第一组别中的电子设备的能力和/或第二设备的能力进行评分,选择第一目标设备,第一目标设备在第一组别中的能力的评分为最高评分。
在一种可能的实现方式中,处理模块,还用于根据第一反馈信息,确定第二通话业务请求;第二通话业务请求不同于第一通话业务请求。根据电子设备的能力信息以及至少一个第二设备的能力的注册信息,选择用于处理第二通话业务请求的第二目标设备;第二目标设备为电子设备或至少一个第二设备中的一个设备。发送模块,还用于发送第二通话业务请求至第二目标设备。接收模块,还用于接收第二目标设备对处理第二通话业务请求的第二反馈信息。
在一种可能的实现方式中,第一目标设备与第二目标设备为不同的第二设备,第一目标设备用于直接接收第二目标设备发送的通话数据。
在一种可能的实现方式中,处理模块,还用于根据第一通话业务请求,选择与第一通话业务请求关联的第一目标设备。
在一种可能的实现方式中,电子设备与至少一个第二设备中的至少一个第二设备之间的设备形态不同。
在一种可能的实现方式中,电子设备的能力信息的数量为一个或多个,同一个第二设备的能力的注册信息的数量为一个或多个。
在一种可能的实现方式中,第一通话业务请求为号码解析请求、号码拨打请求、视频播放和/或采集请求、音频播放和/或采集请求中的任一项。
在一种可能的实现方式中,第一目标设备为至少一个第二设备中的目标第二设备。发送模块,具体用于发送第一通话业务请求至目标第二设备。接收模块,具体用于接收目标第二设备对处理第一通话业务请求的第一反馈信息。
可选的,接收模块和发送模块可以统称为收发模块,可以由收发器或收发器相关电路组件实现,可以为收发器或收发单元。
此外,第三方面的电子设备的技术效果可以参考第一方面的通话方法的技术效果,此处不再赘述。
第四方面,本申请实施例提供一种电子设备,该电子设备具有实现如上述第一方面及其中任一种可能的实现方式中所述的通话方法的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第五方面,本申请实施例提供一种计算机可读存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行如第一方面及其中任一种可能的实现方式中任一项所述的通话方法。
第六方面,本申请实施例提供一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行如第一方面及其中任一种可能的实现方式中任一项所述的通话方法。
第七方面,提供一种电路***,电路***包括处理电路,处理电路被配置为执行如上述第一方面及其中任一种可能的实现方式中所述的通话方法。
第八方面,本申请实施例提供一种芯片***,包括至少一个处理器和至少一个接口电路,至少一个接口电路用于执行收发功能,并将指令发送给至少一个处理器,当至少一个处理器执行指令时,至少一个处理器执行如上述第一方面及其中任一种可能的实现方式中所述的通话方法。
附图说明
图1为本申请实施例提供的通信***的示意图;
图2为本申请实施例提供的电子设备的结构示意图;
图3为本申请实施例提供的界面示意图一;
图4为本申请实施例提供的界面示意图二;
图5为本申请实施例提供的界面示意图三;
图6为本申请实施例提供的通话场景示意图一;
图7为本申请实施例的电子设备的软件结构框图的示意图;
图8为本申请实施例提供的通话控制器的结构示意图;
图9为本申请实施例提供的通话方法流程图一;
图10为本申请实施例提供的通话方法流程图二;
图11为本申请实施例提供的界面示意图四;
图12为本申请实施例提供的通话方法流程图三;
图13为本申请实施例提供的界面示意图五;
图14为本申请实施例提供的通话场景示意图二;
图15为本申请实施例提供的通话场景示意图三;
图16为本申请实施例提供的通话场景示意图四;
图17为本申请实施例提供的通话方法流程图四;
图18为本申请实施例提供的通话场景示意图五;
图19为本申请实施例提供的界面示意图六;
图20为本申请实施例提供的通话装置的结构示意图。
具体实施方式
下面结合附图对本申请实施例提供的通话方法及电子设备进行详细地描述。
本申请实施例的描述中所提到的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括其他没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,除非另有说明,“多个”的含义是指两个或两个以上。本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
首先,为了便于理解,下面先对本申请实施例可能涉及的相关术语和概念进行介绍。
(1)通话过程
通话过程是指通话双方用户借助电子设备,完成双向的语音流、视频流的交换过程。通话过程可以为点对点通话过程,如通话双方用户利用对讲机执行通话过程。通话过程还可以利用其它设备中转,完成通话。比如,电子设备中安装有用户标识模块(subscriberidentification module,SIM)卡,利用SIM通过运营商网络执行通话过程。又比如,电子设备中安装有即时通讯应用程序(如微信、skype等),利用即时通讯应用程序执行通话过程。
(2)基带处理器
基带处理器也可以描述为基带芯片,用于合成即将发射的基带信号,或对接收到的基带信号进行解码。基带芯片需要运营商网络的支持。例如,手机中安装有5G基带芯片,可以支持5G通信,该手机在通信过程中,需要在运营商5G网络的支持下才能达到5G的带宽。
进一步的,基带处理器承担了双向数据的收发。其中,数据可以包括音频、视频、文本、图片、流媒体等数据,还可以包括控制通话过程的控制信令。
在一些实施例中,电子设备中用于与其他电子设备通信的网络模块(如基带处理器等),可以描述为网络组件。在通话过程中,网络组件可以直接与对端电子设备相连,例如对端电子设备为小型对讲机。网络组件也可以通过某个中转设备中转后与对端电子设备通信,例如中转设备为运营商基站、即时通讯应用程序服务器等。
(3)分布式通话***
其中,分布式***(distributed system)是指由多个电子设备组合而成的一个整体。在分布式***中,可以将一个任务分配给其中的各个电子设备协作完成。相应的,分布式通话***中,至少两个电子设备通过无线连接或者有线连接的方式连接后,共同执行通话任务。
需要说明的是,在分布式通话***中的设备可以称之为分布式通话设备。分布式通话***处于分布式环境,该分布式环境可以为局域网,或广域网,对此本申请实施例不做限定。
(4)组件
组件(component)是对数据和方法的简单封装。组件具备特定的属性和方法,属性是组件数据的简单访问者,方法是组件的功能。
示例性的,按照通话过程中,电子设备实现的功能,可以将电子设备按照组件维度进行分割。比如,手机具有处理音频数据的能力,例如包括用于处理音频数据的音频组件,如麦克风,扬声器等。电视具有显示视频画面的能力,例如包括用于显示视频画面的视频组件,如显示屏,摄像头等。
图1为本申请实施例提供的一种通话方法应用的通信***的示意图。如图1所示,该通信***包括第一电子设备100和至少一个第二电子设备200(如第二电子设备1,第二电子设备2和第二电子设备3)。其中,通信***也可以描述为分布式***,分布式通信***,分布式通话***等,第一电子设备100和第二电子设备200基于该***,协作完成共同的任务,如通话任务等。
在通信***中,第一电子设备100和第二电子设备200之间可以通过有线网络或者无线网络连接。比如,第一电子设备100可分别与上述一个或多个第二电子设备200建立短距离无线通信连接,实现第一电子设备100和第二电子设备200之间的通信功能。例如,第一电子设备100可与第二电子设备200建立蓝牙连接、无线保真(wireless fidelity,Wi-Fi)连接、紫蜂协议(ZigBee)连接或者近场通信(near field communication,NFC)连接等通信连接。又比如,第一电子设备100还可以通过蜂窝网络互联或者转接设备(例如,USB数据线或Dock设备)与第二电子设备200建立通信连接。本申请实施例对设备之间的连接方式不做具体限定。
可选的,上述第一电子设备100为通信***中的主设备,设置有中心控制器,如通话控制器。第一电子设备100用于接收分布式通话***中用于通话的各个组件的注册,以及控制组件参与通话过程。其中,用于通话的组件例如包括声音播放组件,声音采集组件,显示组件,网络组件等。
示例性的,第一电子设备100例如包括大屏显示设备(如智慧屏等)、手机、平板电脑(Pad)、个人计算机(personal computer,PC)、笔记本电脑、台式电脑、车载设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、工业控制(industrial control)中的无线终端、无人驾驶(self driving)中的无线终端、远程医疗(remote medical)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端、人工智能(artificialintelligence)设备等终端设备,本申请实施例对第一电子设备100的具体类型不作任何限制。
可选的,上述第二电子设备200为通信***中的从设备,包含用于通话的组件。进一步的,第二电子设备200中用于通话的组件能够与第一电子设备100中的组件和/或其他第二电子设备200中的组件直接进行数据传输,完成通话任务。
示例性的,第二电子设备200例如包括手机、大屏显示设备(如智慧屏等)、平板电脑(Pad)、个人计算机(personal computer,PC)、笔记本电脑、台式电脑、车载设备、可穿戴设备(如蓝牙耳机,智能手表等)、音响、虚拟现实(virtual reality,VR)终端设备、增强现实(augmented reality,AR)终端设备、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、工业控制(industrial control)中的无线终端、无人驾驶(self driving)中的无线终端、远程医疗(remote medical)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端、人工智能(artificialintelligence)设备等终端设备,本申请实施例对第二电子设备200的具体类型不作任何限制。
在一些实施例中,上述第一电子设备100和第二电子设备200也可以称之为分布式通话设备,用于参与通话过程,为用户提供通话体验。
可选的,如图1所示,上述通信***中还可以包括服务器300。服务器300用于提供行运营商网络(如移动网络,电信网络,联通网络等),第一电子设备100或第二电子设备200通过服务器300,实现利用运营商网络进行拨打电话。其中,在本申请实施例中,电子设备利用运营商网络拨打电话,也可以描述为电子设备拨打运营商电话,电子设备利用电话应用程序拨打电话等,对此下文不再进行赘述。
示例性的,服务器300可以是云服务器或者网络服务器等具有计算功能的设备或服务器。服务器300可以是一台服务器,也可以是由多台服务器组成的服务器集群,或者是一个云计算服务中心。
示例性的,图2示出了电子设备的一种结构示意图,该电子设备可以为上述第一电子设备100和/或第二电子设备200。电子设备可以包括处理器110,外部存储器接口120,内部存储器121,电源管理模块130,天线1,无线通信模块140。
可以理解的是,本申请实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了***的效率。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作***,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备的各种功能应用以及数据处理。
电源管理模块130用于连接电池,充电管理模块与处理器110。电源管理模块130接收电池和/或充电管理模块的输入,为处理器110,内部存储器121,无线通信模块140等供电。其中,充电管理模块用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。充电管理模块为电池充电的同时,还可以通过电源管理模块130为电子设备供电。在另一些实施例中,电源管理模块130和充电管理模块也可以设置于同一个器件中。
无线通信模块140可以提供应用在电子设备上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星***(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块140可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块140经由天线1接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块140还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线1转为电磁波辐射出去。
在一些实施例中,电子设备还可以包括天线2和移动通信模块150。移动通信模块150可以提供应用在电子设备上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线2接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线2转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
其中,天线1和天线2用于发射和接收电磁波信号。电子设备中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线2复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
在一些场景中,电子设备的天线1和无线通信模块140耦合,天线2和移动通信模块150耦合,使得电子设备可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯***(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code divisionmultiple access,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位***(global positioning system,GPS),全球导航卫星***(globalnavigation satellite system,GLONASS),北斗卫星导航***(beidou navigationsatellite system,BDS),准天顶卫星***(quasi-zenith satellite system,QZSS)和/或星基增强***(satellite based augmentation systems,SBAS)。
在一些实施例中,电子设备还可以包括用户标识模块(subscriberidentification module,SIM)卡接口151,用于连接SIM卡。SIM卡可以通过***SIM卡接口151,或从SIM卡接口151拔出,实现和电子设备的接触和分离。电子设备可以支持1个或N个SIM卡接口,N为大于1的正整数。
在一些实施例中,无线通信模块140和移动通信模块150可以作为电子设备中的网络组件。
电子设备的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块140,调制解调处理器以及基带处理器等实现。比如,电子设备中安装有即时通讯应用程序,利用无线通信模块140,为用户提供拨打网络电话的功能,如畅连通话等。又比如,电子设备中利用SIM卡接口151连接SIM卡后,利用移动通信模块150,经过运营商云服务,实现拨打电话。
在一些实施例中,电子设备还可以包括音频模块160。音频模块160包括扬声器,受话器,麦克风,耳机接口等。用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块160还可以用于对音频信号编码和解码。在一些实施例中,音频模块160可以设置于处理器110中,或将音频模块160的部分功能模块设置于处理器110中。电子设备可以通过音频模块,扬声器,受话器,麦克风,耳机接口,以及应用处理器等实现音频功能。例如接听或拨打电话,音乐播放,录音等。
在一些实施例中,在通话过程中,电子设备利用音频模块160播放音频和/或采集音频数据,从而实现通话。音频模块160可以作为电子设备中的音频组件。
在一些实施例中,电子设备还可以包括显示屏170。电子设备可以通过GPU,显示屏170,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏170和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏170用于显示图像,视频等。显示屏170包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏170,N为大于1的正整数。
在一些实施例中,电子设备还可以包括摄像头180。电子设备还可以通过ISP,摄像头180,视频编解码器,GPU,显示屏170以及应用处理器等实现拍摄功能。
ISP用于处理摄像头180反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头180中。
摄像头180用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备可以包括1个或N个摄像头180,N为大于1的正整数。
视频编解码器用于对数字视频压缩或解压缩。电子设备可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
在一些实施例中,在视频通话过程中,电子设备利用显示屏170显示视频画面。和/或通过摄像头180采集用户视频画面,从而实现实时视频通话。显示屏170和摄像头180可以作为电子设备中的视觉组件。
在一些实施例中,电子设备还可以包括传感器模块190。传感器模块190可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器,骨传导传感器等。
其中,触摸传感器,也称“触控器件”。触摸传感器可以设置于显示屏170,由触摸传感器与显示屏170组成触摸屏,也称“触控屏”。触摸传感器用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏170提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器也可以设置于电子设备的表面,与显示屏170所处的位置不同。
在一些实施例中,传感器模块190或触摸屏可以作为电子设备中的用户交互组件。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pul se code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器,充电器,闪光灯,摄像头180等。例如:处理器110可以通过I2C接口耦合触摸传感器,使处理器110与触摸传感器通过I2C总线接口通信,实现电子设备的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块160耦合,实现处理器110与音频模块160之间的通信。在一些实施例中,音频模块160可以通过I2S接口向无线通信模块140传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块160与无线通信模块140可以通过PCM总线接口耦合。在一些实施例中,音频模块160也可以通过PCM接口向无线通信模块140传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块140。例如:处理器110通过UART接口与无线通信模块140中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块160可以通过UART接口向无线通信模块140传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏170,摄像头180等***器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头180通过CSI接口通信,实现电子设备的拍摄功能。处理器110和显示屏170通过DSI接口通信,实现电子设备的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头180,显示屏170,无线通信模块140,音频模块160,传感器模块190等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口是符合USB标准规范的接口,具体可以是MiniUSB接口,Micro USB接口,USB Type C接口等。USB接口可以用于连接充电器为电子设备充电,也可以用于电子设备与***设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在本申请另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
在一些实施例中,电子设备在通过蓝牙,Wi-Fi等无线通信技术连接音频设备如蓝牙耳机后,能够将本地语音能力扩展到音频设备,向音频设备发送音频数据,利用音频设备进行播放,并且接收音频设备采集的音频数据。
示例性的,如图3中(a)所示手机检测到来电,显示来电提示界面301。响应于用户操作控件31接听电话的操作,读取音频设备列表,按照预设规则选择用于通话的音频设备,并显示如图3中(b)所示的通话界面302。其中,音频设备列表中包括本地音频模块,与手机连接可用于处理音频数据的设备。预设规则包括音频设备选择的优先级顺序,一般的该优先级顺序预配置在手机中。手机在需要选择音频设备时,基于该优先级顺序,选择优先级较高的音频设备处理音频数据。比如,优先级顺序从大至小为蓝牙耳机或音箱>有线耳机>本地音频模块。假设在图3所示的场景中,手机与蓝牙耳机32之间已建立蓝牙连接。那么,手机响应于用户操作控件31接听电话的操作,确定利用蓝牙耳机接听电话。在通话过程中,手机会通过蓝牙耳机32采集用户语音,并向用户播放来电音频。
上述音频分布式场景中,电子设备在选择音频设备的过程中,仅会按照固定的预设规则进行选择,并不会结合当前场景的实际情况进行选择,因此确定选择的音频设备可能并不能保证通话过程的稳定性。例如,在图3所示的场景中,若此时蓝牙连接稳定性较差,手机按照预设规则,仍然会选择蓝牙耳机接听电话,造成通话质量较差,影响用户使用体验。
进一步的,目前电子设备能够应用于多种通话场景,例如应用于上述使用通话应用程序,并基于运营商云的通话场景。还可以应用于使用其他即时通讯应用程序的通话场景,如语音通话场景、视频通话场景等。
示例性的,如图4中(a)所示的界面401,响应于用户点击接听控件41的操作,手机接通视频通话,并显示图4中(b)所示的视频通话界面402。假设当前手机与蓝牙耳机建立蓝牙连接,同样的,手机会优先将音频数据发送至蓝牙耳机,因此在当前场景中同样会出现由于按照固定预设规则选择音频设备,导致影响通话质量的问题。进一步的,受限于手机显示屏的显示面积,影响视频通话界面402的显示效果。因此,可以利用无线投屏技术,将视频通话界面402的显示内容投屏至大屏设备进行显示。如图5中(a)所示界面501,响应于用户点击控件51的操作,手机显示如图5中(b)所示界面502,为用户提供更多的操作选项。响应于用户点击分享屏幕控件52的操作,手机将界面502的显示内容投屏至电视进行显示,手机和电视构成分布式***。如图5中(c)所示,由电视显示界面503,放大显示视频通话界面的内容,为用户提供更好的显示效果。
但是,无线投屏技术只能够将显示内容进行投屏显示,但是音频数据并不能够同时发送。如图5中(c)所示场景,手机将视频通话界面投屏至电视进行显示时,还需要利用手机当前正在使用的音频模块进行通话。如手机连接蓝牙耳机53,则需要利用蓝牙耳机53处理音频数据,利用电视显示视频画面。而并不能利用电视显示视频画面的同时播放和采集音频数据,影响用户使用体验。进一步的,如图5中(c)所示,应用无线投屏技术后,电视的整个显示屏只能用于显示投屏画面,而无法执行其他操作。
在另一些实施例中,电子设备还可以基于设备虚拟化技术,利用其他电子设备,执行通话过程。比如,不支持***SIM卡的电视,通过利用手机的SIM卡拨打电话功能,实现拨打运营商电话。又比如,手机中安装有基于IP的语音传输(voice over internetprotocol,VoIP)应用程序,则可以利用家庭光猫的VoIP通话能力,拨打VoIP电话。
示例性的,如图6所示,电视61不支持***SIM卡,应用设备虚拟化技术,利用手机62拨打运营商电话的功能,通过运营商云63拨打电话。在通话过程中,音频数据由通话对端的电子设备发送至手机62后,再由手机62转发至电视61进行播放。假设当前电视61通过无线通信技术与音响64建立蓝牙连接,电视61可以利用音响64播放音频数据。在当前场景中,电视61与手机62建立连接,并且与音响64建立连接,但是手机62和音响64没有建立直接连接关系,不能互相感知。因此,手机62接收到音频数据后不能直接发送至音响64,只能先将音频数据发送至电视61,再由电视61将音频数据发送至音响64进行播放,造成不必要的数据转发,影响传输效率。
可以看出,上述图3-图6所示的分布式通话场景中,均是将参与通话过程的分布式通话设备按照设备粒度进行调度,因此可能造成非最佳设备组合导致的影响通话质量的问题,以及跨设备传输数据导致的影响传输效率的问题。
由此,本申请实施例提出一种通话方法,能够在通话过程中,将参与通话过程的分布式通话设备按照组件粒度进行划分。在通话过程中,调用相应的组件,保证通话质量,并且减少跨设备传输数据,为用户提供更好的使用体验。
在一些实施例中,将分布式通话设备按照在通话过程中实现的功能进行组件划分,并将划分后的组件进行分组,将同一类别的组件划分为一组组件。具体的,在组件划分的过程中,电子设备需要遵循如下原则:首先,将执行单一业务且具有明确输入和输出的功能模块划分为一个组件。如号码解析组件,能够将输入的语音命令进行处理,输出号码信息。其次,分布式通话设备中的组件不仅能够与该分布式通话设备内的其他组件进行数据交互,还能够通过对外接口与其他分布式通话设备中的组件进行数据交互。其中,交互数据例如包括通话数据和/或控制信令。
示例性的,如图7所示,电子设备的软件***可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android***为例,示例性说明电子设备的软件结构。图7是本申请实施例的电子设备的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android***分为四层,从上至下分别为应用程序层,应用程序框架层,服务层,以及内核层。
其中,应用程序层包括语音助手,拨号盘,通话界面等应用程序。应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。如图7所示,应用程序框架层可以包括本地电话管理,通话控制器,号码解析,联系人/通话记录存储等。服务层包括蜂窝通话服务,Voip通话协议栈等。内核层是硬件和软件之间的层。内核层包含显示驱动,音频驱动,传输控制协议(transmission control protocol,TCP)协议栈或IP协议栈,蜂窝协议栈,编解码,蓝牙/WIFI协议栈等。
上述各层中的模块按照在通话过程中实现的功能,可以划分为不同的组件。如下结合图7所示的电子设备软件结构框图对组件的划分进行说明。在通话过程中,组件例如可以分类为输入组件,号码解析组件,用户交互组件,以及网络组件。
其中,输入组件,用于在通话开始前接收用户的输入。并且,在通话过程中向其他组件输入数据。比如,输入组件能够接收用户的语音命令,或文本命令。可选的,在通话过程的软件实现过程中,输入组件可以只包含输出接口,而不包含输入接口。比如,在通话过程中,输入组件将语音命令发送至号码解析组件进行处理,而不需要再接收其他组件发送的数据。示例性的,如图7所示,输入组件例如包括位于应用程序层的语音助手和拨号盘,用于向下一组件发送接收到的用户输入的呼叫信息。如拨号盘向下一组件发送接收到的用户拨号信息。
号码解析组件,用于处理输入组件输入的数据,输出号码信息。可选的,号码解析组件接收到的输入数据为号码信息,如为具体的待拨打号码,则号码解析组件不必再做处理,直接输出接收到的号码信息。可选的,号码解析组件接收到输入数据为语音数据,则需要对语音数据进行解析,将语音数据转化为文本信息,再对文本信息进行语义分析,输出号码信息。或者在语义分析后获得用户名,再利用用户名在电话簿中查找相应的号码信息,输出确定的号码信息。示例性的,如图7所示,号码解析组件例如包括位于应用程序框架层的号码解析。
网络组件,用于接收号码解析组件输出的号码信息,基于号码信息按照协议规范,生成呼出信令,进行拨号。例如,号码信息为运营商号码(即普通手机号码),网络组件为基带处理器,则按照通话协议,利用运营商网络向其他电子设备发送呼出信令。或者,号码信息为即时通讯应用程序中的号码信息,网络组件为即时通讯应用程序中的通话模块,则直接利用无线通信网络向其他电子设备发送呼出信令。相应的,网络组件还可以接收并处理接收到的呼入信令。进一步的,在与对端电子设备的通话连接建立后,网络组件还可以用于与对端电子设备传输音频数据和/或视频数据。示例性的,如图7所示,网络组件,例如包括位于服务层的蜂窝通话服务,Voip通话协议栈。
用户交互组件,用于在通话过程中接收用户的输入数据,和/或向用户输出数据。可选的,按照组件与用户的交互方式可以将用户组件划分为听觉组件,视觉组件以及交互组件。例如,听觉组件也可以描述为音频组件或语音组件,包括扬声器,听筒,麦克风等音频模块。视觉组件也可以描述为视频组件或图像组件,包括显示屏,摄像头等。交互组件包括实体键盘或软键盘,应用程序中的控件,电子设备按键,触摸传感器等。其中,听觉组件能够与用户进行声音的交互,其输入为音频数据,输出为用户可感知的声音。视觉组件能够与用户进行图像数据的交互,其输入为视频数据,输出为用户可感知的图像。交互组件也可以直接描述为控制组件或触觉组件,用于接收用户输入的控制命令,如用户通过点击显示屏上显示的控件,输入挂断命令。示例性的,如图7所示,用户交互组件例如包括位于应用程序层中的通话界面。如在通话过程中,通话界面检测到用户的触摸操作,执行对应的动作。
需要说明的是,分布式通话设备包含的组件既可以为上述软件组件,也可以为硬件组件。例如,实体键盘通过电缆或无线连接的方式接入电子设备,在电子设备中配置一软件代理,用于将用户在实体键盘上的输入转化为命令,则该实体键盘不能单独划分为组件。但是,若实体键盘能够直接将用户的输入转化为明确的命令,并通过电缆或无线连接的方式发送至其他组件,则该实体键盘能够单独划分为组件。也就是说,组件划分后,必须能够保证与其他组件交互的过程中具有明确的输入和输出。
需要说明的是,在通话过程中,上述输入组件的数据接收能力为可选的,但必须具有数据发送能力。号码解析组件,网络组件和用户交互组件则必须同时数据接收能力和数据发送能力。
可以理解的是,上述组件划分方式仅为一种示例性说明,还可以包含其他划分方式,本申请实施例对此不做具体限定。
下文以上述组件划分方式为例,对本申请实施例提供的通话方法进行介绍。
在一些实施例中,分布式通话设备在参与通话过程之前,需要将自身包含的组件进行划分及分组,并将组件分组情况上报至通话控制器,便于通话控制器在通话过程中调用最优的组件组合,执行通话过程。示例性的,如图14所示,手机和电视将自身可用于执行通话过程的功能模块划分为组件。如图15所示,手机和电视将划分后的组件向位于电视中的通话控制器进行注册。图14和图15所示场景的相关内容详见下文描述,在此不再详细说明。
其中,通话控制器也可以描述为控制器,通话控制模块,中心控制器等,用于对分布式通话过程进行管理。将组件分组情况上报至通话控制器的过程,也可以描述为注册过程,各个分布式通话设备将自身包含的组件向通话控制器进行注册,以完成注册过程。该注册过程为自动注册过程,电子设备在检测到包含通话控制器的电子设备后,即可自动完成注册过程。示例性的,如图7所示,通话控制器可以位于应用程序框架层。
示例性的,如图1所示的分布式通话***中,第一电子设备和第二电子设备需要进行组件划分,并将组件划分结果上报至第一电子设备的通话控制器中。如下表1所示,示出一种音频组件注册信息。其中,音频组件的输入格式,用于描述音频组件对应的编码方式,采样率,码率以及声道个数。例如,编码方式为MP4编码方式,对应的码率为1411.2Kbps,声道为双通道。编码格式为脉冲编码调制(pulse code modulation,PCM)编码方式,对应的码率为380Kbps,声道为单通道。
表1
在一些实施例中,若电子设备离线或某个组件离线,则需要执行反注册流程。比如,离线的电子设备中的全部组件或离线的某个组件向通话控制器发送离线通知,通话控制器则将离线组件的注册信息删除或者标识已离线,从而避免在通话过程中调度已离线的组件,出现通话异常的问题。其中,电子设备离线的场景例如包括电子设备关机,电子设备中的全部组件失去能力等。某个组件离线的场景例如包括即时通讯应用程序退出登录,SIM卡掉网等。
在一些实施例中,分布式通话***中的一个或多个电子设备内均可以配置通话控制器。但是,若分布式通话***中存在多个通话控制器,多个通话控制器不会同时工作,以避免通话过程执行错误。也就是说,在分布式通话场景中,仅在其中一个分布式通话设备中部署通话控制器。
具体的,通话控制器的部署原则包括如下一项或几项原则:
1)将分布式通话***中,拥有较多数量组件的电子设备确定为第一电子设备,部署通话控制器,从而减少跨设备的数据传输。比如,配置有通话控制器的电子设备广播通知自身拥有的组件数量,通过信息交互,拥有组件数量最多的电子设备内部的通话控制器开始工作,接收各个组件的注册。
2)将通话过程中,持续保持在线状态的电子设备确定为第一电子设备,部署通话控制器,从而保证通话业务的连续性。
3)将处理能力能够满足通话过程中组件调度与控制需求的电子设备,确定为第一电子设备,部署通话控制器,从而保证通话控制器能够正确处理通话任务。
比如,手机中拥有的组件数量为分布式通话***中拥有组件数量最多的电子设备,能够保证在通话过程中持续在线,且处理器能力足够,则将通话控制器部署在手机中。又比如,蓝牙耳机中仅拥有音频组件,拥有组件数量较少,则不必部署通话控制器。
在一些实施例中,通话控制器在接收各个分布式通话设备中组件的注册后,按照各组件功能,以及通话过程中需要应用的组件及执行顺序,选择一组最优组件组合,协同处理通话任务。
示例性的,如图8所示,通话控制器中例如包括注册模块,决策模块,数据中转模块。其中,注册模块用于接收各个组件的注册。决策模块,用于根据输入组件输入的数据,在已经注册的组件中,确定最优的用于执行通话任务的组件组合。数据中转模块,用于连接各个组件的输入接口或输出接口,完成数据的中转。
其中,数据的中转包括接口地址的中转和/或通话数据的中转。若最优组件组合中,逻辑上相连的两个组件能够依靠所在的电子设备能力直接完成通话数据传输,则数据中转模块仅需将两个组件的接口地址进行中转,协助两个组件建立直连通道。即在两个组件间建立设备到设备(device to device,D2D)通信通道。比如,假设网络组件与用户交互组件为逻辑上前后连接的两个组件,网络组件输出音频流的方式为pipe。用户交互组件输入音频流的方式也为pipe,接口地址为192.168.1.5:8080。那么,数据中转组件只需将用户交互组件的接口地址发送至网络组件,网络组件基于接收到的接口地址,就能够将接收到的音频数据以pipe的方式发送至用户交互组件进行播放。
若最优组件组合中,逻辑上相连的两个组件间传输的数据格式不同,和/或数据收发方式不同,和/或无法建立直连通道,则数据中转模块需要接收上一组件输出的数据发送至下一组件,完成数据的中转。比如,假设网络组件与用户交互组件为逻辑上前后连接的两个组件,网络组件支持通过Wi-Fi网络建立连接,用户交互组件仅支持通过蓝牙建立连接,则当前网络组件与用户交互组件无法建立直连通道,必须通过数据中转模块进行数据中转,执行通话过程。
如下介绍通话控制器中各个模块如何调度组件执行通话任务。
示例性的,如图9所示,各个组件已完成注册流程,通话控制器执行拨打电话的通话过程包括如下步骤。
S901、输入组件向数据中转模块发送呼叫信息。
S902、数据中转模块向决策模块发送呼叫信息。
在一些实施例中,输入组件在通话过程开始之前,先接收用户输入的呼叫信息。之后,将该呼叫信息发送至数据中转模块,由数据中转模块将该呼叫信息转发至决策模块。其中,呼叫信息例如包括拨号号码,在电话簿中点击的通话记录,在电话簿中点击的用户名等。
S903、决策模块确定目标号码解析组件。
S904、决策模块向数据中转模块发送目标号码解析组件地址。
在一些实施例中,在步骤S903和步骤S904中,决策模块根据呼叫信息,在已注册的号码解析组件中确定最优的目标号码解析组件。并且,将已确定的目标号码解析组件地址发送至数据中转模块,便于数据中转模块向目标号码解析模块发送呼叫信息。
S905、数据中转模块向目标号码解析模块发送呼叫信息。
S906、目标号码解析模块确定号码信息。
S907、目标号码解析模块向数据中转模块发送号码信息。
在一些实施例中,在步骤S905-步骤S907中,目标号码解析模块接收到数据中转模块转发的呼叫信息后,对呼叫信息进行解析,获得号码信息。即将呼叫信息转化为能够拨打的号码。并且,将号码信息发送至数据中转模块。
S908、数据中转模块向决策模块发送号码信息。
S909、决策模块确定目标网络组件。
S910、决策模块向数据中转模块发送目标网络组件地址。
在一些实施例中,在步骤S908-步骤S910中,决策模块在接收到数据中转模块转发的号码信息后,根据号码信息,确定已注册的网络组件中最优的目标网络组件。并且,将目标网络组件地址发送至数据中转模块,以便于数据中转模块将号码信息转发至目标网络组件。
S911、数据中转模块向目标网络组件发送号码信息。
S912、目标网络组件发起通话,等待应答。
S913、目标网络组件向数据中转模块发送号码信息接收响应。
在一些实施例中,在步骤S911-步骤S913中,目标网络组件接收到数据中转模块转发的号码信息后,利用号码信息向对端电子设备发起通话,等待对端电子设备接听。并且,向数据中转模块发送号码信息接收响应信号,用于通知数据中转模块可以开始D2D通信确认流程。
S914、数据中转模块向决策模块发送D2D确认请求。
S915、决策模块确定目标用户交互组件,并确定目标用户交互组件与目标网络组件间是否能够进行D2D通信。
S916、决策模块向数据中转模块发送D2D确认响应。
在一些实施例中,在步骤S914-步骤S916中,数据中转模块在接收到号码信息接收响应信号后,确定目标网络组件已经发起通话,可以开始执行D2D通信确认流程,向决策模块发送D2D确认请求。决策模块首先确定已注册的用户交互组件中最优的目标用户交互组件,之后,确定目标用户交互组件与目标网络组件间是否能够进行D2D通信。
若目标用户交互组件与目标网络组件间能够进行D2D通信,则执行图9所示的步骤S917a-步骤S919a。若目标用户交互组件与目标网络组件间不能进行D2D通信,则执行图10所示的步骤S917b-步骤S919b。
S917a、数据中转模块向目标网络组件发送接口地址。
S918a、目标网络组件与目标用户交互组件建立D2D通信通道。
S919a、目标网络组件与目标用户交互组件交互通话数据。
在一些实施例中,如前文所述如果目标用户交互组件与目标网络组件间具备进行D2D通信的条件,那么在目标用户交互组件与目标网络组件之间建立D2D通信通道。在后续通话过程中,目标用户交互组件与目标网络组件之间能够直接传输通话数据,减少通话数据的跨设备传输。其中,通话数据例如包括音频数据,视频数据,控制命令等。
S917b、数据中转模块向目标网络组件发送D2D确认结果。
S918b、目标网络组件与数据中转模块交互通话数据。
S919b、目标用户交互组件与数据中转模块交互通话数据。
在一些实施例中,如前文所述如果目标用户交互组件与目标网络组件间不具备进行D2D通信的条件,那么在后续通话过程中,目标用户交互组件与目标网络组件之间需要通过数据中转模块中转通话数据,不能够进行直接通信。
在上述图9和图10所示的通话流程中,音频数据包括上行音频数据和下行音频数据。其中,上行音频数据为目标用户交互组件采集并向目标网络组件发送的音频数据。下行音频数据为目标网络组件接收到的通话对端电子设备发送的音频数据,目标网络组件向目标用户交互组件发送下行音频数据。视频数据包括上行视频数据和下行视频数据。其中,上行视频数据为目标用户交互组件采集并向目标网络组件发送的视频数据。下行视频数据为目标网络组件接收到的通话对端电子设备发送的视频数据,目标网络组件向目标用户交互组件发送下行视频数据。
在上述图9和图10所示的通话流程中,决策模块需要确定最优的号码解析组件,网络组件,以及用户交互组件。如下介绍决策模块如何在已注册的组件中,确定各类别组件中的最优组件。
在一些实施例中,根据不同类别的组件在通话过程中实现的功能,以及影响其工作的因素,为不同类别的组件预配置对应的指标以及指标权重,用于评价同类别组件中的各个组件,获得其中的最优组件。比如,通话控制器根据指标以及对应的权重,对同类别组件中的各个组件进行评分,将获得的分数进行排序,分数最高的组件作为最优组件。通话控制器按照通话过程执行顺序,依次确定各类别组件中的最优组件,获得一组最优组件。
示例性的,如下介绍各个类别组件的评价指标以及对应的权重。其中,通话控制器能够根据各个组件的注册信息,确定各个组件在各指标下的具体情况,从而进行评分。
下表2为用于评价号码解析组件的指标以及对应的权重。其中,作为号码解析组件,应具备号码解析能力,能够获得最终用于拨号的号码。示例性的,如下表2所示,数据匹配指标对应的权重为60%,即通话控制器优先选择包含用户指定号码或名字的号码解析组件。进一步的,数据集大小指标对应的权重为20%,即若多个号码解析组件均为包含用户指定号码或名字的号码解析组件,则根据数据集大小确定号码解析组件。其中,数据集例如包括通讯录。如选择最大数据集对应的号码解析组件,该号码解析组件具有更好的号码解析能力。但是,若当前拨号场景为拨打陌生号码的场景,即所有的号码解析组件均未包含用户指定的号码或名字,则通话控制器选择包含通讯录或通话记录的号码解析组件,由其判断该号码是否为有效号码,进而确定是否执行后续通话过程。
表2
指标 | 描述 | 权重 |
数据匹配 | 数据集中是否包含指定的号码或者名字 | 60% |
数据集大小 | 通讯录和通话记录总的数据集大小 | 20% |
通讯录 | 是否支持通讯录 | 10% |
通话记录 | 是否支持通话记录 | 10% |
需要说明的是,号码解析组件在上通话控制器注册的过程中,能够注册数据集大小,是否支持通讯录,是否支持通话记录等信息。但是,不必注册数据集,也即不必将数据集发送至号码解析组件。通话控制器在判断数据匹配时,可以将接收到的呼叫信息处理后发送至各个号码解析组件,号码解析组件进行简单的运算确定是否数据匹配即可,将数据匹配结果发送至通话控制器。从而通话控制器能够基于数据匹配结果对各个号码解析组件进行评分。比如,号码解析组件利用哈希(Hash)算法,确定数据匹配结果。
在一些场景中,号码解析组件解析输入数据后可能获得一个号码,或者一组号码。比如,若为一个号码,则决策模块直接根据下述网络组件对应的指标确定目标网络组件。又比如,若为一组号码,则决策模块根据预设条件确定最优的一个号码,再确定对应的目标网络组件。其中,预设条件为最近拨打的号码,拨打次数等。比如,号码解析组件输出号码1和号码2,决策模块确定用户在1小时前拨打过号码1,则此次将号码1确定为最优的号码。
下表3为用于评价网络组件的指标以及对应的权重。其中,服务端是指承载网络组件的电子设备。
表3
需要说明的是,网络组件的选择需要基于号码解析组件的输出结果。比如,号码解析组件输出的号码可以为运营商号码,还可以为即时通讯应用程序对应的网络号码,不同号码类型可能对应不同的网络组件。此外,若号码解析组件的输入数据已经指定了所需的网络组件类型,则输出该网络组件类型以及对应的号码信息,决策模块再确定最优的该类型的网络组件。进一步的,若号码解析组件的输入数据已经指定了所需的网络组件,并且输出的号码信息仅包含一个号码,则决策模块无需工作,直接确定对应的网络组件。例如,用户输入某即时通讯应用程序的一个号码,则直接利用该即时通讯应用程序中的网络组件进行拨号。也就是说,在存在多个号码和/或网络组件的情况下,需要由决策模块进行选择。
此外,上表3中各个指标中,部分信息为网络组件注册时即可提供的信息,部分信息会基于网络状态动态变化,因此,可选的,如图8所示,在通话控制器中还可以包括信息采集模块,用于实时获取网络状态信息,或者用于在需要选择网络组件时获取网络状态信息。决策模块获得信息采集模块输出的网络状态信息,进而确定最优的网络组件。
下表4-表6为用于评价用户交互组件的指标以及对应的权重。其中,如上文所述用户交互组件包括听觉组件,视觉组件以及交互组件。表4为用于评价听觉组件的指标以及对应的权重。表5为用于评价视觉组件的指标以及对应的权重。表6为用于评价交互组件的指标以及对应的权重。
表4
需要说明的是,上表4中,评价连接质量和网络带宽,需要利用信息采集模块获得当前状态参数。评价音频质量时,利用听觉组件的注册信息进行评价即可。
表5
需要说明的是,上表5中,评价连接质量和网络带宽,需要利用信息采集模块获得当前状态参数。评价视频质量,屏幕参数和camera参数时,利用视觉组件的注册信息进行评价即可。
表6
需要说明的是,上表6中,交互组件的评价指标与其硬件能力或软件规格相关,一般为固定参数,因此利用交互组件的注册信息进行评价即可。进一步的,交互组件一般仅传输少量控制数据及文本信息,对连接的质量、网络带宽等要求不高。因此,通话控制器在进行交互组件选择的过程中,应基于当前通话场景中用户所需的交互功能,选择能够为用户提供更多功能的交互组件。
在一些实施例中,不同类别的组件间可以建立订阅关系,组成组件组合。其中,组件间建立订阅关系即为组件间建立静态的关联关系。在通话控制器选择组件组合中的一个组件后,根据订阅关系,通话控制器直接确定选择组件组合中的其他组件,不必再执行相应组件类别的组件评分过程。或者,基于上述指标对各组件评分后,再基于订阅关系,提高具有订阅关系的组件被选中的权重,再次进行评分,即基于指标和订阅关系进行两次评分后,确定最终选择的组件。其中,具有订阅关系的组件可以位于同一个电子设备中,也可以位于不同的电子设备中。组件订阅关系的建立详见下文描述。
示例性的,如图8所示的通话控制器结构示意图,通话控制器中包含订阅模块,在决策模块进行组件选择的过程中,不仅需要接收注册模块发送的组件注册信息,还需要接收订阅模块发送的组件订阅关系。决策模块基于组件注册信息和组件订阅关系对各个组件进行评分,确定最优的组件组合。
如下表7所示,示出一种订阅关系。其中,音频组件与三个组件间建立了订阅关系,包括视频组件,网络组件1和网络组件2。例如,网络组件1为与音频组件位于同一个电子设备中的组件。网络组件2为与音频组件位于不同电子设备中的组件。
进一步的,若同类型组件的数量为多个,则按照排序顺序确定优先级顺序,排序在先的组件优先级较高。如网络组件1的优先级高于网络组件2的优先级。在通话控制器选择网络组件时,优先选择网络组件1。
表7
在一些实施例中,若通话控制器根据上述指标选择的组件与根据订阅关系选择的组件存在冲突,则将冲突的组件通过界面显示或语音提示等方式由用户进行选择,将用户选择的组件作为最终通话过程应用的组件。
示例性的,假设在选择显示通话视频的组件的过程中,组件选择出现冲突。如图11所示界面1101,通话控制器按照上述指标评分后,确定最优的组件为组件A。根据订阅关系确定的组件为组件B。电子设备在检测到用户点击控件111的操作后,确定用户选择利用组件A显示视频,则通话控制器在通话过程中调度组件A参与通话流程。
在一些实施例中,电子设备在向通话控制器注册组件的过程中,可以选择同时注册订阅关系。例如,在如下情况下,电子设备可以在组件间建立订阅关系。
情况一、在同一电子设备内的组件间,建立订阅关系,为用户提供更好的使用体验。
示例性的,若用户交互组件中多个组件位于同一电子设备中,则将这些组件建立订阅关系,减少用户在通话过程中需要交互的电子设备的数量,方便用户操作。比如,电视中的用户交互组件包含音频组件和视频组件,则电视可以建立自身音频组件和视频组件的订阅关系,在向通话控制器注册订阅关系时,将该订阅关系进行注册。进而在利用电视进行通话的过程中,可以利用同一设备播放音频并显示视频,为用户提供更好的使用体验。
又示例性的,将同一电子设备中的输入组件和用户交互组件间建立订阅关系。假设输入组件A与用户交互组件B在同一个电子设备中,并存在订阅关系。那么,由输入组件A发起的通话,优先选择用户交互组件B。比如,智能音箱接收了一段语音,发起通话,通话建立后,选择智能音箱本身作为听觉组件,提高通话执行效果,为用户提供更好的使用体验。
情况二、组件间建立订阅关系后,能够减少跨设备数据传输,提高数据传输效率。
示例性的,如图6所示场景,将音响64作为音频组件与手机62中的网络组件建立订阅关系。那么,在通话过程中,手机62中的网络组件能够与音响64之间的音频组件直接传输音频数据,而不必再由电视61进行数据中转,提高数据传输效率。
具体的,在上述手机与音响之间音频数据直接传输的场景中,手机与音响之间需要建立D2D通信通道,用于传输音频数据。具体的,通过下述步骤能够实现上述不同设备的组件间的订阅场景。其中,假设通话控制器位于电视当中。
步骤一、手机通过蓝牙扫描的方式发现附近存在的音响,并确定蓝牙传输通道正常。
步骤二、手机向通话控制器发送自身网络组件与音响的订阅关系。其中,音响为音频组件。该订阅消息中包含D2D通信通道信息,如蓝牙套接字(socket)名称。
步骤三、通话控制器记录订阅关系,并存储socket名称。
步骤四、通话控制器选择手机中的网络组件,并选择与其存在订阅关系的音响(即音频组件),建立通话。
步骤五、通话控制器在分布式通话***需要传输音频数据之前,根据订阅关系,判断当前D2D通信通道是否可以传输音频数据。若可以,则通知网络组件将音频数据的传输通道由指向通话控制器的传输通道替换为音响的蓝牙socket,从而建立D2D通信通道传输音频数据。即执行如图9所示的步骤S914-步骤S919a。
如此,通过上述步骤一至步骤五所述的方法,两个组件利用所在电子设备本身的通信能力(如蓝牙连接能力)实现通信握手,以建立D2D通信通道,从而减少跨设备传输数据。
可以理解的是,上述组件间建立订阅关系的情况仅为示例性说明,还可以存在其他需要建立订阅关系的情况。比如,某特定组件仅接受固定组件的输入数据,则需要建立订阅关系来保证该固定连接关系。
此外,若组件需要执行上述反注册流程时,同样需要将关联的订阅关系进行反订阅。比如,离线的电子设备中的全部组件或离线的某个组件向通话控制器发送离线通知,通话控制器则将离线组件的注册信息删除或者标识已离线。并且,将与离线组件相关联的订阅关系删除或标识已失效。
由此,本申请实施例提供的通话方法,能够将分布式通话设备按照组件进行划分,分组以及注册。并通过通话控制器对已注册的组件基于注册信息和订阅关系,进行调度,选择当前通话场景中最适用的组件组合,执行通话任务。相对于以电子设备粒度执行通话任务的场景,能够有效减少跨设备数据传输,提高通话效率。并且,能够提高用户的使用体验。
以下将以两个场景为例,对本申请实施例提供的通话方法进行介绍。
场景一、多人会议通话场景。
其中,多人会议场景是指在会议室中存在至少一个可能发声的用户,并且会议室中配置有会议终端,用于连接远端电子设备,如通过会议终端中配置的应用程序向远端电子设备请求通话。会议终端能够接收并播放远端电子设备发送的音频数据,并且能够采集会议室中用户的声音,生成音频数据发送至远端电子设备。其中,远端电子设备是指位于会议室以外的电子设备。
在一些实施例中,在会议终端中部署通话控制器,会议终端中的组件向通话控制器进行注册。如会议终端中的听觉组件向通话控制器进行注册。并且,在用户携带手机进入会议室后,手机中的组件自动向通话控制器进行注册。如手机中的输入组件,号码解析组件,网络组件,听觉组件,交互组件向通话控制器进行注册。并且,手机中的输入组件和听觉之间存在订阅关系。
需要说明的是,一般的,用户通过某一电子设备发起通话,也会在该电子设备执行其他操作,如进行语音交互。因此,在手机中的输入组件和听觉组件间需要建立订阅关系。
示例性的,如图12所示,当前场景中,通话方法包括如下步骤。
S1201、输入组件向通话控制器发送呼叫信息。
在一些实施例中,当前场景中,远端电子设备中可能并未安装与会议终端中用于通话的应用程序相应的应用程序。并且,受限于会议终端的性能,会议终端并不能拨打外线电话,或者会议终端中的通信***与远端电子设备中的通信***并不兼容。那么,用户无法直接利用会议终端向远端电子设备拨打电话。
比如,假设会议终端中安装的应用程序为应用A;远端电子设备1中安装用于会议通讯的应用程序为应用B;远端电子设备2中未安装用于会议通讯的应用程序,仅支持拨打运营商电话。此时,会议终端无法直接与远端电子设备1和远端电子设备2之间建立通讯连接,提供多人线上会议服务。
基于此,在本申请实施例提供的通话方法中,会议终端中的通话控制器能够基于已注册的各个手机中的网络组件,确定其中支持相应功能的网络组件,拨打电话,提供多通讯***的多人线上会议服务。
在步骤S1201中,以手机为例进行说明。输入组件为支持向对应的远端电子设备发起通话请求的手机中的输入组件。具体的,用户在确定当前待拨打的号码无法利用会议终端进行拨号,则确定具有该拨打能力的手机,利用该手机进行拨号。手机中的输入组件在接收到呼叫信息后,向通话控制器发送该呼叫信息。
S1202、通话控制器确定目标号码解析组件。
在一些实施例中,会议终端中的通话控制器在接收到呼叫信息后,基于前文所述的号码解析组件的评价指标以及对应的权重,确定目标号码解析组件。比如,目标号码解析组件位于与输入组件相同的手机中。
S1203、通话控制器向目标号码解析组件发送呼叫信息。
S1204、目标号码解析组件确定号码信息。
S1205、目标号码解析组件向通话控制器发送号码信息。
S1206、通话控制器确定目标网络组件。
S1207、通话控制器向目标网络组件发送号码信息。
S1208、目标网络组件发起通话,等待应答。
S1209、目标网络组件向通话控制器发送音频数据。
可选的,步骤S1203-步骤S1209中的内容可以参考上述步骤S904-步骤S913中的相关内容,在此不再赘述。
S1210、通话控制器确定存在多个听觉组件,并存在订阅关系。
在一些实施例中,通话控制器检测到已注册的组件中包括多个听觉组件,如会议终端的听觉组件,以及至少一个手机的听觉组件。一般的,在多人会议场景中,应由会议终端中的听觉组件处理音频数据,使其采集各个方向的声音数据并且能够保证所有用户均清晰的听到声音。但是,步骤S1201中发起此次通话的输入组件还与其所在的手机中的听觉组件存在订阅关系。因此,通话控制器根据指标选择的会议终端中的听觉组件与订阅关系对应的听觉组件间存在冲突,通话控制器无法判断最优的听觉组件。
S1211、通话控制器向交互组件发送听觉组件确认请求。
S1212、交互组件向通话控制器发送听觉组件确认结果。
S1213、通话控制器确定目标听觉组件。
S1214、通话控制器与目标听觉组件之间传输音频数据。
在一些实施例中,上述步骤S 1211-步骤S 1214中,由于通话控制器无法判断最优的听觉组件,则需要由用户进行选择。通话控制器向交互组件发送听觉组件确认请求,以接收用户选择。其中,交互组件与步骤S 1201中的输入组件位于同一手机中,以便于用户操作。示例性的,交互组件例如为视觉组件,在接收到确认请求后,手机显示如图13所示的界面1301,检测到用户点击控件131的操作,确定用户选择利用会议终端音频模块处理音频数据,即用户选择的听觉组件为会议终端中的音频模块。交互组件将听觉组件确认结果发送至通话控制器,通话控制器确定目标听觉组件为根据指标选择的会议终端中的听觉组件。之后,已确定应用的各个组件开始协同执行通话任务。
需要说明的是,在上述多人会议场景中,由于通话控制器与目标听觉组件均位于会议终端中,目标网络组件与目标听觉组件间是否建立D2D通信通道,均不会出现跨设备传输音频数据的问题。因此,当前场景中,本申请实施例对目标网络组件与目标听觉组件间是否建立D2D通信通道不做具体限定。
如此,重复上述步骤S1201-步骤S1214,会议终端能够利用一个或多个手机的网络组件能力,与支持不同通信***的远端电子设备进行通信,提高多人会议场景中用户的办公体验。
场景二、利用不具备通话能力的电子设备进行通话的场景。
假设用户在客厅看电视的过程中,需要拨打电话,而此时手机不在身边而在其他房间。采用本申请实施例提供的通话方法,能够实现利用不具备通话能力的电视进行通话。
在当前场景中,涉及的电子设备包括手机和电视。在手机和电视接入局域网络,如Wi-Fi网络后,能够互相检测到对方的存在。并且,通话控制器可以部署在手机中,也可以部署在电视中,由于在通话过程中,需要保证仅一个通话控制器处于工作状态,因此,当前场景中,以通话控制器部署在电视中为例,对通话方法进行说明。
示例性的,如图14所示,手机中包含输入组件,号码解析组件,用户交互组件以及网络组件。其中,用户交互组件包括听觉组件,视觉组件以及交互组件。手机支持多种网络通信,网络组件包括网络组件1,网络组件2以及网络组件3。比如,网络组件1支持即时通讯应用程序拨打电话,网络组件2支持利用移动网络拨打电话,网络组件3支持利用电信网络拨打电话。电视中包含输入组件,用户交互组件以及通话控制器。其中,用户交互组件同样包括听觉组件,视觉组件以及交互组件。
如图15所示,在手机和电视接入局域网络后,上述各个组件向通话控制器中的注册模块进行注册。并且,手机中的输入组件和手机中的各个用户交互组件存在订阅关系。电视中的输入组件和电视中的各个用户交互组件存在订阅关系。如图16所示,存在订阅关系的组件也需要向通话控制器中的订阅模块发送订阅关系,由订阅模块进行存储。
示例性的,如图17所示,当前场景中,通话方法包括如下步骤。
S1701、输入组件向通话控制器发送呼叫信息。
在一些实施例中,电视中的输入组件接收到用户的语音命令“给爸爸打电话”,输入组件接收到语音命令后,解析语音命令,确定呼叫信息为“爸爸”,将呼叫信息发送至通话控制器。
示例性的,如图18所示,电视中的输入组件参与当前通话流程。
S1702、通话控制器确定目标号码解析组件。
S1703、通话控制器向目标号码解析组件发送呼叫信息。
在一些实施例中,通话控制器接收到呼叫信息后,将手机中的号码解析组件确定为目标号码解析组件,将呼叫信息发送至目标号码解析组件。
示例性的,如图18所示,通话控制器确定手机中的号码解析组件参与当前通话流程。
S1704、目标号码解析组件确定号码信息。
S1705、目标号码解析组件向通话控制器发送号码信息。
在一些实施例中,手机中的目标号码解析组件在接收到呼叫信息后,将呼叫信息中的语音数据转化为文本信息,再对文本信息进行语义分析,确定“爸爸”对应两个号码。一个为即时通讯应用程序对应的号码,另一个为运营商号码。目标号码解析组件将确定的两个号码发送至通话控制器。
S1706、通话控制器确定目标网络组件。
在一些实施例中,通话控制器接收到两个号码,由位于其中的决策模块,确定待拨打号码为即时通讯应用程序对应的号码。那么,决策模块确定目标网络组件为手机中支持即时通讯应用程序拨打电话的网络组件1。
示例性的,如图18所示,通话控制器确定手机中的网络组件1参与当前通话流程。
S1707、通话控制器向目标网络组件发送号码信息。
在一些实施例中,通话控制器中的数据中转模块将确定的号码信息发送至目标网络组件。
S1708、目标网络组件发起通话,等待应答。
在一些实施例中,手机中的目标网络组件在接收到通话控制器发送的号码信息后,基于号码信息进行拨号。
S1709、目标网络组件向通话控制器发送音频数据和/或视频数据的接口地址。
示例性的,假设音频输入接口地址为192.168.1.20:8000;音频输出接口地址为192.168.1.20:8001;视频输入接口地址为192.168.1.20:8000;视频输出接口地址为192.168.1.20:8001。
S1710、通话控制器确定目标用户交互组件。
S1711、通话控制器向目标用户交互组件发送音频数据和/或视频数据的接口地址。
S1712、目标用户交互组件与目标网络组件之间基于接口地址传输音频数据和/或视频数据。
在一些实施例中,上述步骤S 1709-步骤S 1712中,通话控制器确定电视中的输入组件和用户交互组件间存在订阅关系,因此将电视中的用户交互组件确定为目标用户交互组件。
并且,通话控制器确定目标用户交互组件与手机中的目标网络组件间传输的音频数据和/或视频数据格式匹配,基于接口地址能够建立D2D通信通道。因此,建立D2D通信通道,在后续通话过程中,目标用户交互组件与目标网络组件间直接传输音频数据和/或视频数据。
示例性的,如图18所示,通话控制器确定电视中的用户交互组件参与当前通话流程。其中,由电视中的听觉组件播放及采集声音,并且由电视中的视觉组件显示及采集视频画面。
进一步的,在当前场景中,用户不仅可以利用不具备通话能力的电视进行通话。并且,区别于现有技术中的无线投屏技术,电视显示通话过程中的视频画面不会占据电视的整个显示屏。其余未被占据的显示屏区域可以用于为用户提供其他功能。
示例性的,如图19所示界面1901,电视显示屏包括显示区域191和显示区域192。其中,显示区域191用于显示视频画面。显示区域192用于显示其他画面,和/或接收用户的其他操作。例如,如界面1901所示,显示区域191显示当前正在通话的视频画面,显示区域192显示游戏画面。
可以理解的是,上述电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请实施例的范围。
本申请实施例可以根据上述方法示例对上述电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在一种可能的设计中,图20为本申请实施例提供的通话装置的结构示意图。如图20所示,通话装置2000包括:处理模块2001,接收模块2002以及发送模块2003。通话装置2000可用于实现上述方法实施例中涉及的设备的功能。其中,通话装置2000可以为设备本身,也可以为设备中的功能单元或者芯片,或者与通信设备匹配使用的装置。
可选的,处理模块2001,用于支持通话装置2000执行上述实施例中的步骤S903、步骤S909和步骤S915中的一个或者多个步骤;和/或,处理模块2001还用于支持通话装置2000执行本申请实施例中通话控制器执行的其他处理步骤。
可选的,接收模块2002,用于支持通话装置2000执行上述实施例中的步骤S901、步骤S907、步骤S913,步骤S918b和步骤S919b中的一个或者多个步骤;和/或,接收模块2002还用于支持通话装置2000执行本申请实施例中通话控制器执行的其他接收步骤。
可选的,发送模块2003,用于支持通话装置2000执行上述实施例中的步骤S905、步骤S911、步骤S917b,步骤S918b和步骤S919b中的一个或者多个步骤;和/或,发送模块2003还用于支持通话装置2000执行本申请实施例中通话控制器执行的其他发送步骤。
可选地,图20所示的通话装置2000还可以包括存储模块(图20中未示出),该存储模块存储有程序或指令。当处理模块2001,接收模块2002以及发送模块2003执行该程序或指令时,使得图20所示的通话装置2000可以执行本申请实施例提供的通话方法。
其中,接收模块和发送模块可以统称为收发模块,可以由收发器或收发器相关电路组件实现,可以为收发器或收发单元。
其中,处理模块2001可以是处理器或控制器。其可以实现或执行结合本申请实施例公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。
图20所示的通话装置2000中的各个单元的操作和/或功能分别为了实现上述方法侧实施例提供通话方法的相应流程,为了简洁,在此不再赘述。图20所示的通话装置2000的技术效果可以参考上述方法侧实施例提供通话方法的技术效果,此处不再赘述。
本申请实施例还提供一种芯片***,包括:处理器,所述处理器与存储器耦合,所述存储器用于存储程序或指令,当所述程序或指令被所述处理器执行时,使得该芯片***实现上述任一方法实施例中的方法。
可选地,该芯片***中的处理器可以为一个或多个。该处理器可以通过硬件实现也可以通过软件实现。当通过硬件实现时,该处理器可以是逻辑电路、集成电路等。当通过软件实现时,该处理器可以是一个通用处理器,通过读取存储器中存储的软件代码来实现。
可选地,该芯片***中的存储器也可以为一个或多个。该存储器可以与处理器集成在一起,也可以和处理器分离设置,本申请实施例并不限定。示例性的,存储器可以是非瞬时性处理器,例如只读存储器ROM,其可以与处理器集成在同一块芯片上,也可以分别设置在不同的芯片上,本申请实施例对存储器的类型,以及存储器与处理器的设置方式不作具体限定。
示例性的,该芯片***可以是现场可编程门阵列(field programmable gatearray,FPGA),可以是专用集成芯片(application specific integrated circuit,ASIC),还可以是***芯片(system on chip,SoC),还可以是中央处理器(central processorunit,CPU),还可以是网络处理器(network processor,NP),还可以是数字信号处理电路(digital signal processor,DSP),还可以是微控制器(micro controller unit,MCU),还可以是可编程控制器(programmable logic device,PLD)或其他集成芯片。
应理解,上述方法实施例中的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的方法步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
本申请的实施例还提供了一种存储介质,用于存储为上述通信装置所用的指令。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在服务器上运行时,使得服务器执行上述相关方法步骤实现上述实施例中的通话方法。
本申请实施例还提供一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的通话方法。
另外,本申请的实施例还提供一种装置,该装置具体可以是组件或模块,该装置可包括相连的一个或多个处理器和存储器;其中,存储器用于存储计算机程序,一个或多个计算机程序包括指令。当该指令被一个或多个处理器执行时,以使装置执行上述各方法实施例中的通话方法。
其中,本申请实施例提供的装置、计算机可读存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
结合本申请实施例公开内容所描述的方法或者算法的步骤可以硬件的方式来实现,也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成,软件模块可以被存放于随机存取存储器(random access memory,RAM)、闪存、只读存储器(read only memory,ROM)、可擦除可编程只读存储器(erasable programmable ROM,EPROM)、电可擦可编程只读存储器(electrically EPROM,EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于专用集成电路(application specific integrated circuit,ASIC)中。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,模块或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (22)
1.一种通话方法,其特征在于,所述方法包括:
第一设备建立与至少一个第二设备的通信连接;
所述第一设备接收所述至少一个第二设备的能力的注册信息;
所述第一设备接收第一通话业务请求;
所述第一设备根据所述第一设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第一通话业务请求的第一目标设备;所述第一目标设备为所述第一设备或所述至少一个第二设备中的一个设备;
所述第一设备发送所述第一通话业务请求至所述第一目标设备;
所述第一设备接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息。
2.根据权利要求1所述的方法,其特征在于,所述第一设备根据所述第一设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第一通话业务请求的第一目标设备,包括:
所述第一设备根据所述第一设备的能力信息以及所述至少一个第二设备的能力的注册信息,将所述第一设备的能力和所述第二设备的能力按照功能类别进行分组,设置每一组别对应的评价指标以及每一评价指标对应的权重;
所述第一设备选择用于处理所述第一通话业务请求的第一组别,利用所述评价指标和所述评价指标对应的权重,对所述第一组别中的所述第一设备的能力和/或所述第二设备的能力进行评分,选择所述第一目标设备,所述第一目标设备在所述第一组别中的能力的评分为最高评分。
3.根据权利要求1或2所述的方法,其特征在于,在所述第一设备接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息之后,所述方法还包括:
所述第一设备根据所述第一反馈信息,确定第二通话业务请求;所述第二通话业务请求不同于所述第一通话业务请求;
所述第一设备根据所述第一设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第二通话业务请求的第二目标设备;所述第二目标设备为所述第一设备或所述至少一个第二设备中的一个设备;
所述第一设备发送所述第二通话业务请求至所述第二目标设备;
所述第一设备接收所述第二目标设备对处理所述第二通话业务请求的第二反馈信息。
4.根据权利要求3所述的方法,其特征在于,所述第一目标设备与所述第二目标设备为不同的第二设备,所述第一目标设备用于直接接收所述第二目标设备发送的通话数据。
5.根据权利要求1所述的方法,其特征在于,所述第一设备接收第一通话业务请求之后,所述方法还包括:
所述第一设备根据所述第一通话业务请求,选择与所述第一通话业务请求关联的所述第一目标设备。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述第一设备与所述至少一个第二设备中的至少一个第二设备之间的设备形态不同。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述第一设备的能力信息的数量为一个或多个,同一个第二设备的能力的注册信息的数量为一个或多个。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述第一通话业务请求为号码解析请求、号码拨打请求、视频播放和/或采集请求、音频播放和/或采集请求中的任一项。
9.根据权利要求1-8任一项所述的方法,其特征在于,所述第一目标设备为所述第一设备;
所述第一设备发送所述第一通话业务请求至所述第一目标设备,所述第一设备接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息,包括:
所述第一目标设备中的第一模块发送所述第一通话业务请求至所述第一目标设备中的第二模块;
所述第一模块接收所述第二模块对处理所述第一通话业务请求的所述第一反馈信息。
10.根据权利要求1-8任一项所述的方法,其特征在于,所述第一目标设备为所述至少一个第二设备中的目标第二设备;
所述第一设备发送所述第一通话业务请求至所述第一目标设备,所述第一设备接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息,包括:
所述第一设备发送所述第一通话业务请求至所述目标第二设备;
所述第一设备接收所述目标第二设备对处理所述第一通话业务请求的所述第一反馈信息。
11.一种电子设备,其特征在于,包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述处理器从所述存储器中读取所述计算机指令,使得所述电子设备执行如下操作:
建立与至少一个第二设备的通信连接;
接收所述至少一个第二设备的能力的注册信息;
接收第一通话业务请求;
根据所述电子设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第一通话业务请求的第一目标设备;所述第一目标设备为所述电子设备或所述至少一个第二设备中的一个设备;
发送所述第一通话业务请求至所述第一目标设备;
接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息。
12.根据权利要求11所述的电子设备,其特征在于,所述根据所述电子设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第一通话业务请求的第一目标设备,包括:
根据所述电子设备的能力信息以及所述至少一个第二设备的能力的注册信息,将所述电子设备的能力和所述第二设备的能力按照功能类别进行分组,设置每一组别对应的评价指标以及每一评价指标对应的权重;
选择用于处理所述第一通话业务请求的第一组别,利用所述评价指标和所述评价指标对应的权重,对所述第一组别中的所述电子设备的能力和/或所述第二设备的能力进行评分,选择所述第一目标设备,所述第一目标设备在所述第一组别中的能力的评分为最高评分。
13.根据权利要求11或12所述的电子设备,其特征在于,当所述处理器从所述存储器中读取所述计算机指令,还使得所述电子设备执行如下操作:
根据所述第一反馈信息,确定第二通话业务请求;所述第二通话业务请求不同于所述第一通话业务请求;
根据所述电子设备的能力信息以及所述至少一个第二设备的能力的注册信息,选择用于处理所述第二通话业务请求的第二目标设备;所述第二目标设备为所述电子设备或所述至少一个第二设备中的一个设备;
发送所述第二通话业务请求至所述第二目标设备;
接收所述第二目标设备对处理所述第二通话业务请求的第二反馈信息。
14.根据权利要求13所述的电子设备,其特征在于,所述第一目标设备与所述第二目标设备为不同的第二设备,所述第一目标设备用于直接接收所述第二目标设备发送的通话数据。
15.根据权利要求11所述的电子设备,其特征在于,当所述处理器从所述存储器中读取所述计算机指令,还使得所述电子设备执行如下操作:
根据所述第一通话业务请求,选择与所述第一通话业务请求关联的所述第一目标设备。
16.根据权利要求11-15任一项所述的电子设备,其特征在于,所述电子设备与所述至少一个第二设备中的至少一个第二设备之间的设备形态不同。
17.根据权利要求11-16任一项所述的电子设备,其特征在于,所述电子设备的能力信息的数量为一个或多个,同一个第二设备的能力的注册信息的数量为一个或多个。
18.根据权利要求11-17任一项所述的电子设备,其特征在于,所述第一通话业务请求为号码解析请求、号码拨打请求、视频播放和/或采集请求、音频播放和/或采集请求中的任一项。
19.根据权利要求11-18任一项所述的电子设备,其特征在于,所述第一目标设备为所述电子设备;
所述发送所述第一通话业务请求至所述第一目标设备,接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息,包括:
所述第一目标设备中的第一模块发送所述第一通话业务请求至所述第一目标设备中的第二模块;
所述第一模块接收所述第二模块对处理所述第一通话业务请求的所述第一反馈信息。
20.根据权利要求11-18任一项所述的电子设备,其特征在于,所述第一目标设备为所述至少一个第二设备中的目标第二设备;
所述发送所述第一通话业务请求至所述第一目标设备,接收所述第一目标设备对处理所述第一通话业务请求的第一反馈信息,包括:
发送所述第一通话业务请求至所述目标第二设备;
接收所述目标第二设备对处理所述第一通话业务请求的所述第一反馈信息。
21.一种计算机可读存储介质,其特征在于,包括程序或指令,当所述程序或指令被执行时,如权利要求1-10中任一项所述的通话方法被实现。
22.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行如权利要求1-10中任一项所述的通话方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210530846.0A CN114845078B (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210530846.0A CN114845078B (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
CN202011400206.5A CN114584734A (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011400206.5A Division CN114584734A (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114845078A true CN114845078A (zh) | 2022-08-02 |
CN114845078B CN114845078B (zh) | 2023-04-11 |
Family
ID=81769902
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210530846.0A Active CN114845078B (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
CN202011400206.5A Pending CN114584734A (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011400206.5A Pending CN114584734A (zh) | 2020-12-01 | 2020-12-01 | 通话方法及电子设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240007558A1 (zh) |
EP (1) | EP4239955A4 (zh) |
CN (2) | CN114845078B (zh) |
WO (1) | WO2022116992A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024124396A1 (zh) * | 2022-12-13 | 2024-06-20 | 北京小米移动软件有限公司 | 一种通信方法、装置、通信设备及计算机存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105872434A (zh) * | 2015-11-16 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 视频通话连接方法、***、设备及视频服务端 |
CN105897673A (zh) * | 2015-11-16 | 2016-08-24 | 乐视致新电子科技(天津)有限公司 | 视频通话连接方法、***、设备及视频服务端 |
US20170054814A1 (en) * | 2014-04-26 | 2017-02-23 | Huawei Technologies Co., Ltd. | Communication Establishment Method, Device, and System |
CN107277420A (zh) * | 2016-04-08 | 2017-10-20 | ***通信有限公司研究院 | 一种视频通话实现方法及终端 |
CN111371849A (zh) * | 2019-02-22 | 2020-07-03 | 华为技术有限公司 | 数据处理的方法和电子设备 |
CN111628916A (zh) * | 2019-02-27 | 2020-09-04 | 华为技术有限公司 | 一种智能音箱与电子设备协作的方法及电子设备 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105704692B (zh) * | 2014-11-24 | 2020-08-04 | 南京中兴软件有限责任公司 | 呼叫转移方法及装置 |
WO2016165083A1 (zh) * | 2015-04-15 | 2016-10-20 | 华为技术有限公司 | 一种局域网内消息发送方法、局域网网关和可穿戴设备 |
US10200339B2 (en) * | 2015-08-03 | 2019-02-05 | Verizon Patent And Licensing Inc. | Providing a service to a user device based on a capability of the user device when the user device shares an identifier |
WO2019238133A1 (zh) * | 2018-06-15 | 2019-12-19 | 云丁网络技术(北京)有限公司 | 一种资源管理及控制方法和*** |
CN111385513B (zh) * | 2018-12-28 | 2021-08-20 | 华为技术有限公司 | 通话方法以及相关设备 |
CN111258526B (zh) * | 2020-05-06 | 2020-08-28 | 上海幻电信息科技有限公司 | 投屏方法和*** |
-
2020
- 2020-12-01 CN CN202210530846.0A patent/CN114845078B/zh active Active
- 2020-12-01 CN CN202011400206.5A patent/CN114584734A/zh active Pending
-
2021
- 2021-12-01 WO PCT/CN2021/134764 patent/WO2022116992A1/zh active Application Filing
- 2021-12-01 EP EP21900023.9A patent/EP4239955A4/en active Pending
- 2021-12-01 US US18/039,539 patent/US20240007558A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170054814A1 (en) * | 2014-04-26 | 2017-02-23 | Huawei Technologies Co., Ltd. | Communication Establishment Method, Device, and System |
CN105872434A (zh) * | 2015-11-16 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 视频通话连接方法、***、设备及视频服务端 |
CN105897673A (zh) * | 2015-11-16 | 2016-08-24 | 乐视致新电子科技(天津)有限公司 | 视频通话连接方法、***、设备及视频服务端 |
WO2017084315A1 (zh) * | 2015-11-16 | 2017-05-26 | 乐视控股(北京)有限公司 | 视频通话连接方法、***、设备及视频服务端 |
CN107277420A (zh) * | 2016-04-08 | 2017-10-20 | ***通信有限公司研究院 | 一种视频通话实现方法及终端 |
CN111371849A (zh) * | 2019-02-22 | 2020-07-03 | 华为技术有限公司 | 数据处理的方法和电子设备 |
CN111628916A (zh) * | 2019-02-27 | 2020-09-04 | 华为技术有限公司 | 一种智能音箱与电子设备协作的方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2022116992A1 (zh) | 2022-06-09 |
EP4239955A4 (en) | 2024-04-17 |
EP4239955A1 (en) | 2023-09-06 |
CN114845078B (zh) | 2023-04-11 |
US20240007558A1 (en) | 2024-01-04 |
CN114584734A (zh) | 2022-06-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110381485B (zh) | 蓝牙通信方法、tws蓝牙耳机及终端 | |
CN114710640B (zh) | 基于虚拟形象的视频通话方法、装置和终端 | |
CN113330761B (zh) | 占用设备的方法以及电子设备 | |
US20230299806A1 (en) | Bluetooth Communication Method, Wearable Device, and System | |
US20210377642A1 (en) | Method and Apparatus for Implementing Automatic Translation by Using a Plurality of TWS Headsets Connected in Forwarding Mode | |
CN113438354A (zh) | 数据传输方法、装置、电子设备和存储介质 | |
CN112995731B (zh) | 切换多媒体设备的方法和*** | |
CN112335294B (zh) | 一种紧急呼叫方法及用户终端 | |
CN110865782A (zh) | 数据传输方法、装置及设备 | |
CN114125789A (zh) | 通信方法、终端设备及存储介质 | |
CN114845078B (zh) | 通话方法及电子设备 | |
CN113497851B (zh) | 控制显示方法及电子设备 | |
US20230350629A1 (en) | Double-Channel Screen Mirroring Method and Electronic Device | |
CN114640747A (zh) | 一种通话方法、相关设备和*** | |
CN113963732B (zh) | 音频播放方法和终端设备 | |
CN114125352A (zh) | 屏幕共享方法、电子设备及*** | |
US20240129352A1 (en) | Live broadcast method, apparatus, and system | |
CN116095219B (zh) | 通知显示方法和终端设备 | |
CN114449492B (zh) | 数据传输方法及终端设备 | |
WO2024067432A1 (zh) | 一种音频传输方法、***以及相关装置 | |
CN116744275A (zh) | 通信方法、电子设备及装置 | |
CN117597936A (zh) | 音频信号格式确定方法、装置 | |
CN115914983A (zh) | 数据交互方法、电子设备及计算机可读存储介质 | |
CN118368322A (zh) | 信道选择方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |