CN114201130A - 一种投屏的方法、装置及存储介质 - Google Patents
一种投屏的方法、装置及存储介质 Download PDFInfo
- Publication number
- CN114201130A CN114201130A CN202010988528.XA CN202010988528A CN114201130A CN 114201130 A CN114201130 A CN 114201130A CN 202010988528 A CN202010988528 A CN 202010988528A CN 114201130 A CN114201130 A CN 114201130A
- Authority
- CN
- China
- Prior art keywords
- terminal
- receiving terminal
- data
- screen
- sending
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000005540 biological transmission Effects 0.000 claims abstract description 44
- 230000001960 triggered effect Effects 0.000 claims description 32
- 230000004044 response Effects 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 2
- 239000010410 layer Substances 0.000 description 29
- 238000010586 diagram Methods 0.000 description 28
- 238000012545 processing Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000003993 interaction Effects 0.000 description 5
- 238000011161 development Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Telephone Function (AREA)
Abstract
本发明涉及无线传输领域,公开了一种投屏的方法、装置及存储介质,提高终端操作的灵活性。本发明实施例接收终端接收发送终端发送的投屏数据;其中,投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;接收终端根据接收到的投屏数据,在显示界面中的目标区域展示发送终端的屏幕显示内容,目标区域为接收终端的显示界面中的部分区域。本发明实施例接收终端接收到投屏数据后,只在显示界面中的部分区域显示发送终端的屏幕显示内容,其他区域还可以继续显示自身的屏幕显示内容,这样,在实现投屏后,用户可以通过接收终端中目标区域实现对发送终端的反向控制,且用户还可以通过其它显示区域继续对接收终端进行控制,进一步提高终端操作的灵活性。
Description
技术领域
本发明涉及无线传输领域,尤其涉及一种投屏的方法、装置及存储介质。
背景技术
随着通信技术的发展,终端等通讯工具有着很好的发展趋势,融合网络,社交,照相,音乐,收音机、视频、遥控,连接等众多功能,另外终端的智能和极高的便携将更一步促进终端的迅猛发展。
为满足不同场合的需求,同一个用户可以同时拥有多个终端。比如,当用户需要使用某个终端时,只能通过该终端的显示界面查看该终端上的内容;若用户需要查看两个终端,只能分别操作两个终端。因此,目前对终端的操作方式并不灵活。
发明内容
本发明示例性的实施方式中提供一种投屏方法、装置及存储介质,通过本发明提供的投屏方案,可以通过终端查看其它终端的显示内容,提高终端操作方式的灵活性。
根据示例性的实施方式中的第一方面,提供一种投屏方法,应用于接收终端,该方法包括:
接收终端接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
上述实施例中,接收终端接收到发送终端发送的投屏数据后,在显示界面中的部分区域展示发送终端进行屏幕录制的屏幕显示内容,从而将发送终端的屏幕显示内容投屏至接收终端后,只在接收终端显示界面中的部分区域显示发送终端的屏幕显示内容,接收终端显示界面中其它区域还可以继续显示自身的屏幕显示内容,这样,在实现发送终端投屏后,用户可以通过接收终端中显示发送终端显示内容的目标区域实现对发送终端的反向控制,并且用户还可以通过接收终端除目标区域之外的其它显示区域继续对接收终端进行控制,进一步提高终端操作的灵活性。
在一些示例性的实施方式中,在所述接收终端在显示界面中的目标区域展示所述发送终端的屏幕显示内容之后,还包括:
响应用户在所述目标区域触发的控制指令,所述接收终端生成与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的控制数据;
所述接收终端将所述控制指令对应的控制数据发送给所述发送终端,以使所述发送终端根据所述控制数据执行相应的响应操作。
在一些示例性的实施方式中,所述接收终端将所述控制指令对应的控制数据发送给所述发送终端,包括:
所述接收终端通过与所述发送终端之间的GATT连接,将所述操作指令对应的控制数据发送给所述发送终端。
在一些示例性的实施方式中,在所述接收终端在显示界面中的目标区域展示所述发送终端的屏幕显示内容之后,还包括:
响应用户在所述显示界面中触发的从所述接收终端向所述发送终端传输数据的第一传输指令,所述接收终端确定需要传输给所述发送终端的第一目标数据,并将所述第一目标数据发送给所述发送终端;和/或
响应用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令,所述接收终端确定所述发送终端需要传输的第二目标数据,并通知所述发送终端向所述接收终端传输所述第二目标数据;以及,接收所述发送终端传输的所述第二目标数据。
在一些示例性的实施方式中,所述接收终端将所述第一目标数据发送给所述发送终端,包括:
所述接收终端通过与所述发送终端之间的TCP连接,将所述第一目标数据发送给所述发送终端;
所述接收终端通知所述发送终端向所述接收终端传输所述第二目标数据,包括:
所述接收终端通过与所述发送终端之间的GATT连接,通知所述发送终端向所述接收终端传输所述第二目标数据;
所述接收终端接收所述发送终端传输的所述第二目标数据,包括:
所述接收终端通过与所述发送终端之间的TCP连接,接收所述发送终端传输的所述第二目标数据。
在一些示例性的实施方式中,所述接收终端接收发送终端发送的投屏数据,包括:
所述接收终端通过与所述发送终端之间的UDP连接,接收所述发送终端发送的投屏数据。
根据示例性的实施方式中的第二方面,提供一种投屏方法,应用于发送终端,该方法包括:
发送终端对屏幕显示内容进行屏幕录制得到投屏数据;
所述发送终端向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
在一些示例性的实施方式中,在所述发送终端向接收终端发送所述投屏数据之后,还包括:
所述发送终端接收所述接收终端发送的控制指令对应的控制数据,并根据所述控制数据执行相应的响应操作;其中,所述控制数据为所述接收终端响应用户在所述目标区域触发的控制指令,生成的与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的数据。
在一些示例性的实施方式中,所述发送终端接收所述接收终端发送的控制指令对应的控制数据,包括:
所述发送终端通过与所述接收终端之间的GATT连接,接收所述接收终端发送的所述控制指令对应的控制数据。
在一些示例性的实施方式中,在所述发送终端向接收终端发送所述投屏数据之后,还包括:
所述发送终端接收所述接收终端发送的第一目标数据;其中,所述第一目标数据为所述接收终端响应用户在所述显示界面触发的从所述接收终端向所述发送终端传输数据的第一传输指令后发送的;和/或
所述发送终端接收所述接收终端发送的传输第二目标数据的通知,并将所述第二目标数据传输给所述接收终端;其中,所述第二目标数据是所述接收终端根据用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令确定的。
在一些示例性的实施方式中,所述发送终端接收所述接收终端发送的第一目标数据,包括:
所述发送给终端通过与所述接收终端的TCP连接,接收所述接收终端发送的第一目标数据;
所述发送终端接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知,包括:
所述发送终端通过与所述接收终端之间的GATT连接,接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知;
所述发送终端将所述第二目标数据传输给所述接收终端,包括:
所述发送终端通过与所述发送终端之间的TCP连接,将所述第二目标数据传输给所述接收终端。
在一些示例性的实施方式中,所述发送终端向接收终端发送投屏数据,包括:
所述发送终端通过与所述接收终端的UDP连接,向接收终端发送所述投屏数据。
根据示例性的实施方式中的第三方面,提供第一种终端,该终端包括处理器和收发单元:
所述收发单元被配置为,接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
所述处理器被配置为,根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
在一些示例性的实施方式中,所述处理器被配置为,响应用户在所述目标区域触发的控制指令,生成与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的控制数据,并将生成的所述控制指令对应的控制数据传输给所述收发单元;
所述收发单元被配置为,将所述控制指令对应的控制数据发送给所述发送终端,以使所述发送终端根据所述控制数据执行相应的响应操作。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述发送终端之间的GATT连接,将所述操作指令对应的控制数据发送给所述发送终端。
在一些示例性的实施方式中,所述处理器被配置为,响应用户在所述显示界面中触发的从所述接收终端向所述发送终端传输数据的第一传输指令,确定需要传输给所述发送终端的第一目标数据,并将所述第一目标数据传输给所述收发单元;
所述收发单元被配置为,将所述第一目标数据发送给所述发送终端;
所述处理器被配置为,响应用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令,确定所述发送终端需要传输的第二目标数据;
所述收发单元被配置为,通知所述发送终端向所述接收终端传输所述第二目标数据;以及,接收所述发送终端传输的所述第二目标数据。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述发送终端之间的TCP连接,将所述第一目标数据发送给所述发送终端;通过与所述发送终端之间的GATT连接,通知所述发送终端向所述接收终端传输所述第二目标数据;通过与所述发送终端之间的TCP连接,接收所述发送终端传输的所述第二目标数据。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述发送终端之间的UDP连接,接收所述发送终端发送的投屏数据。
根据示例性的实施方式中的第四方面,提供第一种终端,该终端包括处理器和收发单元:
所述处理器被配置为,对屏幕显示内容进行屏幕录制得到投屏数据,并将所述投屏数据传输给所述收发单元;
所述收发机被配置为,向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
在一些示例性的实施方式中,所述收发单元被配置为,接收所述接收终端发送的控制指令对应的控制数据;
所述处理器被配置为,根据所述控制数据执行相应的响应操作;其中,所述控制数据为所述接收终端响应用户在所述目标区域触发的控制指令,生成的与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的数据。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述接收终端之间的GATT连接,接收所述接收终端发送的所述控制指令对应的控制数据。
在一些示例性的实施方式中,所述收发单元被配置为,接收所述接收终端发送的第一目标数据;其中,所述第一目标数据为所述接收终端响应用户在所述显示界面触发的从所述接收终端向所述发送终端传输数据的第一传输指令后发送的;和/或
接收所述接收终端发送的传输第二目标数据的通知,并将所述第二目标数据传输给所述接收终端;其中,所述第二目标数据是所述接收终端根据用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令确定的。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述接收终端的TCP连接,接收所述接收终端发送的第一目标数据;通过与所述接收终端之间的GATT连接,接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知;通过与所述发送终端之间的TCP连接,将所述第二目标数据传输给所述接收终端。
在一些示例性的实施方式中,所述收发单元被配置为,通过与所述接收终端的UDP连接,向接收终端发送所述投屏数据。
根据示例性的实施方式中的第五方面,提供第三种终端,该终端包括:
接收模块,用于接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
处理模块,用于根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
根据示例性的实施方式中的第六方面,提供第四种终端,该终端包括:
录制模块,用于对屏幕显示内容进行屏幕录制得到投屏数据;
发送模块,用于向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
第七方面,本发明还提供一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现第一方面所述方法的步骤。
另外,第二方面至第七方面中任一一种实现方式所带来的技术效果可参见第一方面中不同实现方式所带来的技术效果,此处不再赘述。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示例性示出了本发明实施例提供的一种移动终端的结构示意图;
图2示例性示出了本发明实施例提供的一种移动终端的软件架构示意图;
图3示例性示出了本发明实施例提供的移动终端的用户界面示意图;
图4示例性示出了本发明实施例提供的一种应用场景的示意图;
图5A示例性示出了本发明实施例提供的一种手机屏幕显示界面图;
图5B示例性示出了本发明实施例提供的一种平板显示界面图;
图5C示例性示出了本发明实施例提供的一种实现投屏后的平板的显示界面示意图;
图6示例性示出了本发明实施例提供的一种投屏方法流程示意图;
图7示例性示出了本发明实施例提供的一种建立GATT连接的流程示意图;
图8示例性示出了本发明实施例提供的第一种基于WiFi P2P连接的IP地址获取流程图;
图9示例性示出了本发明实施例提供的第二种基于WiFi P2P连接的IP地址获取流程图;
图10示例性示出了本发明实施例提供的用户在目标区域控制指令触发位置的显示界面图;
图11示例性示出了本发明实施例提供的第一种数据传输应用场景示意图;
图12示例性示出了本发明实施例提供的第二种数据传输应用场景示意图;
图13示例性示出了本发明实施例提供的第三种数据传输应用场景示意图;
图14示例性示出了本发明实施例提供的第四种数据传输应用场景示意图;
图15示例性示出了本发明实施例提供的第五种数据传输应用场景示意图;
图16示例性示出了本发明实施例提供的第六种数据传输应用场景示意图;
图17示例性示出了本发明实施例提供的第一种投屏流程示意图;
图18示例性示出了本发明实施例提供的第二种投屏流程示意图;
图19示例性示出了本发明实施例提供的第一种终端的结构示意图;
图20示例性示出了本发明实施例提供的第二种终端的结构示意图;
图21示例性示出了本发明实施例提供的第三种终端的结构示意图;
图22示例性示出了本发明实施例提供的第四种终端的结构示意图。
具体实施方式
下面将结合附图对本发明实施例中的技术方案进行清除、详尽地描述。其中,在本发明实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本发明实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本发明实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
下面对文中出现的一些词语进行解释:
1、本发明实施例的术语“BLE”,也称低功耗蓝牙(Bluetooth Low Energy,BLE),是一种短距离、低成本、可互操作性的无线技术,它利用许多智能手段最大限度地降低功耗,而低速率和简单的交互协议是降低功耗的重要组成部分。因此BLE一般应用于低速率的近场控制和数据交互,如智能家电、运动手环等等。BLE连接都是建立在通用属性协议(Generic Attribute Profile,GATT)协议之上。
2、本发明实施例的术语“GATT”,GATT是一个在蓝牙连接之上的发送和接收很短的数据段的通用规范,这些很短的数据段被称为属性(Attribute)。
3、本发明实施例的术语“MTU协商”,即最大传输单元(Maximum TransmissionUnit,MTU),考虑到有些Bluetooth Smart设备功能弱小,没有太多的内存空间,BluetoothCore Specification(蓝牙规范协议)里面规定ATT的默认MTU为23个字节,除去ATT的Opcode一个字节以及ATT的Handle 2个字节之后,GATT Characteristic实际可用的只有20个字节。其实ATT的最大长度为512个字节,所以ATT的MTU的最大长度可视为512个字节。
4、本发明实施例的术语“MAC地址”,即媒体接入控制(Medium Access Control,MAC)地址,也称为局域网地址、以太网地址或物理地址,它是一个用来确认网络设备位置的位址。MAC地址用于在网络中唯一标示一个网卡,一台设备若有一或多个网卡,则每个网卡都需要并会有一个唯一的MAC地址。
5、本发明实施例的术语“UDP/TCP协议”,属于传输层协议(User DatagramProtocol,UDP)和传输层协议(Transmission Control Protocol,TCP),UDP和UDP协议是TCP/IP协议的核心。其中TCP提供IP环境下的数据可靠传输,它提供的服务包括数据流传送、可靠性、有效流控、全双工操作和多路复用。通过面向连接、端到端和可靠的数据包发送。通俗说,它是事先为所发送的数据开辟出连接好的通道,然后再进行数据发送;而UDP则不为IP提供可靠性、流控或差错恢复功能。一般来说,TCP对应的是可靠性要求高的应用,而UDP对应的则是可靠性要求低、传输经济的应用。
6、本发明实施例的术语“Wi-Fi Direct”,也叫Wi-Fi P2P,Wi-Fi Direct技术是Wi-Fi产业链向蓝牙技术发起的挑战,它试图完全取代蓝牙,Wi-Fi Direct是一种点对点连接技术,它可以在两台station之间直接建立tcp/ip链接,并不需要AP的参与;其中一台station会起到传统意义上的AP的作用,称为Group Owner(GO),另外一台station则称为Group Client(GC),像连接AP一样连接到GO。GO和GC不仅可以是一对一,也可以是一对多。
7、本发明实施例的术语“Miracast”,是以WiFi直连(WiFi Direct)为基础的无线显示标准,支持此标准的3C设备可透过无限方式分享音视频画面,例如,一般可以将手机、平板灯移动设备的音视频画面共享到另一个屏幕显示设备如平板、电脑、投影仪上。
8、本发明实施例的术语“RTSP”,即实时流传输协议(Real Time StreamingProtocol,RTSP),屏幕投射一般通过RTSP协议实现,RTSP是TCP/IP协议体系中的一个应用层协议,RTSP是用来控制声音或影像的多媒体串流协议,传输时所用的网络通讯协定并不在其定义的范围内。
9、本发明实施例的术语“移动终端”,移动终端或者叫移动通信终端是指可以在移动中使用的计算机设备,广义的讲包括手机、笔记本、平板电脑、POS机甚至包括车载电脑。但是大部分情况下是指手机或者具有多种应用功能的智能手机以及平板电脑。
图1示出了移动终端100的结构示意图。
下面以移动终端100为例对实施例进行具体说明。应该理解的是,图1所示移动终端100仅是一个范例,并且移动终端100可以具有比图1中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
图1中示例性示出了根据示例性实施例中移动终端100的硬件配置框图。如图1所示,移动终端100包括:射频(radio frequency,RF)电路110、存储器120、显示单元130、摄像头140、传感器150、音频电路160、无线保真(Wireless Fidelity,Wi-Fi)模块170、处理器180、蓝牙模块181、以及电源190等部件。
RF电路110可用于在收发信息或通话过程中信号的接收和发送,可以接收基站的下行数据后交给处理器180处理;可以将上行数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。
存储器120可用于存储软件程序及数据。处理器180通过运行存储在存储器120的软件程序或数据,从而执行移动终端100的各种功能以及数据处理。存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器120存储有使得移动终端100能运行的操作***。本申请中存储器120可以存储操作***及各种应用程序,还可以存储执行本申请实施例所述方法的代码。
显示单元130可用于接收输入的数字或字符信息,产生与移动终端100的用户设置以及功能控制有关的信号输入,具体地,显示单元130可以包括设置在移动终端100正面的触摸屏131,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。
显示单元130还可用于显示由用户输入的信息或提供给用户的信息以及终端100的各种菜单的图形用户界面(graphical user interface,GUI)。具体地,显示单元130可以包括设置在移动终端100正面的显示屏132。其中,显示屏132可以采用液晶显示器、发光二极管等形式来配置。显示单元130可以用于显示本申请中所述的各种图形用户界面。
其中,触摸屏131可以覆盖在显示屏132之上,也可以将触摸屏131与显示屏132集成而实现移动终端100的输入和输出功能,集成后可以简称触摸显示屏。本申请中显示单元130可以显示应用程序以及对应的操作步骤。
摄像头140可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器180转换成数字图像信号。
移动终端100还可以包括至少一种传感器150,比如加速度传感器151、距离传感器152、指纹传感器153、温度传感器154。移动终端100还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。
音频电路160、扬声器161、麦克风162可提供用户与移动终端100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出。移动终端100还可配置音量按钮,用于调节声音信号的音量。另一方面,麦克风162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出至RF电路110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理。本申请中麦克风162可以获取用户的语音。
Wi-Fi属于短距离无线传输技术,移动终端100可以通过Wi-Fi模块170帮助用户收发电子邮件、浏览网页和访问流媒体等,它为用户提供了无线的宽带互联网访问。
处理器180是移动终端100的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器120内的软件程序,以及调用存储在存储器120内的数据,执行移动终端100的各种功能和处理数据。在一些实施例中,处理器180可包括一个或多个处理单元;处理器180还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器180中。本申请中处理器180可以运行操作***、应用程序、用户界面显示及触控响应,以及本申请实施例所述的处理方法。另外,处理器180与显示单元130耦接。
蓝牙模块181,用于通过蓝牙协议来与其他具有蓝牙模块的蓝牙设备进行信息交互。例如,移动终端100可以通过蓝牙模块181与同样具备蓝牙模块的可穿戴电子设备(例如智能手表)建立蓝牙连接,从而进行数据交互。
移动终端100还包括给各个部件供电的电源190(比如电池)。电源可以通过电源管理***与处理器180逻辑相连,从而通过电源管理***实现管理充电、放电以及功耗等功能。移动终端100还可配置有电源按钮,用于终端的开机和关机,以及锁屏等功能。
图2是本发明实施例的移动终端100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android***分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和***库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图***,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图***包括可视控件,例如显示文字的控件,显示图片的控件等。视图***可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供移动终端100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在***顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,移动终端振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓***的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
***库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子***进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
下面结合捕获拍照场景,示例性说明移动终端100软件以及硬件的工作流程。
当触摸屏131接收到触摸操作,相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标,触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该输入事件所对应的控件。以该触摸操作是触摸单击操作,该单击操作所对应的控件为相机应用图标的控件为例,相机应用调用应用框架层的接口,启动相机应用,进而通过调用内核层启动摄像头驱动,通过摄像头140捕获静态图像或视频。
本申请实施例中的移动终端100可以为手机、平板电脑、可穿戴设备、笔记本电脑以及电视等。
图3是用于示出移动终端(例如图1的移动终端100)上的用户界面的示意图。在一些具体实施中,用户通过触摸用户界面上的应用图标可以打开相应的应用程序,或者通过触摸用户界面上的文件夹图标可以打开相应的文件夹。
随着通信技术的发展,移动终端等通讯工具可以满足用户不同场合的需求,且同一个用户可以拥有多个移动终端,当用户想要控制其中一个移动终端时,只能通过对该移动终端自身进行操作,因此,目前对于多个移动终端的控制方式并不灵活。
有鉴于此,本发明实施例中发送终端对屏幕显示内容进行屏幕录制得到投屏数据,并向接收终端发送投屏数据;接收终端接收发送终端发送的投屏数据,并根据接收到的投屏数据,在显示界面中的目标区域展示发送终端的屏幕显示内容。由于本发明实施例接收终端接收到发送终端发送的投屏数据后,在显示界面中的部分区域展示发送终端进行屏幕录制的屏幕显示内容,从而将发送终端的屏幕显示内容投屏至接收终端后,只在接收终端显示界面中的部分区域显示发送终端的屏幕显示内容,接收终端显示界面中其它区域还可以继续显示自身的屏幕显示内容,这样,在实现发送终端投屏后,用户可以通过接收终端中显示发送终端显示内容的目标区域实现对发送终端的反向控制,并且用户还可以通过接收终端除目标区域之外的其它显示区域继续对接收终端进行控制,进一步提高终端操作的灵活性。
如图4所示,本发明实施例提供的一种应用场景的示意图,包括目标用户40、发送终端41、接收终端42。
发送终端41和接收终端42安装有投屏应用,目标用户40启动发送终端41和接收终端42上安装的投屏应用;其中,发送终端41与接收终端42是通过不基于外网的WiFi P2P建立的近场内部网络连接的;响应目标用户40触发的录屏指令,发送终端41对屏幕显示内容进行录制得到投屏数据,发送终端41将投屏数据发送给接收终端42;接收终端42在显示界面中的部分区域展示发送终端41的屏幕显示内容。
例如,假设发送终端为手机,接收终端为平板;如图5A所示的手机屏幕显示内容,如图5B所示的平板显示界面中的显示内容;手机与平板之间建立WiFi P2P连接,在将手机的屏幕显示内容进行录制得到投屏数据之后,手机将投屏数据发送给平板,平板在显示界面中的部分区域展示手机的屏幕显示内容,在投屏之后,平板的显示界面如图5C所示。
如图6所示,本发明实施例提供的一种投屏方法流程示意图,主要包括以下步骤:
步骤S601、发送终端对屏幕显示内容进行屏幕录制得到投屏数据;
步骤S602、发送终端向接收终端发送投屏数据;
步骤S603、接收终端接收发送终端发送的投屏数据;
步骤S604、接收终端根据接收到的投屏数据,在显示界面中的目标区域展示发送终端的屏幕显示内容;
其中,目标区域为接收终端的显示界面中的部分区域,同时,接收终端的显示界面中除目标区域之外的区域可以继续展示接收终端的当前界面。
实施中,本发明实施例为了实现发送终端到接收终端的投屏之前,建立发送终端与接收终端之间的连接;
其中,本发明实施例发送终端与接收终端之间建立BLE GATT连接以及WiFi P2P连接;下面针对这两种连接的建立方式分别进行说明。
1、发送终端与接收终端之间建立BLE GATT连接。
如图7所示,本发明实施例提供的建立BLE GATT连接的流程示意图,主要包括以下步骤:
步骤S701、接收终端发送BLE广播;
步骤S702、发送终端进行BLE广播扫描;
步骤S703、发送终端在扫描到接收终端发送的BLE广播后,向接收终端发起GATT连接请求;
需要说明的是,BLE广播中包括接收终端的设备名称,发送终端通过扫描周边的BLE广播,并根据接收终端的设备名称确定对应的接收终端;
步骤S704、接收终端接收发送终端发送的GATT连接请求;
步骤S705、接收终端确认建立GATT连接后,接收终端与发送终端之间建立GATT连接。
需要说明的是,发送终端与接收终端之间通过GATT连接传输数据时,如果数据内容大小超过20个字节,则需要通过requestMTU接口进行MTU协商。
2、发送终端与接收终端之间建立GATT连接。
本发明实施例在确认建立GATT连接之后,发送终端与接收终端之间可以建立WiFiP2P连接;
实施中,接收终端通过GATT连接将WiFi P2P的MAC地址发送给发送终端,发送终端根据WiFi P2P的MAC地址向接收终端发送WiFi P2P连接请求,接收终端接收WiFi P2P连接请求并确认接受,则发送终端与接收终端建立了WiFi P2P连接。
需要说明的是,接收终端通过GATT连接可以将WiFi P2P的MAC地址发送给发送终端,由于MAC地址只有6个字节,加上格式分隔符“:”,即类似“**:**:**:**:**:**”形式,如“02:00:00:00:00:00”,内容不超过20个字节,因此此处无需进行GATT Characteristic的MTU协商,接收终端可以直接通过GATT连接可以将WiFi P2P的MAC地址发送给发送终端。
另外,WiFi P2P连接建立之前,如果没有创建一个Group群组,***会自动创建一个群组,并且随机分配GO(Group Owner),一般情况下,发起WiFi P2P连接的设备作为GC(Group Client),接受邀请的一方作为GO,但并非绝对的,所以当没有方法明确指定某个设备一定是GO,另一个一定作为GC,可以通过groupOwnerIntent参数去建议对端设备作为GC或GO,但最终还是以底层协商结果为准。
需要说明的是,根据底层协商结果协商其中一个设备作为GO端,另一个设备作为GC端,一般情况下,Android原生设计GC设备可以通过上层接口直接获取到GO的IP地址(协议规定此IP地址一般为192.168.49.1),但GO却没有明确的方法获取到GC的IP地址。
而本发明实施例在建立WiFi P2P连接后,可以基于WiFi P2P连接获取对端的IP地址;
如图8所示,本发明实施例基于WiFi P2P连接的IP地址获取流程示意图,假设发送终端为GC端,接收终端为GO端,主要包括以下步骤:
步骤S801、发送终端向接收终端发起WiFi P2P连接请求;
步骤S802、接收终端接收发送终端发送的WiFi P2P连接请求;
步骤S803、接收终端确认建立WiFi P2P连接;
步骤S804、发送终端直接获取接收终端的IP地址并保存;
步骤S805、发送终端根据接收终端的IP地址,向接收终端发送第一条UDP连接建立请求;
步骤S806、接收终端接收发送终端发送的第一条UDP连接建立请求,并确认与发送终端建立第一条UDP连接;
步骤S807、发送终端通过第一条UDP连接向接收终端发送发送终端的IP地址;
步骤S808、接收终端通过第一条UDP连接接收发送终端的IP地址;
步骤S809、接收终端根据发送终端的IP地址与发送终端建立第二条UDP连接。
如图9所示,本发明实施例基于WiFi P2P连接的IP地址获取流程示意图,假设发送终端为GO端,接收终端为GC端,主要包括以下步骤:
步骤S901、接收终端向发送终端发起WiFi P2P连接请求;
步骤S902、发送终端接收接收终端发送的WiFi P2P连接请求;
步骤S903、发送终端确认建立WiFi P2P连接;
步骤S904、接收终端直接获取发送终端的IP地址并保存;
步骤S905、接收终端根据发送终端的IP地址,向发送终端发送第一条UDP连接建立请求;
步骤S906、发送终端接收接收终端发送的第一条UDP连接建立请求,并确认与接收终端建立第一条UDP连接;
步骤S907、接收终端通过第一条UDP连接向接收终端发送接收终端的IP地址;
步骤S908、发送终端通过第一条UDP连接接收接收终端的IP地址;
步骤S909、发送终端根据接收终端的IP地址与接收终端建立第二条UDP连接。
需要说明的是,在发送终端与接收终端建立WiFi P2P连接之后,GC端获取到GO端的IP地址的同时,根据此IP地址通过第一条UDP连接向GO端发送GC端地址,具体为,GC端指定IP_Port端口,其中,IP_Port端口可以为11788,GC端根据此端口把GC端的WiFi P2P对应的IP地址发送给GO端,GO端在Wi-Fi P2P连接建立之前可以通过监听此IP_Port端口,等待接收GC端传输过来的WiFi P2P对应的IP地址。
需要说明的是,对端的IP地址一般会保存到本机的proc/net/arp缓存表里,但是arp表经常更新不及时或mac地址对应不上,所以常规的通过查询arp表的方式获取IP地址不是很靠谱。Android***中可以通过NetworkInterface对象获取到iface(网络接口)类型为p2p-wlan0的本机IP地址。
实施中,基于上述所描述的实施例,发送终端与接收终端之间建立GATT连接;接收终端通过GATT连接将接收终端的MAC地址发送给发送终端,发送终端根据WiFi P2P的MAC地址向发送终端发送WiFi P2P连接请求,发送终端与接收终端之间建立WiFi P2P连接;基于发送终端与接收终端之间建立的WiFi P2P连接,可以获取对端的IP地址并建立第一条UDP连接和第二条UDP连接。
实施中,发送终端对屏幕中显示的内容进行屏幕录制得到投屏数据,并通过第二条UDP连接将投屏数据发送给接收终端,接收终端通过第二条UDP连接接收投屏数据,并在显示界面中的目标区域展示发送终端的屏幕显示内容。
本发明实施例,在接收终端显示界面的目标区域展示发送终端的屏幕显示内容之后,可以实现在目标区域中触发的接收终端对发送终端进行的控制操作。
一种可选的实施的方式为,用户可以在目标区域中触发操作,接收终端响应用户在目标区域触发的控制指令,生成与控制指令对应的用于表述控制指令触发位置和/或控制类型的控制数据;接收终端通过与发送终端之间的GATT连接,将控制数据发送给发送终端;发送终端通过与接收终端之间的GATT连接,接收接收终端发送的控制指令对应的控制数据,并执行相应的响应操作。
需要说明的是,控制数据中除控制指令触发位置和控制类型外,还可以包括平板屏幕分辨率以及横竖屏状态。
实施中,控制指令触发位置是用当前点击屏幕的X、Y轴坐标表示,获取准确的位置坐标,可以保证信息传输的准确性。
具体地,用户可以根据自身需求触发目标区域的相应位置,实施中,发送终端以手机为例,接收终端以平板为例,如图10所示平板的显示界面,用户可以在平板的显示界面中手机的显示区域触发控制指令,例如用户触发打开手机中图库应用。
实施中,控制指令对应的控制类型可以包括但不限于:
按下、弹起、拖拽、选中文本内容后通过多指滑动/抓取释放。
本发明实施例在通过发送终端与接收终端之间的GATT连接传输控制数据时,由于控制数据的大小超过了20个字节,所以在进行GATT传输时平板首先需要通过requestMTU接口请求进行MTU协商,如果两端协商成功则接收终端通过执行一次GATT readCharacteristic change接口通知发送终端接收控制数据。如果两端协商失败,则接收终端需要将控制数据拆分成以20个字节为单位的多个片段执行多次GATT readCharacteristic change接口通知发送终端接收多次控制数据,最后发送终端将这些控制数据片段组装成完整的控制数据之后,执行相应的响应操作。
本发明实施例在平板显示界面中的目标区域展示手机发送的屏幕显示内容之后,还可以实现数据的双向传输。
一种可选的实施方式为,接收终端向发送终端传输数据,其中,传输的数据可以为图库中的图片、视频,文件库中的文件或是某段文字信息。
具体地,用户在接收终端的显示界面中触发从接收终端向发送终端传输数据的第一传输指令,接收终端响应第一传输指令,确定需要传输给发送终端的第一目标数据,并通过接收终端与发送终端之间的TCP连接,将第一目标数据发送给发送终端;发送终端接收接收终端发送的第一目标数据。
需要说明的是,数据传输比较注重传输内容的完整性,所以实施中使用可靠性较强的TCP连接传输数据量较大的音视频、图像、文件等信息。
实施中,发送终端以手机为例,接收终端以平板为例,平板向手机传输数据,可以有很多实际应用场景对应的示意图,例如,若平板支持触屏操作,如图11所示,用户从平板的图库中选中需要发送的图片,通过拖拽操作将从平板图库中选中的图片发送给手机,如图11中用户的触摸轨迹,拖拽操作的起始触摸位置在平板的显示界面中除手机屏幕显示区域之外的区域,拖拽操作的结束位置在平板的显示界面中手机屏幕显示区域;
又例如,如图12所示,用户从平板的图库中选中需要发送的图片,在平板的显示界面中除手机屏幕显示区域之外的区域触发发送操作,并选择发送给手机,从而平板将选中的图片发送给手机;
又例如,用户在平板的显示界面中除手机屏幕显示区域之外的区域复制文本信息,并通过拖拽操作将选中的文本信息发送给手机,如图13所示的用户的触摸轨迹,手机在接收到平板发送的文本信息后,可以将文本信息保存在便签应用中。
一种可选的实施的方式为,用户在目标区域中触发操作,发送终端向接收终端传输数据。
接收终端响应用户在显示界面中触发的从发送终端向接收终端传输数据的第二传输指令,确定需要传输的第二目标数据,并通知发送终端向接收终端传输第二目标数据;发送终端接收到接收终端发送的传输第二目标数据的通知,将第二目标数据传输给接收终端。
实施中,发送终端与接收终端之间建立GATT连接,接收终端通过GATT连接通知发送终端向接收终端传输第二目标数据,同时发送终端通过GATT连接接收接收终端发送的确定需要传输的第二目标数据的通知,并将第二目标数据通过发送终端与接收终端之间的TCP连接传输给接收终端,接收终端通过与发送终端之间的TCP连接,接收发送终端传输的第二目标数据。
实施中,发送终端以手机为例,接收终端以平板为例,在目标区域中触发操作,可以实现手机向平板传输数据,可以有很多实际应用场景对应的示意图,例如,若平板支持触屏操作,用户从手机的图库中选中需要发送的图片,通过拖拽操作将从手机图库中选中的图片发送给平板,如图14中用户的触摸轨迹,拖拽操作的起始触摸位置在平板的显示界面中手机屏幕显示区域,拖拽操作的结束位置在平板的显示界面中除手机屏幕显示区域之外的区域;
又例如,如图15所示,用户从手机的图库中选中需要发送的图片,在平板的显示界面中手机屏幕显示区域触发发送操作,并选择发送给平板,从而手机将选中的图片发送给平板;
又例如,用户在平板的显示界面中手机屏幕显示区域复制手机中的文本信息,并通过拖拽操作将选中的文本信息发送给平板,如图16所示的用户的触摸轨迹,平板在接收到手机发送的文本信息后,可以将文本信息保存在便签应用中。
如图17所示,本发明实施例提供的第一种投屏方法,应用于接收终端侧,主要包括以下步骤:
步骤S1701、接收终端接收发送终端发送的投屏数据;其中,投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
步骤S1702、接收终端根据接收到的投屏数据,在显示界面中的目标区域展示发送终端的屏幕显示内容,目标区域为接收终端的显示界面中的部分区域。
如图18所示,本发明实施例提供的第二种投屏方法,应用于发送终端侧,主要包括以下步骤:
步骤S1801、发送终端对屏幕显示内容进行屏幕录制得到投屏数据;
步骤S1801、发送终端向接收终端发送投屏数据,以使接收终端根据接收到的投屏数据,在显示界面中的目标区域展示发送终端的屏幕显示内容,目标区域为接收终端的显示界面中的部分区域。
基于相同的构思,如图19所示,本发明实施例提供的第一种终端,该终端处理器1901和收发单元1902:
所述收发单元1902被配置为,接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
所述处理器1901被配置为,根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
可选的,所述处理器1901被配置为,响应用户在所述目标区域触发的控制指令,生成与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的控制数据,并将生成的所述控制指令对应的控制数据传输给所述收发单元;
所述收发单元1902被配置为,将所述控制指令对应的控制数据发送给所述发送终端,以使所述发送终端根据所述控制数据执行相应的响应操作。
可选的,所述收发单元1902被配置为,通过与所述发送终端之间的GATT连接,将所述操作指令对应的控制数据发送给所述发送终端。
可选的,所述处理器1901被配置为,响应用户在所述显示界面中触发的从所述接收终端向所述发送终端传输数据的第一传输指令,确定需要传输给所述发送终端的第一目标数据,并将所述第一目标数据传输给所述收发单元;
所述收发单元1902被配置为,将所述第一目标数据发送给所述发送终端;
所述处理器1901被配置为,响应用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令,确定所述发送终端需要传输的第二目标数据;
所述收发单元1902被配置为,通知所述发送终端向所述接收终端传输所述第二目标数据;以及,接收所述发送终端传输的所述第二目标数据。
可选的,所述收发单元1902被配置为,通过与所述发送终端之间的TCP连接,将所述第一目标数据发送给所述发送终端;通过与所述发送终端之间的GATT连接,通知所述发送终端向所述接收终端传输所述第二目标数据;通过与所述发送终端之间的TCP连接,接收所述发送终端传输的所述第二目标数据。
可选的,所述收发单元1902被配置为,通过与所述发送终端之间的UDP连接,接收所述发送终端发送的投屏数据。
基于相同的构思,如图20所示,本发明实施例提供的第二种终端,该终端包括处理器2001和收发单元2002:
所述处理器2001被配置为,对屏幕显示内容进行屏幕录制得到投屏数据,并将所述投屏数据传输给所述收发单元;
所述收发机2002被配置为,向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
可选的,所述收发单元2002被配置为,接收所述接收终端发送的控制指令对应的控制数据;
所述处理器2001被配置为,根据所述控制数据执行相应的响应操作;其中,所述控制数据为所述接收终端响应用户在所述目标区域触发的控制指令,生成的与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的数据。
可选的,所述收发单元2002被配置为,通过与所述接收终端之间的GATT连接,接收所述接收终端发送的所述控制指令对应的控制数据。
可选的,所述收发单元2002被配置为,接收所述接收终端发送的第一目标数据;其中,所述第一目标数据为所述接收终端响应用户在所述显示界面触发的从所述接收终端向所述发送终端传输数据的第一传输指令后发送的;和/或
接收所述接收终端发送的传输第二目标数据的通知,并将所述第二目标数据传输给所述接收终端;其中,所述第二目标数据是所述接收终端根据用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令确定的。
可选的,所述收发单元2002被配置为,通过与所述接收终端的TCP连接,接收所述接收终端发送的第一目标数据;通过与所述接收终端之间的GATT连接,接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知;通过与所述发送终端之间的TCP连接,将所述第二目标数据传输给所述接收终端。
可选的,所述收发单元2002被配置为,通过与所述接收终端的UDP连接,向接收终端发送所述投屏数据。
基于相同的构思,如图21所示,本发明实施例提供的第三种终端,该终端包括:
接收模块2101,用于接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
处理模块2102,用于根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
可选的,所述处理模块2102还用于:
响应用户在所述目标区域触发的控制指令,所述接收终端生成与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的控制数据;
将所述控制指令对应的控制数据发送给所述发送终端,以使所述发送终端根据所述控制数据执行相应的响应操作。
可选的,所述处理模块2102具体用于:
通过与所述发送终端之间的GATT连接,将所述操作指令对应的控制数据发送给所述发送终端。
可选的,所述处理模块2102还用于:
响应用户在所述显示界面中触发的从所述接收终端向所述发送终端传输数据的第一传输指令,所述接收终端确定需要传输给所述发送终端的第一目标数据,并将所述第一目标数据发送给所述发送终端;和/或
响应用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令,所述接收终端确定所述发送终端需要传输的第二目标数据,并通知所述发送终端向所述接收终端传输所述第二目标数据;以及,接收所述发送终端传输的所述第二目标数据。
可选的,所述处理模块2102具体用于:
通过与所述发送终端之间的TCP连接,将所述第一目标数据发送给所述发送终端;
通知所述发送终端向所述接收终端传输所述第二目标数据,包括:
通过与所述发送终端之间的GATT连接,通知所述发送终端向所述接收终端传输所述第二目标数据;
接收所述发送终端传输的所述第二目标数据,包括:
通过与所述发送终端之间的TCP连接,接收所述发送终端传输的所述第二目标数据。
可选的,所述接收模块2101具体用于:
通过与所述发送终端之间的UDP连接,接收所述发送终端发送的投屏数据。
基于相同的构思,如图22所示,本发明实施例提供的第四种终端,该终端包括:
录制模块2201,用于对屏幕显示内容进行屏幕录制得到投屏数据;
发送模块2202,用于向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
可选的,所述发送模块2202还用于:
接收所述接收终端发送的控制指令对应的控制数据,并根据所述控制数据执行相应的响应操作;其中,所述控制数据为所述接收终端响应用户在所述目标区域触发的控制指令,生成的与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的数据。
可选的,所述发送模块2202具体用于:
通过与所述接收终端之间的GATT连接,接收所述接收终端发送的所述控制指令对应的控制数据。
可选的,所述发送模块2202还用于:
接收所述接收终端发送的第一目标数据;其中,所述第一目标数据为所述接收终端响应用户在所述显示界面触发的从所述接收终端向所述发送终端传输数据的第一传输指令后发送的;和/或
接收所述接收终端发送的传输第二目标数据的通知,并将所述第二目标数据传输给所述接收终端;其中,所述第二目标数据是所述接收终端根据用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令确定的。
可选的,所述发送模块2202具体用于:
通过与所述接收终端的TCP连接,接收所述接收终端发送的第一目标数据;
接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知,包括:
端通过与所述接收终端之间的GATT连接,接收所述接收终端发送的确定所述发送终端需要传输的第二目标数据的通知;
端将所述第二目标数据传输给所述接收终端,包括:
通过与所述发送终端之间的TCP连接,将所述第二目标数据传输给所述接收终端。
可选的,所述发送模块2202具体用于:
通过与所述接收终端的UDP连接,向接收终端发送所述投屏数据。
由于本发明实施例中计算机存储介质可以应用于上述处理方法,因此,其所能获得的技术效果也可参考上述方法实施例,本发明的实施例在此不再赘述。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
虽然以上描述了本发明的具体实施方式,但是本领域的技术人员应当理解,这些仅是举例说明,本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下,可以对这些实施方式做出多种变更或修改,但这些变更和修改均落入本发明的保护范围。
Claims (10)
1.一种终端,其特征在于,包括处理器和收发单元:
所述收发单元被配置为,接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
所述处理器被配置为,根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
2.如权利要求1所述的终端,其特征在于,所述处理器被配置为,响应用户在所述目标区域触发的控制指令,生成与所述控制指令对应的用于表示所述控制指令触发位置和/或控制类型的控制数据,并将生成的所述控制指令对应的控制数据传输给所述收发单元;
所述收发单元被配置为,将所述控制指令对应的控制数据发送给所述发送终端,以使所述发送终端根据所述控制数据执行相应的响应操作。
3.如权利要求2所述的终端,其特征在于,所述收发单元被配置为,通过与所述发送终端之间的GATT连接,将所述操作指令对应的控制数据发送给所述发送终端。
4.如权利要求1所述的终端,其特征在于,所述处理器被配置为,响应用户在所述显示界面中触发的从所述接收终端向所述发送终端传输数据的第一传输指令,确定需要传输给所述发送终端的第一目标数据,并将所述第一目标数据传输给所述收发单元;
所述收发单元被配置为,将所述第一目标数据发送给所述发送终端;
所述处理器被配置为,响应用户在所述显示界面中触发的从所述发送终端向所述接收终端传输数据的第二传输指令,确定所述发送终端需要传输的第二目标数据;
所述收发单元被配置为,通知所述发送终端向所述接收终端传输所述第二目标数据;以及,接收所述发送终端传输的所述第二目标数据。
5.如权利要求4所述的终端,其特征在于,所述收发单元被配置为,通过与所述发送终端之间的TCP连接,将所述第一目标数据发送给所述发送终端;通过与所述发送终端之间的GATT连接,通知所述发送终端向所述接收终端传输所述第二目标数据;通过与所述发送终端之间的TCP连接,接收所述发送终端传输的所述第二目标数据。
6.如权利要求1所述的终端,其特征在于,所述收发单元被配置为,通过与所述发送终端之间的UDP连接,接收所述发送终端发送的投屏数据。
7.一种终端,其特征在于,包括处理器和收发单元:
所述处理器被配置为,对屏幕显示内容进行屏幕录制得到投屏数据,并将所述投屏数据传输给所述收发单元;
所述收发机被配置为,向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
8.一种投屏方法,其特征在于,包括:
接收终端接收发送终端发送的投屏数据;其中,所述投屏数据为发送终端对屏幕显示内容进行屏幕录制得到的;
所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
9.一种投屏的方法,其特征在于,包括:
发送终端对屏幕显示内容进行屏幕录制得到投屏数据;
所述发送终端向接收终端发送所述投屏数据,以使所述接收终端根据接收到的所述投屏数据,在显示界面中的目标区域展示所述发送终端的屏幕显示内容,所述目标区域为所述接收终端的显示界面中的部分区域。
10.一种计算机存储介质,其特征在于,所述计算机存储介质中存储有计算机程序指令,当所述指令在计算机上运行时,使得计算机执行如权利要求8~9任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010988528.XA CN114201130A (zh) | 2020-09-18 | 2020-09-18 | 一种投屏的方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010988528.XA CN114201130A (zh) | 2020-09-18 | 2020-09-18 | 一种投屏的方法、装置及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114201130A true CN114201130A (zh) | 2022-03-18 |
Family
ID=80645118
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010988528.XA Pending CN114201130A (zh) | 2020-09-18 | 2020-09-18 | 一种投屏的方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114201130A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115243082A (zh) * | 2022-07-18 | 2022-10-25 | 海信视像科技股份有限公司 | 一种显示设备及终端控制方法 |
CN116208796A (zh) * | 2022-12-30 | 2023-06-02 | 深圳创维-Rgb电子有限公司 | 投屏控制方法、投屏控制装置、处理器和投屏*** |
WO2023179129A1 (zh) * | 2022-03-24 | 2023-09-28 | 海信视像科技股份有限公司 | 显示设备、投屏设备及基于轨迹提取的设备控制方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108900692A (zh) * | 2018-05-25 | 2018-11-27 | Oppo广东移动通信有限公司 | 屏幕显示方法和装置、电子设备、计算机可读存储介质 |
CN110377250A (zh) * | 2019-06-05 | 2019-10-25 | 华为技术有限公司 | 一种投屏场景下的触控方法及电子设备 |
-
2020
- 2020-09-18 CN CN202010988528.XA patent/CN114201130A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108900692A (zh) * | 2018-05-25 | 2018-11-27 | Oppo广东移动通信有限公司 | 屏幕显示方法和装置、电子设备、计算机可读存储介质 |
CN110377250A (zh) * | 2019-06-05 | 2019-10-25 | 华为技术有限公司 | 一种投屏场景下的触控方法及电子设备 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023179129A1 (zh) * | 2022-03-24 | 2023-09-28 | 海信视像科技股份有限公司 | 显示设备、投屏设备及基于轨迹提取的设备控制方法 |
CN115243082A (zh) * | 2022-07-18 | 2022-10-25 | 海信视像科技股份有限公司 | 一种显示设备及终端控制方法 |
CN116208796A (zh) * | 2022-12-30 | 2023-06-02 | 深圳创维-Rgb电子有限公司 | 投屏控制方法、投屏控制装置、处理器和投屏*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114286165B (zh) | 一种显示设备、移动终端、投屏数据传输方法及*** | |
CN114201130A (zh) | 一种投屏的方法、装置及存储介质 | |
CN111240546B (zh) | 一种分屏处理方法及通信终端 | |
CN112114733B (zh) | 一种截屏、录屏方法、移动终端及计算机存储介质 | |
CN115514882B (zh) | 一种分布式拍摄方法,电子设备及介质 | |
CN114339332B (zh) | 一种移动终端、显示设备及跨网投屏方法 | |
CN111367456A (zh) | 通信终端及多窗口模式下的显示方法 | |
CN111526232B (zh) | 一种基于双屏终端的摄像头控制方法及双屏终端 | |
CN111176766A (zh) | 一种通信终端及组件显示方法 | |
CN113014614A (zh) | 一种设备控制方法、控制设备及被控设备 | |
CN113253905B (zh) | 基于多指操作的触控方法及智能终端 | |
CN114339591B (zh) | 基于超宽带芯片进行定位的方法和相关装置 | |
CN113157092B (zh) | 可视化方法、终端设备和存储介质 | |
CN113542488B (zh) | 采用终端设备控制受控终端的方法、设备和存储介质 | |
CN113784186B (zh) | 终端设备、服务器和通信控制方法 | |
CN111324255B (zh) | 一种基于双屏终端的应用处理方法及通信终端 | |
CN112000411B (zh) | 移动终端及其录音通道占用信息的显示方法 | |
CN111163220B (zh) | 一种显示方法、通信终端及计算机存储介质 | |
CN112114883A (zh) | 一种终端唤醒方法、终端及计算机存储介质 | |
CN114286320A (zh) | 一种显示设备、移动终端及蓝牙连接方法 | |
CN114007202A (zh) | 一种绑定关系的建立方法以及相关设备 | |
CN111159734A (zh) | 通信终端及多应用数据互访处理方法 | |
CN111600862A (zh) | 一种用户账户管理方法及设备 | |
CN111142648B (zh) | 一种数据处理方法和智能终端 | |
CN111381801B (zh) | 一种基于双屏终端的音频播放方法及通信终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |