CN105430482A - 一种多屏互动方法及终端设备 - Google Patents

Abstract

本发明公开了一种多屏互动方法及终端设备，所述方法包括：源终端在接入局域网后，所述源终端的***对外接口若检测到用户触发的多屏互动指令，则向局域网发送协议搜索信息，所述源终端的底层***中封装了至少一种多屏互动协议；获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是目的终端获取到协议搜索信息后发送的且所述搜索响应消息中携带了目的终端支持的协议类型；在确定用户从各个目的终端中选择的一个交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述交互终端支持的协议类型对应的多屏互动协议；根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

Description

一种多屏互动方法及终端设备

技术领域

本发明涉及多媒体技术领域，尤其涉及一种多屏互动方法及终端设备。

背景技术

随着互联网技术的快速发展，多屏互动技术已经成为各厂商发展的重要方向。多屏互动指的是，在基于不同操作***(如Ios、Android、Symbian等)的不同终端设备(如智能手机、智能平板、电脑、TV等)之间，通过无线网络连接的方式，进行数字多媒体(音频、视频、图片)内容的传输、解析、展示、控制等一系列操作，使得在不同平台设备上同时共享展示内容，此外，设备相互之间还可以进行更多交互或互动，从而丰富用户的多媒体生活。

目前，众多协议支持多屏互动，如DLNA协议、Airplay协议、闪联协议或Miracast协议等，但移动终端的应用程序(Application，简称APP)往往仅支持一种多屏互动协议，如Android平台一般只支持DLNA协议，而Ios平台只支持Airplay协议，即只可以在多个支持DLNA协议的终端设备之间或者只可以在多个支持Airplay协议的终端设备之间实现多屏互动。

可见，由于不同平台的移动终端的应用程序APP仅支持一种多屏互动协议，如仅支持DLNA协议或仅支持Airplay协议，使得移动终端与其它设备之间无法实现协议的兼容互通，从而无法实现跨***平台操作的多屏互动，进而使得多屏互动技术的应用场合受到很大限制。

发明内容

有鉴于此，本发明实施例的主要目的在于提供一种多屏互动方法及终端设备，以实现不同终端设备之间均可进行多屏互动的目的。

为实现上述目的，本发明实施例提供了一种多屏互动方法，所述方法包括：

源终端在接入局域网后，所述源终端的***对外接口若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息，所述源终端的底层***中封装了至少一种多屏互动协议；

所述***对外接口获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型；

所述***对外接口在确定用户从各个目的终端中选择的一个交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述交互终端支持的协议类型对应的多屏互动协议；

所述***对外接口根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

可选的，所述搜索响应消息中还携带了所述目的终端的设备标识，所述确定用户从各个目的终端中选择的一个交互终端，包括：

使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称；

若检测到用户从显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

可选的，所述根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动，包括：

根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

可选的，所述方法还包括：

所述***对外接口向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述显示设备上的显示方式。

可选的，所述协议搜索信息以广播包的形式发送。

本发明实施例还提供了一种终端设备，所述终端设备为接入局域网且具有***对外接口的源终端，所述源终端的底层***中封装了至少一种多屏互动协议，所述对外接口包括：

信息发送单元，用于若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息；

消息获取单元，用于获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述信息发送单元发送的协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型；

终端确定单元，用于确定用户从各个目的终端中选择的一个交互终端；

协议调取单元，用于在所述终端确定单元确定所述交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述消息获取单元获取的所述交互终端支持的协议类型对应的多屏互动协议；

多屏互动单元，用于根据所述协议调取单元从所述至少一种多屏互动协议中调取的目标协议，使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

可选的，所述搜索响应消息中还携带了所述目的终端的设备标识，所述终端确定单元，包括：

显示子单元，用于使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称；

确定子单元，用于若检测到用户从所述显示子单元显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

可选的，所述多屏互动单元，具体用于根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

可选的，所述对外接口还包括：

资源控制单元，用于向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述显示设备上的显示方式。

可选的，所述协议搜索信息以广播包的形式发送。

本发明实施例提供的多屏互动方法及终端设备，通过在源终端***底层整合入多种多屏互动协议的具体实现细节，使得基于不同操作***的源终端均支持多种不同的多屏互动协议，这样源终端中整合的各个协议类型可以极大概率的囊括目的终端支持的协议类型，从而增加了接入同一局域网的目的终端和源终端间的协议兼容性，若源终端要和某目的终端进行多屏互动，源终端可利用***对外接口从多种多屏互动协议中调取该目的终端支持的多屏互动协议进行数据交互，这样便使得二者的协议类型相互一致，从而避免了现有技术中源终端(只支持一种多屏互动协议)与目的终端的协议不一致性造成的二者无法进行多屏互动的缺陷。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例多屏互动方法的流程示意图；

图2为本发明实施例多屏交互控制***示意图；

图3为本发明实施例视频投放流程示意图之一；

图4为本发明实施例视频投放流程示意图之二；

图5为本发明实施例终端设备的组成示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例将进行多屏交互的设备双方定义为源终端和目的终端，比如源终端可以是智能手机或智能平板，目的终端可以为智能电视或多屏交互盒子。通过多屏交互将源终端上的视频、音频和图片等内容投放到目的终端对应的显示设备上进行同步显示。但是，现有源终端只支持一种多屏交互协议，所以，当源终端支持的协议类型与目的终端支持的协议类型不一致时，这种协议不兼容性将导致源终端与目的终端之间无法进行多屏交互。为此，本发明实施例通过在源终端中封装各个多屏互动协议的具体实现细节，使源终端具有多个多屏互动协议的各项功能，并在源终端中设置统一的***对外接口，如果目的终端支持的多屏交互协议为源终端中封装的各个协议中的一种，便可通过***对外接口使源终端与目的终端进行数据交互以实现多屏互动功能。

参见图1，为本发明实施例提供的多屏互动方法的流程示意图，该方法包括以下步骤：

步骤101：源终端在接入局域网后，所述源终端的***对外接口若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息，所述源终端的底层***中封装了至少一种多屏互动协议。

参加图2所示的多屏交互控制***示意图，在本发明实施例中，在源终端底层封装各个多屏互动协议(包括DLNA协议和Airplay协议等)的具体实现细节，并向上层提供一个统一的***对外接口，***对外接口可以实现设备搜索、资源投放、资源控制等功能。具体地，可以采用外观设计模式或策略(Strategy)设计模式等，在***底层封装各个多屏互动协议的具体实现细节。

在本发明实施例中，当源终端接入局域网后，假设用户想要将源终端上显示的视频投放到一个目的终端对应的显示设备上，用户可以通过点击源终端视频界面上显示的多屏互动按钮，来触发进行视频投放的多屏互动指令，当源终端利用***对外接口检测到该多屏互动指令后，会向局域网内发送搜索各种多屏互动协议的协议搜索信息，其目的是获取各个已接入该局域网的目的终端支持的多屏互动协议。其中，所述协议搜索信息可以以广播包的形式发送。

步骤102：所述***对外接口获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型。

在本发明实施例中，目的终端与源终端接入的是同一个局域网，对于接入该局域网内的每个目的终端，当其获取到源终端向该局域网发送的所述协议搜索信息后，会向源终端返回一个搜索响应消息，用于告知源终端自己所支持的多屏互动协议的协议类型，以便源终端知道该局域网内的每个目的终端都支持哪些多屏互动协议。

步骤103：所述***对外接口在确定用户从各个目的终端中选择的一个交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述交互终端支持的协议类型对应的多屏互动协议。

在本发明实施例中，步骤102中的所述搜索响应消息中除了携带所述目的终端支持的协议类型外，还可进一步携带所述目的终端的设备标识，所述***对外接口在获取到各个目的终端的设备标识后，经处理在源终端上显示每个设备标识对应的目的终端的终端名称，这些终端名称以列表的形式显示或以其它方式显示，用户可以从这些终端名称中选择一种终端名称，以便与选择的终端名称对应的目的终端(即交互终端)进行多屏互动。因此，本发明实施例可以按照下述方法确定交互终端：

使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称，具体地，所述终端信息中可以仅包括每个设备标识对应的目的终端的终端名称，也可以既包括每个设备标识对应的目的终端的终端名称，还包括每个设备标识对应的目的终端所支持的协议类型；若检测到用户从显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

在步骤103中，由于步骤102中交互终端向源终端返回的搜索响应消息中携带的所述交互终端支持的协议类型，比如该协议类型为DLNA，而源终端***底层封装了多种多屏互动协议，比如包括DLNA、Airplay等，因所述交互终端支持的协议类型DLNA为封装的多种多屏互动协议中的一种，源终端便可利用所述***对外接口从封装的多种多屏互动协议调取所述交互终端支持的协议类型DLNA对应的协议方法，以便源终端将DLNA协议作为本次多屏互动操作使用的协议。

步骤104：所述***对外接口根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

在本发明实施例中，目的终端可以是支持多屏互动协议的智能设备(比如智能电视)，其本身具有显示功能，目的终端也可以是支持多屏互动协议的多屏互动盒子(比如小米盒子)，其与显示设备(比如电脑显示器)连接。因此，当所述交互终端为所述智能设备时，源终端可以基于所述智能设备支持的多屏互动协议(即目标协议)，与所述智能设备进行多屏互动；当所述交互终端为所述多屏互动盒子时，源终端可以基于所述多屏互动盒子支持的多屏互动协议(即目标协议)通过所述多屏互动盒子，与所述多屏互动盒子连接的显示设备进行多屏互动。具体的，根据所述目标协议，源终端可以利用所述***对外接口将多屏互动资源比如视频、音频或图片发送给所述交互终端，所述交互终端在接收到所述多屏互动资源后，在与自己对应的显示设备上与源终端同步显示该多屏互动资源。因此，步骤104可根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

进一步，在本发明实施例中，源终端还可以利用所述***对外接口向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述交互终端对应的显示设备上的显示方式。比如所述多屏互动资源为某个视频资源，所述控制信息可以是视频播放控制信息，比如跳转播放位置、暂停播放、继续播放、结束播放、音量调节等。

本发明实施例提供的多屏互动方法，通过在源终端***底层整合入多种多屏互动协议的具体实现细节，使得基于不同操作***的源终端均支持多种不同的多屏互动协议，这样源终端中整合的各个协议类型可以极大概率的囊括目的终端支持的协议类型，从而增加了接入同一局域网的目的终端和源终端间的协议兼容性，若源终端要和某目的终端进行多屏互动，源终端可利用***对外接口从多种多屏互动协议中调取该目的终端支持的多屏互动协议进行数据交互，这样便使得二者的协议类型相互一致，从而避免了现有技术中源终端(只支持一种多屏互动协议)与目的终端的协议不一致性造成的二者无法进行多屏互动的缺陷。

为了更方便的理解本发明实施例，下面结合具体场景举例说明。

假设应用场景为用户家里的客厅，源终端为智能手机，智能手机中封装有多个多屏互动协议的具体实现细节，包括DLNA协议和Airplay协议等，目的终端为小米盒子，客厅中电视分别配置有仅支持DLNA协议的小米盒子1和仅Airplay协议的小米盒子2，通过小米盒子可以将智能手机内的图片、视频等投射到电视上。基于此应用场景，介绍实现视频投放的具体流程(参见图3所示的视频投放流程示意图之一和图4所示的视频投放流程示意图之二)：

1、使智能手机和小米盒子通过WIFI接入同一家庭局域网。

2、用户在智能手机上选择想要播放的视频。

3、待广告播放完毕后，进入该视频的播放界面，用户可以点击该视频播放界面上的一个视频投放按钮，智能手机检测到的该点击动作即为所述多屏互动指令。

4、智能手机利用***对外接口检测到用户点击了视频投放按钮后，向该家庭局域网内发送协议搜索信息，接入该家庭局域网的小米盒子在接收到协议搜索信息后，会向智能手机返回搜索响应消息。假设小米盒子1和小米盒子2均接入了该家庭局域网，则小米盒子1返回的搜索响应消息中携带了小米盒子1的设备标识和小米盒子1支持的协议类型DLNA，小米盒子2返回的搜索响应消息中携带了小米盒子2的设备标识和小米盒子2支持的协议类型Airplay。智能手机利用***对外接口在智能手机上显示“客厅的小米盒子1”和“客厅的小米盒子2”，或显示“客厅的小米盒子1(DLNA)”、“客厅的小米盒子2(Airplay)”，用户可从中选择一个用于进行视频投放的盒子，选择后点击“连接”按钮。

5、若用户选择了支持DLNA协议的小米盒子1，则智能手机利用***对外接口从封装的多个多屏互动协议中调取DLNA协议，然后根据DLNA协议将要投放到电视上的视频的超文本传输协议(HyperTextTransferProtocol，HTTP)地址发送给小米盒子1，通过小米盒子1便可在电视上播放该视频。

6、在视频播放过程中，用户可通过点击或滑动视屏播放界面上的控制按钮，向小米盒子1发送视频的控制信息，比如点击暂停按钮，电视将同步暂停该视频。

7、在视频播放接收后，智能手机上会显示比如“是否断开DLNA连接”的提示信息，用户可通过点击“确定”按钮，向小米盒子1发送使电视退出视频播放界面的控制信息，用户还可以通过点击智能手机的物理键来向小米盒子1发送使电视退出视频播放界面的控制信息。

参见图5，为本发明实施例提供的终端设备的组成示意图，所述终端设备为接入局域网且具有***对外接口的源终端，所述源终端的底层***中封装了至少一种多屏互动协议，所述对外接口包括：

信息发送单元501，用于若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息；

消息获取单元502，用于获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述信息发送单元501发送的协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型；

终端确定单元503，用于确定用户从各个目的终端中选择的一个交互终端；

协议调取单元504，用于在所述终端确定单元503确定所述交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述消息获取单元502获取的所述交互终端支持的协议类型对应的多屏互动协议；

多屏互动单元505，用于根据所述协议调取单元504从所述至少一种多屏互动协议中调取的目标协议，使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

在本发明实施例中，所述搜索响应消息中还携带了所述目的终端的设备标识，所述终端确定单元503，包括：

显示子单元，用于使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称；

确定子单元，用于若检测到用户从所述显示子单元显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

在本发明实施例中，所述多屏互动单元505，具体用于根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

在本发明实施例中，所述对外接口还包括：

资源控制单元，用于向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述显示设备上的显示方式。

在本发明实施例中，所述协议搜索信息以广播包的形式发送。

本发明实施例提供的源终端备，通过在源终端***底层整合入多种多屏互动协议的具体实现细节，使得基于不同操作***的源终端均支持多种不同的多屏互动协议，这样源终端中整合的各个协议类型可以极大概率的囊括目的终端支持的协议类型，从而增加了接入同一局域网的目的终端和源终端间的协议兼容性，若源终端要和某目的终端进行多屏互动，源终端可利用***对外接口从多种多屏互动协议中调取该目的终端支持的多屏互动协议进行数据交互，这样便使得二者的协议类型相互一致，从而避免了现有技术中源终端(只支持一种多屏互动协议)与目的终端的协议不一致性造成的二者无法进行多屏互动的缺陷。

通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到上述实施例方法中的全部或部分步骤可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者诸如媒体网关等网络通信设备，等等)执行本发明各个实施例或者实施例的某些部分所述的方法。

需要说明的是，对于实施例公开的设备而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种多屏互动方法，其特征在于，所述方法包括：

源终端在接入局域网后，所述源终端的***对外接口若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息，所述源终端的底层***中封装了至少一种多屏互动协议；

所述***对外接口获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型；

所述***对外接口在确定用户从各个目的终端中选择的一个交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述交互终端支持的协议类型对应的多屏互动协议；

所述***对外接口根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

2.根据权利要求1所述的方法，其特征在于，所述搜索响应消息中还携带了所述目的终端的设备标识，所述确定用户从各个目的终端中选择的一个交互终端，包括：

使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称；

若检测到用户从显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

3.根据权利要求1所述的方法，其特征在于，所述根据所述目标协议使所述源终端和与所述交互终端对应的显示设备进行多屏互动，包括：

根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

所述***对外接口向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述显示设备上的显示方式。

5.根据权利要求1至4所述的方法，其特征在于，所述协议搜索信息以广播包的形式发送。

6.一种终端设备，其特征在于，所述终端设备为接入局域网且具有***对外接口的源终端，所述源终端的底层***中封装了至少一种多屏互动协议，所述对外接口包括：

信息发送单元，用于若检测到用户触发的多屏互动指令，则向所述局域网发送协议搜索信息；

消息获取单元，用于获取接入所述局域网的至少一个目的终端返回的搜索响应消息，所述搜索响应消息是所述目的终端获取到所述信息发送单元发送的协议搜索信息后发送的且所述搜索响应消息中携带了所述目的终端支持的协议类型；

终端确定单元，用于确定用户从各个目的终端中选择的一个交互终端；

协议调取单元，用于在所述终端确定单元确定所述交互终端后，从所述至少一种多屏互动协议中调取目标协议，所述目标协议为所述消息获取单元获取的所述交互终端支持的协议类型对应的多屏互动协议；

多屏互动单元，用于根据所述协议调取单元从所述至少一种多屏互动协议中调取的目标协议，使所述源终端和与所述交互终端对应的显示设备进行多屏互动。

7.根据权利要求6所述的终端设备，其特征在于，所述搜索响应消息中还携带了所述目的终端的设备标识，所述终端确定单元，包括：

显示子单元，用于使所述源终端显示终端信息，所述终端信息包括每个设备标识对应的目的终端的终端名称；

确定子单元，用于若检测到用户从所述显示子单元显示的各个终端名称中选择了一个终端名称，则将选择的终端名称对应的目的终端作为交互终端。

8.根据权利要求6所述的终端设备，其特征在于，所述多屏互动单元，具体用于根据所述目标协议向所述交互终端发送多屏互动资源，以便与所述交互终端对应的显示设备显示所述多屏互动资源。

9.根据权利要求8所述的终端设备，其特征在于，所述对外接口还包括：

资源控制单元，用于向所述交互终端发送控制信息，以便所述交互终端根据所述控制信息控制所述多屏互动资源在所述显示设备上的显示方式。

10.根据权利要求6至9所述的终端设备，其特征在于，所述协议搜索信息以广播包的形式发送。