CN113485597A - 一种视频会议交互的方法及控制器 - Google Patents

一种视频会议交互的方法及控制器 Download PDF

Info

Publication number
CN113485597A
CN113485597A CN202110771632.8A CN202110771632A CN113485597A CN 113485597 A CN113485597 A CN 113485597A CN 202110771632 A CN202110771632 A CN 202110771632A CN 113485597 A CN113485597 A CN 113485597A
Authority
CN
China
Prior art keywords
information
controller
track
position information
marking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110771632.8A
Other languages
English (en)
Inventor
孔尧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mingwork Information Technology Co ltd
Original Assignee
Shanghai Mingwork Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mingwork Information Technology Co ltd filed Critical Shanghai Mingwork Information Technology Co ltd
Priority to CN202110771632.8A priority Critical patent/CN113485597A/zh
Publication of CN113485597A publication Critical patent/CN113485597A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4418—Suspend and resume; Hibernate and awake
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种视频会议交互的方法及控制器，包括如下步骤：检测控制器的位置信息；获取控制器的第一位置信息及第一轨迹信息，标记第一位置信息及第一轨迹信息；同步第一位置信息及第一轨迹信息在显示设备的平面位置中；根据所识别的第一轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第一位置信息的轨迹形成图形信息在显示界面进行标记；如所识别的第一轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。使得会议主讲人员的控制并标记会议显示***所显示的内容，提高用户体验。

Description

一种视频会议交互的方法及控制器
技术领域
本发明涉及视频会议技术领域，具体是指一种视频会议交互的方法及控制器。
背景技术
视频会议中，目前常见的会引入一些电视显示设备用来显示与会者想展示的内容，计算机鼠标用来控制会议者所展示内容的上下翻页及进程、麦克风及扬声器等设备对与会者声音进行控制、接入摄像用来获取与会者的图像的视频数据，再接入网络，将与会者的会议内容的音视频流进行传输等的过程。
基于上述基本设备，近年来更是设计使用鼠标平面的移动控制进行控制用户输入运动，将运动转换为计算机的输入，进而控制显示界面中光标的移动。
但是由于鼠标移动更依赖于平面运动，仅能用来控制显示界面光标前后左右平面的移动，上下翻页行为还需依赖获取的鼠标点击或键盘点击操作，限制了视频会议主讲人员的活动区域及行为方式。
发明内容
本发明要解决的技术问题，克服视频会议交互过程中过分依赖鼠标键盘的输入行为从而限制主讲人员活动区域及行为方式的问题，提供一种视频会议的交互方法及设备，通过锁定控制器，根据视频会议发言人或主讲人所持控制器的位置信息及运动轨迹信息，并识别标记显示区域，进而使得会议主讲人员的控制并标记会议显示***所显示的内容，提高用户体验。
为解决上述技术问题，本发明提供的技术方案为：一种视频会议交互的方法，包括如下步骤：
S1、检测控制器的位置信息频繁移动时，开始获取控制器的位置信息；
S2、获取控制器的第一位置信息及第一轨迹信息，标记第一位置信息及第一轨迹信息；
S3、同步第一位置信息及第一轨迹信息在显示设备的平面位置中；
S4、根据所识别的第一轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第一位置信息的轨迹形成图形信息在显示界面进行标记；
S5、如所识别的第一轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
进一步地，所述步骤S1中检测控制器的位置信息频繁移动时，具体为上下左右同范围晃动的唤醒动作，则开始获取控制器的位置信息。
进一步地，所述步骤S1中标记第一位置信息及第一轨迹信息具体是根据视频会议室内初始化后固定的坐标系进行的。
进一步地，所述步骤S3中，同步第一位置信息及第一轨迹信息在显示设备的平面位置中形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
进一步地，所述步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息为控制光标位置时，重复步骤S2~S5。
进一步地，所述步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息的页面切换行为时，自动保存第一位置信息的轨迹形成的图形信息及在显示界面进行的标记，生成会议记录。
为解决上述技术问题，本发明还提供一种视频会议交互的控制器，包括：
方位仪器，用于标记控制器的平面位置信息；
气压传感器，用于标记控制器的高度信息；
无线连接装置，用于将控制器与所述计算机设备进行连接，传输数据；
处理器，用于当获取到控制器第一位置信息与第一轨迹信息形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
进一步地，所述处理器开始标记第二位置信息后，开始获取控制器第二轨迹信息，标记第二轨迹信息，并同步标记的第二位置信息及第二轨迹信息在显示设备的平面位置中。
进一步地，所述处理器同步第二位置信息及第二轨迹信息在显示设备的平面位置中后，根据所识别的第二轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第二位置信息的轨迹形成图形信息在显示界面进行标记。
进一步地，所述处理器如所识别的第二轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
本发明提供的一种视频会议交互的方法及控制器，具有如下优点：本发明通过检测控制器的位置信息频繁移动时，开始获取控制器的位置信息；获取控制器的第一位置信息及第一轨迹信息，标记第一位置信息及第一轨迹信息；同步第一位置信息及第一轨迹信息在显示设备的平面位置中；根据所识别的第一轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第一位置信息的轨迹形成图形信息在显示界面进行标记；如所识别的第一轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。通过锁定控制器，根据视频会议发言人或主讲人所持控制器的位置信息及运动轨迹信息，并识别标记显示区域，进而使得会议主讲人员的控制并标记会议显示***所显示的内容，提高用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本发明实施例提供的一种视频会议交互的方法示意图；
图2示出了本发明实施例提供的一种视频会议交互的方法示意图；
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
下面结合实施例对本发明做进一步的详细说明。
举例说明：
会议室初始化时，由于会场或会议室环境可以测量，根据会议室或会场条件，安装固定摄像装备在会议室中心位置并唯一固定，安装显示设备的位置并唯一固定。会议初始化开始后，根据摄像装置及显示装置自带的方位仪器建立立体坐标系。配置遥控装置，遥控装置中安装方位仪器，具体为电子罗盘，气压传感器可获得高度信息，用于获取遥控装置的位置信息，将遥控装置的位置信息与所建立的会场立体坐标系所统一，则根据主讲人持有的遥控装置的运动轨迹等行为控制显示设备的平面展示信息。
本发明提供的技术方案为：一种视频会议交互的方法，包括如下步骤：
S1、检测控制器的位置信息频繁移动时，开始获取控制器的位置信息；
S2、获取控制器的第一位置信息及第一轨迹信息，标记第一位置信息及第一轨迹信息；
S3、同步第一位置信息及第一轨迹信息在显示设备的平面位置中；
S4、根据所识别的第一轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第一位置信息的轨迹形成图形信息在显示界面进行标记；
S5、如所识别的第一轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
优选地，步骤S1中检测控制器的位置信息频繁移动时，具体为上下左右同范围晃动的唤醒动作，则开始获取控制器的位置信息。
优选地，步骤S1中标记第一位置信息及第一轨迹信息具体是根据视频会议室内初始化后固定的坐标系进行的。
优选地，步骤S3中，同步第一位置信息及第一轨迹信息在显示设备的平面位置中形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
优选地，步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息为控制光标位置时，重复步骤S2~S5。
优选地，步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息的页面切换行为时，自动保存第一位置信息的轨迹形成的图形信息及在显示界面进行的标记，生成会议记录。
为解决上述技术问题，本发明还提供一种视频会议交互的控制器，包括：
方位仪器，用于标记控制器的平面位置信息；
气压传感器，用于标记控制器的高度信息；
无线连接装置，用于将控制器与所述计算机设备进行连接，传输数据；
处理器，用于当获取到控制器第一位置信息与第一轨迹信息形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
优选地，处理器开始标记第二位置信息后，开始获取控制器第二轨迹信息，标记第二轨迹信息，并同步标记的第二位置信息及第二轨迹信息在显示设备的平面位置中。
优选地，处理器同步第二位置信息及第二轨迹信息在显示设备的平面位置中后，根据所识别的第二轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第二位置信息的轨迹形成图形信息在显示界面进行标记。
优选地，处理器如所识别的第二轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
具有如下优点：通过锁定控制器，根据视频会议发言人或主讲人所持控制器的位置信息及运动轨迹信息，并识别标记显示区域，进而使得会议主讲人员的控制并标记会议显示***所显示的内容，提高用户体验。
因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
虽然，上文中已经用一般性说明及具体实施方案对本发明作了详尽的描述，但在本发明基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本发明精神的基础上所做的这些修改或改进，均属于本发明要求保护的范围。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种视频会议交互的方法，其特征在于，包括如下步骤：
S1、检测控制器的位置信息频繁移动时，开始获取控制器的位置信息；
S2、获取控制器的第一位置信息及第一轨迹信息，标记第一位置信息及第一轨迹信息；
S3、同步第一位置信息及第一轨迹信息在显示设备的平面位置中；
S4、根据所识别的第一轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第一位置信息的轨迹形成图形信息在显示界面进行标记；
S5、如所识别的第一轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
2.根据权利要求1所述的一种视频会议交互的方法，其特征在于：所述步骤S1中检测控制器的位置信息频繁移动时，具体为上下左右同范围晃动的唤醒动作，则开始获取控制器的位置信息。
3.根据权利要求2中所述的一种视频会议的交互方法，其特征在于：所述步骤S1中标记第一位置信息及第一轨迹信息具体是根据视频会议室内初始化后固定的坐标系进行的。
4.根据权利要求1所述的一种视频会议交互的方法，其特征在于：所述步骤S3中，同步第一位置信息及第一轨迹信息在显示设备的平面位置中形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
5.根据权利要求1所述的一种视频会议交互的方法，其特征在于：所述步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息为控制光标位置时，重复步骤S2~S5。
6.根据权利要1所述的一种视频会议交互的方法，其特征在于：所述步骤S5中，如所识别的第一轨迹信息所呈现的动作为控制信息的页面切换行为时，自动保存第一位置信息的轨迹形成的图形信息及在显示界面进行的标记，生成会议记录。
7.一种视频会议交互的控制器，包括：
方位仪器，用于标记控制器的平面位置信息；
气压传感器，用于标记控制器的高度信息；
无线连接装置，用于将控制器与所述计算机设备进行连接，传输数据；
处理器，用于当获取到控制器第一位置信息与第一轨迹信息形成第一图像信息后，提取位置信息特征训练机器学习模型，以估计相对的第二位置信息及第二轨迹信息形成的第二图像信息之间的位移，开始标记第二位置信息。
8.根据权利要求7所述的一种视频会议交互的控制器，其特征在于：所述处理器开始标记第二位置信息后，开始获取控制器第二轨迹信息，标记第二轨迹信息，并同步标记的第二位置信息及第二轨迹信息在显示设备的平面位置中。
9.根据权利要求8所述的一种视频会议交互的控制器，其特征在于：所述处理器同步第二位置信息及第二轨迹信息在显示设备的平面位置中后，根据所识别的第二轨迹信息所呈现的动作为标记信息或控制信息，如为标记信息，则将第二位置信息的轨迹形成图形信息在显示界面进行标记。
10.根据权利要求9所述的一种视频会议交互的控制器，其特征在于：所述处理器如所识别的第二轨迹信息所呈现的动作为控制信息，则根据控制信息控制光标的位置及页面切换行为。
CN202110771632.8A 2021-07-09 2021-07-09 一种视频会议交互的方法及控制器 Pending CN113485597A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110771632.8A CN113485597A (zh) 2021-07-09 2021-07-09 一种视频会议交互的方法及控制器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110771632.8A CN113485597A (zh) 2021-07-09 2021-07-09 一种视频会议交互的方法及控制器

Publications (1)

Publication Number Publication Date
CN113485597A true CN113485597A (zh) 2021-10-08

Family

ID=77937929

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110771632.8A Pending CN113485597A (zh) 2021-07-09 2021-07-09 一种视频会议交互的方法及控制器

Country Status (1)

Country Link
CN (1) CN113485597A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104270664A (zh) * 2014-10-29 2015-01-07 上海联彤网络通讯技术有限公司 光笔遥控器、实现智能操作平台输入控制的***及方法
CN105094721A (zh) * 2014-04-15 2015-11-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN106249920A (zh) * 2016-07-28 2016-12-21 深圳前海茂佳软件科技有限公司 遥控笔和基于遥控笔的智能设备控制方法
CN106441296A (zh) * 2015-08-04 2017-02-22 中兴通讯股份有限公司 运动轨迹记录方法和用户设备
CN109739373A (zh) * 2018-12-19 2019-05-10 重庆工业职业技术学院 一种基于运动轨迹的演示设备控制方法及***
CN112383804A (zh) * 2020-11-13 2021-02-19 四川长虹电器股份有限公司 一种基于空鼠轨迹的手势识别方法
CN112689174A (zh) * 2020-12-28 2021-04-20 当趣网络科技(杭州)有限公司 遥控器的控制方法、控制***、遥控器和智能电视

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105094721A (zh) * 2014-04-15 2015-11-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN104270664A (zh) * 2014-10-29 2015-01-07 上海联彤网络通讯技术有限公司 光笔遥控器、实现智能操作平台输入控制的***及方法
CN106441296A (zh) * 2015-08-04 2017-02-22 中兴通讯股份有限公司 运动轨迹记录方法和用户设备
CN106249920A (zh) * 2016-07-28 2016-12-21 深圳前海茂佳软件科技有限公司 遥控笔和基于遥控笔的智能设备控制方法
CN109739373A (zh) * 2018-12-19 2019-05-10 重庆工业职业技术学院 一种基于运动轨迹的演示设备控制方法及***
CN112383804A (zh) * 2020-11-13 2021-02-19 四川长虹电器股份有限公司 一种基于空鼠轨迹的手势识别方法
CN112689174A (zh) * 2020-12-28 2021-04-20 当趣网络科技(杭州)有限公司 遥控器的控制方法、控制***、遥控器和智能电视

Similar Documents

Publication Publication Date Title
CN111417028B (zh) 信息处理方法、装置、存储介质及电子设备
US20160117142A1 (en) Multiple-user collaboration with a smart pen system
WO2019196929A1 (zh) 一种视频数据处理方法及移动终端
JP2011258204A (ja) 仮想環境におけるオブジェクトの選択方法
CN103873811A (zh) 信息处理设备、信息处理方法和信息处理***
JP2016134014A (ja) 電子情報ボード装置、情報処理方法およびプログラム
CN108683850B (zh) 一种拍摄提示方法及移动终端
CN112068752B (zh) 一种空间展示方法、装置、电子设备及存储介质
WO2020238497A1 (zh) 图标移动方法及终端设备
CN113426117A (zh) 虚拟相机拍摄参数获取方法、装置、电子设备和存储介质
CN114237419B (zh) 显示设备、触控事件的识别方法
JP6543924B2 (ja) 情報処理方法、情報処理プログラム、及び情報処理装置
CN109815462B (zh) 一种文本生成方法及终端设备
CN110908627A (zh) 投屏方法及第一电子设备
CN106412232A (zh) 一种控制操作界面的缩放方法、装置以及电子设备
CN109120800A (zh) 一种应用程序图标调整方法及移动终端
CN108763475B (zh) 一种录制方法、录制装置及终端设备
WO2021017730A1 (zh) 截图方法及终端设备
CN109947988B (zh) 一种信息处理方法、装置、终端设备及服务器
CN109618055B (zh) 一种位置共享方法及移动终端
CN110908517A (zh) 图像编辑方法、装置、电子设备及介质
CN109166164B (zh) 一种表情图片的生成方法及终端
KR20210034668A (ko) 문자 입력 방법 및 단말
WO2021185142A1 (zh) 图像处理方法、电子设备及存储介质
WO2021031844A1 (zh) 图标显示方法及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20211008

WD01 Invention patent application deemed withdrawn after publication