CN113792128A - 一种点读笔信息交互方法及其*** - Google Patents

Abstract

本发明公开了一种点读笔信息交互方法，属于点读笔领域，点读笔信息交互方法包括面板模块、图像采集模块、特征提取模块、特征匹配模块以及执行模块，其中，面板模块用于显示功能图标界面；图像采集模块获取电梯乘员的彩色及深度的视频信息数据，特征提取模块提取算法提取电梯乘员的目光朝向信息及头部姿态信息，特征匹配模块匹配功能图标界面中的图标注视对象，并将匹配结果传送至执行模块，执行模块用于执行图标注视对象对应的功能。本发明公开点读笔信息交互方法，其基于视觉技术能够同时相应多人的呼梯请求，不仅识别准确率高，而且能够完全实现无接触的电梯人机交互。

Description

一种点读笔信息交互方法及其***

技术领域

本发明涉及点读笔领域，尤其涉及一种点读笔信息交互方法及用于点读笔信息交互方法的点读笔信息交互***。

背景技术

点读笔是一种采用光学图像识别及数码语音技术开发而成的智能阅读和学习工具。现有的点读笔联网与后台交互的主要目的为了下载点读笔的内容信息，以扩大点读笔对不同书本的识别能力，达到一笔多用的目的。

中国专利文献公开号CN213303342U公开的一种利用物联网技术主动联网的云点读笔，包括MCU主控器、点读笔头和扬声器，MCU主控器与点读笔头和扬声器电性连接，MCU主控器还电性连接有通信模块，通信模块通过网络连接用于存储点读内容的云服务器。该实用新型通过通信模块读取云服务器内的点读内容，使得点读笔能够读取大量内容。但由于书籍的展示效果有效，仅仅具备点读功能的点读笔很难进行视频、游戏等视频内容的展示与互动。

发明内容

为了克服现有技术的缺陷，本发明所要解决的技术问题在于提出一种点读笔信息交互方法，通过云平台实现点读笔与APP终端之间的信息交互，使得点读笔能够作为APP终端的输入终端与APP终端进行智能互动。

为达此目的，本发明采用以下技术方案：

本发明提供的一种点读笔信息交互方法，包括以下步骤：

S00：点读笔的识别器识别实体书籍的预设内容信息。

S10：所述点读笔具备云端模式，当点读笔处于云端模式时，点读笔的MCU控制板获取所述识别器传送的所述预设内容信息后生成云端操作信息，并将所述云端操作信息上传至点读云平台。

S20：所述点读云平台将所述云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述云端操作信息生成终端执行指令并控制所述APP终端的各个执行器执行所述终端执行指令。

本发明进一步地技术方案在于，所述点读云平台包括存储有若干电子书籍的内容模块，所述实体书籍上设置有身份码信息；

在S00步骤中，所述点读笔内装载有与实体书籍对应的第一类电子书籍，所述第一类电子书籍的装载步骤如下：

S001：所述点读笔的识别器识别某本所述实体书籍的所述身份码信息；

S002：所述MCU控制板接收到所述身份码信息后验证所述点读笔的第一存储器内是否存储有该实体书籍对应的第一类电子书籍，若包含该第一类电子书籍，所述MCU控制板生成包含身份码信息的云端操作信息上传至点读云平台；若不包含第一类电子书籍，所述MCU控制板则发送包含身份码信息的第一下载请求至所述点读云平台的业务模块；

S003：若不包含第一类电子书籍，所述业务模块依据所述下载请求从所述内容模块调取与所述身份码信息对应的第一类电子书籍，并传送至所述点读笔。

本发明进一步地技术方案在于，在所述第一类电子书籍的装载步骤中，在S002步骤中还包括：所述点读云平台的业务模块识别所述身份码信息的有效性，所述业务模块的识别结果为身份码信息为无效的，则发送提醒信息至所述点读笔，所述点读笔通过其播放器对所述提醒信息进行播报，所述业务模块的识别结果为身份码信息为有效的，所述点读云平台将包含身份码信息的云端操作信息转发至所述APP终端。

本发明进一步地技术方案在于，在S20步骤中，所述APP终端内装载有与实体书籍对应的第二类电子书籍，所述第二类电子书籍的装载步骤如下：

S201：所述APP终端接收到包含身份码信息的云端操作信息；

S202：所述APP终端依据身份码信息调取所述APP终端的存储器内索引表，所述APP终端的控制板判断所述索引表内是否包含某本所述实体书籍对应的第二类电子书籍的身份编码，若包含所述身份编码，则使得所述APP终端加载第二类电子书籍，并通过显示器的第二类电子书籍的封面；若不包含所述身份编码，则所述APP终端发送包含身份码信息的第二下载请求至所述点读云平台的业务模块；

S203：若不包含所述身份编码，所述业务模块依据所述下载请求从所述内容模块调取与所述身份码信息对应的第二类电子书籍，并传送至所述APP终端。

本发明进一步地技术方案在于，所述APP终端具备第一蓝牙模块，所述点读笔具备第二蓝牙模块，所述点读笔与所述APP终端的绑定步骤包括：

在S20步骤中，所述点读笔处于配对模式时，所述点读笔的第二蓝牙模块发出配对信号，所述APP终端通过所述第一蓝牙模块对所述第二蓝牙模块的配对信息进行搜索，所述APP终端搜索到所述配对信息后对所述配对信息进行验证，验证通过后将所述APP终端与所述点读笔进行绑定。

本发明进一步地技术方案在于，在S10步骤中，所述点读笔还具备本地模式，当点读笔处于本地模式时，所述MCU控制板获取所述识别器传送的所述预设内容信息生成本机执行信息，所述MCU控制板依据所述本机执行信息控制所述点读笔的执行器执行。

本发明进一步地技术方案在于，在S00步骤中，对所述实体书籍不同书页的预设内容信息进行分别编码，使得预设内容信息中包含页码编号；

在S10步骤中，所述MCU控制板依据所述带页码编号的预设内容信息生成带页码编号的云端操作信息上传至所述点读云平台；

在S20步骤中，所述点读云平台将带页码编号的云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述页码编号对所述第二类电子书籍进行翻页操作。

本发明进一步地技术方案在于，在S00步骤中，所述预设内容信息包括用于启动游戏、视频、音频或者动画中的一种或者多种的启动键码；

在S10步骤中，所述MCU控制板依据所述带启动键码的预设内容信息生成带启动键码的云端操作信息上传至所述点读云平台；

在S20步骤中，所述点读云平台将启动键码的云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述启动键码加载相应的游戏、视频、音频或者动画中的一种或者多种。

本发明进一步地技术方案在于，当APP终端进行游戏模式后，所述点读云平台的游戏模块将所述实体书籍中的各个图标对应的预设内容信息与游戏操作指令进行关联，在步骤10中，所述点读笔的MCU控制板获取所述识别器传送的所述预设内容信息后并生成包含游戏操作指令的云端操作信息，并将包含游戏操作指令的所述云端操作信息上传至所述点读云平台。

本发明还提供的一种用于上述的点读笔信息交互方法的点读笔信息交互***，包括具有第一类电子书籍的点读笔、APP终端以及点读云平台，具有第一类电子书籍的点读笔用于识别实体书籍，APP终端用于播放及展示所述第二类电子书籍，点读云平台用于所述点读笔与所述APP终端进行信息交互并存储有第一类电子书籍及第二类电子书籍；

所述点读笔的识别器识别实体书籍的预设内容信息后生成云端操作信息，并将所述云端操作信息上传至点读云平台，所述点读云平台将所述云端操作信息发送至所述APP终端，所述APP终端依据所述云端操作信息生成终端执行指令并控制所述APP终端的各个执行器执行所述终端执行指令。

本发明的有益效果为：

本发明提供的点读笔信息交互方法，点读笔采集实体书籍的预设内容信息，能够通过点读云平台传送至APP终端，不仅能够实现APP终端的显示内容跟随实体书籍的点读内容而进行切换，而且由于APP终端能够支持动画、视频以及游戏等形式的内容，使得点读笔的识别内容能够转化为APP终端控制各个执行器执行的终端执行指令，这种方式使得点读笔能够与APP终端进行智能交互，实现点读笔点击播放视频、点击切换动画以及点击控制有效的目的。

附图说明

图1是本发明具体实施方式中提供的点读笔信息交互方法的功能框图。

图中：

1、点读笔；11、识别器；12、MCU控制板；3、APP终端；21、内容模块；13、第一存储器；22、业务模块；32、第一蓝牙模块；14、第二蓝牙模块。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。

实施例一

如图1所示，本实施例中提供的点读笔信息交互方法，包括以下步骤：

S00步骤：点读笔1的识别器11识别实体书籍的预设内容信息；

S10：点读笔1具备云端模式，当点读笔1处于云端模式时，点读笔1的MCU控制板12获取识别器11传送的预设内容信息后生成云端操作信息，并将云端操作信息上传至点读云平台2；

S20：点读云平台2将云端操作信息转发至与点读笔1的绑定的APP终端3，APP终端3依据云端操作信息生成终端执行指令并控制APP终端3的各个执行器31执行终端执行指令。

点读云平台2包括存储有若干电子书籍的内容模块21；

实体书籍上设置有身份码信息；

在S00步骤中，点读笔1内装载有与实体书籍对应的第一类电子书籍，第一类电子书籍的装载步骤如下：

S001：点读笔1的识别器11识别某本实体书籍的身份码信息；

S002：MCU控制板12接收到身份码信息后验证点读笔1的第一存储器13内是否存储有该实体书籍对应的第一类电子书籍，若包含该第一类电子书籍，MCU控制板12生成包含身份码信息的云端操作信息上传至点读云平台2；若不包含第一类电子书籍，MCU控制板12则发送包含身份码信息的第一下载请求至所点读云平台2的业务模块22；

S003：若不包含第一类电子书籍，业务模块22依据下载请求从内容模块21调取与身份码信息对应的第一类电子书籍，并传送至点读笔1。

在第一类电子书籍的装载步骤中，在S002步骤中还包括：点读云平台2的业务模块22识别身份码信息的有效性，业务模块22的识别结果为身份码信息为无效的，则发送提醒信息至点读笔1，点读笔1通过其播放器对提醒信息进行播报，业务模块22的识别结果为身份码信息为有效的，点读云平台2将包含身份码信息的云端操作信息转发至APP终端3。

在S20步骤中，APP终端3内装载有与实体书籍对应的第二类电子书籍，第二类电子书籍的装载步骤如下：

S201：APP终端3接收到包含身份码信息的云端操作信息；

S202：APP终端3依据身份码信息调取APP终端3的存储器内索引表，PP终端3的控制板判断所述索引表内是否包含某本实体书籍对应的第二类电子书籍的身份编码，若包含所述身份编码，则使得APP终端3加载第二类电子书籍，并通过显示器的第二类电子书籍的封面；若不包含身份编码，则APP终端3发送包含身份码信息的第二下载请求至所述点读云平台2的业务模块22；

S203：若不包含所述身份编码，业务模块22依据所述下载请求从内容模块21调取与身份码信息对应的第二类电子书籍，并传送至APP终端3。

APP终端3具备第一蓝牙模块32，点读笔1具备第二蓝牙模块14；

点读笔1与APP终端3的绑定步骤包括：

在S20步骤中，点读笔1处于配对模式时，点读笔1的第二蓝牙模块14发出配对信号，APP终端3通过第一蓝牙模块32对第二蓝牙模块14的配对信息进行搜索，APP终端3搜索到配对信息后对配对信息进行验证，验证通过后将APP终端3与点读笔1进行绑定。

在S10步骤中，点读笔1还具备本地模式，当点读笔1处于本地模式时，MCU控制板12获取识别器11传送的预设内容信息生成本机执行信息，MCU控制板12依据本机执行信息控制点读笔1的执行器31执行。

在S00步骤中，对实体书籍不同书页的预设内容信息进行分别编码，使得预设内容信息中包含页码编号；

在S10步骤中，MCU控制板12依据带页码编号的预设内容信息生成带页码编号的云端操作信息上传至点读云平台2；

在S20步骤中，点读云平台2将带页码编号的云端操作信息转发至与点读笔1的绑定的APP终端3，APP终端3依据页码编号对第二类电子书籍进行翻页操作。

在S00步骤中，预设内容信息包括用于启动游戏、视频、音频或者动画中的一种或者多种的启动键码；

在S10步骤中，MCU控制板12依据带启动键码的预设内容信息生成带启动键码的云端操作信息上传至点读云平台2；

在S20步骤中，点读云平台2将启动键码的云端操作信息转发至与点读笔1的绑定的APP终端3，APP终端3依据启动键码加载相应的游戏、视频、音频或者动画中的一种或者多种。

当APP终端3进行游戏模式后，点读云平台2的游戏模块将实体书籍中的各个图标对应的预设内容信息与游戏操作指令进行关联；

在步骤10中，点读笔1的MCU控制板12获取识别器11传送的预设内容信息后并生成包含游戏操作指令的云端操作信息，并将包含游戏操作指令的云端操作信息上传至所述点读云平台2。

实施例二

本实施例中提供的一种用于上述点读笔信息交互方法的点读笔信息交互***，包括具有第一类电子书籍的点读笔1、APP终端3以及点读云平台2，具有第一类电子书籍的点读笔1用于识别实体书籍，APP终端3用于播放及展示第二类电子书籍，点读云平台2用于点读笔1与APP终端3进行信息交互并存储有第一类电子书籍及第二类电子书籍，点读笔1的识别器11识别实体书籍的预设内容信息后生成云端操作信息，并将云端操作信息上传至点读云平台2，点读云平台2将云端操作信息发送至APP终端3，APP终端3依据云端操作信息生成终端执行指令并控制APP终端3的各个执行器31执行终端执行指令。

本发明是通过优选实施例进行描述的，本领域技术人员知悉，在不脱离本发明的精神和范围的情况下，可以对这些特征和实施例进行各种改变或等效替换。本发明不受此处所公开的具体实施例的限制，其他落入本申请的权利要求内的实施例都属于本发明保护的范围。

Claims (10)

1.一种点读笔信息交互方法，其特征在于，包括以下步骤：

S00：点读笔的识别器识别实体书籍的预设内容信息；

S10：所述点读笔具备云端模式，当点读笔处于云端模式时，点读笔的MCU控制板获取所述识别器传送的所述预设内容信息后生成云端操作信息，并将所述云端操作信息上传至点读云平台；

S20：所述点读云平台将所述云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述云端操作信息生成终端执行指令并控制所述APP终端的各个执行器执行所述终端执行指令。

2.根据权利要求1所述的点读笔信息交互方法，其特征在于：

所述点读云平台包括存储有若干电子书籍的内容模块；

所述实体书籍上设置有身份码信息；

在S00步骤中，所述点读笔内装载有与实体书籍对应的第一类电子书籍，所述第一类电子书籍的装载步骤如下：

S001：所述点读笔的识别器识别某本所述实体书籍的所述身份码信息；

S002：所述MCU控制板接收到所述身份码信息后验证所述点读笔的第一存储器内是否存储有该实体书籍对应的第一类电子书籍，若包含该第一类电子书籍，所述MCU控制板生成包含身份码信息的云端操作信息上传至点读云平台；若不包含第一类电子书籍，所述MCU控制板则发送包含身份码信息的第一下载请求至所述点读云平台的业务模块；

S003：若不包含第一类电子书籍，所述业务模块依据所述下载请求从所述内容模块调取与所述身份码信息对应的第一类电子书籍，并传送至所述点读笔。

3.根据权利要求2所述的点读笔信息交互方法，其特征在于：

在所述第一类电子书籍的装载步骤中，在S002步骤中还包括：所述点读云平台的业务模块识别所述身份码信息的有效性，所述业务模块的识别结果为身份码信息为无效的，则发送提醒信息至所述点读笔，所述点读笔通过其播放器对所述提醒信息进行播报，所述业务模块的识别结果为身份码信息为有效的，所述点读云平台将包含身份码信息的云端操作信息转发至所述APP终端。

4.根据权利要求3所述的点读笔信息交互方法，其特征在于：

在S20步骤中，所述APP终端内装载有与实体书籍对应的第二类电子书籍，所述第二类电子书籍的装载步骤如下：

S201：所述APP终端接收到包含身份码信息的云端操作信息；

S202：所述APP终端依据身份码信息调取所述APP终端的存储器内索引表，所述APP终端的控制板判断所述索引表内是否包含某本所述实体书籍对应的第二类电子书籍的身份编码，若包含所述身份编码，则使得所述APP终端加载第二类电子书籍，并通过显示器的第二类电子书籍的封面；若不包含所述身份编码，则所述APP终端发送包含身份码信息的第二下载请求至所述点读云平台的业务模块；

S203：若不包含所述身份编码，所述业务模块依据所述下载请求从所述内容模块调取与所述身份码信息对应的第二类电子书籍，并传送至所述APP终端。

5.根据权利要求1所述的点读笔信息交互方法，其特征在于：

所述APP终端具备第一蓝牙模块，所述点读笔具备第二蓝牙模块；

所述点读笔与所述APP终端的绑定步骤包括：

在S20步骤中，所述点读笔处于配对模式时，所述点读笔的第二蓝牙模块发出配对信号，所述APP终端通过所述第一蓝牙模块对所述第二蓝牙模块的配对信息进行搜索，所述APP终端搜索到所述配对信息后对所述配对信息进行验证，验证通过后将所述APP终端与所述点读笔进行绑定。

6.根据权利要求1所述的点读笔信息交互方法，其特征在于：

在S10步骤中，所述点读笔还具备本地模式，当点读笔处于本地模式时，所述MCU控制板获取所述识别器传送的所述预设内容信息生成本机执行信息，所述MCU控制板依据所述本机执行信息控制所述点读笔的执行器执行。

7.根据权利要求4所述的点读笔信息交互方法，其特征在于：

在S00步骤中，对所述实体书籍不同书页的预设内容信息进行分别编码，使得预设内容信息中包含页码编号；

在S10步骤中，所述MCU控制板依据所述带页码编号的预设内容信息生成带页码编号的云端操作信息上传至所述点读云平台；

在S20步骤中，所述点读云平台将带页码编号的云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述页码编号对所述第二类电子书籍进行翻页操作。

8.根据权利要求1所述的点读笔信息交互方法，其特征在于：

在S00步骤中，所述预设内容信息包括用于启动游戏、视频、音频或者动画中的一种或者多种的启动键码；

在S10步骤中，所述MCU控制板依据所述带启动键码的预设内容信息生成带启动键码的云端操作信息上传至所述点读云平台；

在S20步骤中，所述点读云平台将启动键码的云端操作信息转发至与所述点读笔的绑定的APP终端，所述APP终端依据所述启动键码加载相应的游戏、视频、音频或者动画中的一种或者多种。

9.根据权利要求8所述的点读笔信息交互方法，其特征在于：

当APP终端进行游戏模式后，所述点读云平台的游戏模块将所述实体书籍中的各个图标对应的预设内容信息与游戏操作指令进行关联；

在步骤10中，所述点读笔的MCU控制板获取所述识别器传送的所述预设内容信息后并生成包含游戏操作指令的云端操作信息，并将包含游戏操作指令的所述云端操作信息上传至所述点读云平台。

10.一种用于权利要求1至9任一项所述的点读笔信息交互方法的点读笔信息交互***，其特征在于，包括：

具有第一类电子书籍的点读笔，用于识别实体书籍；

APP终端，用于播放及展示所述第二类电子书籍；

点读云平台，用于所述点读笔与所述APP终端进行信息交互并存储有第一类电子书籍及第二类电子书籍；

所述点读笔的识别器识别实体书籍的预设内容信息后生成云端操作信息，并将所述云端操作信息上传至点读云平台，所述点读云平台将所述云端操作信息发送至所述APP终端，所述APP终端依据所述云端操作信息生成终端执行指令并控制所述APP终端的各个执行器执行所述终端执行指令。

Images