CN105183217A - 触控显示设备及触控显示方法 - Google Patents

Abstract

本发明提供了一种触控显示设备及触控显示方法，属于触控技术领域。触控显示设备包括：显示屏；设置在显示屏上的多个检测元件，用于获取在身体不同部位接触显示屏时所产生的声音振动信号；中央处理器，与检测元件连接，用于对检测元件传递的声音振动信号进行分析，确定身体触控类型，并生成包含有身体触控类型的指令信号；控制芯片，与中央处理器连接，用于接收中央处理器发送的指令信号，并根据指令信号生成影像数据和驱动信号；图像处理器，与控制芯片连接，用于接收控制芯片发送的影像数据和驱动信号，进而驱动显示屏显示相应的画面。本发明技术方案使用户能够利用身体的不同部位来进行触控操作，从而方便残疾人群使用触控显示设备。

Description

触控显示设备及触控显示方法

技术领域

本发明涉及触控技术领域，特别是指一种触控显示设备及触控显示方法。

背景技术

随着触控技术的发展，基于触控操作的触控装置逐渐成为各种便携移动终端的标准配置。通过触控屏，用户可以直接用手向移动终端输入坐标信息，它和鼠标、键盘一样，是一种输入设备。触控屏具有坚固耐用、反应速度快、节省空间、易于交流等许多优点。例如，采用触摸屏的智能手机，性能越来越强劲，屏幕越来越大。大屏幕便于用户全网页浏览、观看视频，带来良好的显示效果及观看舒适性。

触控技术类别较多，常见的有电阻式、电容式、红外式、电磁笔式等多种方式，技术涉及从单点触控到多点触控，灵敏度也提升显著，触控技术已逐渐趋于实用化、成熟化。

但是现有的触控技术一般都需要用户通过手来执行触控操作，比如通过手指或者触控笔来进行操控，这样对于残缺手脚的残疾人群，现有触控技术往往无法满足他们的操控需求。

发明内容

本发明要解决的技术问题是提供一种触控显示设备及触控显示方法，使用户能够利用身体的不同部位来进行触控操作，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

为解决上述技术问题，本发明的实施例提供技术方案如下：

一方面，提供一种触控显示设备，包括：

显示屏；

设置在所述显示屏上的多个检测元件，用于获取在身体不同部位接触所述显示屏时所产生的声音振动信号；

中央处理器，与所述检测元件连接，用于对所述检测元件传递的声音振动信号进行分析，确定身体触控类型，并生成包含有所述身体触控类型的指令信号；

控制芯片，与所述中央处理器连接，用于接收所述中央处理器发送的指令信号，并根据所述指令信号生成影像数据和驱动信号；

图像处理器，与所述控制芯片连接，用于接收所述控制芯片发送的所述影像数据和驱动信号，进而驱动所述显示屏显示相应的画面。

进一步地，触控显示设备还包括：

声音特征信号数据库，用于存储声音特征信号与身体触控类型之间的对应关系；

所述中央处理器具体用于根据所述声音振动信号获取声音特征信号，并根据所述对应关系确定与所述声音特征信号对应的身体触控类型。

进一步地，所述中央处理器还用于根据接收到的声音振动信号获取声音特征信号，并接收输入的与所述声音振动信号对应的身体触控类型，将所述声音特征信号和所述输入的身体触控类型发送给所述声音特征信号数据库；

所述声音特征信号数据库还用于根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系。

进一步地，身体触控类型包括单一触控和多样触控，单一触控为单一身体部位触控，多样触控为至少两个身体部位触控的组合。

进一步地，所述中央处理器包括：

采样模块，用于接收所述检测元件发送的声音振动信号；

信号处理模块，用于对所述声音振动信号进行处理，获取所述声音振动信号的声音参数；

特征提取模块，用于根据所获取的声音参数对所述声音振动信号进行特征提取，获取声音特征信号；

比对模块，用于将所获取的声音特征信号与所述声音特征信号数据库中的数据进行比对，确定与所述声音特征信号对应的身体触控类型。

进一步地，触控显示设备还包括：

触发事件数据库，用于存储身体触控类型与触发事件之间的对应关系；

所述控制芯片具体用于将接收到的指令信号中包含的身体触控类型与所述触发事件数据库中的信息进行比对，确定与所述身体触控类型对应的影像数据和驱动信号。

进一步地，触控显示设备还包括：

设置在所述显示屏上的多个触控传感器，用于获取在身体不同部位接触所述显示屏时的触控点坐标位置；

所述中央处理器还与所述触控传感器连接，用于生成包含有所述身体触控类型和触控点坐标位置的指令信号。

进一步地，所述触发事件数据库中还存储有触控点坐标位置和身体触控类型与触发事件之间的对应关系；

所述控制芯片具体用于将接收到的指令信号中包含的身体触控类型和触控点位置坐标与所述触发事件数据库中的信息进行比对，确定与所述身体触控类型和触控点位置坐标对应的影像数据和驱动信号。

进一步地，触控显示设备还包括：

数据存储单元，与所述控制芯片连接，用于存储所述控制芯片接收到的当前帧的指令信号。

进一步地，触控显示设备还包括：

缓存单元，与所述控制芯片连接，用于对所述控制芯片接收到的下一帧的指令信号进行缓存。

本发明实施例还提供了一种触控显示方法，应用于如上所述的触控显示设备，所述方法包括：

获取在身体不同部位接触所述显示屏时所产生的声音振动信号；

对所述声音振动信号进行分析，确定身体触控类型，并生成包含有所述身体触控类型的指令信号；

根据所述指令信号生成对应的影像数据和驱动信号；

利用所述影像数据和驱动信号驱动所述显示屏显示相应的画面。

进一步地，所述方法还包括：

获取在身体不同部位接触所述显示屏时的触控点坐标位置；

所述生成包含有所述身体触控类型的指令信号的步骤，具体为：

生成包含有所述身体触控类型和触控点坐标位置的指令信号。

本发明的实施例具有以下有益效果：

上述方案中，在显示屏上设置有多个检测元件，能够获取在身体不同部位接触显示屏时所产生的声音振动信号；之后中央处理器可以根据声音振动信号确定身体触控类型，并生成相应的指令信号；控制芯片接收指令信号，并生成相应的影像数据和驱动信号；图像处理器接收影像数据和驱动信号，进而驱动显示屏显示相应的画面。本发明实施例能够识别接触显示屏的身体部位，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，鼻尖触控实现双击功能，脚趾触控可实现画画功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

附图说明

图1为本发明实施例触控显示设备的结构示意图；

图2为本发明实施例中央处理器的结构示意图；

图3为本发明另一实施例触控显示设备的结构示意图；

图4为本发明实施例触控显示方法的流程示意图；

图5为本发明另一实施例触控显示方法的流程示意图；

图6为身体触控类型包括单一触控和多样触控的示意图。

具体实施方式

为使本发明的实施例要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。

本发明的实施例针对现有技术中触控显示设备不方便残疾人群使用的问题，提供一种触控显示设备及触控显示方法，使用户能够利用身体的不同部位来进行触控操作，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

实施例一

本实施例提供了一种触控显示设备，如图1所示，包括：

显示屏50；

设置在显示屏50上的多个检测元件10，用于获取在身体不同部位接触显示屏50时所产生的声音振动信号，检测元件10可以成行成列地设置在显示屏50上，具体地，可以根据感应的精度来确定检测元件的个数，在需要的感应精度较高时，增加检测元件的个数，在需要的感应精度较低时，减少检测元件的个数，具体地，检测元件可以为声音传感器；

中央处理器20，与检测元件10连接，用于对检测元件10传递的声音振动信号进行分析，确定身体触控类型，并生成包含有身体触控类型的指令信号；

控制芯片30，与中央处理器20连接，用于接收中央处理器20发送的指令信号，并根据指令信号生成影像数据和驱动信号；

图像处理器40，与控制芯片30连接，用于接收控制芯片30发送的影像数据和驱动信号，进而驱动显示屏50显示相应的画面。

本实施例在显示屏上设置有多个检测元件，能够获取在身体不同部位接触显示屏时所产生的声音振动信号，之后中央处理器可以根据声音振动信号确定身体触控类型，并生成相应的指令信号；控制芯片接收指令信号，并生成相应的影像数据和驱动信号；图像处理器接收影像数据和驱动信号，进而驱动显示屏显示相应的画面。本发明实施例能够识别接触显示屏的身体部位，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，鼻尖触控实现双击功能，脚趾触控可实现画画功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

进一步地，触控显示设备还包括：

声音特征信号数据库，用于存储声音特征信号与身体触控类型之间的对应关系。其中，身体触控类型分为单一触控和多样触控，如图6所示，单一触控为单一身体部位触控，例如可有额头触控、鼻尖触控、下巴触控、脚趾触控等，而多样触控为至少两个身体部位触控的组合，可以为上述方式的排列组合，身体不同部位接触显示屏时会发出不同的声音，每一身体触控类型对应有独特的声音特征信号，比如声音特征信号A对应的是额头触控、声音特征信号B对应的是鼻尖触控、声音特征信号C对应的是下巴触控、声音特征信号D对应的是脚趾触控、声音特征信号E对应的是额头+鼻尖触控、声音特征信号F对应的是下巴+鼻尖触控等等；

中央处理器20具体用于根据声音振动信号获取声音特征信号，并根据对应关系确定与声音特征信号对应的身体触控类型，比如中央处理器20根据声音振动信号获取到声音特征信号A，则可以确定身体触控类型为额头触控；中央处理器20根据声音振动信号获取到声音特征信号B，则可以确定身体触控类型为鼻尖触控；中央处理器20根据声音振动信号获取到声音特征信号C，则可以确定身体触控类型为下巴触控；中央处理器20根据声音振动信号获取到声音特征信号D，则可以确定身体触控类型为脚趾触控；中央处理器20根据声音振动信号获取到声音特征信号E，则可以确定身体触控类型为额头+鼻尖触控；中央处理器20根据声音振动信号获取到声音特征信号F，则可以确定身体触控类型为下巴+鼻尖触控。

进一步地，中央处理器20还用于根据接收到的声音振动信号获取声音特征信号，并接收输入的与声音振动信号对应的身体触控类型，将声音特征信号和输入的身体触控类型发送给声音特征信号数据库；

声音特征信号数据库还用于根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系，这样声音特征信号数据库不但可以存储声音特征信号与身体触控类型之间的对应关系，还可以根据需要更新声音特征信号与身体触控类型之间的对应关系，并根据需要添加新的声音特征信号与身体触控类型之间的对应关系。

进一步地，如图2所示，中央处理器20包括：

采样模块21，用于接收检测元件10发送的声音振动信号。当身体的某一部位如额头、下巴、鼻尖等接触显示屏时，分布在显示屏上的检测元件会产生声音振动信号，采样模块主要对不同身体部位接触显示屏产生的原始声音振动信号进行收集，该原始声音振动信号无法直接进行身体触控类型的判断；

信号处理模块22，用于对采样模块21收集的声音振动信号进行处理，获取声音振动信号的声音参数。具体地，信号处理模块22可以对原始声音振动信号进行傅里叶转换等处理，获取主要关键参数，如声音振动信号的特征振幅、特征频率等信息；

特征提取模块23，用于根据信号处理模块22所获取的声音参数对声音振动信号进行特征提取，获取声音特征信号；

比对模块24，用于将所获取的声音特征信号与声音特征信号数据库中的数据进行比对，确定与声音特征信号对应的身体触控类型。

进一步地，触控显示设备还包括：

触发事件数据库，用于存储身体触控类型与触发事件之间的对应关系，比如额头触控对应确定功能、下巴触控对应取消功能、鼻尖触控对应双击功能、脚趾触控对应画画功能等等；

控制芯片30具体用于将接收到的指令信号中包含的身体触控类型与触发事件数据库中的信息进行比对，确定与身体触控类型对应的影像数据和驱动信号，比如在中央处理器20确定身体触控类型为额头触控时，控制芯片30将与确定功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与确定功能对应的画面；在中央处理器20确定身体触控类型为下巴触控时，控制芯片30将与取消功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与取消功能对应的画面；在中央处理器20确定身体触控类型为鼻尖触控时，控制芯片30将与双击功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与双击功能对应的画面；在中央处理器20确定身体触控类型为脚趾触控时，控制芯片30将与画画功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与画画功能对应的画面。

进一步地，如图3所示，触控显示设备还包括：

数据存储单元70，与控制芯片30连接，用于存储控制芯片30接收到的当前帧的指令信号，这样通过数据存储单元70可以记录历史数据。

进一步地，触控显示设备还包括：

缓存单元80，与控制芯片30连接，用于对控制芯片30接收到的下一帧的指令信号进行缓存，这样在下一帧时，控制芯片30可以直接利用缓存在缓存单元80中的指令信号生成对应的影像数据和驱动信号，能够加快身体部位识别以及触控触发的速度。

其中，缓存单元80、数据存储单元70和图像处理器40可以通过总线与控制芯片30连接。

本实施例能够识别接触显示屏的身体部位，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，鼻尖触控实现双击功能，脚趾触控可实现画画功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

实施例二

本实施例提供了一种触控显示设备，如图3所示，包括：

显示屏50；

设置在显示屏50上的多个检测元件10，用于获取在身体不同部位接触显示屏50时所产生的声音振动信号，检测元件10可以成行成列地设置在显示屏50上，具体地，可以根据感应的精度来确定检测元件的个数，在需要的感应精度较高时，增加检测元件的个数，在需要的感应精度较低时，减少检测元件的个数，具体地，检测元件可以声音传感器；

设置在显示屏50上的多个触控传感器60，用于获取在身体不同部位接触显示屏50时的触控点坐标位置，触控传感器60可以成行成列地设置在显示屏50上，具体地，可以根据感应的精度来确定触控传感器的个数，在需要的感应精度较高时，增加触控传感器的个数，在需要的感应精度较低时，减少触控传感器的个数；

中央处理器20，与检测元件10和触控传感器60分别连接，用于对检测元件10传递的声音振动信号进行分析，确定身体触控类型，并生成包含有身体触控类型和触控点坐标位置的指令信号；

控制芯片30，与中央处理器20连接，用于接收中央处理器20发送的指令信号，并根据指令信号生成影像数据和驱动信号；

图像处理器40，与控制芯片30连接，用于接收控制芯片30发送的影像数据和驱动信号，进而驱动显示屏50显示相应的画面。

本实施例在显示屏上设置有多个检测元件和触控传感器，能够获取在身体不同部位接触显示屏时所产生的声音振动信号和触控点坐标位置，之后可以根据声音振动信号确定身体触控类型，生成与身体触控类型和触控点坐标位置对应的影像数据和驱动信号，进而驱动显示屏显示相应的画面，本发明实施例能够识别接触显示屏的身体部位和触控点坐标位置，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头+触控点坐标位置可实现对额头触控点处图标的确定功能，下巴+触控点坐标位置可实现对下巴触控点处图标的取消功能，而鼻尖+触控点坐标位置可实现对鼻尖触控点处图标的双击功能，脚趾+触控点坐标位置可实现对脚趾触控点处画面的放大功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

进一步地，触控显示设备还包括：

声音特征信号数据库，用于存储声音特征信号与身体触控类型之间的对应关系。其中，身体触控类型分为单一触控和多样触控，单一触控为单一身体部位触控，例如可有额头触控、鼻尖触控、下巴触控、脚趾触控等，而多样触控为至少两个身体部位触控的组合，可以为上述方式的排列组合。身体不同部位接触显示屏时会发出不同的声音，每一身体触控类型对应有独特的声音特征信号，比如声音特征信号A对应的是额头触控、声音特征信号B对应的是鼻尖触控、声音特征信号C对应的是下巴触控、声音特征信号D对应的是脚趾触控、声音特征信号E对应的是额头+鼻尖触控、声音特征信号F对应的是下巴+鼻尖触控等等；

中央处理器20具体用于根据声音振动信号获取声音特征信号，并根据对应关系确定与声音特征信号对应的身体触控类型，比如中央处理器20根据声音振动信号获取到声音特征信号A，则可以确定身体触控类型为额头触控；中央处理器20根据声音振动信号获取到声音特征信号B，则可以确定身体触控类型为鼻尖触控；中央处理器20根据声音振动信号获取到声音特征信号C，则可以确定身体触控类型为下巴触控；中央处理器20根据声音振动信号获取到声音特征信号D，则可以确定身体触控类型为脚趾触控；中央处理器20根据声音振动信号获取到声音特征信号E，则可以确定身体触控类型为额头+鼻尖触控；中央处理器20根据声音振动信号获取到声音特征信号F，则可以确定身体触控类型为下巴+鼻尖触控。

进一步地，中央处理器20还用于根据接收到的声音振动信号获取声音特征信号，并接收输入的与声音振动信号对应的身体触控类型，将声音特征信号和输入的身体触控类型发送给声音特征信号数据库；

声音特征信号数据库还用于根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系，这样声音特征信号数据库不但可以存储声音特征信号与身体触控类型之间的对应关系，还可以根据需要更新声音特征信号与身体触控类型之间的对应关系，并根据需要添加新的声音特征信号与身体触控类型之间的对应关系。

进一步地，如图2所示，中央处理器20包括：

采样模块21，用于接收检测元件10发送的声音振动信号。当身体的某一部位如额头、下巴、鼻尖等接触显示屏时，分布在显示屏上的检测元件会产生声音振动信号，采样模块主要对不同身体部位接触显示屏产生的原始声音振动信号进行收集，该原始声音振动信号无法直接进行身体触控类型的判断。

信号处理模块22，用于对采样模块21收集的声音振动信号进行处理，获取声音振动信号的声音参数。具体地，信号处理模块可以对原始声音振动信号进行傅里叶转换等处理，获取主要关键参数，如声音振动信号的特征振幅、特征频率等信息。

特征提取模块23，用于根据信号处理模块22所获取的声音参数对声音振动信号进行特征提取，获取声音特征信号；

比对模块24，用于将所获取的声音特征信号与声音特征信号数据库中的数据进行比对，确定与声音特征信号对应的身体触控类型。

进一步地，触控显示设备还包括：

触发事件数据库，用于存储触控点坐标位置和身体触控类型与触发事件之间的对应关系，比如额头触控+触控点位置坐标对应对触控点处的图标实现确定功能、下巴触控+触控点位置坐标对应对触控点处的图标实现取消功能、鼻尖触控+触控点位置坐标对应对触控点处的图标实现双击功能、脚趾触控+触控点位置坐标对应对触控点处的画面实现放大功能等等；

控制芯片30具体用于将接收到的指令信号中包含的身体触控类型和触控点位置坐标与触发事件数据库中的信息进行比对，确定与身体触控类型和触控点位置坐标对应的影像数据和驱动信号，比如在中央处理器20确定身体触控类型为额头触控时，控制芯片30将与对触控点处图标实现确定功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与确定功能对应的画面；在中央处理器20确定身体触控类型为下巴触控时，控制芯片30将与对触控点处图标实现取消功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与取消功能对应的画面；在中央处理器20确定身体触控类型为鼻尖触控时，控制芯片30将与对触控点处图标实现双击功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与双击功能对应的画面；在中央处理器20确定身体触控类型为脚趾触控时，控制芯片30将与对触控点处画面实现放大功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与放大功能对应的画面。

本实施例能够识别接触显示屏的身体部位和触控点位置坐标，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，而鼻尖触控实现双击功能，脚趾触控可实现放大功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

进一步地，如图3所示，触控显示设备还包括：

数据存储单元70，与控制芯片30连接，用于存储控制芯片30接收到的当前帧的指令信号，这样通过数据存储单元70可以记录历史数据。

进一步地，触控显示设备还包括：

缓存单元80，与控制芯片30连接，用于对控制芯片30接收到的下一帧的指令信号进行缓存，这样在下一帧时，控制芯片30可以直接利用缓存在缓存单元80中的指令信号生成对应的影像数据和驱动信号，能够加快身体部位识别以及触控触发的速度。

其中，缓存单元80、数据存储单元70和图像处理器40可以通过总线与控制芯片30连接。

实施例三

本实施例提供了一种触控显示方法，应用于实施例一的触控显示设备，如图4所示，所述方法包括：

步骤101：获取在身体不同部位接触显示屏时所产生的声音振动信号；

显示屏上分布有多个检测元件，在用户利用身体部位接触显示屏进行触控操作时，利用声振传感器可以感应身体不同部位如额头、下巴、鼻尖等接触显示屏时所产生的不同声音振动信号。

步骤102：对声音振动信号进行分析，确定身体触控类型，并生成包含有身体触控类型的指令信号；

声音特征信号数据库中存储有声音特征信号与身体触控类型之间的对应关系。其中，身体触控类型分为单一触控和多样触控，单一触控为单一身体部位触控，例如可有额头触控、鼻尖触控、下巴触控、脚趾触控等，而多样触控为至少两个身体部位触控的组合，可以为上述方式的排列组合，身体不同部位接触显示屏时会发出不同的声音，每一身体触控类型对应有独特的声音特征信号，比如声音特征信号A对应的是额头触控、声音特征信号B对应的是鼻尖触控、声音特征信号C对应的是下巴触控、声音特征信号D对应的是脚趾触控、声音特征信号E对应的是额头+鼻尖触控、声音特征信号F对应的是下巴+鼻尖触控等等。

中央处理器收集原始声音振动信号，可以对原始声音振动信号进行傅里叶转换等处理，获取主要关键参数，如声音振动信号的特征振幅、特征频率等信息，进行特征提取，获取声音特征信号，并根据声音特征信号数据库中存储的对应关系确定与声音特征信号对应的身体触控类型，比如中央处理器根据声音振动信号获取到声音特征信号A，则可以确定身体触控类型为额头触控；中央处理器根据声音振动信号获取到声音特征信号B，则可以确定身体触控类型为鼻尖触控；中央处理器根据声音振动信号获取到声音特征信号C，则可以确定身体触控类型为下巴触控；中央处理器根据声音振动信号获取到声音特征信号D，则可以确定身体触控类型为脚趾触控；中央处理器根据声音振动信号获取到声音特征信号E，则可以确定身体触控类型为额头+鼻尖触控；中央处理器根据声音振动信号获取到声音特征信号F，则可以确定身体触控类型为下巴+鼻尖触控。

中央处理器识别出身体触控类型后，将包含有身体触控类型的指令信号发送给控制芯片。

步骤103：根据指令信号生成对应的影像数据和驱动信号；

触发事件数据库中存储有身体触控类型与触发事件之间的对应关系，比如额头触控对应确定功能、下巴触控对应取消功能、鼻尖触控对应双击功能、脚趾触控对应画画功能等等，控制芯片将接收到的指令信号中包含的身体触控类型与触发事件数据库中的信息进行比对，确定与身体触控类型对应的影像数据和驱动信号，比如在中央处理器确定身体触控类型为额头触控时，控制芯片将与确定功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与确定功能对应的画面；在中央处理器确定身体触控类型为下巴触控时，控制芯片将与取消功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与取消功能对应的画面；在中央处理器确定身体触控类型为鼻尖触控时，控制芯片将与双击功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与双击功能对应的画面；在中央处理器确定身体触控类型为脚趾触控时，控制芯片将与画画功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与画画功能对应的画面。

步骤104：利用影像数据和驱动信号驱动显示屏显示相应的画面。

图像处理器接收到控制芯片发送的影像数据和驱动信号后，利用影像数据和驱动信号驱动显示屏显示相应的画面。

进一步地，中央处理器还可以根据接收到的声音振动信号获取声音特征信号，并接收用户输入的与声音振动信号对应的身体触控类型，将声音特征信号和输入的身体触控类型发送给声音特征信号数据库，声音特征信号数据库根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系，这样声音特征信号数据库不但可以存储声音特征信号与身体触控类型之间的对应关系，还可以根据需要更新声音特征信号与身体触控类型之间的对应关系，并根据需要添加新的声音特征信号与身体触控类型之间的对应关系。

本实施例能够识别接触显示屏的身体部位，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，鼻尖触控实现双击功能，脚趾触控可实现画画功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

实施例四

本实施例提供了一种触控显示方法，应用于实施例二的触控显示设备，如图5所示，所述方法包括：

步骤201：获取在身体不同部位接触显示屏时所产生的声音振动信号和触控点位置坐标；

显示屏上分布有多个检测元件，在用户利用身体部位接触显示屏进行触控操作时，利用声振传感器可以感应身体不同部位如额头、下巴、鼻尖等接触显示屏时所产生的不同声音振动信号。

显示屏上还分布有多个触控传感器，在用户利用身体部位接触显示屏进行触控操作时，利用触控传感器可以获知触控位置的变化，感知触控点的坐标位置，触控传感器所采用的感应方式包括但不限定于电容式、电阻式、光学式等。

步骤202：对声音振动信号进行分析，确定身体触控类型，并生成包含有身体触控类型和触控点坐标位置的指令信号；

声音特征信号数据库中存储有声音特征信号与身体触控类型之间的对应关系。其中，身体触控类型分为单一触控和多样触控，单一触控为单一身体部位触控，例如可有额头触控、鼻尖触控、下巴触控、脚趾触控等，而多样触控为至少两个身体部位触控的组合，可以为上述方式的排列组合，身体不同部位接触显示屏时会发出不同的声音，每一身体触控类型对应有独特的声音特征信号，比如声音特征信号A对应的是额头触控、声音特征信号B对应的是鼻尖触控、声音特征信号C对应的是下巴触控、声音特征信号D对应的是脚趾触控、声音特征信号E对应的是额头+鼻尖触控、声音特征信号F对应的是下巴+鼻尖触控等等。

中央处理器收集原始声音振动信号，可以对原始声音振动信号进行傅里叶转换等处理，获取主要关键参数，如声音振动信号的特征振幅、特征频率等信息，进行特征提取，获取声音特征信号，并根据声音特征信号数据库中存储的对应关系确定与声音特征信号对应的身体触控类型，比如中央处理器根据声音振动信号获取到声音特征信号A，则可以确定身体触控类型为额头触控；中央处理器根据声音振动信号获取到声音特征信号B，则可以确定身体触控类型为鼻尖触控；中央处理器根据声音振动信号获取到声音特征信号C，则可以确定身体触控类型为下巴触控；中央处理器根据声音振动信号获取到声音特征信号D，则可以确定身体触控类型为脚趾触控；中央处理器根据声音振动信号获取到声音特征信号E，则可以确定身体触控类型为额头+鼻尖触控；中央处理器根据声音振动信号获取到声音特征信号F，则可以确定身体触控类型为下巴+鼻尖触控。

中央处理器识别出身体触控类型后，生成包含有身体触控类型和触控点坐标位置的指令信号，并将指令信号发送给控制芯片。

步骤203：根据指令信号生成对应的影像数据和驱动信号；

触发事件数据库存储有触控点坐标位置和身体触控类型与触发事件之间的对应关系，比如额头触控+触控点位置坐标对应对触控点处的图标实现确定功能、下巴触控+触控点位置坐标对应对触控点处的图标实现取消功能、鼻尖触控+触控点位置坐标对应对触控点处的图标实现双击功能、脚趾触控+触控点位置坐标对应对触控点处的画面实现放大功能等等；

控制芯片将接收到的指令信号中包含的身体触控类型和触控点位置坐标与触发事件数据库中的信息进行比对，确定与身体触控类型和触控点位置坐标对应的影像数据和驱动信号，比如在中央处理器确定身体触控类型为额头触控时，控制芯片将与对触控点处图标实现确定功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与确定功能对应的画面；在中央处理器确定身体触控类型为下巴触控时，控制芯片将与对触控点处图标实现取消功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与取消功能对应的画面；在中央处理器确定身体触控类型为鼻尖触控时，控制芯片将与对触控点处图标实现双击功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与双击功能对应的画面；在中央处理器确定身体触控类型为脚趾触控时，控制芯片将与对触控点处画面实现放大功能对应的影像数据和驱动信号发送至图像处理器，进而驱动显示屏显示与放大功能对应的画面。

步骤204：利用影像数据和驱动信号驱动显示屏显示相应的画面。

图像处理器接收到控制芯片发送的影像数据和驱动信号后，利用影像数据和驱动信号驱动显示屏显示相应的画面。

进一步地，中央处理器还可以根据接收到的声音振动信号获取声音特征信号，并接收用户输入的与声音振动信号对应的身体触控类型，将声音特征信号和输入的身体触控类型发送给声音特征信号数据库，声音特征信号数据库根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系，这样声音特征信号数据库不但可以存储声音特征信号与身体触控类型之间的对应关系，还可以根据需要更新声音特征信号与身体触控类型之间的对应关系，并根据需要添加新的声音特征信号与身体触控类型之间的对应关系。

本实施例能够识别接触显示屏的身体部位和触控点位置坐标，这样就可以利用不同的身体部位可实现不同的触控操作，进而可以控制显示屏显示相应的画面。例如，用额头触控可实现确定功能，下巴触控可实现取消功能，鼻尖触控实现双击功能，脚趾触控可实现放大功能等，进而根据这些触控操作来控制显示屏进行相应画面的显示，从而方便残疾人群使用触控显示设备。

此说明书中所描述的许多功能部件都被称为模块、单元，以便更加特别地强调其实现方式的独立性。

本发明实施例中，模块、单元可以用软件实现，以便由各种类型的处理器执行。举例来说，一个标识的可执行代码模块、单元可以包括计算机指令的一个或多个物理或者逻辑块，举例来说，其可以被构建为对象、过程或函数。尽管如此，所标识模块、单元的可执行代码无需物理地位于一起，而是可以包括存储在不同物理上的不同的指令，当这些指令逻辑上结合在一起时，其构成模块、单元并且实现该模块、单元的规定目的。

实际上，可执行代码模块、单元可以是单条指令或者是许多条指令，并且甚至可以分布在多个不同的代码段上，分布在不同程序当中，以及跨越多个存储器设备分布。同样地，操作数据可以在模块、单元内被识别，并且可以依照任何适当的形式实现并且被组织在任何适当类型的数据结构内。所述操作数据可以作为单个数据集被收集，或者可以分布在不同位置上(包括在不同存储设备上)，并且至少部分地可以仅作为电子信号存在于***或网络上。

在模块、单元可以利用软件实现时，考虑到现有硬件工艺的水平，所以可以以软件实现的模块、单元，在不考虑成本的情况下，本领域技术人员都可以搭建对应的硬件电路来实现对应的功能，所述硬件电路包括常规的超大规模集成(VLSI)电路或者门阵列以及诸如逻辑芯片、晶体管之类的现有半导体或者是其它分立的元件。模块、单元还可以用可编程硬件设备，诸如现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等实现。

在本发明各方法实施例中，所述各步骤的序号并不能用于限定各步骤的先后顺序，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，对各步骤的先后变化也在本发明的保护范围之内。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种触控显示设备，其特征在于，包括：

显示屏；

设置在所述显示屏上的多个检测元件，用于获取在身体不同部位接触所述显示屏时所产生的声音振动信号；

中央处理器，与所述检测元件连接，用于对所述检测元件传递的声音振动信号进行分析，确定身体触控类型，并生成包含有所述身体触控类型的指令信号；

控制芯片，与所述中央处理器连接，用于接收所述中央处理器发送的指令信号，并根据所述指令信号生成影像数据和驱动信号；

图像处理器，与所述控制芯片连接，用于接收所述控制芯片发送的所述影像数据和驱动信号，进而驱动所述显示屏显示相应的画面。

2.根据权利要求1所述的触控显示设备，其特征在于，还包括：

声音特征信号数据库，用于存储声音特征信号与身体触控类型之间的对应关系；

所述中央处理器具体用于根据所述声音振动信号获取声音特征信号，并根据所述对应关系确定与所述声音特征信号对应的身体触控类型。

3.根据权利要求2所述的触控显示设备，其特征在于，

所述中央处理器还用于根据接收到的声音振动信号获取声音特征信号，并接收输入的与所述声音振动信号对应的身体触控类型，将所述声音特征信号和所述输入的身体触控类型发送给所述声音特征信号数据库；

所述声音特征信号数据库还用于根据接收到的声音特征信号和身体触控类型，更新声音特征信号与身体触控类型之间的对应关系。

4.根据权利要求1所述的触控显示设备，其特征在于，身体触控类型包括单一触控和多样触控，单一触控为单一身体部位触控，多样触控为至少两个身体部位触控的组合。

5.根据权利要求2所述的触控显示设备，其特征在于，所述中央处理器包括：

采样模块，用于接收所述检测元件发送的声音振动信号；

信号处理模块，用于对所述声音振动信号进行处理，获取所述声音振动信号的声音参数；

特征提取模块，用于根据所获取的声音参数对所述声音振动信号进行特征提取，获取声音特征信号；

比对模块，用于将所获取的声音特征信号与所述声音特征信号数据库中的数据进行比对，确定与所述声音特征信号对应的身体触控类型。

6.根据权利要求1-5中任一项所述的触控显示设备，其特征在于，还包括：

触发事件数据库，用于存储身体触控类型与触发事件之间的对应关系；

所述控制芯片具体用于将接收到的指令信号中包含的身体触控类型与所述触发事件数据库中的信息进行比对，确定与所述身体触控类型对应的影像数据和驱动信号。

7.根据权利要求6所述的触控显示设备，其特征在于，还包括：

设置在所述显示屏上的多个触控传感器，用于获取在身体不同部位接触所述显示屏时的触控点坐标位置；

所述中央处理器还与所述触控传感器连接，用于生成包含有所述身体触控类型和触控点坐标位置的指令信号。

8.根据权利要求7所述的触控显示设备，其特征在于，

所述触发事件数据库中还存储有触控点坐标位置和身体触控类型与触发事件之间的对应关系；

所述控制芯片具体用于将接收到的指令信号中包含的身体触控类型和触控点位置坐标与所述触发事件数据库中的信息进行比对，确定与所述身体触控类型和触控点位置坐标对应的影像数据和驱动信号。

9.根据权利要求1所述的触控显示设备，其特征在于，还包括：

数据存储单元，与所述控制芯片连接，用于存储所述控制芯片接收到的当前帧的指令信号。

10.根据权利要求1所述的触控显示设备，其特征在于，还包括：

缓存单元，与所述控制芯片连接，用于对所述控制芯片接收到的下一帧的指令信号进行缓存。

11.一种触控显示方法，其特征在于，应用于如权利要求1-10中任一项所述的触控显示设备，所述方法包括：

获取在身体不同部位接触所述显示屏时所产生的声音振动信号；

对所述声音振动信号进行分析，确定身体触控类型，并生成包含有所述身体触控类型的指令信号；

根据所述指令信号生成对应的影像数据和驱动信号；

利用所述影像数据和驱动信号驱动所述显示屏显示相应的画面。

12.根据权利要求11所述的触控显示方法，其特征在于，所述方法还包括：

获取在身体不同部位接触所述显示屏时的触控点坐标位置；

所述生成包含有所述身体触控类型的指令信号的步骤，具体为：

生成包含有所述身体触控类型和触控点坐标位置的指令信号。