CN105426713A - 用于基于触摸事件分析来区分触摸屏使用者的方法和装置 - Google Patents

用于基于触摸事件分析来区分触摸屏使用者的方法和装置 Download PDF

Info

Publication number
CN105426713A
CN105426713A CN201510209998.0A CN201510209998A CN105426713A CN 105426713 A CN105426713 A CN 105426713A CN 201510209998 A CN201510209998 A CN 201510209998A CN 105426713 A CN105426713 A CN 105426713A
Authority
CN
China
Prior art keywords
signal
touch event
sensor
touch
territory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510209998.0A
Other languages
English (en)
Other versions
CN105426713B (zh
Inventor
朱莉娅·施华兹
克里斯·哈里森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Neat Coase Europe Co
Qeexo Co
Original Assignee
Neat Coase Europe Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Neat Coase Europe Co filed Critical Neat Coase Europe Co
Publication of CN105426713A publication Critical patent/CN105426713A/zh
Application granted granted Critical
Publication of CN105426713B publication Critical patent/CN105426713B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/316User authentication by observing the pattern of computer usage, e.g. typical user behaviour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明的某些实施例包括一种用于基于源自触摸事件声学和机械冲击的特征的表征来区分触摸屏使用者的方法,并且包括在触敏表面上检测触摸事件、使用检测此类触摸事件的至少一个传感器生成振动声学波形信号、将该波形信号转换成至少一个域信号、从所述域信号中提取多个区别特征、以及对所述多个特征进行分类从而将该域信号的特征与特定使用者相关联。

Description

用于基于触摸事件分析来区分触摸屏使用者的方法和装置
版权声明
本专利文献的披露的一部分包含受到版权保护的材料。版权所有者不反对任何人对本专利文献或本专利披露的复制,由于其出现在专利和商标局专利文件或记录中,但无论如何在其他方面保留所有版权。
技术领域
本发明总体上涉及触摸屏技术领域,并且更具体而言涉及对触摸屏机械冲击特征和声学特征的分析来在不同使用者之间进行区分。
背景
背景部分中所讨论的主题不应该仅仅由于其在背景部分中有所提及而被假定为现有技术。类似地,背景部分中所提及的问题或者与背景部分的主题相关联的问题不应被假定为先前已在现有技术中被认识到。背景部分的主题仅仅代表不同的方法,在其中和其自身也可能是发明。
以下参照所披露的技术进行详细描述。描述了优选实现方式以说明所披露的技术,而不是限制其范围,该范围由权利要求书限定。本领域普通技术人员将认识到描述的多种等效变化。
典型地,当今的各种电子设备由使用者通过与触摸屏的交互而操作。某些此类设备(如触敏计算机屏幕)被设计成通常在不同时间由多个使用者操作。其他此类设备(如智能手机)通常与单个使用者相关联,如果另一使用者获得对此类单使用者设备的未授权访问,则该单个使用者的隐私会受到严重危险。
对于多个使用者操作的设备,通常有必要为计算机提供一种输入从而标识正在操作***的特定使用者,这样使得呈现适当的使用者相关程序,以便由正确的使用者进行进一步处理。
对于单个使用者操作的设备,向未授权使用者暴露详细信息会加剧对授权使用者的隐私的损害,并且因此通常使用密码、指纹读取器和进入码来阻止未授权使用者的访问。
不幸的是,这样的使用者ID输入、密码、指纹读取、进入码和其他此类额外ID或安全操作费时且不方便,并且降低了使用此类设备的愉悦性和效率。
简要概述
对于某些实施例,用于区分触摸屏使用者的方法包括检测来自至少一个使用者的触摸事件、生成与该触摸事件相关的振动声学波形信号、将该振动声学波形信号转换成与该振动声学波形信号不同的至少一个转换后的波形信号、从转换后的波形信号中提取区别特征、以及使用所提取的区别特征将该触摸事件与特定使用者相关联。
对于某些实施例,用于区分触摸屏使用者的装置包括被配置成用于检测来自至少一个使用者的触摸事件的触敏表面、被配置成用于响应于该触摸事件的发生而生成振动声学波形信号的传感器、被配置成用于将该波形信号转换成与该振动声学波形信号不同的至少一个转换后的波形信号的转换器、被配置成用于从转换后的波形信号中提取区别特征的特征提取器、以及被配置成用于使用该提取器所提取的区别特征将该振动声学波形信号与特定使用者相关联的分类单元。
通过查看下文的附图、详细描述和权利要求书可以了解本发明的其他方面和优点。
附图简要描述
所包括的附图仅为说明目的,并且仅用于提供用于所披露技术的可能结构和过程步骤的示例。这些附图决不会限制本领域技术人员在不脱离本披露的精神和范围的情况下对实施例做出的形式和细节上的任何修改。
图1是根据本发明的示例性实施例的用于基于振动声学信号的分类来区分触摸屏使用者的计算***的框图;
图2A是根据本发明的示例性实施例的示出了由第一使用者的触摸屏事件所生成的时域信号的第一使用者的波形信号的曲线图;
图2B是根据本发明的示例性实施例的包括图2A的波形信号的频谱的第一使用者的转换后的波形信号;
图3A是根据本发明的示例性实施例的示出了由第二使用者的触摸屏事件所生成的时域信号的第二使用者的波形信号的曲线图;
图3B是根据本发明的示例性实施例的包括图3A的波形信号的频谱的第二使用者的转换后的波形信号;以及
图4是根据本发明的示例性实施例的展示了可被执行用于区分触摸屏使用者的过程的流程图。
详细描述
本部分中描述了根据一个或多个实施例的方法和装置的应用。提供这些示例仅是为了添加上下文并帮助理解本披露。因此,对于本领域技术人员而言将明显的是可在没有这些具体细节中的某些或全部的情况下实践在此所描述的技术。在其他实例中,为了避免不必要地模糊本披露,未详细描述公知的过程步骤。其他应用也是可能的,这样使得以下示例不应视为对范围或设置的限定或限制。
在以下详细描述中,参考了形成说明书一部分的附图,在附图中以说明的方式示出了具体实施例。尽管足够详细地对这些实施例进行了描述以使得本领域技术人员能够实践本披露,但应理解的是,这些示例不是限制性的,这样使得在不脱离本披露的精神和范围的情况下可以使用其他实施例并且可以做出改变。
可以用多种方式来实现一个或多个实施例,包括如过程、装置、***、设备、方法、计算机可读介质(如包含计算机可读指令或计算机程序代码的计算机可读存储介质)、或如包括内嵌有计算机可读程序代码的计算机可用介质的计算机程序产品。
所披露的实施例可以包括用于基于源自触摸事件声学和机械冲击的特征的表征来区分触摸屏使用者的方法,并且包括在触敏表面上检测触摸事件、使用检测此类触摸事件的至少一个传感器生成振动声学波形信号、将该波形信号转换成至少一个域信号、从所述域信号中提取多个区别特征、以及对所述多个特征进行分类从而将该域信号的特征与特定使用者相关联。
所披露的实施例可以包括用于区分触摸屏设备的触摸屏使用者的***。这些***可以包括处理器和一个或多个所存储的指令序列,当由该处理器执行时,这些指令致使该处理器在触敏表面上检测触摸事件、使用检测此类触摸事件的至少一个传感器生成振动声学波形信号、将该波形信号转换成至少一个域信号、从所述域信号中提取多个区别特征、以及对所述多个特征进行分类从而将该域信号的特征与特定使用者相关联。
所披露的实施例可以包括用于区分触摸屏设备的触摸屏使用者的装置。该装置可以包括用于检测来自至少一个使用者的触摸事件的触敏表面、从此类触摸事件生成振动声学波形信号的至少一个传感器、用于将该波形信号转换成至少一个域信号的转换器、用于从所述域信号中提取多个区别特征的特征提取器、以及使用所述提取器的这些区别特征将该域信号的特征与特定使用者相关联的分类单元。
所披露的实施例可以包括具有用于提供社交信息的一个或多个指令序列的机器可读介质,当由一个或多个处理器执行时,这些指令致使该一个或多个处理器在触敏表面上检测触摸事件、使用检测此类触摸事件的至少一个传感器生成振动声学波形信号、将该波形信号转换成至少一个域信号、从所述域信号中提取多个区别特征、以及对所述多个特征进行分类从而将该域信号的特征与特定使用者相关联。该域信号可以是时域信号或频域信号。
一般情况下,当使用者触摸配备有触摸屏的计算***(例如,智能电话)的触摸屏(即,物理冲击)时,机械力被施加到触摸屏上(导致在触摸屏上并穿过其传播的机械力)以及任何接触组件(例如,设备底盘、电子主板、外壳)上。这些机械振动可以被多种传感器(包括冲击传感器、振动传感器、加速度计、应变计、或声学传感器如电容传声器、压电传声器、MEMS传声器等)中的至少一个所捕获。
一旦传感器已经捕获了与机械振动相关联的振动声学信号,该信号可以被转换成一系列特征,例如:平均声功率、标准偏差、方差、偏斜度、峰度、绝对值和、均方根(RMS)、离差、零交叉、频谱矩心、频谱密度、基于线性预测的倒谱系数(LPCC)、感知线性预测(PLP)、倒谱系数倒谱系数、梅尔频率倒谱系数(MFCC)、频率相位(例如,如FFT所生成的)。
许多触摸屏技术能够将触摸事件的若干方面(如形状、大小、电容、取向、压力等)数字化。后者可以用作区别特征,或者此类特征可源自它们。进一步地,由于人手指在其解剖组成方面不同,因此其声学和触摸属性在人与人之间会不同。此外,使用者触摸触摸屏的方式也会是有区别的(例如,哪个手指、手指的哪一部分、有多平、有多用力)。因此,振动声学特征和触摸特征包含可以为不同使用者的特性的属性。
因此,可以在配置有触摸屏的计算***中包括分类器,该分类器在接收到触摸事件后确定哪个使用者正在操作计算***或该使用者是否已被授权或是否具有任何个性化特征。关于标识哪个使用者正在操作设备,任何单个事件可能并不能产生足够的置信度。因此,直到达到足够水平的置信度时分类器才可以保留结论,或者可以在预定时期或事件时(例如,10次触摸后、2分钟后、当进入特权应用时)强迫做出最佳猜测。
对于某些实施例,分类器可以包括被配置成用于不断对振动声学数据进行采样并将其存入缓冲区的感应***。缓冲区可以具有许多时长,如,例如,50毫秒。分类器可与被配置成用于等待触摸事件发生的触摸屏(或触敏表面)相耦合。任何数量的触摸技术对触摸屏都是可能的。当触摸屏检测到触摸事件时,它触发转换、特征提取和分类过程。
当检测到该触摸事件时,从振动声学缓冲区检索数据。因为触摸屏可能有某些时延,所以通常有必要在缓冲区中向后查看以找到与触摸冲击相对应的振动声学波形(例如,如果触摸屏具有20ms的时延,可能有必要在缓冲区中向后查看20ms以找到相对应的振动声学事件)。可以将缓冲区的全部或部分保存并传递到下一个过程。
来自传感器的波形是振动声学信号的时域表示。转换期间,将该信号转换成其他形式。这包括对波形进行滤波并变换成其他形式,包括频域表示。提取期间,对触摸屏控制器数据和振动声学数据进行分析,并提取表征不同使用者的特征。对于振动声学数据,为信号的全部表示计算特征。然后,将这些特征传递给分类器,该分类器使用该信息以使用者对触摸事件进行标记(除了触敏表面报告的任何因素之外,例如,X/Y位置、长/短轴、压力等)。然后,可以将增强的触摸事件传递给操作***(OS)或最终使用者应用,从而基于触摸事件来关联使用者。
图1是根据本发明的实施例的用于基于振动声学信号的分类来区分不同使用者的计算***10的框图。该实施例的计算***10可以具有OS,并且可以运行各种类型的服务或应用(被称为app)。计算***10还可以配备有可允许连接至通信网络的远程通信能力。这种计算***可以包括但不限于桌面计算机(例如,表面计算)、膝上型计算机、桌上计算机、移动计算机、移动互联网设备、移动电话、智能电话、PDA(个人数字助理)、游戏控制台、便携式媒体播放器等。
参照图1,计算***10可包括触摸屏100、触摸事件检测器110、振动声学分类器120和OS130。触摸事件检测器110可以与一个或多个传感器相关联。该一个或多个传感器可被安装在计算***10内部的任何数量的位置上,包括但不限于底盘、触摸屏、主板、PCB、显示器、面板和外壳。
当使用者使用手指触摸触摸屏100的表面时,触摸事件在空气中产生振动声学响应并且还在接触表面(例如,触摸屏、外壳、设备底盘)内部产生机械振动。本发明的某些实施例可以利用具有一个或多个传感器(例如,一个用于空中声学,而一个用于机械振动,还可称作结构声学)的振动声学信号的来源两者。可以使用若干传感器类型,包括例如压电弯曲元件、压电薄膜、加速度计(例如,线性可变差动变压器(LVDT)、电位计式、可变磁阻、压电式、压阻式、电容式、伺服(力平衡)、MEMS、位移传感器、速度传感器、振动传感器、陀螺仪、接近传感器、电传声器、水听器、电容传声器、驻极体电容传声器、动态传声器、带式传声器、碳粒传声器、压电传声器、光纤传声器、激光传声器、液体传声器、MEMS传声器。
许多触摸屏计算***内置传声器和加速度计(例如,用于语音和输入感应)。这些可以在不需要附加传感器的情况下使用,或可以与专门的传感器协同工作。
传感器可以捕获波形,波形是振动声学信号的时域表示。信号可被转换成其他形式。这包括对波形进行滤波(例如,卡尔曼滤波、指数移动平均、2kHz高通滤波、一欧罗滤波(OneEurofilter)、Savitzky-Golay滤波)。它还包括变换成其他表示(例如,小波变换、导数),包括频域表示(例如,频谱图、周期图、平均周期图法、傅立叶变换、最小二乘频谱分析、韦氏法、离散余弦变换(DCT)、快速折叠算法)。
以下触摸特征的可用性取决于所使用的触摸屏技术。分类器可以不使用这些特征和使用这些特征的全部或部分。这些特征可以包括触摸接触的位置(2D、或在曲面玻璃或其他非平面几何形状情况下3D)、触摸接触的大小(某些触摸技术提供具有长轴和短轴的触摸接触椭圆)、触摸接触的旋转、触摸接触的表面面积(例如,以平方毫米或像素为单位)、(某些触摸***上可获得的)触摸的压力、触摸的切变(“切应力(在文献中也称为“切向力”)由垂直于触摸屏的表面法线的力向量引起。这可能类似于法向应力——通常所说的压力——它由平行于表面法线的力向量”引起)、触摸接触的数量、触摸的电容(如果使用电容式触摸屏)、触摸的扫频电容(如果使用扫频电容式触摸屏)、触摸的扫频阻抗(如果使用扫频电容式触摸屏)、触摸的形状(某些触摸技术可以提供触摸的实际形状而不只是圆或椭圆)、手姿势的图像(如由例如光学传感器、具有照相机的漫射受光表面、近距离电容感应所成像的)。应注意的是,计算阶段还可以计算短时间段内上述特征中的一个或多个特征的导数,例如,触摸速度和压力速度。
对于某些实施例,信号的时域和频域表示(包括此类表示的一阶、二阶和三阶导数)可用作特征。对于某些实施例,时域和频域表示的滤波后的版本以及此类滤波后的版本的一阶、二阶和三阶导数也可被用作特征。
可在信号的时域和频域表示(包括此类表示的一阶、二阶和三阶导数)上并且进一步地在时域和频域表示的滤波后的版本以及此类滤波后的版本的一阶、二阶和三阶导数上计算以下特征:平均值、标准偏差、标准偏差(经整体振幅归一化)、方差、偏斜度、峰度、和、绝对值和、均方根(RMS)、峰值因数、离差、熵、功率和、质心、变差系数、交叉相关(即,滑动点积)、零交叉、季节性(即,周期性变化)、和DC偏置。可以使用以下方法执行用于一组已知标本信号的模板匹配得分:卷积、逆滤波匹配技术、和平方差(SSD)、动态时间规整、和弹性匹配。
可在频域表示(包括此类表示的一阶、二阶和三阶导数)上并且进一步地在频域表示的滤波后的版本以及此类滤波后的版本的一阶、二阶和三阶导数上计算以下特征:频谱矩心、频谱密度、球谐函数、总平均频谱能量、频带能量比(例如,对于每一倍频程)、对数频谱频带比(例如,对于每一对倍频程以及每一对三倍频程)、附加振动声学特征、基于线性预测的倒谱系数(LPCC)、感知线性预测(PLP)、倒谱系数、倒谱系数、梅尔频率倒谱系数(MFCC)、和频率相位(例如,如FFT所生成的)。
对于某些实施例,可在整个缓冲区(例如,1ms)的内容上并且还为子区域(例如,围绕波形的波峰、波形的末尾)计算所有上述特征。对于某些实施例,可以将所有上述振动声学特征组合用于形成混合特征,如例如比(例如,零交叉/频谱矩心)或差(零交叉——频谱矩心)。
分类引擎可使用任何数量的方法,包括但不限于基本启发法、决策树、支持向量机、随机森林、朴素贝叶斯、弹性匹配、动态时间规整、模板匹配、k均值聚类、K最近邻算法、神经网络、多层感知器、多项逻辑回归、高斯混合模型、和AdaBoost。
对于某些实施例,可以例如通过投票方案组合来自若干不同分类器的结果。还可以基于一个或多个特征使用不同的分类器。例如,可以采用两个分类器,一个用于处理具有高标准偏差的传感器波形,而另一个分类器用于处理具有低标准偏差的波形。
触摸屏100是电子视觉显示器,并且还作为提供补充或替代键盘、鼠标和/或其他类型设备的输入/输出设备。触摸屏100显示一个或多个交互式元件,如用于被设计成用于在计算***上执行特定功能的服务或应用的图形表示。使用使用者的手指部分(包括惯常的指尖)触摸交互式元件致使OS130激活与适合于所标识的使用者的交互式元件有关的应用或服务。手指在其肌肉运动能力及其解剖学组成两方面上为不同的附属器。由于骨密度、胖瘦感、皮肤质量、BMI等的差异,不同使用者的手指具有不同的振动声学属性。单个数字包含不同部分,如一个或多个指节、指尖、指垫和指甲。在激活触摸屏时倾向于使用相同手指的使用者可增加正确使用者标识的可能性。
指尖包括手指末端的手掌方面上的多肉块以及直到远端指间关节的手指侧面。它还包括手指的最顶端(即,远节指骨的远端尖端)。然而,指甲可能不被作为指尖定义部分包括在实施例中,因为这是独特的解剖学特征和区域。
指甲可能包括角蛋白(或人工指甲材料)的所有部分、覆盖手指的末端指骨的背侧方面的喇叭状包层。指关节可以包括围绕人手指的多骨关节的直接区域,包括拇指关节、以及主要和次要指节两者。多骨区域可以在围绕掌指关节和指间关节的1cm半径范围内。
当对象敲击某种材料时,振动声学波通过该材料或沿着该材料的表面向外传播。通常,交互式表面使用刚性材料,如塑料或玻璃,这两者快速地散布并忠实地保持信号。这样,当一根或多根手指触摸或接触触摸屏100的表面时,产生振动声学响应。对应的使用者手指的振动声学特性及其对应的独特解剖学特性为每个使用者产生独特的响应。
返回参照图1,触摸事件检测器110检测蕴含振动声学信号的触摸事件。例如,可以将触摸事件检测器110安排在触摸屏的后侧,从而使得可以捕获由触摸事件所引起的振动声学信号。触摸事件检测器110可通过由触摸事件而引起的振动声学信号的开始来触发。为了捕获触摸事件及随后的振动声学信号,触摸事件检测器110可以包括一个或多个冲击传感器、振动传感器、加速度计、应变计、或者声学传感器(如电容传声器、压电传声器、MEMS传声器)等。一旦触摸事件检测器110已经捕获了振动声学信号,振动声学分类器120处理振动声学信号来区分哪个使用者激活了触摸屏。
OS130运行计算***,这样使得可以符合振动声学信号的分类和相应使用者来激活功能。振动声学分类器120包括用于将振动声学信号分割成数字表示的分割单元122;用于将经数字化的振动声学信号转换成电信号的转换单元124;用于从电信号得出一系列特征的特征提取单元126;以及用于使用上述特征对每个使用者进行分类从而区分多个使用者的分类单元128。
分割单元122可以被配置成用于对振动声学信号进行采样,例如,在96kHz的采样率时使用振动声学信号的4096个样本的滑动窗口。转换单元124可以被配置成用于对所采样的取决于时间的振动声学信号执行例如傅立叶变换,以产生具有频域表示的电信号。例如,此窗口的傅立叶变换可以产生2048个频率功率频带。
振动声学分类器120可以被配置成用于将此数据下采样成附加向量(即,由十个附加向量组成的存储桶(bucket)),从而提供不同的混叠。此外,可从振动声学信号计算附加时域特征,如平均绝对振幅、总绝对振幅、绝对振幅的标准偏差、针对分割后的输入信号和傅立叶变换后的信号两者的质心、和零交叉。
特征提取单元126可以被配置成用于从振动声学信号的频域表示计算一系列特征,如冲击波形的基本频率。分类单元128可以被配置成用于使用这些特征来对振动声学信号进行分类从而区分什么使用者生成了触摸事件,这样使得计算***可以根据所分类的振动声学信号选择性地激活与所标识的使用者有关的功能。为了帮助分类操作,使用者可以为振动声学分类器120提供补充训练样本。对于某些实施例,可以用一种用于特征分类的支持向量机(SVM)实现分类单元128。SVM是具有相关联的学习算法的监督学习模型,这些学习算法分析数据并识别模式,以用于分类和回归分析。
图2A和图2B展示了示例性波形信号以及第一使用者的触摸事件的相应的频谱。图3A和图3B展示了示例性波形信号以及不同于第一使用者的第二使用者的触摸事件的相应的频谱。对于以不同冲击动作激活触摸屏的不同使用者来说,如图2A和图2B所示的与第一使用者和与第二使用者相关联的波形的差异与图3A和3B相比是典型的。
图4是根据本发明的示例性实施例的展示了可被执行用于区分触摸屏使用者的过程的流程图。如框402中所示,当使用者触摸触摸屏时,检测到触摸事件。触摸事件蕴含振动声学信号。在框404,基于在框402中的触摸事件的检测生成波形。在框406,将在框404中所生成的波形转换成另一形式。在框408,提取区别特征。在框410,将所提取的特征与特定使用者相关联。在常见架构中,其中有用于执行或帮助执行图4中所示的操作的算法的数据存储设备包括存储指令的主体(例如,软件)的机器可读介质。这些指令还可以在执行期间完全或至少部分地驻留在主机设备(例如,蜂窝电话、信息亭、或膝上型计算机)的存储器内或处理器内(例如,在处理器的高速缓冲存储器内)。存储器和处理器还构成机器可读介质。
本披露的这些和其他方面可通过各种类型的硬件、软件、固件等来实现。例如,本披露的某些特征可以至少部分地通过包括用于执行在此所描述的各种操作的程序指令、状态信息等的机器可读介质来实现。程序指令的示例包括机器代码(如由编译器所产生的)和文件(其包含可由计算机使用解释器执行的高级代码)两者。机器可读介质的示例包括但不限于磁介质如硬盘、软盘、和磁带;光介质如CD-ROM盘;磁光介质;以及专门被配置成用于存储和执行程序指令的硬件设备,例如,只读存储器(“ROM”)和随机存取存储器(“RAM”)。
任何上述实施例可单独使用,也可彼此以任何组合来一起使用。虽然各实施例可能已经受到了现有技术各种的可能在本说明书中的一处或多处进行讨论或暗示的不足的激发,但是这些实施例并不一定解决任何这些不足。换言之,不同的实施例可能解决本说明书中可能有所讨论的不同不足。某些实施例可能仅部分地解决了本说明书中可能有所讨论的某些不足或仅某个不足,并且某些实施例可能没有解决任何上述不足。
虽然在此已描述了各实施例,但应该理解的是它们仅仅是以举例的方式呈现,而不是限制。因此,本申请的广度和范围不应被在此所描述的任何实施例所限制,而是应当仅根据以下和以后提交的权利要求书及其等同物来限定。

Claims (21)

1.一种用于基于源自触摸事件声学和机械冲击的特征的表征来区分触摸屏使用者的装置;该装置包括:
一个触敏表面,该触敏表面用于检测来自至少一个使用者的一个触摸事件;
至少一个传感器,该传感器从此类触摸事件生成一个振动声学波形信号;
一个转换器,该转换器用于将该波形信号转换成至少一个域信号;
一个特征提取器,该特征提取器用于从所述域信号中提取多个区别特征;以及
一个分类单元,该分类单元使用所述提取器的这些区别特征将该域信号的特征与一个特定使用者相关联。
2.如权利要求1所述的装置,其中,所述至少一个传感器检测一个触摸事件的声学效果。
3.如权利要求1所述的装置,其中,所述至少一个传感器检测一个触摸事件的机械冲击效果。
4.如权利要求1所述的装置,其中,所述域信号是一个时域信号。
5.如权利要求1所述的装置,其中,所述域信号是一个频域信号。
6.如权利要求1所述的装置,其中,所述多个区别特征至少部分地取决于用于创建一个触摸事件的一根手指的物理特性。
7.如权利要求1所述的装置,其中,所述多个区别特征至少部分地取决于用于创建一个触摸事件的冲击的大小。
8.如权利要求1所述的装置,其中,所述至少一个传感器检测由所述触摸事件所发起的多个机械振动。
9.如权利要求1所述的装置,其中,所述至少一个传感器包括取自下组传感器的一个传感器,该组传感器由以下各项组成:冲击传感器、振动传感器、加速度计、应变计、压电设备和声学传感器。
10.如权利要求1所述的装置,其中,基于取自下组的一个特性的至少一个计算提取所述多个区别特征,该组由以下各项组成:平均值、标准偏差、方差、偏斜度、峰度、和、均方根、峰值因数、离差、熵、功率和、质心、变差系数、交叉相关、零交叉、季节性、DC偏置、频谱矩心、频谱密度、球谐函数、频谱能量、频带能量比、谱带比、倒谱系数和快速傅立叶变换内容。
11.一种用于基于源自触摸事件声学和机械冲击的特征的表征来区分触摸屏使用者的计算机实现的方法;该方法包括以下步骤:
在一个触敏表面上检测一个触摸事件;
使用检测此类触摸事件的至少一个传感器生成一个振动声学波形信号;
将该波形信号转换成至少一个域信号;
从所述域信号中提取多个区别特征;以及
对这些特征进行分类从而将该域信号的特征与一个特定使用者相关联。
12.如权利要求11所述的方法,其中,所述生成步骤使用所述至少一个传感器用于检测一个触摸事件的声学效果。
13.如权利要求11所述的方法,其中,所述生成步骤使用所述至少一个传感器用于检测一个触摸事件的机械冲击效果。
14.如权利要求11所述的方法,其中,所述域信号是一个时域信号。
15.如权利要求11所述的方法,其中,所述域信号是一个频域信号。
16.如权利要求11所述的方法,其中,所述多个区别特征至少部分地取决于用于创建一个触摸事件的一根手指的物理特性。
17.如权利要求11所述的方法,其中,所述多个区别特征至少部分地取决于用于创建一个触摸事件的冲击的大小。
18.如权利要求11所述的方法,其中,所述至少一个传感器检测由所述触摸事件所发起的多个机械振动。
19.如权利要求11所述的方法,其中,所述至少一个传感器包括取自下组传感器的一个传感器,该组传感器由以下各项组成:冲击传感器、振动传感器、加速度计、应变计、压电设备和声学传感器。
20.如权利要求11所述的方法,其中,基于取自下组的一个特性的至少一个计算提取所述多个区别特征,该组由以下各项组成:平均值、标准偏差、方差、偏斜度、峰度、和、均方根、峰值因数、离差、熵、功率和、质心、变差系数、交叉相关、零交叉、季节性、DC偏置、频谱矩心、频谱密度、球谐函数、频谱能量、频带能量比、谱带比、倒谱系数和快速傅立叶变换内容。
21.一种计算机可读介质,该计算机可读介质包含用于使用所检测的多个触摸屏事件将多个特定使用者与多个此类事件相关联的多个指令,其中,由一个处理器执行这些程序指令引起该处理器执行以下步骤:
使用检测此类触摸事件的至少一个传感器生成一个振动声学波形信号;
将该波形信号转换成至少一个域信号;
从所述转换后的波形信号中提取多个区别特征;以及
对这些特征进行分类从而将该域信号的特征与一个特定使用者相关联。
CN201510209998.0A 2014-09-11 2015-04-29 用于基于触摸事件分析来区分触摸屏使用者的方法和装置 Active CN105426713B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/483,150 US9329715B2 (en) 2014-09-11 2014-09-11 Method and apparatus for differentiating touch screen users based on touch event analysis
US14/483,150 2014-09-11

Publications (2)

Publication Number Publication Date
CN105426713A true CN105426713A (zh) 2016-03-23
CN105426713B CN105426713B (zh) 2018-10-16

Family

ID=55454743

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510209998.0A Active CN105426713B (zh) 2014-09-11 2015-04-29 用于基于触摸事件分析来区分触摸屏使用者的方法和装置

Country Status (4)

Country Link
US (2) US9329715B2 (zh)
EP (1) EP3191924B1 (zh)
CN (1) CN105426713B (zh)
WO (1) WO2016040010A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107924280A (zh) * 2015-08-20 2018-04-17 华为技术有限公司 用于双指关节触摸屏控制的***和方法
CN109189273A (zh) * 2018-11-06 2019-01-11 业成科技(成都)有限公司 触控事件处理方法、装置、计算机设备和存储介质
CN110109563A (zh) * 2018-02-01 2019-08-09 奇手公司 一种确定对象物相对于触敏表面的接触状态的方法及***
CN110209297A (zh) * 2018-02-28 2019-09-06 库卡德国有限公司 用于自动检查电子设备的至少一个功能的方法和装置
CN110363120A (zh) * 2019-07-01 2019-10-22 上海交通大学 基于振动信号的智能终端触碰认证方法及***
CN112099631A (zh) * 2020-09-16 2020-12-18 歌尔科技有限公司 一种电子设备及其控制方法、装置及介质
CN112154404A (zh) * 2018-05-21 2020-12-29 奥矽半导体技术有限公司 超声触摸和力输入检测
CN113544631A (zh) * 2019-03-07 2021-10-22 艾托有限责任公司 触摸检测设备及方法
CN114818839A (zh) * 2022-07-01 2022-07-29 之江实验室 一种基于深度学习的光纤传感水声信号识别方法及装置

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8346593B2 (en) 2004-06-30 2013-01-01 Experian Marketing Solutions, Inc. System, method, and software for prediction of attitudinal and message responsiveness
US9189109B2 (en) 2012-07-18 2015-11-17 Sentons Inc. Detection of type of object used to provide a touch contact input
US9639213B2 (en) 2011-04-26 2017-05-02 Sentons Inc. Using multiple signals to detect touch input
US11327599B2 (en) 2011-04-26 2022-05-10 Sentons Inc. Identifying a contact type
US10198097B2 (en) 2011-04-26 2019-02-05 Sentons Inc. Detecting touch input force
CN108762577A (zh) 2011-10-18 2018-11-06 卡内基梅隆大学 用于分类触敏表面上的触摸事件的方法和设备
US10248262B2 (en) 2011-11-18 2019-04-02 Sentons Inc. User interface interaction using touch input force
US11262253B2 (en) * 2017-08-14 2022-03-01 Sentons Inc. Touch input detection using a piezoresistive sensor
CN104169847B (zh) 2011-11-18 2019-03-12 森顿斯公司 局部触觉反馈
KR20140114766A (ko) 2013-03-19 2014-09-29 퀵소 코 터치 입력을 감지하기 위한 방법 및 장치
US9013452B2 (en) 2013-03-25 2015-04-21 Qeexo, Co. Method and system for activating different interactive functions using different types of finger contacts
US9612689B2 (en) 2015-02-02 2017-04-04 Qeexo, Co. Method and apparatus for classifying a touch event on a touchscreen as related to one of multiple function generating interaction layers and activating a function in the selected interaction layer
US10102536B1 (en) 2013-11-15 2018-10-16 Experian Information Solutions, Inc. Micro-geographic aggregation system
WO2015123081A1 (en) 2014-02-12 2015-08-20 Qeexo, Co Determining pitch and yaw for touchscreen interactions
US9576030B1 (en) 2014-05-07 2017-02-21 Consumerinfo.Com, Inc. Keeping up with the joneses
US11257117B1 (en) 2014-06-25 2022-02-22 Experian Information Solutions, Inc. Mobile device sighting location analytics and profiling system
US9329715B2 (en) 2014-09-11 2016-05-03 Qeexo, Co. Method and apparatus for differentiating touch screen users based on touch event analysis
US11619983B2 (en) 2014-09-15 2023-04-04 Qeexo, Co. Method and apparatus for resolving touch screen ambiguities
US9864453B2 (en) 2014-09-22 2018-01-09 Qeexo, Co. Method and apparatus for improving accuracy of touch screen event analysis by use of edge classification
US10606417B2 (en) 2014-09-24 2020-03-31 Qeexo, Co. Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns
US10712858B2 (en) 2014-09-25 2020-07-14 Qeexo, Co. Method and apparatus for classifying contacts with a touch sensitive device
US10282024B2 (en) 2014-09-25 2019-05-07 Qeexo, Co. Classifying contacts or associations with a touch sensitive device
US10445152B1 (en) 2014-12-19 2019-10-15 Experian Information Solutions, Inc. Systems and methods for dynamic report generation based on automatic modeling of complex data structures
EP3317752B1 (en) 2015-07-01 2022-12-21 Qeexo, Co. Determining pitch for proximity sensitive interactions
US10642404B2 (en) 2015-08-24 2020-05-05 Qeexo, Co. Touch sensitive device with multi-sensor stream synchronized data
US9767309B1 (en) 2015-11-23 2017-09-19 Experian Information Solutions, Inc. Access control system for implementing access restrictions of regulated database records while identifying and providing indicators of regulated database records matching validation criteria
KR102205369B1 (ko) * 2016-04-21 2021-01-19 애플 인크. 전자 디바이스를 위한 촉각적 사용자 인터페이스
WO2017186290A1 (en) * 2016-04-27 2017-11-02 Mogees Limited Method to recognize a gesture and corresponding device
US10311219B2 (en) * 2016-06-07 2019-06-04 Vocalzoom Systems Ltd. Device, system, and method of user authentication utilizing an optical microphone
US10007378B2 (en) * 2016-06-24 2018-06-26 Dell Products L.P. Information handling system touchscreen tool discrimination
WO2018039377A1 (en) * 2016-08-24 2018-03-01 Experian Information Solutions, Inc. Disambiguation and authentication of device users
US10908741B2 (en) 2016-11-10 2021-02-02 Sentons Inc. Touch input detection along device sidewall
US10573291B2 (en) 2016-12-09 2020-02-25 The Research Foundation For The State University Of New York Acoustic metamaterial
US10585522B2 (en) 2017-02-27 2020-03-10 Sentons Inc. Detection of non-touch inputs using a signature
US10003871B1 (en) * 2017-06-06 2018-06-19 David R. Hall Audio transmitting table
US11580829B2 (en) 2017-08-14 2023-02-14 Sentons Inc. Dynamic feedback for haptics
US11461442B2 (en) 2018-06-05 2022-10-04 Rutgers, The State University Of New Jersey Systems and methods for user input and authentication using vibration analysis
US10901529B2 (en) 2018-07-19 2021-01-26 Stmicroelectronics S.R.L. Double-tap event detection device, system and method
US11009989B2 (en) 2018-08-21 2021-05-18 Qeexo, Co. Recognizing and rejecting unintentional touch events associated with a touch sensitive device
US11009908B1 (en) * 2018-10-16 2021-05-18 Mcube, Inc. Portable computing device and methods
US11537229B2 (en) * 2019-01-17 2022-12-27 Beijing Taifang Technology Co., Ltd. Touch pad pressure detection method and apparatus, storage medium and computer device
US11451532B2 (en) * 2019-01-25 2022-09-20 Dell Products L.P. Behavioral biometrics and machine learning to secure website logins
US10942603B2 (en) 2019-05-06 2021-03-09 Qeexo, Co. Managing activity states of an application processor in relation to touch or hover interactions with a touch sensitive device
US11231815B2 (en) 2019-06-28 2022-01-25 Qeexo, Co. Detecting object proximity using touch sensitive surface sensing and ultrasonic sensing
US11682041B1 (en) 2020-01-13 2023-06-20 Experian Marketing Solutions, Llc Systems and methods of a tracking analytics platform
US11592423B2 (en) 2020-01-29 2023-02-28 Qeexo, Co. Adaptive ultrasonic sensing techniques and systems to mitigate interference
EP3933623A1 (en) 2020-07-02 2022-01-05 Nokia Technologies Oy Bioacoustic authentication

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101438218A (zh) * 2006-06-15 2009-05-20 诺基亚公司 具有虚拟小键盘的移动设备
CN101968696A (zh) * 2009-07-27 2011-02-09 索尼公司 感应用于操作触摸板的动作的类型
US8624878B2 (en) * 2010-01-20 2014-01-07 Apple Inc. Piezo-based acoustic and capacitive detection
US20140210788A1 (en) * 2011-10-18 2014-07-31 Carnegie Mellon University Method and Apparatus for Classifying Touch Events on a Touch Sensitive Surface

Family Cites Families (301)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2008028A (en) 1932-06-06 1935-07-16 Chrysler Corp Method of forming hard rubber coatings
US2430005A (en) 1942-06-01 1947-11-04 Ohio Crankshaft Co Differential heat treating
US3354531A (en) 1963-11-13 1967-11-28 Olin Mathieson Process for making hollow articles by differential heat treatment
US4686332A (en) 1986-06-26 1987-08-11 International Business Machines Corporation Combined finger touch and stylus detection system for use on the viewing surface of a visual display device
US4561105A (en) 1983-01-19 1985-12-24 Communication Intelligence Corporation Complex pattern recognition method and system
JPS606497A (ja) 1983-06-27 1985-01-14 オーベクス株式会社 合成樹脂製ペン体の製造方法
JP2827612B2 (ja) 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
US5483261A (en) 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5903668A (en) 1992-05-27 1999-05-11 Apple Computer, Inc. Method and apparatus for recognizing handwritten words
US5544265A (en) 1992-05-27 1996-08-06 Apple Computer, Inc. Shape recognizer for graphical computer systems
WO1994004992A1 (en) 1992-08-20 1994-03-03 Communication Intelligence Corporation A method for dynamic reconstruction of handwritten data
US5596656B1 (en) 1993-10-06 2000-04-25 Xerox Corp Unistrokes for computerized interpretation of handwriting
US6366697B1 (en) 1993-10-06 2002-04-02 Xerox Corporation Rotationally desensitized unistroke handwriting recognition
US20020126161A1 (en) 1994-07-05 2002-09-12 Hitachi, Ltd. Information processing system
US5666438A (en) 1994-07-29 1997-09-09 Apple Computer, Inc. Method and apparatus for recognizing handwriting of different users of a pen-based computer system
US5625818A (en) 1994-09-30 1997-04-29 Apple Computer, Inc. System for managing local database updates published to different online information services in different formats from a central platform
JPH0969137A (ja) 1995-08-31 1997-03-11 Toshiba Corp 部首抽出方法、部首単位文字認識方法及びその装置
US6028593A (en) 1995-12-01 2000-02-22 Immersion Corporation Method and apparatus for providing simulated physical interactions within computer generated environments
US5867163A (en) 1995-12-01 1999-02-02 Silicon Graphics, Inc. Graphical user interface for defining and invoking user-customized tool shelf execution sequence
US6707451B1 (en) 1996-09-11 2004-03-16 Pilot Precision Kabushiki Kaisha Input pen
JP3624070B2 (ja) 1997-03-07 2005-02-23 キヤノン株式会社 座標入力装置及びその制御方法
US6118435A (en) 1997-04-10 2000-09-12 Idec Izumi Corporation Display unit with touch panel
JP3304290B2 (ja) 1997-06-26 2002-07-22 シャープ株式会社 ペン入力装置及びペン入力方法及びペン入力制御プログラムを記録したコンピュータ読み取り可能な記録媒体
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
IL137478A (en) 1998-01-26 2005-11-20 Westerman Wayne Method and apparatus for integrating manual input
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US7084884B1 (en) 1998-11-03 2006-08-01 Immersion Corporation Graphical object interactions
US6337698B1 (en) 1998-11-20 2002-01-08 Microsoft Corporation Pen-based interface for a notepad computer
US6222465B1 (en) 1998-12-09 2001-04-24 Lucent Technologies Inc. Gesture-based computer interface
US6246395B1 (en) 1998-12-17 2001-06-12 Hewlett-Packard Company Palm pressure rejection method and apparatus for touchscreens
US7212197B1 (en) 1999-02-01 2007-05-01 California Institute Of Technology Three dimensional surface drawing controlled by hand motion
EP1194872A1 (en) 1999-06-11 2002-04-10 CCI Europe A/S (Stibo A/S) A content management computer system for managing publishing content objects
US6492979B1 (en) 1999-09-07 2002-12-10 Elo Touchsystems, Inc. Dual sensor touchscreen utilizing projective-capacitive and force touch sensors
US6504530B1 (en) 1999-09-07 2003-01-07 Elo Touchsystems, Inc. Touch confirming touchscreen utilizing plural touch sensors
US7050955B1 (en) 1999-10-01 2006-05-23 Immersion Corporation System, method and data structure for simulated interaction with graphical objects
US6772396B1 (en) 1999-10-07 2004-08-03 Microsoft Corporation Content distribution system for network environments
US6643663B1 (en) 1999-10-08 2003-11-04 The Belo Company Method and system for operating a content management system
US20060031746A1 (en) 1999-11-11 2006-02-09 Toepfer John R Publishing architecture system and method
US6748425B1 (en) 2000-01-04 2004-06-08 International Business Machines Corporation System and method for browser creation and maintenance of forms
US6671757B1 (en) 2000-01-26 2003-12-30 Fusionone, Inc. Data transfer and synchronization system
US6943665B2 (en) 2000-03-21 2005-09-13 T. Eric Chornenky Human machine interface
FR2811107B1 (fr) 2000-06-29 2002-10-18 Jean Pierre Nikolovski Plaque acoustique interactive de precision
US6803906B1 (en) 2000-07-05 2004-10-12 Smart Technologies, Inc. Passive touch system and method of detecting user input
KR20040041082A (ko) 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
US7870107B2 (en) 2000-08-04 2011-01-11 Agile Software Corporation Data management system and method for propagating product manufacturing information to disparate information systems
US7032227B2 (en) 2000-08-14 2006-04-18 Twin Communications Of America, Inc. Portable operating environment for information devices
CA2424713C (en) 2000-08-21 2007-12-04 Thoughtslinger Corporation Simultaneous multi-user document editing system
US7443396B2 (en) 2000-11-29 2008-10-28 National Instruments Corporation Instrument having a virtual magnifying glass for displaying magnified portions of a signal waveform
US6801192B2 (en) 2000-12-13 2004-10-05 Wacom Company Ltd. Pen-shaped coordinate pointing device
JP3988476B2 (ja) 2001-03-23 2007-10-10 セイコーエプソン株式会社 座標入力装置及び表示装置
US7519546B2 (en) 2001-04-30 2009-04-14 General Electric Company Maintaining synchronization of information published to multiple subscribers
GB0116310D0 (en) 2001-07-04 2001-08-29 New Transducers Ltd Contact sensitive device
WO2003017244A1 (en) 2001-08-17 2003-02-27 Multidigit, Inc. System and method for selecting actions based on the identification of user's fingers
US20030132922A1 (en) 2002-01-17 2003-07-17 Harald Philipp Touch screen detection apparatus
EP1481359B9 (en) 2002-02-06 2009-08-12 Soundtouch Limited Touch pad
US7643015B2 (en) 2002-05-24 2010-01-05 Massachusetts Institute Of Technology Systems and methods for tracking impacts
US8082241B1 (en) 2002-06-10 2011-12-20 Thomson Reuters (Scientific) Inc. System and method for citation processing, presentation and transport
US20060184617A1 (en) 2005-02-11 2006-08-17 Nicholas Frank C Method and system for the creating, managing, and delivery of feed formatted content
US7058902B2 (en) 2002-07-30 2006-06-06 Microsoft Corporation Enhanced on-object context menus
US20040021681A1 (en) 2002-07-30 2004-02-05 Liao Chin-Hua Arthur Dual-touch-screen mobile computer
US7242387B2 (en) 2002-10-18 2007-07-10 Autodesk, Inc. Pen-mouse system
JP4071620B2 (ja) 2002-12-27 2008-04-02 株式会社日立製作所 情報処理装置
US7098896B2 (en) 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
US20040225730A1 (en) 2003-01-17 2004-11-11 Brown Albert C. Content manager integration
US20050289461A1 (en) 2003-05-23 2005-12-29 Manoel Amado System and method for digital content processing and distribution
JP2005018611A (ja) 2003-06-27 2005-01-20 Yamatake Corp コマンド入力装置及びコマンド入力方法
US8200775B2 (en) 2005-02-01 2012-06-12 Newsilike Media Group, Inc Enhanced syndication
US8952895B2 (en) 2011-06-03 2015-02-10 Apple Inc. Motion-based device operations
US20050131778A1 (en) 2003-12-11 2005-06-16 International Business Machines Corporation Customized subscription builder
US7277087B2 (en) 2003-12-31 2007-10-02 3M Innovative Properties Company Touch sensing with touch down and lift off sensitivity
US8020106B2 (en) 2004-03-15 2011-09-13 Yahoo! Inc. Integration of personalized portals with web content syndication
US7982724B2 (en) 2004-05-20 2011-07-19 3M Innovative Properties Company Multiple region vibration-sensing touch sensor
US7593593B2 (en) 2004-06-16 2009-09-22 Microsoft Corporation Method and system for reducing effects of undesired signals in an infrared imaging system
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7847789B2 (en) 2004-11-23 2010-12-07 Microsoft Corporation Reducing accidental touch-sensitive device activation
WO2006070044A1 (en) 2004-12-29 2006-07-06 Nokia Corporation A method and a device for localizing a sound source and performing a related action
US7499039B2 (en) 2005-01-10 2009-03-03 3M Innovative Properties Company Iterative method for determining touch location
CN101576780A (zh) 2005-01-30 2009-11-11 史翠克有限公司 电脑鼠标周边装置
US8620988B2 (en) 2005-03-23 2013-12-31 Research In Motion Limited System and method for processing syndication information for a mobile device
US8661459B2 (en) 2005-06-21 2014-02-25 Microsoft Corporation Content syndication platform
KR100677613B1 (ko) 2005-09-09 2007-02-02 삼성전자주식회사 멀티미디어 기기의 동작을 제어하는 방법 및 그 장치
US7728316B2 (en) 2005-09-30 2010-06-01 Apple Inc. Integrated proximity sensor and light sensor
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US8018579B1 (en) 2005-10-21 2011-09-13 Apple Inc. Three-dimensional imaging and display system
US20070100959A1 (en) 2005-10-28 2007-05-03 Yahoo! Inc. Customizing RSS content for use over a network
US20070109279A1 (en) 2005-11-15 2007-05-17 Tyco Electronics Raychem Gmbh Method and apparatus for identifying locations of ambiguous multiple touch events
US20070126716A1 (en) 2005-11-17 2007-06-07 Jonathan Haverly Digital pen
US8725683B2 (en) 2006-01-13 2014-05-13 Microsoft Corporation RSS feed generation using objects
US20070192674A1 (en) 2006-02-13 2007-08-16 Bodin William K Publishing content through RSS feeds
US20070245020A1 (en) 2006-04-18 2007-10-18 Yahoo! Inc. Publishing scheduler for online content feeds
US7966263B2 (en) 2006-05-04 2011-06-21 First Data Corporation Wireless phone RF presentation instrument with sensor control
US7917848B2 (en) 2006-06-14 2011-03-29 Family Learn LLC Online publishing tools
US8086971B2 (en) 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US20080005666A1 (en) 2006-06-29 2008-01-03 Making Everlasting Memories, Llc System and method for publishing information and content
US9069417B2 (en) 2006-07-12 2015-06-30 N-Trig Ltd. Hover and touch detection for digitizer
US8180114B2 (en) 2006-07-13 2012-05-15 Northrop Grumman Systems Corporation Gesture recognition interface system with vertical display
US7813774B2 (en) 2006-08-18 2010-10-12 Microsoft Corporation Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad
US8230361B2 (en) 2006-09-28 2012-07-24 Google Inc. Content feed user interface
EP1909162A1 (en) 2006-10-02 2008-04-09 Koninklijke Philips Electronics N.V. System for virtually drawing on a physical surface
US20080103906A1 (en) 2006-10-26 2008-05-01 Gurvinder Singh Online publishing of multimedia content
US8015189B2 (en) 2006-11-08 2011-09-06 Yahoo! Inc. Customizable connections between media and meta-data via feeds
KR100790896B1 (ko) 2006-11-17 2008-01-03 삼성전자주식회사 촬상부의 움직임을 이용한 어플리케이션의 제어 방법 및장치
US9417758B2 (en) 2006-11-21 2016-08-16 Daniel E. Tsai AD-HOC web content player
US20080155118A1 (en) 2006-12-21 2008-06-26 International Business Machines Corporation Really simple syndication (rss) feed customization
US8054296B2 (en) 2007-01-03 2011-11-08 Apple Inc. Storing baseline information in EEPROM
US7643010B2 (en) 2007-01-03 2010-01-05 Apple Inc. Peripheral pixel noise reduction
US8130203B2 (en) 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
US7876310B2 (en) 2007-01-03 2011-01-25 Apple Inc. Far-field input identification
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
WO2008095137A2 (en) 2007-01-31 2008-08-07 Perceptive Pixel, Inc. Methods of interfacing with multi-point input devices and multi-point input systems employing interfacing techniques
US8478587B2 (en) 2007-03-16 2013-07-02 Panasonic Corporation Voice analysis device, voice analysis method, voice analysis program, and system integration circuit
US8130202B2 (en) 2007-05-01 2012-03-06 International Business Machines Corporation Infrared touch screen gated by touch force
US8144126B2 (en) 2007-05-07 2012-03-27 Cypress Semiconductor Corporation Reducing sleep current in a capacitance sensing system
US20080288347A1 (en) 2007-05-18 2008-11-20 Technorati, Inc. Advertising keyword selection based on real-time data
US7916126B2 (en) 2007-06-13 2011-03-29 Apple Inc. Bottom-up watershed dataflow method and region-specific segmentation based on historic data to identify patches on a touch sensor panel
US7693806B2 (en) 2007-06-21 2010-04-06 Microsoft Corporation Classification using a cascade approach
US7911453B2 (en) 2007-06-29 2011-03-22 Microsoft Corporation Creating virtual replicas of physical objects
US9041659B2 (en) 2007-07-26 2015-05-26 N-Trig Ltd. System and method for diagnostics of a grid based digitizer
US8564574B2 (en) 2007-09-18 2013-10-22 Acer Incorporated Input apparatus with multi-mode switching function
US8600816B2 (en) 2007-09-19 2013-12-03 T1visions, Inc. Multimedia, multiuser system and associated methods
JP5372000B2 (ja) 2007-10-11 2013-12-18 エヌ−トリグ リミテッド デジタイザのためのジェスチャ検出
DE602007001536D1 (de) 2007-11-02 2009-08-20 Research In Motion Ltd Elektronische Vorrichtung und Touchscreen
US8069142B2 (en) 2007-12-06 2011-11-29 Yahoo! Inc. System and method for synchronizing data on a network
GB0724005D0 (en) 2007-12-07 2008-01-16 Univ Glasgow Controller
GB0724149D0 (en) * 2007-12-11 2008-01-23 New Transducers Ltd Touch-sensitive device
US8175728B2 (en) 2007-12-13 2012-05-08 Georgia Tech Research Corporation Detecting user gestures with a personal mobile communication device
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US8413075B2 (en) 2008-01-04 2013-04-02 Apple Inc. Gesture movies
US20090232355A1 (en) 2008-03-12 2009-09-17 Harris Corporation Registration of 3d point cloud data using eigenanalysis
US9019237B2 (en) 2008-04-06 2015-04-28 Lester F. Ludwig Multitouch parameter and gesture user interface employing an LED-array tactile sensor that can also operate as a display
US8326796B2 (en) 2008-04-15 2012-12-04 International Business Machines Corporation Data retrieval and data feed generation from data sources
US8125469B2 (en) 2008-04-18 2012-02-28 Synaptics, Inc. Passive stylus for capacitive sensors
CN101339477B (zh) 2008-05-07 2012-04-18 骆航 一种声波接触板***及其多次扫描的控制方法
EP2289261A4 (en) 2008-06-18 2013-10-02 Blackberry Ltd METHOD AND SYSTEM FOR REPEATING MOBILE CONTENT
US8487884B2 (en) 2008-06-24 2013-07-16 Freescale Semiconductor, Inc. Touch screen detection and diagnostics
US8154524B2 (en) 2008-06-24 2012-04-10 Microsoft Corporation Physics simulation-based interaction for surface computing
US8169414B2 (en) 2008-07-12 2012-05-01 Lim Seung E Control of electronic games via finger angle using a high dimensional touchpad (HDTP) touch user interface
US8345014B2 (en) 2008-07-12 2013-01-01 Lester F. Ludwig Control of the operating system on a computing device via finger angle using a high dimensional touchpad (HDTP) touch user interface
US8743091B2 (en) 2008-07-31 2014-06-03 Apple Inc. Acoustic multi-touch sensor panel
US8909810B2 (en) 2008-08-05 2014-12-09 Isabella Products, Inc. Systems and methods for multimedia content sharing
WO2010024029A1 (ja) 2008-08-29 2010-03-04 日本電気株式会社 コマンド入力装置および携帯用情報機器とコマンド入力方法
US10185356B2 (en) 2008-08-29 2019-01-22 Nec Corporation Information input device, information input method, and information input program
US8269744B2 (en) 2008-09-05 2012-09-18 Mitsubishi Electric Corporation Touch screen, touch panel and display device
EP2329419A4 (en) 2008-09-15 2016-01-13 James A Aman AUTOMATED SESSION RECORDING WITH RULE-BASED INDEXING, ANALYSIS AND EXPRESSION OF CONTENT
US8477463B2 (en) 2008-10-02 2013-07-02 Lsi Corporation Vibration based user input for mobile devices
US20100123666A1 (en) 2008-11-19 2010-05-20 Sony Ericsson Mobile Communications Ab User-modifiable casing for portable communication devices
EP3232315B1 (en) 2008-11-25 2021-08-25 Samsung Electronics Co., Ltd. Device and method for providing a user interface
US9477396B2 (en) 2008-11-25 2016-10-25 Samsung Electronics Co., Ltd. Device and method for providing a user interface
CN102239068B (zh) 2008-12-04 2013-03-13 三菱电机株式会社 显示输入装置
EP2202619A1 (en) 2008-12-23 2010-06-30 Research In Motion Limited Portable electronic device including tactile touch-sensitive input device and method of controlling same
JP4697558B2 (ja) 2009-03-09 2011-06-08 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
US8170346B2 (en) 2009-03-14 2012-05-01 Ludwig Lester F High-performance closed-form single-scan calculation of oblong-shape rotation angles from binary images of arbitrary size using running sums
JP4734435B2 (ja) 2009-03-23 2011-07-27 株式会社スクウェア・エニックス タッチパネル式ディスプレイを持った携帯型ゲーム装置
US20100251112A1 (en) 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
US9245033B2 (en) 2009-04-02 2016-01-26 Graham Holdings Company Channel sharing
US20100265185A1 (en) 2009-04-17 2010-10-21 Nokia Corporation Method and Apparatus for Performing Operations Based on Touch Inputs
JP5554517B2 (ja) 2009-04-22 2014-07-23 富士通コンポーネント株式会社 タッチパネルの位置検出方法及びタッチパネル装置
US20100274622A1 (en) 2009-04-28 2010-10-28 Kennedy Meghan J System and Method for Publishing collaboration
US8224392B2 (en) 2009-04-29 2012-07-17 Lg Electronics Inc. Mobile terminal capable of recognizing fingernail touch and method of controlling the operation thereof
US8154529B2 (en) 2009-05-14 2012-04-10 Atmel Corporation Two-dimensional touch sensors
US8386963B2 (en) 2009-05-28 2013-02-26 Microsoft Corporation Virtual inking using gesture recognition
US8345707B2 (en) 2009-06-03 2013-01-01 Voxer Ip Llc Method for synchronizing data maintained at a plurality of nodes
JP5158023B2 (ja) 2009-06-09 2013-03-06 富士通株式会社 入力装置、入力方法及びコンピュータプログラム
FR2946660B1 (fr) 2009-06-10 2011-07-22 Inst Francais Du Petrole Procede de reformage pregeneratif des essences comportant le recyclage d'au moins une partie de l'effluent de la phase de reduction du catalyseur.
US20110003550A1 (en) 2009-07-03 2011-01-06 Sony Ericsson Mobile Communications Ab Tactile input for accessories
US8723827B2 (en) 2009-07-28 2014-05-13 Cypress Semiconductor Corporation Predictive touch surface scanning
FR2948787B1 (fr) 2009-07-29 2011-09-09 Commissariat Energie Atomique Dispositif et procede de localisation d'un contact localement deformant sur une surface tactile deformable d'un objet
US8275590B2 (en) 2009-08-12 2012-09-25 Zugara, Inc. Providing a simulation of wearing items such as garments and/or accessories
US8441790B2 (en) 2009-08-17 2013-05-14 Apple Inc. Electronic device housing as acoustic input device
US8269511B2 (en) 2009-09-08 2012-09-18 Synaptics Incorporated Sensing and defining an input object
US20110057885A1 (en) 2009-09-08 2011-03-10 Nokia Corporation Method and apparatus for selecting a menu item
US9696856B2 (en) 2009-09-29 2017-07-04 Elo Touch Solutions, Inc. Method and apparatus for detecting simultaneous touch events on a bending-wave touchscreen
US8514187B2 (en) 2009-09-30 2013-08-20 Motorola Mobility Llc Methods and apparatus for distinguishing between touch system manipulators
US8970507B2 (en) 2009-10-02 2015-03-03 Blackberry Limited Method of waking up and a portable electronic device configured to perform the same
KR20110061227A (ko) 2009-12-01 2011-06-09 삼성전기주식회사 햅틱디바이스
US8421634B2 (en) 2009-12-04 2013-04-16 Microsoft Corporation Sensing mechanical energy to appropriate the body for data input
GB2468742B (en) 2009-12-22 2011-01-12 Celona Technologies Ltd Error prevention for data replication
US8232990B2 (en) 2010-01-05 2012-07-31 Apple Inc. Working with 3D objects
US8432368B2 (en) 2010-01-06 2013-04-30 Qualcomm Incorporated User interface methods and systems for providing force-sensitive input
US8842096B2 (en) 2010-01-08 2014-09-23 Crayola Llc Interactive projection system
US8487889B2 (en) 2010-01-15 2013-07-16 Apple Inc. Virtual drafting tools
US8875038B2 (en) 2010-01-19 2014-10-28 Collarity, Inc. Anchoring for content synchronization
KR101678549B1 (ko) 2010-02-02 2016-11-23 삼성전자주식회사 표면 음향 신호를 이용한 유저 인터페이스 제공 장치 및 방법, 유저 인터페이스를 구비한 디바이스
US8531414B2 (en) 2010-02-03 2013-09-10 Bump Technologies, Inc. Bump suppression
US20120056846A1 (en) 2010-03-01 2012-03-08 Lester F. Ludwig Touch-based user interfaces employing artificial neural networks for hdtp parameter and symbol derivation
US10146427B2 (en) 2010-03-01 2018-12-04 Nri R&D Patent Licensing, Llc Curve-fitting approach to high definition touch pad (HDTP) parameter extraction
US9003334B2 (en) 2010-03-05 2015-04-07 Adobe Systems Incorporated Editing content using multiple touch inputs
US8327029B1 (en) 2010-03-12 2012-12-04 The Mathworks, Inc. Unified software construct representing multiple synchronized hardware systems
US20110231290A1 (en) 2010-03-17 2011-09-22 Ebyline, Inc. Online marketplace portal for content publishers and content creators
US8738563B2 (en) 2010-03-28 2014-05-27 International Business Machines Corporation Comparing data series associated with two systems to identify hidden similarities between them
US8326880B2 (en) 2010-04-05 2012-12-04 Microsoft Corporation Summarizing streams of information
US8996563B2 (en) 2010-04-06 2015-03-31 Tokutek, Inc. High-performance streaming dictionary
US20110248948A1 (en) 2010-04-08 2011-10-13 Research In Motion Limited Touch-sensitive device and method of control
US9092125B2 (en) 2010-04-08 2015-07-28 Avaya Inc. Multi-mode touchscreen user interface for a multi-state touchscreen device
US8576253B2 (en) 2010-04-27 2013-11-05 Microsoft Corporation Grasp simulation of a virtual object
US8595234B2 (en) 2010-05-17 2013-11-26 Wal-Mart Stores, Inc. Processing data feeds
EP2583159B1 (en) 2010-06-21 2017-05-31 Microsoft Technology Licensing, LLC System and method for finger resolution in touch screens
US8907929B2 (en) * 2010-06-29 2014-12-09 Qualcomm Incorporated Touchless sensing and gesture recognition using continuous wave ultrasound signals
US8412689B2 (en) 2010-07-07 2013-04-02 Microsoft Corporation Shared log-structured multi-version transactional datastore with metadata to enable melding trees
CN102314295A (zh) 2010-07-08 2012-01-11 富泰华工业(深圳)有限公司 屏幕解锁装置及方法
US8754862B2 (en) 2010-07-11 2014-06-17 Lester F. Ludwig Sequential classification recognition of gesture primitives and window-based parameter smoothing for high dimensional touchpad (HDTP) user interfaces
FR2962844B1 (fr) 2010-07-16 2013-08-30 Commissariat Energie Atomique Dispositif d'aimant supraconducteur compact
US9459733B2 (en) 2010-08-27 2016-10-04 Inputdynamics Limited Signal processing systems
US8630462B2 (en) 2010-08-31 2014-01-14 Activate Systems, Inc. Methods and apparatus for improved motion capture
US8495085B2 (en) 2010-09-27 2013-07-23 International Business Machines Corporation Supporting efficient partial update of hierarchically structured documents based on record storage
US9122341B2 (en) 2010-11-08 2015-09-01 Microsoft Technology Licensing, Llc Resolving merged touch contacts
KR101314262B1 (ko) 2010-11-11 2013-10-14 (주) 에스엔아이솔라 시각 장애인에 의한 객체 조작이 가능한 터치스크린 장치 및 그 장치에서의 객체 조작 방법
US20120120000A1 (en) 2010-11-12 2012-05-17 Research In Motion Limited Method of interacting with a portable electronic device
US8884916B2 (en) 2010-12-09 2014-11-11 Synaptics Incorporated System and method for determining user input using polygons
US8655889B2 (en) 2010-12-10 2014-02-18 Microsoft Corporation Autonomous mobile blogging
US9244545B2 (en) 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
US8988398B2 (en) 2011-02-11 2015-03-24 Microsoft Corporation Multi-touch input device with orientation sensing
US8660978B2 (en) 2010-12-17 2014-02-25 Microsoft Corporation Detecting and responding to unintentional contact with a computing device
CN102153776B (zh) 2011-01-04 2013-04-03 沈勇 采用高分子量聚烯烃制备多孔薄膜的方法及其产品和应用
AU2012214445A1 (en) 2011-02-08 2013-08-01 Haworth, Inc. Multimodal touchscreen interaction apparatuses, methods and systems
KR101220633B1 (ko) 2011-03-04 2013-01-10 한국과학기술원 소리를 이용한 터치세기 검출방법, 이를 위한 입력장치 및 사용자 단말
CA2802746C (en) 2011-03-04 2014-08-19 Scribble Technologies Inc. System and methods for facilitating the synchronization of data
US9182882B2 (en) 2011-04-12 2015-11-10 Autodesk, Inc. Dynamic creation and modeling of solid models
US20120280927A1 (en) 2011-05-04 2012-11-08 Ludwig Lester F Simple touch interface and hdtp grammars for rapid operation of physical computer aided design (cad) systems
JP5803249B2 (ja) 2011-05-06 2015-11-04 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9898122B2 (en) 2011-05-12 2018-02-20 Google Technology Holdings LLC Touch-screen device and method for detecting and ignoring false touch inputs near an edge of the touch-screen device
US8773374B2 (en) 2011-05-13 2014-07-08 Blackberry Limited Identification of touch point on touch screen device
TWI478041B (zh) 2011-05-17 2015-03-21 Elan Microelectronics Corp 於觸控面板上識別手掌區域方法及其更新方法
US8896555B2 (en) 2011-05-20 2014-11-25 Robert H Duffield Touch alphabet and communication system
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US8890823B2 (en) 2012-01-09 2014-11-18 Motorola Mobility Llc System and method for reducing occurrences of unintended operations in an electronic device
US8776213B2 (en) 2011-07-07 2014-07-08 Bottomline Technologies (De), Inc. Mobile application security system and method
US20130009896A1 (en) 2011-07-09 2013-01-10 Lester F. Ludwig 3d finger posture detection and gesture recognition on touch surfaces
US8199126B1 (en) 2011-07-18 2012-06-12 Google Inc. Use of potential-touch detection to improve responsiveness of devices
US9075561B2 (en) 2011-07-29 2015-07-07 Apple Inc. Systems, methods, and computer-readable media for managing collaboration on a virtual work of art
US9052772B2 (en) 2011-08-10 2015-06-09 Lester F. Ludwig Heuristics for 3D and 6D touch gesture touch parameter calculations for high-dimensional touch parameter (HDTP) user interfaces
US9030498B2 (en) 2011-08-15 2015-05-12 Apple Inc. Combining explicit select gestures and timeclick in a non-tactile three dimensional user interface
JP5911961B2 (ja) 2011-09-30 2016-04-27 インテル コーポレイション 意図的でないタッチセンサへの接触を排除するモバイルデバイス
US9361342B2 (en) 2011-10-10 2016-06-07 Hewlett Packard Enterprise Development Lp Query to streaming data
JP5565399B2 (ja) 2011-10-24 2014-08-06 ヤマハ株式会社 電子音響信号発生装置およびその制御方法を実現するためのプログラム
US8769524B2 (en) 2011-12-09 2014-07-01 Disney Enterprises, Inc. HTML directed adaptive features for mobile applications
US20130179773A1 (en) 2011-12-12 2013-07-11 Yu-Tai Lee Method for online editing and publishing and device thereof
WO2013095679A1 (en) 2011-12-23 2013-06-27 Intel Corporation Computing system utilizing coordinated two-hand command gestures
US20130176270A1 (en) 2012-01-09 2013-07-11 Broadcom Corporation Object classification for touch panels
KR20130102298A (ko) 2012-03-07 2013-09-17 주식회사 팬택 휴대용 단말기 및 휴대용 단말기의 디스플레이 제어 방법
US9046958B2 (en) 2012-03-15 2015-06-02 Nokia Technologies Oy Method, apparatus and computer program product for user input interpretation and input error mitigation
US11169611B2 (en) 2012-03-26 2021-11-09 Apple Inc. Enhanced virtual touchpad
US9430107B2 (en) 2012-03-30 2016-08-30 Microchip Technology Incorporated Determining touch locations and forces thereto on a touch and force sensing surface
KR101871714B1 (ko) 2012-04-02 2018-06-27 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8814674B2 (en) 2012-05-24 2014-08-26 Supercell Oy Graphical user interface for a gaming system
CN103376932B (zh) 2012-04-26 2017-08-18 富泰华工业(深圳)有限公司 防误操作***及方法
US20130285942A1 (en) 2012-04-26 2013-10-31 Acer Incorporated Touch detection method and touch control device using the same
TWI514231B (zh) 2012-05-18 2015-12-21 Egalax Empia Technology Inc 電容式觸摸屏的偵測裝置與方法
US8902183B2 (en) 2012-05-21 2014-12-02 International Business Machines Corporation Display devices and methods for detecting user-intended touch input
US20130328813A1 (en) 2012-06-11 2013-12-12 Inputek Co., Ltd. Unlocking Mechanism for a Touch Screen Device
CN102789362A (zh) 2012-06-29 2012-11-21 鸿富锦精密工业(深圳)有限公司 电子设备及其智能计算控制方法
US10437392B2 (en) 2012-07-05 2019-10-08 Samsung Electronics Co., Ltd. Apparatus and method for detecting hard and soft touch by using acoustic sensors
US9513727B2 (en) 2012-07-18 2016-12-06 Sentons Inc. Touch input surface microphone
WO2014017777A1 (en) 2012-07-26 2014-01-30 Lg Electronics Inc. Mobile terminal and control method thereof
JP2014043548A (ja) 2012-07-31 2014-03-13 Nitto Denko Corp 粘着剤組成物、粘着剤層、粘着シート及び光学フィルム
IL221862A (en) * 2012-09-10 2015-03-31 Elbit Systems Ltd Attacking a physical touch event on optical touch screens
CN108710406B (zh) 2012-09-18 2021-10-08 谷歌有限责任公司 姿势适应选择
US9164658B2 (en) 2012-10-12 2015-10-20 Cellco Partnership Flexible selection tool for mobile devices
US20140104191A1 (en) 2012-10-17 2014-04-17 Perceptive Pixel, Inc. Input Classification for Multi-Touch Systems
US9632605B2 (en) 2012-10-17 2017-04-25 Perceptive Pixel, Inc. Input classification for multi-touch systems
US9552673B2 (en) 2012-10-17 2017-01-24 Microsoft Technology Licensing, Llc Grasping virtual objects in augmented reality
US20140168141A1 (en) 2012-12-18 2014-06-19 Logitech Europe S.A. Method and system for discriminating stylus and touch interactions
US9019244B2 (en) 2013-02-28 2015-04-28 Qeexo, Co. Input tools having viobro-acoustically distinct regions and computing device for use with the same
KR102118381B1 (ko) 2013-03-06 2020-06-04 엘지전자 주식회사 이동 단말기
CN103150019B (zh) 2013-03-12 2016-12-28 深圳市国华识别科技开发有限公司 一种手写输入***及方法
US9436282B2 (en) 2013-03-14 2016-09-06 Immersion Corporation Contactor-based haptic feedback generation
US9122332B2 (en) 2013-03-15 2015-09-01 Cellco Partnership Automatic detection for touch through glove
KR20140114766A (ko) 2013-03-19 2014-09-29 퀵소 코 터치 입력을 감지하기 위한 방법 및 장치
US9612689B2 (en) 2015-02-02 2017-04-04 Qeexo, Co. Method and apparatus for classifying a touch event on a touchscreen as related to one of multiple function generating interaction layers and activating a function in the selected interaction layer
US9013452B2 (en) 2013-03-25 2015-04-21 Qeexo, Co. Method and system for activating different interactive functions using different types of finger contacts
JP5983503B2 (ja) 2013-04-03 2016-08-31 カシオ計算機株式会社 情報処理装置及びプログラム
US10082935B2 (en) 2013-04-15 2018-09-25 Carnegie Mellon University Virtual tools for use with touch-sensitive surfaces
US20140331313A1 (en) 2013-05-03 2014-11-06 Vialab, Inc. Authentication of signature using acoustic wave analysis
US10599250B2 (en) 2013-05-06 2020-03-24 Qeexo, Co. Using finger touch types to interact with electronic devices
US9405379B2 (en) 2013-06-13 2016-08-02 Microsoft Technology Licensing, Llc Classification of user input
US9411445B2 (en) 2013-06-27 2016-08-09 Synaptics Incorporated Input object classification
US20150035759A1 (en) 2013-08-02 2015-02-05 Qeexo, Co. Capture of Vibro-Acoustic Data Used to Determine Touch Types
TWI514229B (zh) 2013-11-22 2015-12-21 Elan Microelectronics Corp 圖形編輯方法以及電子裝置
CN104735340A (zh) 2013-12-24 2015-06-24 索尼公司 备用的相机功能控制
WO2015123081A1 (en) 2014-02-12 2015-08-20 Qeexo, Co Determining pitch and yaw for touchscreen interactions
US20150242009A1 (en) 2014-02-26 2015-08-27 Qeexo, Co. Using Capacitive Images for Touch Type Classification
US9652044B2 (en) 2014-03-04 2017-05-16 Microsoft Technology Licensing, Llc Proximity sensor-based interactions
KR20150118813A (ko) 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
CN104020878A (zh) 2014-05-22 2014-09-03 小米科技有限责任公司 触摸输入控制方法及装置
US9696859B1 (en) 2014-06-17 2017-07-04 Amazon Technologies, Inc. Detecting tap-based user input on a mobile device based on motion sensor data
US9558455B2 (en) 2014-07-11 2017-01-31 Microsoft Technology Licensing, Llc Touch classification
KR20160071264A (ko) 2014-12-11 2016-06-21 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9785344B2 (en) 2014-08-28 2017-10-10 Winbond Electronics Corp. Portable electronic apparatus and touch detecting method thereof
US9329715B2 (en) 2014-09-11 2016-05-03 Qeexo, Co. Method and apparatus for differentiating touch screen users based on touch event analysis
US9430085B2 (en) 2014-09-12 2016-08-30 Microsoft Technology Licensing, Llc Classification of touch input as being unintended or intended
US11619983B2 (en) 2014-09-15 2023-04-04 Qeexo, Co. Method and apparatus for resolving touch screen ambiguities
US9864453B2 (en) 2014-09-22 2018-01-09 Qeexo, Co. Method and apparatus for improving accuracy of touch screen event analysis by use of edge classification
US10606417B2 (en) 2014-09-24 2020-03-31 Qeexo, Co. Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns
US10712858B2 (en) 2014-09-25 2020-07-14 Qeexo, Co. Method and apparatus for classifying contacts with a touch sensitive device
US10095402B2 (en) 2014-10-01 2018-10-09 Qeexo, Co. Method and apparatus for addressing touch discontinuities
US20160117015A1 (en) 2014-10-28 2016-04-28 Stmicroelectronics S.R.L. Microelectromechanical vibration sensor
US9817956B2 (en) 2014-12-12 2017-11-14 Excalibur Ip, Llc User authentication and data encryption
EP3317752B1 (en) 2015-07-01 2022-12-21 Qeexo, Co. Determining pitch for proximity sensitive interactions
US10642404B2 (en) 2015-08-24 2020-05-05 Qeexo, Co. Touch sensitive device with multi-sensor stream synchronized data
KR102489876B1 (ko) 2015-11-26 2023-01-18 삼성전자주식회사 알림을 제공하기 위한 방법 및 그 전자 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101438218A (zh) * 2006-06-15 2009-05-20 诺基亚公司 具有虚拟小键盘的移动设备
CN101968696A (zh) * 2009-07-27 2011-02-09 索尼公司 感应用于操作触摸板的动作的类型
US8624878B2 (en) * 2010-01-20 2014-01-07 Apple Inc. Piezo-based acoustic and capacitive detection
US20140210788A1 (en) * 2011-10-18 2014-07-31 Carnegie Mellon University Method and Apparatus for Classifying Touch Events on a Touch Sensitive Surface

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107924280A (zh) * 2015-08-20 2018-04-17 华为技术有限公司 用于双指关节触摸屏控制的***和方法
CN110109563A (zh) * 2018-02-01 2019-08-09 奇手公司 一种确定对象物相对于触敏表面的接触状态的方法及***
CN110209297A (zh) * 2018-02-28 2019-09-06 库卡德国有限公司 用于自动检查电子设备的至少一个功能的方法和装置
CN112154404A (zh) * 2018-05-21 2020-12-29 奥矽半导体技术有限公司 超声触摸和力输入检测
CN109189273A (zh) * 2018-11-06 2019-01-11 业成科技(成都)有限公司 触控事件处理方法、装置、计算机设备和存储介质
CN109189273B (zh) * 2018-11-06 2021-11-26 业成科技(成都)有限公司 触控事件处理方法、装置、计算机设备和存储介质
CN113544631A (zh) * 2019-03-07 2021-10-22 艾托有限责任公司 触摸检测设备及方法
CN110363120A (zh) * 2019-07-01 2019-10-22 上海交通大学 基于振动信号的智能终端触碰认证方法及***
CN112099631A (zh) * 2020-09-16 2020-12-18 歌尔科技有限公司 一种电子设备及其控制方法、装置及介质
CN114818839A (zh) * 2022-07-01 2022-07-29 之江实验室 一种基于深度学习的光纤传感水声信号识别方法及装置
CN114818839B (zh) * 2022-07-01 2022-09-16 之江实验室 一种基于深度学习的光纤传感水声信号识别方法及装置

Also Published As

Publication number Publication date
EP3191924B1 (en) 2020-07-08
US10599251B2 (en) 2020-03-24
EP3191924A1 (en) 2017-07-19
US9329715B2 (en) 2016-05-03
US20160077615A1 (en) 2016-03-17
EP3191924A4 (en) 2018-04-18
US20170024055A1 (en) 2017-01-26
WO2016040010A1 (en) 2016-03-17
CN105426713B (zh) 2018-10-16

Similar Documents

Publication Publication Date Title
CN105426713B (zh) 用于基于触摸事件分析来区分触摸屏使用者的方法和装置
US11029785B2 (en) Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns
CN106201240A (zh) 用于通过使用边缘分类来提高触摸屏事件分析的准确度的方法和装置
US9864454B2 (en) Method and apparatus for classifying finger touch events on a touchscreen
US11175698B2 (en) Methods and systems for processing touch inputs based on touch type and touch intensity
Tan et al. SilentKey: A new authentication framework through ultrasonic-based lip reading
KR100907435B1 (ko) 수기 서명의 획득, 분석, 인증 시스템 및 방법
US20150242009A1 (en) Using Capacitive Images for Touch Type Classification
CN106687967A (zh) 用于对与触敏设备的接触进行分类的方法和装置
Blanco‐Gonzalo et al. Performance evaluation of handwritten signature recognition in mobile environments
Ono et al. Sensing touch force using active acoustic sensing
Gupta et al. A survey of human-computer interaction (HCI) & natural habits-based behavioural biometric modalities for user recognition schemes
CN113317763A (zh) 基于多模态的帕金森病检测装置及计算机可读存储介质
Wei et al. SVSV: Online handwritten signature verification based on sound and vibration
Pätzold et al. Audio-based roughness sensing and tactile feedback for haptic perception in telepresence
JP2019507435A (ja) 空間分割セグメントに対する動的移動追跡基盤手記署名認証システムおよび方法
Yu et al. Audio based handwriting input for tiny mobile devices
JP2021086255A (ja) ペン入力個人認証方法
Chen et al. You Can Write Numbers Accurately on Your Hand with Smart Acoustic Sensing
Wadhawan et al. Design and Analysis of Online Punjabi Signature Verification System Using Grid Optimization
Parker Evaluation of data processing techniques for unobtrusive gait authentication
Golenvaux et al. End-User Interaction by Electromyography: the case of the Thalmic Myo armband

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant