CN110162232A - 屏幕显示方法、具有显示屏幕的装置、设备及存储介质 - Google Patents

屏幕显示方法、具有显示屏幕的装置、设备及存储介质 Download PDF

Info

Publication number
CN110162232A
CN110162232A CN201810140198.1A CN201810140198A CN110162232A CN 110162232 A CN110162232 A CN 110162232A CN 201810140198 A CN201810140198 A CN 201810140198A CN 110162232 A CN110162232 A CN 110162232A
Authority
CN
China
Prior art keywords
information
user
screen
display
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810140198.1A
Other languages
English (en)
Inventor
覃迪
张垚
朱剑波
韩放
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201810140198.1A priority Critical patent/CN110162232A/zh
Priority to PCT/CN2018/123830 priority patent/WO2019153927A1/zh
Publication of CN110162232A publication Critical patent/CN110162232A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明涉及一种屏幕显示方法、具有显示屏幕的装置、设备及存储介质，该屏幕显示方法包括：获取屏幕前用户的面部特征信息；根据面部特征信息识别用户的身份信息；根据身份信息获取用户的个性化信息，个性化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的个性化显示参数；计算用户的面部与屏幕之间的距离；根据距离获取对应的个性化显示参数；根据个性化显示参数调整屏幕的显示效果。本发明能够使屏幕根据用户的身份信息及所处环境的变化而进行自适应变化，以便于用户能够更好的观看屏幕，提升了用户体验。

Description

屏幕显示方法、具有显示屏幕的装置、设备及存储介质
技术领域
本发明涉及人机接口技术领域，特别是涉及一种屏幕显示方法、具有显示屏幕的装置、设备及存储介质。
背景技术
现有技术中，对于手机、平板电脑、电视、数码相框、车载屏幕等具有显示屏幕的装置，用户所处的环境发生变化时，或者不同的用户使用时，通常需要用户反复调整屏幕的方向或大小，以便适应自己的需求。例如，用户忘记佩戴矫正视力的眼镜，或者用户与显示屏幕之间的距离变动时，但是，手动调整屏幕比较繁琐且不方便，导致用户体验降低。
发明内容
本发明的目的是提供一种屏幕显示方法及具有显示屏幕的装置，其能够使屏幕自动进行更好地适应性显示。
一方面，本发明实施例提供了一种屏幕显示方法，其包括：获取屏幕前用户的面部特征信息；根据面部特征信息识别用户的身份信息；根据身份信息获取用户的个性化信息，个性化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的个性化显示参数；计算用户的面部与屏幕之间的距离；根据距离获取对应的个性化显示参数；根据个性化显示参数调整屏幕的显示效果。
根据本发明实施例的一方面，获取屏幕前用户的面部特征信息包括：获取用户的头像信息；根据头像信息获取用户的面部特征信息。
根据本发明实施例的一方面，计算用户的面部与屏幕之间的距离包括：根据面部特征信息捕捉用户的眼球的位置信息；根据眼球的位置信息计算用户的面部与屏幕之间的距离。
根据本发明实施例的一方面，计算用户的面部与屏幕之间的距离之后，进一步包括：如果用户的面部与屏幕之间的距离超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
根据本发明实施例的一方面，根据面部特征信息识别用户的身份信息之后，还包括：如果根据面部特征信息无法识别用户的身份信息，则判断用户为新用户；为新用户配置标准化信息，标准化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的标准化显示参数；提醒新用户对标准化信息中的距离及距离对应的标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为用户的个性化信息。
根据本发明实施例的一方面，为新用户配置标准化信息，包括：获取新用户的未矫正视力信息和矫正视力后的配镜度数信息；根据未矫正视力信息和矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；获取新用户选择的标准化信息，标准化信息为第一标准化信息和第二标准化信息中的任一者。
根据本发明实施例的一方面，屏幕显示方法还包括：如果用户在预定时间间隔内，调整用户的面部与屏幕之间的距离的次数大于预设次数，则判断用户有视觉障碍；将用户选择的标准化信息更换为，第一标准化信息和第二标准化信息中的任一者；提醒用户对更换后的标准化信息中的距离与距离对应的标准化的显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为用户的个性化信息。
另一方面，本发明实施例还提供了一种具有显示屏幕的装置，其包括：特征采集单元，用于获取屏幕前用户的面部特征信息；处理单元，用于根据面部特征信息识别用户的身份信息；根据身份信息获取用户的个性化信息，个性化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的个性化显示参数；计算用户的面部与屏幕之间的距离；根据距离获取对应的个性化显示参数；显示单元，用于根据显示参数的数值调整屏幕的显示效果。
根据本发明实施例的一方面，处理单元进一步用于，如果根据面部特征信息无法识别用户的身份信息，则判断用户为新用户；为新用户配置标准化信息，标准化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的标准化显示参数；提醒新用户对标准化信息中的距离及距离对应的标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为用户的个性化信息。
根据本发明实施例的一方面，具有显示屏幕的装置配置有视力检测装置，用于获取新用户的未矫正视力信息和矫正视力后的配镜度数信息；
处理单元进一步用于，根据未矫正视力信息和矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；获取新用户选择的标准化信息，标准化信息为第一标准化信息和第二标准化信息中的任一者。
根据本发明实施例的一方面，处理单元进一步用于，如果用户在预定时间间隔内，调整用户的面部与屏幕之间的距离的次数大于预设次数，则判断用户有视觉障碍；将用户选择的标准化信息更换为，第一标准化信息和第二标准化信息中的任一者；提醒用户对更换后的标准化信息中的距离与距离对应的标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为用户的个性化信息。
根据本发明实施例的一方面，处理单元进一步用于，如果用户的面部与屏幕之间的距离超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
另一方面，本发明实施例还提供了一种具有显示屏幕的设备，包括：存储器，存储有计算机程序指令；处理器，当计算机程序指令被处理器执行时实现如前所述的屏幕显示方法。
另一方面，本发明实施例还提供了一种计算机存储介质，计算机可读存储介质包括指令，当指令在计算机上运行时，使得计算机执行如前所述的屏幕显示方法。
本发明实施例提供的屏幕显示方法及具有显示屏幕的装置，能够使屏幕根据用户的身份信息及所处环境的变化而进行自适应变化，以便于用户能够更好的观看屏幕，提升了用户体验。
附图说明
下面将参考附图来描述本发明示例性实施例的特征、优点和技术效果。
图1是本发明实施例一提供的一种屏幕显示方法的流程框图；
图2是图1所示的屏幕显示方法的一个应用场景示意图；
图3是图1所示的屏幕显示方法的另一个应用场景示意图；
图4是图1所示的屏幕显示方法的另一个应用场景示意图；
图5是图1所示的屏幕显示方法的另一个应用场景示意图；
图6是本发明实施例二提供的另一种屏幕显示方法的流程框图；
图7是图6所示的屏幕显示方法中识别用户的身份信息的特征脸的示意图；
图8是图6所示的屏幕显示方法中获取用户的面部特征信息的流程框图；
图9是图6所示的屏幕显示方法中为新用户配置个性化信息的流程框图；
图10是图9所示的屏幕显示方法中为新用户配置标准化信息的流程框图；
图11是图6所示的屏幕显示方法中计算用户的面部与屏幕之间的距离的流程框图；
图12是图6所示的屏幕显示方法中为有视觉障碍的用户配置个性化信息的流程框图；
图13是本发明实施例三提供的一种具有显示屏幕的装置的示意图；
图14是本发明实施例四提供的另一种具有显示屏幕的装置的示意图；
图15是图14所示的具有显示屏幕的装置的一种应用场景示意图。
具体实施方式
下面结合附图和实施例对本发明的实施方式作进一步详细描述。以下实施例的详细描述和附图用于示例性地说明本发明的原理，但不能用来限制本发明的范围，即本发明不限于所描述的实施例。
为了更好地理解本发明，下面结合图1至图15对本发明实施例的屏幕显示方法及具有显示屏幕的装置进行详细描述。
实施例一
参阅图1，本发明实施例一提供了一种屏幕显示方法，包括：
步骤S1’，计算用户的面部与屏幕之间的距离。
该屏幕可以为手机、电脑、电视等设备的显示屏。用户的面部与屏幕之间的距离可以采用但不限于红外感应装置或者距离传感器的方式来测量。还可以根据眼球追踪算法及立体视觉中的三维测距原理获得。在实际使用中，可以实时地计算用户的面部与屏幕之间的距离，也可以周期性地计算用户的面部与屏幕之间的距离，例如，该周期时长可以为5～10s，根据具体的使用场合而定。
步骤S2’，根据距离获取对应的显示参数。距离对应的屏幕的显示参数可以为预先设定的，例如，距离为20cm时，屏幕上显示的字体的大小为四号字体。
步骤S3’，根据显示参数调整屏幕的显示效果。
请一并参阅图2至图4，以手机的显示屏为例，获取屏幕前用户的面部特征信息可以识别出用户C的身份信息，根据身份信息获取用户C的个性化信息。
当计算出用户的面部与显示屏之间的距离L≥A时，根据距离L查询用户C的个性化信息，获取该距离L对应的显示参数P1，根据显示参数P1调整屏幕的显示效果，如图2中的界面a所示，手机的显示屏中显示了4个图标。
当计算出用户的面部与显示屏之间的距离L变化为A≤L≤B时，通过查询用户C的个性化信息，获得该距离L对应的显示参数P2，根据显示参数P2调整屏幕的显示效果，如图3中的界面b所示，即将手机的显示屏中的图标按照固定规则缩小后进行重排，共显示了6个图标。
当计算出用户的面部与显示屏之间的距离L继续变化为L≤C时，通过查询用户C的个性化信息，获得该距离L对应的显示参数P3，根据显示参数P3调整屏幕的显示效果，如图4中的界面c所示，即将手机的显示屏中的图标按照固定规则继续缩小后进行重排，共显示了8个图标。
可以理解的是，预定信息中的距离A、B、C仅是示例性的说明，并不局限于这三个数值，可以根据具体的应用场景而设定。
参阅图5，步骤S1’中，计算用户的面部与屏幕之间的距离之后，进一步包括：如果用户的面部与屏幕之间的距离超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
相应地，图片也可以按照文字的放大比例同时进行放大。正常显示区域和放大区域的大小可以根据用户的使用场景进行调整。
本发明实施例一提供的屏幕显示方法，能够使屏幕根据用户所处环境的变化而进行自适应变化，以便于用户能够更好的观看屏幕，提升了用户体验。
实施例二
参阅图6，本发明实施例二还提供了一种屏幕显示方法，包括：
步骤S1，获取屏幕前用户的面部特征信息。该屏幕可以为手机、电脑、电视等设备的显示屏。面部特征信息可以是人体的脸部轮廓、眼球大小及位置或鼻梁的大小及位置，还可以包括是否佩戴眼镜等。
步骤S2，根据面部特征信息识别用户的身份信息。
根据上述识别出的面部特征信息和***中预存的用户身份特征信息进行对比，可以识别用户的身份信息。
例如，可以根据现有成熟技术中的头像识别算法识别用户的身份信息，包括但不限于特征脸算法(Eigenface)。下面以特征脸算法为例描述识别用户的身份信息的方法。
参阅图7，获取包含人体的面部特征信息的M张人脸图像，每张人脸图像可以转换为一个N维的向量，以形成M*N维的训练图像集合S，将该训练图像集合S降维为N*N矩阵后求解特征向量u，该特征向量u即为训练图像集合S内的每个图像向量Γ与均值图像Ψ在该方向上的偏差，通过待识别的人脸在特征向量的投影，可以获知待识别的人脸与均值图像在不同方向上的差距。如果将这些特征向量还原成像素排列的话，很像人脸，所以称之为特征脸，如图2所示。
对于待识别的人脸，用第k个特征脸可以标示为：
其中，k＝1，2…M，uk为第k个特征脸的向量，Γ为人脸图像的N维向量，Ψ为训练图像集合S的均值图像的N维向量。
式(1)可以计算出第k个特征脸uk的权重，M个权重可以构成一个向量ΩT，如式(2)所示：
ΩT＝[ω1,ω2,······ωM] (2)
对待识别的人脸进行识别依据式(3)：
εk＝||Ω-Ωk||2 (3)
其中，Ω为待识别的人脸的权重向量，Ωk为训练图像集合S内的某个人脸的权重向量，εk即为两者的欧氏距离。当第k个欧氏距离小于阈值时，可以判别待识别的人脸即为训练图像集合S内的第k个人脸，从而识别该用户的身份信息。当遍历训练图像集合S内的所有人脸，求得的每一个欧氏距离均大于阈值时，可以判别待识别的人脸不在训练图像集合S内，而是新用户的人脸。阈值的设定可以根据训练图像集合S的不同适用场合而定。
步骤S3，根据身份信息获取用户的个性化信息，个性化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的个性化显示参数，如图3所示。例如，距离为20cm时，屏幕上显示的字体的大小为四号字体。
步骤S4，计算用户的面部与屏幕之间的距离。距离的计算方法可以根据眼球追踪算法及立体视觉中的三维测距原理获得。也可以利用例如但不限于红外感应装置或者距离传感器来测量。
步骤S5，根据距离获取对应的个性化显示参数。
步骤S6，根据个性化显示参数调整屏幕的显示效果。
本发明实施例二提供的屏幕显示方法，能够根据用户的身份信息及所处环境的变化查询用户的个性化信息，从而使屏幕进行自适应变化，以便于满足每个用户的使用需求，使用户能够更好的观看屏幕，进一步提升了用户体验。
下面结合附图进一步详细描述本发明实施例二提供的屏幕显示方法的实现步骤。
参阅图8，步骤S1中，获取屏幕前用户的面部特征信息包括：
步骤S11，获取用户的头像信息。用户的头像信息可以通过例如但不限于摄像装置、红外感应装置或其它感应方式来获取头像信息。
步骤S12，根据头像信息获取用户的面部特征信息。
参阅图9，步骤S2中，根据面部特征信息识别用户的身份信息之后，还包括：
步骤S21，如果根据面部特征信息无法识别用户的身份信息，则判断用户为新用户。根据前述的特征脸算法，当待识别的人脸与训练图像集合S内的所有人脸的欧氏距离均大于阈值时，可以判别待识别的人脸不在训练图像集合S内，故判断出该用户为新用户。
步骤S22，为新用户配置标准化信息，标准化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的标准化显示参数；
步骤S23，提醒新用户对标准化信息中的距离及距离对应的标准化显示参数，逐一进行校准。
步骤S24，存储校准后的信息，将校准后的信息作为用户的个性化信息。
参阅图10，步骤S22中，为新用户配置标准化信息，包括：
步骤S221，获取新用户的未矫正视力信息和矫正视力后的配镜度数信息；
步骤S222，根据未矫正视力信息和矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；
步骤S223，获取新用户选择的标准化信息，标准化信息为第一标准化信息和第二标准化信息中的任一者。
参阅图11，步骤S4中，计算用户的面部与屏幕之间的距离包括：
步骤S41，根据面部特征信息捕捉用户的眼球的位置信息。
在实际使用中，可以实时地捕捉用户的眼球的位置信息，也可以周期性地捕捉用户的眼球的位置信息，例如，该周期时长可以为5～10s，根据具体的使用场合而定。
利用眼球追踪算法可以捕捉用户的眼球的位置信息。基于前述的特征脸算法可以锁定眼球的可能位置区域，在寻找眼球位置时，只需要在这个较小的人眼可能的区域处理即可。在这个区域内，眼球模型可以近似为圆形，或者因为眼睑或其他物体遮挡情况下为部分圆形。由于虹膜和眼白有明显的颜色差异，在灰度图像中也存在明显的边缘分隔，在边缘处有很大的梯度。从几何学上讲：圆形对象的中心可以通过分析图像梯度的矢量场来检测，以前它已被用于眼中心定位。例如：通过利用虹膜和巩膜之间强烈的灰度反差产生的流场特征来检测眼球中心。这种方法计算图像上每个点的梯度向量方向，并绘制沿这个梯度方向的直线，对于每一个点每增加一根这样的直线就在此点对应的容器中增加一个计数。最后统计图像上所有点的对应容器的累积计数，拥有最大计数值的容器对应的点就可以认为是图像中一个圆形区域的中心，进而可以认为这个中心就是眼球的中心。
然而，图像中眉毛、眼睑或眼镜等各种干扰对象可能会使这种方法在检测过程中出现误差而带来识别错误，特别是头发和眼镜的强反射显示出的显著的图像梯度并不像瞳孔和虹膜的图像梯度具有相同的方向，此时估计出的眼睛中心可能是错的。而眼球追踪算法可以通过一个后处理步骤来克服这些问题，即设置一个阈值来判断目标函数。应用这个阈值来删除一部分假的眼球目标，然后再确定剩余的候选眼球目标的最大特征值，以此来判断剩余的候选目标中的真实目标。这个过程相对于先进行初步判断，剔除到大部分的干扰目标，再对剩下的候选目标进行判断，从而提高检测的准确性。而这个阈值可以按照经验可以取整个图像中最大特征值的90％。上述眼球追踪算法为现有成熟技术，此处不再赘述。
步骤S42，根据眼球的位置信息计算用户的面部与屏幕之间的距离。
根据立体视觉中的三维测距原理可以计算出用户的面部与屏幕之间的距离。具体来说，根据上述眼球追踪算法可以实时地或者周期性地捕捉到用户的两个眼球的位置信息，利用同一目标在两个投影图像上的成像差异可以获得被测目标的三维信息，进而计算出用户的面部与屏幕之间的距离。上述距离识别算法为现有成熟技术，此处不再赘述。
参阅图12，本发明实施例提供的屏幕显示方法还包括：
步骤S7，如果用户在预定时间间隔内，调整用户的面部与屏幕之间的距离的次数大于预设次数，则判断用户有视觉障碍。
步骤S8，将用户选择的标准化信息更换为，第一标准化信息和第二标准化信息中的任一者；
步骤S9，提醒用户对更换后的标准化信息中的距离与距离对应的标准化显示参数，逐一进行校准；
步骤S10，存储校准后的信息，将校准后的信息作为用户的个性化信息。
另外，与实施例一中的屏幕显示方法类似，步骤S4中，计算用户的面部与屏幕之间的距离之后，进一步包括：如果用户的面部与屏幕之间的距离超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
相应地，图片也可以按照文字的放大比例同时进行放大。正常显示区域和放大区域的大小可以根据用户的使用场景进行调整。
由此，本发明实施例二提供的屏幕显示方法，通过识别用户的身份信息来获知不同用户在不同的环境下的个性化需求，从而能够使屏幕进行自适应变化，例如放大、缩小、变焦、局部放大滚动以及按照固定规则进行重排，以便于用户能够更好的观看屏幕，提升了用户体验。
实施例三
参阅图13，本发明实施例三还提供了一种具有显示屏幕的装置，包括：处理单元20’和显示单元30’。该具有显示屏幕的装置可以为手机、计算机、平板电脑等终端设备，也可以为单独的显示设备。本发明实施例以计算机为例进行描述。
处理单元20’用于计算用户的面部与屏幕之间的距离，可以实时地或者周期性地计算该距离，根据距离获取对应的显示参数。距离对应的屏幕的显示参数可以为预先设定的，例如，距离为20cm时，屏幕上显示的字体的大小为四号字体。
作为一种可选的实施方式，处理单元20’可以根据例如包括但不限于红外感应装置的距离传感器测量出用户的面部与屏幕之间的距离。还可以根据眼球追踪算法及立体视觉中的三维测距原理获得。
显示单元30’用于根据显示参数调整屏幕的显示效果。
另外，如果用户的面部与屏幕之间的距离L超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则处理单元20’还用于：对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
本发明实施例三提供的具有显示屏幕的装置，能够使屏幕根据用户所处环境的变化而进行自适应变化，以便于用户能够更好的观看屏幕，提升了用户体验。
实施例四
参阅图14，本发明实施例四还提供了一种具有显示屏幕的装置，包括：特征采集单元10、处理单元20和显示单元30。该具有显示屏幕的装置可以为手机、计算机、平板电脑等终端设备，也可以为单独的显示设备。本发明实施例以计算机为例进行描述。
特征采集单元10用于获取屏幕前用户的面部特征信息。
作为一种可选的实施方式，特征采集单元10可以为但不限于红外感应装置。
作为一种可选的实施方式，本发明实施例提供的具有显示屏幕的装置还包括摄像装置，摄像装置用于获取用户的头像信息，特征采集单元10根据头像信息获取用户的面部特征信息。
处理单元20用于根据面部特征信息识别用户的身份信息；根据身份信息获取用户的个性化信息，个性化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的个性化显示参数；计算用户的面部与屏幕之间的距离，可以实时地或者周期性地计算该距离，根据距离获取对应的显示参数。
作为一种可选的实施方式，处理单元20可以根据例如包括但不限于红外感应装置的距离传感器测量出用户的面部与屏幕之间的距离。
作为一种可选的实施方式，处理单元20还可以根据特征采集单元10获取用户的头像信息来获取用户的面部特征信息，根据面部特征信息实时地或者周期性地捕捉用户的眼球的位置信息，并利用眼球追踪技术和立体视觉中的三维测距原理，计算出用户的面部与屏幕之间的距离。
显示单元30用于根据个性化显示参数调整屏幕的显示效果。
本发明实施例四提供的具有显示屏幕的装置，能够使屏幕根据用户的身份信息及所处环境的变化而进行自适应变化，以便于用户能够更好的观看屏幕，提升了用户体验。
参阅图15，如果根据面部特征信息无法识别用户的身份信息，则处理单元20还用于判断用户为新用户；为新用户配置标准化信息，标准化信息包括用户的面部与屏幕之间的距离，以及距离对应的屏幕的标准化显示参数；提醒新用户对标准化信息中的距离及距离对应的标准化显示参数，逐一进行校准，例如以弹出对话框的方式提醒；存储校准后的信息，将校准后的信息作为用户的个性化信息。
另外，本发明实施例提供的具有显示屏幕的装置配置有视力检测装置(图中未示出)，视力检测装置能够检测出用户的视力为近视、远视、散光甚至是否为夜盲症，并根据检测结果获知矫正视力后的配镜度数信息。视力检测装置还可以获取用户的未矫正视力信息。
进一步地，处理单元20还用于：根据未矫正视力信息和矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；获取新用户选择的标准化信息，标准化信息为第一标准化信息和第二标准化信息中的任一者。
进一步地，如果用户在预定时间间隔内，调整用户的面部与屏幕之间的距离L的次数大于预设次数，则处理单元20还用于：判断用户有视觉障碍；将用户选择的标准化信息更换为，第一标准化信息和第二标准化信息中的任一者；提醒用户对更换后的标准化信息中的距离与距离对应的标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为用户的个性化信息。
另外，如果用户的面部与屏幕之间的距离L超出距离的最小允许值，并且屏幕的单位显示面积内的文字数量大于预设文字数量时，则处理单元20还用于：对屏幕上的显示区域进行移动处理，以使文字局部放大并逐行滚动显示在由显示区域移动后空余出的放大区域内。
可以理解的是，本发明实施例提供的具有显示屏幕的装置是前述屏幕显示方法的执行主体，关于各单元具体的执行方式可以参见前述屏幕显示方法的内容，在此不再赘述。
另外，本发明实施例还提供了一种具有显示屏幕的设备，包括：存储器，存储有计算机程序指令；处理器，当计算机程序指令被处理器执行时实现如前所述的屏幕显示方法。
另外，本发明实施例还提供了一种计算机存储介质，计算机可读存储介质包括指令，当指令在计算机上运行时，使得计算机执行如前所述的屏幕显示方法。
虽然已经参考优选实施例对本发明进行了描述，但在不脱离本发明的范围的情况下，可以对其进行各种改进并且可以用等效物替换其中的部件。尤其是，只要不存在结构冲突，各个实施例中所提到的各项技术特征均可以任意方式组合起来。本发明并不局限于文中公开的预定实施例，而是包括落入权利要求的范围内的所有技术方案。

Claims (14)

1.一种屏幕显示方法，其特征在于，包括：
获取屏幕前用户的面部特征信息；
根据所述面部特征信息识别所述用户的身份信息；
根据所述身份信息获取所述用户的个性化信息，所述个性化信息包括用户的所述面部与所述屏幕之间的距离，以及所述距离对应的所述屏幕的个性化显示参数；
计算所述用户的所述面部与所述屏幕之间的距离；
根据所述距离获取对应的个性化显示参数；
根据所述个性化显示参数调整所述屏幕的显示效果。
2.根据权利要求1所述的屏幕显示方法，其特征在于，所述获取屏幕前用户的面部特征信息包括：
获取所述用户的头像信息；
根据所述头像信息获取所述用户的所述面部特征信息。
3.根据权利要求1或2所述的屏幕显示方法，其特征在于，所述计算所述用户的所述面部与所述屏幕之间的距离包括：
根据所述面部特征信息捕捉所述用户的眼球的位置信息；
根据所述眼球的位置信息计算所述用户的所述面部与所述屏幕之间的距离。
4.根据权利要求1所述的屏幕显示方法，其特征在于，所述计算所述用户的所述面部与所述屏幕之间的距离之后，进一步包括：
如果所述用户的所述面部与所述屏幕之间的所述距离超出所述距离的最小允许值，并且所述屏幕的单位显示面积内的文字数量大于预设文字数量时，则对所述屏幕上的显示区域进行移动处理，以使所述文字局部放大并逐行滚动显示在由所述显示区域移动后空余出的放大区域内。
5.根据权利要求1所述的屏幕显示方法，其特征在于，所述根据所述面部特征信息识别所述用户的身份信息之后，还包括：
如果根据所述面部特征信息无法识别所述用户的所述身份信息，则判断所述用户为新用户；
为所述新用户配置标准化信息，所述标准化信息包括用户的所述面部与所述屏幕之间的距离，以及所述距离对应的所述屏幕的标准化显示参数；
提醒所述新用户对所述标准化信息中的所述距离及所述距离对应的所述标准化显示参数，逐一进行校准；
存储校准后的信息，将校准后的信息作为所述用户的个性化信息。
6.根据权利要求5所述的屏幕显示方法，其特征在于，所述为所述新用户配置标准化信息，包括：
获取所述新用户的未矫正视力信息和矫正视力后的配镜度数信息；
根据所述未矫正视力信息和所述矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；
获取所述新用户选择的所述标准化信息，所述标准化信息为所述第一标准化信息和所述第二标准化信息中的任一者。
7.根据权利要求6所述的屏幕显示方法，其特征在于，所述屏幕显示方法还包括：
如果所述用户在预定时间间隔内，调整所述用户的所述面部与所述屏幕之间的距离的次数大于预设次数，则判断所述用户有视觉障碍；
将所述用户选择的所述标准化信息更换为，所述第一标准化信息和所述第二标准化信息中的任一者；
提醒所述用户对更换后的所述标准化信息中的所述距离与所述距离对应的所述标准化的显示参数，逐一进行校准；
存储校准后的信息，将校准后的信息作为所述用户的个性化信息。
8.一种具有显示屏幕的装置，其特征在于，包括：
特征采集单元(10)，用于获取屏幕前用户的面部特征信息；
处理单元(20)，用于根据所述面部特征信息识别所述用户的身份信息；根据所述身份信息获取所述用户的个性化信息，所述个性化信息包括用户的所述面部与所述屏幕之间的距离，以及所述距离对应的所述屏幕的个性化显示参数；计算所述用户的所述面部与所述屏幕之间的距离；根据所述距离获取对应的个性化显示参数；
显示单元(30)，用于根据所述个性化显示参数调整所述屏幕的显示效果。
9.根据权利要求8所述的具有显示屏幕的装置，其特征在于，所述处理单元(20)进一步用于，如果根据所述面部特征信息无法识别所述用户的所述身份信息，则判断所述用户为新用户；为所述新用户配置标准化信息，所述标准化信息包括用户的所述面部与所述屏幕之间的距离，以及所述距离对应的所述屏幕的标准化显示参数；提醒所述新用户对所述标准化信息中的所述距离及所述距离对应的所述标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为所述用户的个性化信息。
10.根据权利要求9所述的具有显示屏幕的装置，其特征在于，所述具有显示屏幕的装置配置有视力检测装置(40)，用于获取所述新用户的未矫正视力信息和矫正视力后的配镜度数信息；
所述处理单元(20)进一步用于，根据所述未矫正视力信息和所述矫正视力后的配镜度数信息分别配置第一标准化信息和第二标准化信息；获取所述新用户选择的所述标准化信息，所述标准化信息为所述第一标准化信息和所述第二标准化信息中的任一者。
11.根据权利要求10所述的具有显示屏幕的装置，其特征在于，所述处理单元(20)进一步用于，如果所述用户在预定时间间隔内，调整所述用户的面部与所述屏幕之间的距离的次数大于预设次数，则判断所述用户有视觉障碍；将所述用户选择的所述标准化信息更换为，所述第一标准化信息和所述第二标准化信息中的任一者；提醒所述用户对更换后的所述标准化信息中的所述距离与所述距离对应的所述标准化显示参数，逐一进行校准；存储校准后的信息，将校准后的信息作为所述用户的个性化信息。
12.根据权利要求8所述的具有显示屏幕的装置，其特征在于，所述处理单元(20)进一步用于，如果所述用户的所述面部与所述屏幕之间的所述距离超出所述距离的最小允许值，并且所述屏幕的单位显示面积内的文字数量大于预设文字数量时，则对所述屏幕上的显示区域进行移动处理，以使所述文字局部放大并逐行滚动显示在由所述显示区域移动后空余出的放大区域内。
13.一种具有显示屏幕的设备，其特征在于，包括：
存储器，存储有计算机程序指令；
处理器，当所述计算机程序指令被所述处理器执行时实现如权利要求1-7任一项所述的屏幕显示方法。
14.一种计算机可读存储介质，其特征在于，
所述计算机可读存储介质包括指令，当所述指令在计算机上运行时，使得计算机执行如权利要求1-7任一项所述的屏幕显示方法。
CN201810140198.1A 2018-02-11 2018-02-11 屏幕显示方法、具有显示屏幕的装置、设备及存储介质 Pending CN110162232A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810140198.1A CN110162232A (zh) 2018-02-11 2018-02-11 屏幕显示方法、具有显示屏幕的装置、设备及存储介质
PCT/CN2018/123830 WO2019153927A1 (zh) 2018-02-11 2018-12-26 屏幕显示方法、具有显示屏幕的装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810140198.1A CN110162232A (zh) 2018-02-11 2018-02-11 屏幕显示方法、具有显示屏幕的装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN110162232A true CN110162232A (zh) 2019-08-23

Family

ID=67547896

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810140198.1A Pending CN110162232A (zh) 2018-02-11 2018-02-11 屏幕显示方法、具有显示屏幕的装置、设备及存储介质

Country Status (2)

Country Link
CN (1) CN110162232A (zh)
WO (1) WO2019153927A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110605505A (zh) * 2019-09-23 2019-12-24 佛山耀立电气有限公司 焊机屏幕内容显示时长的控制方法及装置、焊机
CN111752516A (zh) * 2020-06-10 2020-10-09 Oppo（重庆）智能科技有限公司 终端设备的屏幕调整方法、装置、终端设备及存储介质
CN112069480A (zh) * 2020-08-06 2020-12-11 Oppo广东移动通信有限公司 显示方法、装置、存储介质及可穿戴设备
CN113029018A (zh) * 2021-02-03 2021-06-25 深圳市优必选科技股份有限公司 护眼提示方法、装置、终端设备及计算机可读存储介质
CN114253623A (zh) * 2021-11-19 2022-03-29 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN114995937A (zh) * 2022-06-08 2022-09-02 深圳创维－Rgb电子有限公司 自适应屏幕显示方法、装置、设备及存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113011244A (zh) * 2021-01-25 2021-06-22 北京科技大学 基于眼动仪的高质量用户生成内容的识别方法和***
CN113029152B (zh) * 2021-03-20 2024-05-31 深圳市天策规划设计有限公司 一种智能成像型索引方法、装置、***、设备及存储介质

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508722A (zh) * 2002-12-18 2004-06-30 国际自动行高、字体大小和字体测量***和方法
CN101533327A (zh) * 2008-03-13 2009-09-16 英业达股份有限公司 窗口调整界面及其调整方法
CN101944349A (zh) * 2009-07-03 2011-01-12 索尼公司 显示控制装置和显示控制方法
CN102147655A (zh) * 2010-12-21 2011-08-10 华为终端有限公司 一种电子显示设备上的显示控制方法及电子显示设备
US20120287163A1 (en) * 2011-05-10 2012-11-15 Apple Inc. Scaling of Visual Content Based Upon User Proximity
US20140013216A1 (en) * 2011-11-24 2014-01-09 Sharp Kabushiki Kaisha Display control device, display method, control program, and recording medium
CN103760980A (zh) * 2014-01-21 2014-04-30 Tcl集团股份有限公司 根据双眼位置进行动态调整的显示方法、***及显示设备
CN105759971A (zh) * 2016-03-08 2016-07-13 珠海全志科技股份有限公司 一种自动提示人眼离屏幕距离的方法和***
CN106030464A (zh) * 2014-02-21 2016-10-12 微软技术许可有限责任公司 使用接近度感测来调整在移动设备上所提供的信息
CN106911962A (zh) * 2017-04-01 2017-06-30 上海进馨网络科技有限公司 基于场景的移动视频智能播放交互控制方法
CN106919256A (zh) * 2017-02-27 2017-07-04 深圳市金立通信设备有限公司 一种保护终端用户眼部健康的方法及终端
CN106981150A (zh) * 2017-04-19 2017-07-25 西安超嗨网络科技有限公司 一种超市智能防盗***及方法
CN106980448A (zh) * 2017-02-20 2017-07-25 上海与德通讯技术有限公司 一种显示方法及移动终端
CN107179824A (zh) * 2016-03-11 2017-09-19 中国电信股份有限公司 一种自动调整屏幕显示的方法、装置和终端
CN107528972A (zh) * 2017-08-11 2017-12-29 维沃移动通信有限公司 一种显示方法及移动终端

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102955664A (zh) * 2011-08-19 2013-03-06 鸿富锦精密工业（深圳）有限公司 电子书显示调整***及方法
CN107436681A (zh) * 2016-05-27 2017-12-05 爱唯秀股份有限公司 自动调节文字的显示大小的移动终端及其方法

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508722A (zh) * 2002-12-18 2004-06-30 国际自动行高、字体大小和字体测量***和方法
CN101533327A (zh) * 2008-03-13 2009-09-16 英业达股份有限公司 窗口调整界面及其调整方法
CN101944349A (zh) * 2009-07-03 2011-01-12 索尼公司 显示控制装置和显示控制方法
CN102147655A (zh) * 2010-12-21 2011-08-10 华为终端有限公司 一种电子显示设备上的显示控制方法及电子显示设备
US20120287163A1 (en) * 2011-05-10 2012-11-15 Apple Inc. Scaling of Visual Content Based Upon User Proximity
US20140013216A1 (en) * 2011-11-24 2014-01-09 Sharp Kabushiki Kaisha Display control device, display method, control program, and recording medium
CN103760980A (zh) * 2014-01-21 2014-04-30 Tcl集团股份有限公司 根据双眼位置进行动态调整的显示方法、***及显示设备
CN106030464A (zh) * 2014-02-21 2016-10-12 微软技术许可有限责任公司 使用接近度感测来调整在移动设备上所提供的信息
CN105759971A (zh) * 2016-03-08 2016-07-13 珠海全志科技股份有限公司 一种自动提示人眼离屏幕距离的方法和***
CN107179824A (zh) * 2016-03-11 2017-09-19 中国电信股份有限公司 一种自动调整屏幕显示的方法、装置和终端
CN106980448A (zh) * 2017-02-20 2017-07-25 上海与德通讯技术有限公司 一种显示方法及移动终端
CN106919256A (zh) * 2017-02-27 2017-07-04 深圳市金立通信设备有限公司 一种保护终端用户眼部健康的方法及终端
CN106911962A (zh) * 2017-04-01 2017-06-30 上海进馨网络科技有限公司 基于场景的移动视频智能播放交互控制方法
CN106981150A (zh) * 2017-04-19 2017-07-25 西安超嗨网络科技有限公司 一种超市智能防盗***及方法
CN107528972A (zh) * 2017-08-11 2017-12-29 维沃移动通信有限公司 一种显示方法及移动终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
MATTHEW TURK等: "Eigenfaces for Recognition", 《JOURNAL OF COGNITIVE NEUROSCIENCE》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110605505A (zh) * 2019-09-23 2019-12-24 佛山耀立电气有限公司 焊机屏幕内容显示时长的控制方法及装置、焊机
CN111752516A (zh) * 2020-06-10 2020-10-09 Oppo（重庆）智能科技有限公司 终端设备的屏幕调整方法、装置、终端设备及存储介质
CN112069480A (zh) * 2020-08-06 2020-12-11 Oppo广东移动通信有限公司 显示方法、装置、存储介质及可穿戴设备
CN113029018A (zh) * 2021-02-03 2021-06-25 深圳市优必选科技股份有限公司 护眼提示方法、装置、终端设备及计算机可读存储介质
CN114253623A (zh) * 2021-11-19 2022-03-29 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN114253623B (zh) * 2021-11-19 2024-01-19 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN114995937A (zh) * 2022-06-08 2022-09-02 深圳创维－Rgb电子有限公司 自适应屏幕显示方法、装置、设备及存储介质

Also Published As

Publication number Publication date
WO2019153927A1 (zh) 2019-08-15

Similar Documents

Publication Publication Date Title
CN110162232A (zh) 屏幕显示方法、具有显示屏幕的装置、设备及存储介质
EP3339943A1 (en) Method and system for obtaining optometric parameters for fitting eyeglasses
CN109788894B (zh) 用于确定个体视近的视觉矫正需求值的测量方法
US11232586B2 (en) Line-of-sight estimation device, line-of-sight estimation method, and program recording medium
CA3060972C (en) System and method for obtaining lens fabrication measurements that accurately account for natural head position
US20150049952A1 (en) Systems and methods of measuring facial characteristics
US20220003632A1 (en) Method and device for measuring the local refractive power and/or the refractive power distribution of a spectacle lens
US20240061278A1 (en) Frame adjustment system
US20230020160A1 (en) Method for determining a value of at least one geometrico-morphological parameter of a subject wearing an eyewear
KR102444768B1 (ko) 안경 렌즈의 국부적 굴절력 및/또는 굴절력 분포를 측정하기 위한 방법 및 장치
US20220398781A1 (en) System and method for digital measurements of subjects
CN111417893B (zh) 用于检验眼科镜片在镜架中的安装的方法和组件
CN114787872A (zh) 用于扩展用于评估眼睛配戴物兼容性的图像数据库的装置、方法及计算机可读存储介质
US20230206598A1 (en) Interpupillary distance estimation method
WO2019110527A1 (en) Method and apparatus for determining a reference head posture of a subject
CN217723475U (zh) 一种用于视力检测的眼镜
EP4160362A1 (en) Gaze defect compensation
US20230342976A1 (en) Interpupillary distance estimation method
EP3977201A1 (en) Method and device for determining at least an optical feature of a progressive lens to be placed in a frame for vision correction of a subject

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190823