CN103049084B - 一种可根据人脸方向来调整显示方向的电子设备及其方法 - Google Patents
一种可根据人脸方向来调整显示方向的电子设备及其方法 Download PDFInfo
- Publication number
- CN103049084B CN103049084B CN201210549784.4A CN201210549784A CN103049084B CN 103049084 B CN103049084 B CN 103049084B CN 201210549784 A CN201210549784 A CN 201210549784A CN 103049084 B CN103049084 B CN 103049084B
- Authority
- CN
- China
- Prior art keywords
- face
- user
- display
- image
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 230000001815 facial effect Effects 0.000 claims abstract description 19
- 238000003708 edge detection Methods 0.000 claims description 8
- 238000004040 coloring Methods 0.000 claims description 3
- 238000001514 detection method Methods 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 3
- 238000012216 screening Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 210000000056 organ Anatomy 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 241001270131 Agaricus moelleri Species 0.000 description 2
- 208000003464 asthenopia Diseases 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004304 visual acuity Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开一种可根据人脸方向来调整显示方向的电子设备,其包括:摄像模块,用于获取用户的画面信息;面部识别模块,用于根据用户的画面信息识别出用户的脸部方位,并定位用户脸部特征与显示屏的相对方向;显示控制模块,根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向,使显示模块的显示的图像方向与用户的观看方向一致;和显示模块,用于显示图像。本发明的电子设备可根据用户的脸部朝向来调整显示屏幕的显示方向。本发明还提供一种根据人脸方向来调整显示方向的方法。
Description
技术领域
本发明涉及电子设备领域,尤其涉及一种可根据人脸方向来调整显示方向的电子设备,还涉及一种可根据人脸方向来调整显示方向的方法。
背景技术
电子设备的摄像功能使用简单且用途十分广泛,由于个人的喜好对电子设备的摆放位置和方向的不同,人们希望电子设备的屏幕被横向或竖向设置。然而现有电子设备都只能通过重力感应装置、陀螺仪或手动控制来调整显示方向,在无重力的太空或者在在倾斜的情况下较难实现方向的判断。在使用的过程中,需要使电子设备的屏幕的显示方向与人脸的位置相适应。而且,当电子设备的方向不变而使用者由于某种需要改变脸部朝向(如侧脸)来使用电子设备时,会导致使用者由于不是出于最佳的观看方位而眼睛疲劳或无法看清显示屏幕。
因此,需要一种可根据人脸方向来调整显示方向的电子设备。
发明内容
本发明的目的是提供一种可根据人脸方向来调整显示方向的电子设备。
为解决本发明的技术问题,本发明公开一种可根据人脸方向来调整显示方向的电子设备,其包括:摄像模块,用于获取用户的画面信息;面部识别模块,用于根据用户的画面信息识别出用户的脸部方位,并定位用户脸部特征与显示屏的相对方向;显示控制模块,根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向,使显示模块的显示的图像方向与用户的观看方向一致;和显示模块,用于显示图像。
其中,用户的脸部特征包括眼睛、鼻子、嘴区域的位置和特征。
本发明还提供一种根据人脸方向来调整显示方向的方法,其包括:
获取用户的画面信息;
识别用户的人脸区域及面部特征;
根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向。
其中,所述识别用户的人脸区域及面部特征的步骤进一步包括:
寻找所有可能的人脸候选区域;
从各候选区域中确定人脸的区域;
在人脸区域内采用边缘检测算法进一部确定人眼、鼻子嘴等器官的位置。
其中,所述边缘检测算法包括如下图像处理过程:本地直方图归一化、平滑、二值化、跟踪、特定提取。
其中,识别用户的人脸区域及面部特征后,当用户旋转90度、180度或270度面对显示屏时,将显示图像的所有象素点相应的旋转90度、180度或270度。
采用本发明的设备和方法,可使得显示屏幕的根据用户人脸的方位自动调整,使用户在任意角度观看时都能看到最适宜观看的显示界面,提升了用户体验。
附图说明
图1是本发明实施例提供的可根据人脸识别来调整显示方向的电子设备的原理框图。
图2是本发明实施例提供的基于经典镶嵌图的***总体框图。
图3是本发明实施例提供的人脸的四分图。
图4是本发明实施例提供的确定人脸位置的流程图。
图5是本发明实施例提供的边缘检测算法方框图。
图6—11是本发明实施例提供的实现图像旋转的图形。
具体实施方式
如图1所示,本发明提出一种通过可通过面部识别技术确定显示方向的电子设备,其包括:摄像模块,用于获取使用该电子设备人员的信息;面部识别模块,所述面部识别模块的接收来自摄像模块拍摄的用户信息,并对所述用户信息进行人脸识别,定位用户脸部特征(眼睛、鼻子、嘴区域的位置和特征)与显示屏的相对方向;显示控制模块,所述显示控制模块的接收来自面部识别模块定位的面部信息,根据面部特征与显示屏的相对方向,显示屏幕的显示方向进行旋转;显示模块,用于显示图像。
所述面部识别方法包括以下步骤:启动电子设备的摄像功能获取用户信息;寻找所有可能的人脸候选区域;从各候选区域中确定人脸的区域;在人脸区域内采用改进的边缘检测算法进一部确定人眼、嘴等器官的位置。面部识别完成后,进一步包括根据面部的朝向调整显示方向的步骤,从而使得显示方向总是人眼观看的方向。
本发明实现面部识别的方法主要基于特征的人脸检测方法。该方法主要是利用人脸的明显特征,如几何特征、肤色、纹理等,将人脸图像视为一个高维向量,从而将人脸检测问题转化为高维空间中分布信号的检测问题。该方法源于这样一个视觉事实;人类在不同姿态、视角和光照等条件下可以毫不费力地检测出人脸,这说明人脸或人脸的部件可能存在某种在任何条件下具有不变性的特征,利用这种特征就可检测出图像中是否存在人脸。本发明根据象素的灰度和颜色信息等进行图像分割来对人脸特征进行定位。人脸核心区域(眼睛、鼻子、嘴区域)具有独特的灰度分布特征,根据灰度分布特征可以建立若干规则,应用这些规则就可将检测图像中是否存在人脸的问题转化为检测该图像中是否存在满足这些规则的图像块的问题。
镶嵌图方法将原始图像的分辨率具有规则地降低后得到图像;他们将原始图像均匀的划分成矩形单元(称为细胞,人脸的五官区域在镶嵌图中占据4*4个细胞的图称为四分图,占据8*8个细胞的镶嵌图称为八分图。人脸在四分图和八分图具有一定的规则,依据这些规则对图像从粗分辨率到高分辨率进行筛选,以样本满足这些规则的程度作为人脸检测的依据。
经典的镶嵌图方法是一个基于知识的三层检测***,其***总体框图如图2所示,包括筛选人脸候选区域、确定人脸基本位置和对人脸位置进行分割。
第一层针对四分图,如图3所示,格局如下较简单的规则寻找所有可能的人脸候选区域:(1)面部中心有4个灰度基本相同的细胞;(2)面部上部、***的8个细胞有基本相同的灰度;(3)四分图中心部分和上部、***部分平均灰度有较明显的差别。
第二层针对八分图,如图4所示,根据如下规则从各候选区域中确定人脸区域:(1)眼区:本行中有两个灰度极小的值,它们之间的距离2<d<5;本行中有一个灰度极大的值,嘴亮点的位置靠近中心,且极小的值与最亮点的距离0<d<3;(2)鼻区:眼区中心以下一个细胞单位处有一个垂直灰度极小的值,并且在水平方向它也接近于极小值;(3)口区:在鼻区下方一个细胞单位处有一个垂直方向的灰度极小值,并且在水平方向有一个宽度为2~3个细胞的低灰度值区域.。
第三层的具体过程如图5所示,在人脸区域内采用改进的边缘检测算法,具体包括本地直方图归一化、平滑、二值化、跟踪、特定提取等步骤,进一步确定人眼、嘴等器官的位置。
通过上述方法,用户的面部特征能够被识别出来,由于人脸的核心区域(眼睛、鼻子、嘴区域)具有独特的灰度分布特征,因此面部器官和显示屏的相对方向就能被确定如图6。
当用户旋转90度面对显示屏的时候如图7,根据灰度分布特征(眼睛、鼻子、嘴区域具有独特的灰度分布),面部器官和显示屏的相对方向能被确定如图8。将图像所有的象素点(图中每个方格代表一个象素点)相应的旋转90度,这样图像就能按照用户观看的相对角度显示出来如图9。
根据上面的操作,当用户旋转180度或270度面对显示屏的时候,通过软件配置,将图像所有的象素点旋转180度或270度(图10或图11),这样一来无论使用者是站立、平躺、倒立或是各种角度的倾斜都可以按照人类本来的习惯看到图像或视频。
与现有技术相比较,采用本发明的设备和方法,可使得显示屏幕的根据用户人脸的方位自动调整,使用户在任意角度观看时都能看到最适宜观看的显示界面,提升了用户体验。
Claims (6)
1.一种可根据人脸方向来调整显示方向的电子设备,其特征在于包括:
摄像模块,用于获取用户的画面信息;
面部识别模块,用于根据用户的画面信息识别出用户的脸部方位,并定位用户脸部特征与显示屏的相对方向;
显示控制模块,根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向,使显示模块的显示的图像方向与用户的观看方向一致;和
显示模块,用于显示图像;
所述面部识别模块采用的方法是根据人脸象素的灰度和颜色信息进行图像分割来对人脸特征进行定位,包括三层检测***,第一层根据人脸象素的灰度采用四分图筛选人脸候选区域;第二层根据人脸眼区、鼻区和口区之间的灰度采用八分图确定人脸基本位置区域;第三层在人脸基本位置区域内采用边缘检测算法对人脸位置进行分割,确定用户脸部特征。
2.如权利要求1所述的可根据人脸方向来调整显示方向的电子设备,其特征在于,用户的脸部特征包括眼睛、鼻子、嘴区域的位置和特征。
3.一种根据人脸方向来调整显示方向的方法,其特征在于,包括:
获取用户的画面信息;
识别用户的人脸区域及面部特征;
根据用户脸部特征与显示屏的相对方向来调整显示模块显示的图像方向;
所述识别用户的人脸区域及面部特征的方法是根据人脸象素的灰度和颜色信息进行图像分割来对人脸特征进行定位,包括三层检测***,第一层根据人脸象素的灰度采用四分图筛选人脸候选区域;第二层根据人脸眼区、鼻区和口区之间的灰度采用八分图确定人脸基本位置区域;第三层在人脸基本位置区域内采用边缘检测算法对人脸位置进行分割,确定用户脸部特征。
4.如权利要求3所述的根据人脸方向来调整显示方向的方法,其特征在于,用户的脸部特征包括眼睛、鼻子、嘴区域的位置和特征。
5.如权利要求3所述的根据人脸方向来调整显示方向的方法,其特征在于,所述边缘检测算法包括如下图像处理过程:本地直方图归一化、平滑、二值化、跟踪、特定提取。
6.如权利要求3所述的根据人脸方向来调整显示方向的方法,其特征在于,识别用户的人脸区域及面部特征后,当用户旋转90度、180度或270度面对显示屏时,显示控制模块将显示图像的所有象素点相应的旋转90度、180度或270度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210549784.4A CN103049084B (zh) | 2012-12-18 | 2012-12-18 | 一种可根据人脸方向来调整显示方向的电子设备及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210549784.4A CN103049084B (zh) | 2012-12-18 | 2012-12-18 | 一种可根据人脸方向来调整显示方向的电子设备及其方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103049084A CN103049084A (zh) | 2013-04-17 |
CN103049084B true CN103049084B (zh) | 2016-01-27 |
Family
ID=48061753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210549784.4A Expired - Fee Related CN103049084B (zh) | 2012-12-18 | 2012-12-18 | 一种可根据人脸方向来调整显示方向的电子设备及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103049084B (zh) |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104122978A (zh) * | 2013-04-24 | 2014-10-29 | 国基电子(上海)有限公司 | 显示画面调整***及方法 |
CN103353760B (zh) * | 2013-04-25 | 2017-01-11 | 上海大学 | 适应任意脸部方位的显示界面调节装置及方法 |
CN104216508B (zh) * | 2013-05-31 | 2017-05-10 | 中国电信股份有限公司 | 通过眼动跟踪技术进行功能键操作的方法和装置 |
CN104423546A (zh) * | 2013-08-28 | 2015-03-18 | 联芯科技有限公司 | 一种方向传感实现方法及终端设备 |
CN104699380B (zh) * | 2013-12-09 | 2018-10-12 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104777989B (zh) * | 2014-01-13 | 2019-03-29 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US10613687B2 (en) | 2014-01-13 | 2020-04-07 | Beijing Lenovo Software Ltd. | Information processing method and electronic device |
CN104866809B (zh) * | 2014-02-25 | 2021-05-11 | 腾讯科技(深圳)有限公司 | 画面播放方法和装置 |
CN105242888B (zh) * | 2014-07-10 | 2018-10-12 | 联想(北京)有限公司 | 一种***控制方法及电子设备 |
KR102348947B1 (ko) * | 2014-10-30 | 2022-01-11 | 삼성전자 주식회사 | 전자장치의 화면 표시 제어 방법 및 장치 |
CN104636036A (zh) * | 2015-01-12 | 2015-05-20 | 青岛海信电器股份有限公司 | 一种画面显示控制方法及装置 |
CN106162152A (zh) * | 2015-03-30 | 2016-11-23 | 联想(北京)有限公司 | 一种显示方法及电子设备 |
CN105320264B (zh) * | 2015-05-25 | 2019-10-15 | 维沃移动通信有限公司 | 一种移动终端的显示方法及移动终端 |
WO2016192062A1 (en) * | 2015-06-03 | 2016-12-08 | Motorola Mobility Llc | Determining the orientation of image data based on user facial position |
CN107949848B (zh) * | 2015-06-26 | 2022-04-15 | 英特尔公司 | 数字图像中的缺陷检测和校正 |
CN105105938A (zh) * | 2015-07-14 | 2015-12-02 | 南京邮电大学 | 基于人脸朝向识别与跟踪的智能轮椅控制方法及*** |
CN105389011A (zh) * | 2015-12-01 | 2016-03-09 | 深圳还是威健康科技有限公司 | 一种显示旋转控制方法及智能穿戴设备 |
FR3054685B1 (fr) * | 2016-07-28 | 2018-08-31 | Thales Sa | Procede et systeme de commande de l'affichage d'informations et terminal d'utilisateur mettant en oeuvre ce procede |
CN106445157B (zh) * | 2016-09-30 | 2020-08-07 | 珠海市魅族科技有限公司 | 一种画面显示方向调整的方法以及装置 |
CN106569705B (zh) * | 2016-10-27 | 2020-06-09 | 南京秦淮紫云创益企业服务有限公司 | 一种内容显示方法及终端 |
CN109257489B (zh) * | 2018-08-23 | 2021-01-08 | 维沃移动通信有限公司 | 一种显示方法及移动终端 |
CN109445735A (zh) * | 2018-10-22 | 2019-03-08 | 奇酷互联网络科技(深圳)有限公司 | 显示方向的控制方法、移动终端及计算机存储介质 |
CN109445331A (zh) * | 2018-10-24 | 2019-03-08 | 天津津航计算技术研究所 | 一种智能显控*** |
CN109558842A (zh) * | 2018-11-30 | 2019-04-02 | 北京七鑫易维信息技术有限公司 | 一种调整图像显示方向的方法、装置、设备和介质 |
CN113168823A (zh) * | 2018-12-18 | 2021-07-23 | 深圳市柔宇科技股份有限公司 | 显示控制方法、电子设备及计算机可读存储介质 |
CN110864208B (zh) * | 2019-11-20 | 2021-04-02 | 商丘师范学院 | 一种具有自动追踪功能的计算机显示器 |
CN113990214A (zh) * | 2021-10-22 | 2022-01-28 | 深圳倜傥国际设计有限公司 | 一种模块化区域可调节展示*** |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101917548A (zh) * | 2010-08-11 | 2010-12-15 | 无锡中星微电子有限公司 | 自适应调整画面的摄像装置及方法 |
CN102081918A (zh) * | 2010-09-28 | 2011-06-01 | 北京大学深圳研究生院 | 一种视频图像显示控制方法及视频图像显示器 |
-
2012
- 2012-12-18 CN CN201210549784.4A patent/CN103049084B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101917548A (zh) * | 2010-08-11 | 2010-12-15 | 无锡中星微电子有限公司 | 自适应调整画面的摄像装置及方法 |
CN102081918A (zh) * | 2010-09-28 | 2011-06-01 | 北京大学深圳研究生院 | 一种视频图像显示控制方法及视频图像显示器 |
Also Published As
Publication number | Publication date |
---|---|
CN103049084A (zh) | 2013-04-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103049084B (zh) | 一种可根据人脸方向来调整显示方向的电子设备及其方法 | |
US11354827B2 (en) | Methods and systems for fusion display of thermal infrared and visible image | |
US9727775B2 (en) | Method and system of curved object recognition using image matching for image processing | |
CN106650665B (zh) | 人脸跟踪方法及装置 | |
CN104813339B (zh) | 用于检测视频中的对象的方法、设备和*** | |
CN105279372B (zh) | 一种确定建筑物高度的方法和装置 | |
JP4893863B1 (ja) | 画像処理装置、および画像処理方法 | |
US10319104B2 (en) | Method and system for determining datum plane | |
US9049397B2 (en) | Image processing device and image processing method | |
CN109285145A (zh) | 基于智能手机的多株立木高度测量方法 | |
US20130315470A1 (en) | Body measurement | |
CN105812790B (zh) | 图像传感器感光面与光轴垂直度的评测方法及光学测试卡 | |
CN104182114A (zh) | 用于调整移动设备的画面显示方向的方法和*** | |
JP5838560B2 (ja) | 画像処理装置、情報処理装置、及び撮像領域の共有判定方法 | |
CN108428214A (zh) | 一种图像处理方法及装置 | |
CN105139404A (zh) | 一种可检测拍摄质量的证照相机及拍摄质量检测方法 | |
CN110472460A (zh) | 人脸图像处理方法及装置 | |
CN114098636B (zh) | 一种人体健康状态管理方法、***和电子设备 | |
US11657592B2 (en) | Systems and methods for object recognition | |
JP2009245404A (ja) | 画像処理装置および方法並びにプログラム | |
CN109840453A (zh) | 一种人脸匹配方法及装置 | |
CN109785439A (zh) | 人脸素描图像生成方法及相关产品 | |
WO2021248564A1 (zh) | 一种全景大数据应用监测管控*** | |
KR101199959B1 (ko) | 영상 내 교통표지판 인식 시스템 | |
CN112711982A (zh) | 视觉检测方法、设备、***以及存储装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address |
Address after: 518000 Guangdong Province Shenzhen Nanshan District High-tech Industrial Park South District High-tech Nandao National Micro-R&D Building 1 Floor West Part, 2 Floors Patentee after: GUOWEI GROUP (SHENZHEN) Co.,Ltd. Address before: 518000 2F, Nanshan District new high tech Industrial Park, Shenzhen, Guangdong. Patentee before: SHENZHEN STATE MICRO TECHNOLOGY Co.,Ltd. |
|
CP03 | Change of name, title or address | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160127 |
|
CF01 | Termination of patent right due to non-payment of annual fee |