CN104065865A - 操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法 - Google Patents

操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法 Download PDF

Info

Publication number
CN104065865A
CN104065865A CN201310403294.8A CN201310403294A CN104065865A CN 104065865 A CN104065865 A CN 104065865A CN 201310403294 A CN201310403294 A CN 201310403294A CN 104065865 A CN104065865 A CN 104065865A
Authority
CN
China
Prior art keywords
image
unit
operation history
character
storage apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310403294.8A
Other languages
English (en)
Inventor
河田祐一
小关十三次
山崎英树
冈本健资
铃木信明
坂东义文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN104065865A publication Critical patent/CN104065865A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00832Recording use, e.g. counting number of pages copied
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00251Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/40062Discrimination between different image types, e.g. two-tone, continuous tone
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Facsimiles In General (AREA)

Abstract

本发明提供了一种操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法。操作历史图像存储设备包括成像单元,其捕获面对根据操作者的操作执行处理的处理设备的特定区域的图像;控制器,其控制成像单元以捕获关于处理设备的操作状态的图像;提取单元,其从由成像单元捕获的特定区域的图像中提取人物图像;掩蔽单元,其掩蔽背景图像的除了由提取单元提取的人物图像之外的部分或全部;以及存储单元,其存储由掩蔽单元掩蔽后的特定区域的图像作为操作处理设备的操作者的操作历史信息。

Description

操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法
技术领域
本发明涉及一种操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法。
背景技术
日本未审专利申请公开No.11-008831公开了一种图像***,其用于将对象与背景组合。该***在打印由数字相机捕获的图像时将对象与背景帧模版组合。
此外,日本未审专利申请公开No.2003-078745公开了一种技术,其将输入图像分为多个区域并且将代码信息附于多个区域以防止未授权的再现。该技术为文本提供了基于区域的安全,并且基于预先附加的代码来确定是否允许再现。
发明内容
本发明的目的在于提供一种操作历史图像存储设备、图像处理设备和用于控制操作历史图像的存储的方法,其能够防止信息由于包括在被捕获为操作历史图像的图像中而被泄漏。
根据本发明的第一方面,提供了一种操作历史图像存储设备,其包括成像单元,其捕获面对根据操作者的操作执行处理的处理设备的特定区域的图像;控制器,其控制成像单元以捕获对于处理设备的操作状态的图像;提取单元,其从由成像单元捕获的特定区域的图像中提取人物图像;掩蔽单元,其掩蔽除了由提取单元提取的人物图像之外的背景图像的一部分或全部;以及存储单元,其存储由掩蔽单元掩蔽后的特定区域的图像作为操作处理设备的操作者的操作历史信息。
根据本发明的第二方面,第一方面的操作历史图像存储设备进一步包括处于处理设备中的移动体检测器,其检测移动体是否进入至少包括特定区域的监视区域。控制器使得成像单元在由移动体检测器检测到移动体期间继续图像捕获。
根据本发明的第三方面,在第一或第二方面的操作历史图像存储设备中,提取单元包括距离信息获得单元,其获得对应于特定区域的图像的距离信息;比较单元,其将由距离信息获得单元获得的距离与预定阈值进行比较;以及确定单元,其基于由比较单元进行比较的结果将对应于小于阈值的距离的图像确定为人物图像。掩蔽单元掩蔽除了由确定单元确定的人物图像之外的背景图像的全部。
根据本发明的第四方面,在第三方面的操作历史图像存储设备中,距离信息获得单元基于由红外线相机获得的拍摄信息获得距离信息。
根据本发明的第五方面,在第一或第二方面的操作历史图像存储设备中,提取单元包括识别单元,其分析由成像单元捕获的特定区域的图像并且识别需要掩蔽的掩蔽需要图像;确定单元,其将由识别单元识别出的掩蔽需要图像确定为除了人物图像之外的背景图像的一部分。所述掩蔽单元对由所述确定单元确定为除了所述人物图像之外的所述背景图像的一部分的所述掩蔽需要图像进行掩蔽。
根据本发明的第六方面,在第五方面的操作历史存储设备中,识别单元包括字符识别单元,其识别字符图像,并且将由字符识别单元识别出的字符图像识别为掩蔽需要图像。
根据本发明的第七方面,第一至第六方面中的任一方面的操作历史图像存储设备进一步包括阻止单元,其阻止存储单元执行存储操作直到掩蔽单元掩蔽了特定区域的图像中除了人物图像之外的背景图像的全部或一部分。存储单元是非易失性存储器。
根据本发明的第八方面,第一至第七方面中的任一方面的操作历史图像存储设备进一步包括脸部识别单元,其从人物图像中识别脸部图像。掩蔽单元除了掩蔽除了人物图像之外的背景图像之外还掩蔽由脸部识别单元识别出的脸部图像。
根据本发明的第九方面,在第一至第八方面的操作历史图像存储设备中,由掩蔽单元掩蔽的图像的原始图像被编码并且存储,并且能够通过由预定的操作者进行解码来解除掩蔽状态。
根据本发明的第十方面,在第一至第九方面中的任一方面的操作历史图像存储设备中,由掩蔽单元掩蔽的图像是通过对原始图像进行编码获得的图像,并且能够通过由预定操作者进行解码来解除掩蔽状态。
根据本发明的第十一方面,提供了一种图像处理设备,其包括第一至第十方面中的任一方面的操作历史图像存储设备。处理设备包括读取图像信息的图像读取设备或 基于图像信息在记录纸上形成图像的图像形成设备中的至少任一种。
根据本发明的第十二方面,提供了一种控制操作历史图像的存储的方法。该方法包括捕获操作者在面对处理设备的特定区域中操作处理设备的操作状态的图像;从捕获的特定区域的图像中提取人物图像;掩蔽除了所提取的人物图像之外的背景图像的全部或一部分;以及存储掩蔽之后的特定区域的图像作为操作处理设备的操作者的操作历史信息。
根据本发明的第一方面,能够防止信息由于被包括在作为操作历史图像捕获的图像中而导致泄漏。
根据本发明的第二方面,能够比没有提供本构造的情况更高效地获得接近的人的图像。
根据本发明的第三方面,能够比没有提供本构造的情况更简单且更容易地提取人物图像。
根据本发明的第四方面,能够比没有提供本构造的情况更简单且更容易地测量特定区域的图像的距离。
根据本发明的第五方面,被防止泄漏的信息能够限于字符图像。
根据本发明的第六方面,被防止泄漏的信息能够限于字符图像。
根据本发明的第七方面,能够可靠地防止存储掩蔽图像。
根据本发明的第八方面,能够防止侵犯隐私。
根据本发明的第九方面,能够使用掩蔽图像和编码图像。
根据本发明的第十方面,能够在需要时使用非掩蔽的原始图像。
根据本发明的第十一方面,能够防止信息由于被包括在作为操作历史图像捕获的图像中而导致泄漏。
根据本发明的第十二方面,能够防止信息由于被包括在作为操作历史图像捕获的图像中而导致泄漏。
附图说明
将基于附图详细描述本发明的示例性实施方式,其中:
图1是根据第一示例性实施方式的图像处理设备的示意图;
图2是示出根据第一示例性实施方式的信息处理设备的电源***和控制***的 构造的框图;
图3A是示出图像处理设备及其周边的透视图,其中,操作者没有面对根据第一示例性实施方式的图像处理设备;
图3B是示出图像处理设备及其周边的透视图,其中,操作者面对根据第一示例性实施方式的图像处理设备;
图4是示出根据第一示例性实施方式的主控制器的摄像头控制器的功能的框图;
图5是示出根据第一示例性实施方式的成像装置的成像区域的平面图;
图6是示出根据第一示例性实施方式的成像装置的成像区域的侧视图;
图7的(A)是由成像装置捕获的原始图像的前视图;
图7的(B)是示出通过按视角划分原始图像获得的区域的前视图;
图7的(C)是通过对原始图像执行掩蔽处理获得的存储图像的前视图;
图8是示出由根据第一示例性实施方式的主控制器的摄像头控制器执行的成像控制的过程的流程图;
图9是示出根据第二示例性实施方式的主控制器的摄像头控制器的功能的框图;
图10A是根据第二示例性实施方式的原始图像的前视图;
图10B是根据第二示例性实施方式的通过对原始图像执行掩蔽处理获得的存储图像的前视图;
图11是示出根据第三示例性实施方式的主控制器的摄像头控制器的功能的框图;
图12A是根据第三示例性实施方式的原始图像的前视图;以及
图12B是根据第三示例性实施方式的通过对原始图像执行掩蔽处理获得的存储图像的前视图。
具体实施方式
(第一示例性实施方式)
图1是根据第一示例性实施方式的图像处理设备10的示意图。
图像处理设备10设置有处理装置(其也可以被统称为“装置”),其包括在记录纸上形成图像的图像形成单元12、读取文档图像的图像读取单元14和传真通信控制电路16。记录纸排出托盘10T形成在图像形成单元12与其它装置(图像读取单元14 和传真通信控制电路16)之间。由图像形成单元12在其上记录有图像的记录纸被排出到记录纸排出托盘10T。
此外,操作单元46设置在图像读取单元14的壳体上。操作单元46包括图2中所示的UI触摸面板40和其它硬键(未示出)。
此外,人体检测传感器30附接到形成图像处理设备10的一部分并且支撑图像读取单元14的竖长矩形柱50。
图像处理设备10包括主控制器18,并且控制图像形成单元12、图像读取单元14和传真通信控制电路16以例如暂时地存储由图像读取单元14读取的文档图像的图像数据,并且将读取的文档图像的图像数据发送给图像形成单元12或传真通信控制电路16。
诸如互联网的通信网络20连接到主控制器18,同时电话网络22连接到传真通信控制电路16。主控制器18经由通信网络20连接到个人计算机(PC)29(参见图2)以接收图像数据。此外,主控制器18用于通过传真通信控制电路16利用电话网络22执行传真发送和接收。
图像读取单元14包括用于放置文档的文档台、扫描放置在文档台上的文档的图像同时照射光的扫描驱动***以及光电转换元件,例如电荷耦合装置,其接收由扫描驱动***通过扫描发射的或反射的光并且将光转换为电信号。
图像形成单元12包括光导体。对光导体均匀充电的充电装置、基于图像数据扫描光束的扫描曝光单元、对由扫描曝光单元通过扫描曝光而形成的静电潜像进行显影的图像显影单元、将光导体上的显影图像转印到记录纸上的转印单元以及清洁转印之后的光导体的表面的清洁单元设置在光导体周围。此外,对转印在记录纸上的图像进行定影的定影单元设置在记录纸的传送路径上。
插头26附接在图像处理设备10的输入电源线缆24的末端。当插头26***到连接到墙壁W的市电电源31的接线板32中时,图像处理设备10接收来自市电电源31的电力。第一示例性实施方式的图像处理设备10被构造为通过主电源开关41的开关操作来提供市电。
主电源开关41设置为当面板朝向图像处理设备10的前侧打开(通过围绕其下边缘旋转)时暴露的内部组件的一部分。
此外,在第一示例性实施方式中,除了主电源开关41之外,还设置有子电源操 作单元44。子电源操作单元44用于选择在主电源开关41开启时被提供有电力的各装置的操作模式。
第一示例性实施方式的图像处理设备10设置有成像装置52,其捕获面对图像处理设备10的操作者60的图像并且输入操作指令。
成像装置52由附接到图像处理设备10的后侧的支架54支撑,并且被布置在图像读取单元14的最上端上方。成像装置52的成像光学轴朝向图像处理设备10的前面斜向下地延伸。
因此,成像装置52的成像区域始终包括位于图像处理设备10前方并且面对图像处理设备10的操作者操作操作单元46的空间(参见图3B)。
注意的是,成像光学轴不必朝向图像处理设备10的前方斜向下地延伸,并且光学轴的方向可以根据图像处理设备10安装的地方而改变。此外,可以提供有调整机构,其能够调整成像装置的成像光学轴的竖直和水平位置和方向。
下面描述成像装置52的成像时刻和针对捕获图像的图像处理控制。
(图像处理设备的控制***的硬件构造)
图2是示出图像处理设备10的控制***的硬件构造的示意图。
通信网络20连接到图像处理设备10的主控制器18。注意的是,能够用作图像数据等等的发送源的PC(终端设备)29连接到通信网络20。
传真通信控制电路16、图像读取单元14、图像形成单元12、UI触摸板40和IC卡读取器/写入器58经由各总线33A至33E(例如,数据总线和控制总线)连接到主控制器18。即,图像处理设备10的处理单元主要由主控制器18控制。注意的是,UI触摸板背光40BL附接到UI触摸板40。
此外,图像处理设备10包括电源单元42,其利用信号线束43连接到主控制器18。
电源单元42通过输入电源线缆24接收从市电电源31提供的电力。主电源开关41附接到输入电源线缆24。
电源单元42设置有电源线35A至35E,其分别独立地将电力提供给主控制器18、传真通信控制电路16、图像读取单元14、图像形成单元12、UI触摸板40和IC卡读取器/写入器58。因此,主控制器18可以通过在装置的操作模式期间单独地将电力提供给装置(下面称为“处理装置”或“模块”)(供电模式)或不向其提供电力(休眠 模式)来执行部分节能控制。
此外,人体检测传感器30连接到主控制器18,并且被构造为监视图像处理设备10周围的人的有无,更具体地,是否存在正在操作操作单元46(包括图像处理设备10的UI触摸板40)的操作者60。
根据第一示例性实施方式的第一人体检测传感器30被构造为检测移动体的有无(存在或不存在)。人体检测传感器30可以通常是反射型传感器等等(反射型传感器),其包括光发射单元和光接收单元。光发射单元和光接收单元可以设置为彼此分离。
用作人体检测传感器30的反射型传感等等的最具区别性的特征是基于朝向光接收单元的光是否被中断来可靠地检测移动体的有无。此外,由于入射在光接收单元上的光的量受到从光发射单元发射的光的量的限制,因此,检测区域是相对较近的范围的区域。这里使用的表述“移动体”是指能够自己移动的对象。移动体的典型示例是操作者60。换言之,人体检测传感器30不仅检测运动的对象,而且检测停止的移动体。
此外,人体检测传感器30不限于反射型传感器。然而,人体检测传感器30的检测区域可以包括操作图像处理设备10的UI触摸板40和硬键的区域。作为示例,检测临界距离(最远位置)被设置在0.2至1.0m的范围内。上述成像装置42的成像区域包括在该区域中。
(由成像装置52进行的操作日志存储)
根据第一示例性实施方式的图像处理设备10通过利用成像装置52捕获面对图像处理设备10的操作者的图像,存储特定区域的图像(其可以是动态图像或静态图像)并且基于捕获图像分析操作者遇到麻烦的操作类型并且是否在验证处理(例如面部识别和ID验证)中存在冒充(下面也称为“操作分析”)以便于将来改进图像处理设备10的可操作性。
注意的是,如图3B中所示,特定区域对应于包括操作者的面对图像处理设备10的上部身体的视角56(参见图3B中的虚线)。
成像装置52在主控制器18的控制下进行操作,并且当由人体检测传感器30检测到面对图像处理设备10的移动体(目标操作者60)时开始图像捕获,并且当人体检测传感器30不再检测到移动体时结束图像捕获。成像开始时刻和成像结束时刻可 以由计时器等等来延迟。
由成像装置52捕获的特定区域的图像的信息存储在连接到主控制器18的硬盘(HDD)62中。存储的关于特定区域的图像的信息被按照时间先后顺序与成像数据和时间信息关联地存储,并且在需要时进行读取从而执行分析。
当成像装置52捕获具有由图3B的虚线指示的视角56的特定区域的图像时,如图7的(A)中所示,除了操作者以外的对象的图像(例如,在后面存在墙壁,在墙壁上存在机密信息介质(纸质介质)64的情况下)可以被包括在视角56的图像的背景中。关于该机密信息介质的机密信息不用于操作分析。
因此,在第一示例性实施方式中,获得被捕获为成像区域的图像的距离信息,并且将操作者的图像与除了操作者60之外的背景图像66区分开。然后,对于除了操作者60之外的该背景图像66执行掩蔽处理。注意的是,机密信息介质64的图像区域包括在除了操作者60之外的背景图像中。
图4是示出用于对于由成像装置52捕获的图像信息执行图像处理并且将处理后的图像信息存储在硬盘62中的主控制器18中的操作的框图。注意的是,该框图示出了按功能划分的主控制器18中的操作,并且没有示出硬件构造。
如图2中所示,主控制器18包括摄像头控制器18CMR,其控制成像装置52的操作。
成像装置52包括可见光摄像头68、红外摄像头70和成像控制器72。
成像控制器72连接到摄像头控制器18CMR的成像时刻控制器74。人体检测传感器30连接到成像时刻控制器74。当人体检测传感器30检测到移动体时,成像时刻控制器74将成像指令信号输出到成像控制器72。因此,成像控制器72控制可见光摄像头68和红外线摄像头70以同步地控制其成像时刻。
可见光摄像头68以由图3B的虚线指示的视角56执行正常的图像捕获,并且将所捕获的图像信息(通过将光学信号转换为电信号获得的信息)输入到设置在摄像头控制器18CMR中的图像输入单元76。图像输入单元76基于从成像装置52到对象的距离执行按视角划分,执行所需的图像处理,并且将图像信息发送给掩蔽处理单元78。
注意的是,所需的图像处理可以包括诸如调整对比度、浓度、强度和亮度的通常的图像处理。此外,可见光摄像头68可以捕获大于预定图像区域的区域的图像并且 执行图像处理以将该图像剪切为视角56。
另一方面,红外线摄像头70与可见光摄像头68同步地利用红外光捕获具有视角56的图像,并且将图像输入到距离确定单元77。
距离确定单元77基于关于由红外线摄像头70捕获的图像的信息将关于相对于对象的距离的信息分配给图像区域划分后的各划分视角(参见图7的(B))。
在第一示例性实施方式中,需要的图像是操作者60的图像。操作者60的位置是能够操作图像处理设备10的操作单元46的位置。因此,能够预测相对于成像装置52的距离1(参见图5和图6)。
此外,如图5和图6中所示,距离2是相对于被成像为背景图像的墙壁的位置的距离,并且阈值被设置在预测的距离1与距离2之间。
距离确定单元77将阈值与通过划分所捕获的图像区域(视角56)而获得的各视角的图像的距离信息进行比较,并且将图像划分为人物图像(对应于小于阈值的距离的图像)或除了人物图像之外的背景图像(对应于大于阈值的距离的图像),并且将结果发送给掩蔽处理单元78。注意的是,对应于等于阈值的距离的图像可以划分为人物图像或背景图像。
掩蔽处理单元78将对应于被确定为大于阈值的距离的视角的区域(除了人物之外的背景图像)替换为实心黑色图像。之后,存储控制器80将结果存储在硬盘62中。该替换为实心黑色图像的处理是掩蔽处理(参见图7的(C))。
在第一示例性实施方式中,利用上述过程对成像区域进行掩蔽处理不包括在处理期间暂时地将背景图像存储在硬盘62中的步骤,因此存储在硬盘62中的图像不包括除了人物之外的背景图像。
注意的是,在第一示例性实施方式中,连接到硬盘62的信号线可以经由编码单元82连接到图像输入单元76以在掩蔽处理步骤之外对所谓的原始图像(原始数据)进行编码并且将编码图像存储在硬盘62中。因此,授权用户可以解码编码图像并且在需要时参考原始图像。
将参考图8的流程图描述第一示例性实施方式的操作。
图8是示出利用成像装置52由主控制器18的摄像头控制器18CMR执行的成像控制例程的流程图。
在步骤S100,确定是否由人体检测传感器30检测到移动体。该确定是确定在图 像处理设备10前方是否存在操作者。如果步骤S100中的确定为否定,则该例程结束。
另一方面,如果步骤S100中的确定为肯定,则确定在图像处理设备100的前方存在操作者。然后,处理转向步骤S102,在该步骤S102,指示成像装置52开始图像捕获。然后,处理转向步骤S104。
在步骤S104,可见光摄像头68和红外线摄像头70同步地开始图像捕获。然后,处理转向步骤S106,在该步骤S106,由可见光摄像头68捕获的原始图像被暂时地存储在易失性存储器中。该存储区域用作用于利用原始图像执行图像处理的工作区域。
在接下来的步骤S108中,由可见光摄像头68捕获的图像(参见图7的(A))按视角划分以便于成像距离的比较(参见图7的(B))。然后,处理转向步骤S110,在该步骤S110,基于由红外线摄像头70获得的拍摄信息的距离信息被分配给各划分后的视角。然后,处理转向步骤S112。
在步骤S112,各视角被与阈值进行比较,并且被分到距离1组或距离2组(参见图5和图6)。距离1组是被确定为人物图像的视角组,并且距离2组是被确定为背景图像的视角组。
在步骤S114,对于距离2组(即,被确定为背景图像的图像)进行掩蔽处理。然后,在步骤S116,在掩蔽处理之后,由可见光摄像头68捕获的图像区域的所有图像信息被存储在非易失性存储器(HDD62)中。然后,处理转向步骤S118(参见图7的(C))。
在步骤S118,确定人体检测传感器30是否检测到移动体,即,确定是否存在操作者。如果该确定为肯定,则处理返回步骤S104以重复上述步骤。这里使用的表述“重复”可以与成像装置52是否在预定时间间隔(即,逐帧图像)捕获到动态图像或捕获到静态图像无关地使用。注意的是,静态图像和动态图像不需要彼此区分,并且静态图像的延伸(以最小间隔捕获的逐帧图像)可以被定义为动态图像。
另一方面,如果步骤S118中的确定为否定,则处理转向步骤S120。在步骤S120,指示成像装置52结束图像捕获,从而该例程结束。
(第二示例性实施方式)
下面,将参考图9、图10A和图10B描述第二示例性实施方式。注意的是,与第一示例性实施方式相同的组件将由相同的附图标记表示并且将在这里不进行进一步的描述。
第二示例性实施方式的特征在于从由红外线摄像头70捕获的图像信息中检测人物图像的轮廓。
图9是示出根据第二示例性实施方式的用于对由成像装置52捕获的图像信息执行图像处理并且将处理后的图像信息存储在硬盘62中的主控制器18中的操作的框图。注意的是,该框图示出了按功能划分的主控制器18中的操作,并且没有示出硬件构造。
成像控制器72连接到摄像头控制器18CMR的成像时刻控制器74。人体检测传感器30连接到成像时刻控制器74。当人体检测传感器30检测到移动体时,成像时刻控制器74将成像指令信号输出到成像控制器72。因此,成像控制器72控制可见光摄像头68和红外线摄像头70以同步地控制其成像时刻。
可见光摄像头68利用由图3B的虚线指示的视角56执行正常的图像捕获,并且将捕获的图像信息(通过将光学信号转换为电信号获得的信息)输入到设置在摄像头控制器18CMR中的图像输入单元76。图像输入单元76执行所需的图像处理,并且将图像信息发送给掩蔽处理单元78。
注意的是,所需的图像处理可以包括诸如调整对比度、浓度、强度和亮度的通常的图像处理。此外,可见光摄像头68可以捕获大于预定图像区域的区域的图像并且执行图像处理以将该图像剪切为视角56。
另一方面,红外线摄像头70与可见光摄像头68同步地利用红外光捕获具有视角56的图像,并且将图像输入到轮廓确定单元90。
轮廓确定单元90基于关于由红外线摄像头70捕获的图像的信息(距离信息)检测人物图像和背景图像之间的边界信息。边界信息可以是坐标信息或矢量信息。
掩蔽处理单元78将基于边界信息识别的除了人物之外的背景图像的区域(参见图10A的原始图像)替换为实心黑色图像(参见图10B)。之后,存储控制器80将结果存储在硬盘62中。该替换为实心黑色图像的处理是掩蔽处理。
第二示例性实施方式中基于边界信息区分人物图像和背景图像可以实现比第一示例性实施方式中基于视角进行的区分更高的划分准确性。
在第二示例性实施方式中,利用上述过程对成像区域进行掩蔽处理不包括在处理期间暂时地将背景图像存储在硬盘62中的步骤,因此存储在硬盘62中的图像不包括除了人物之外的背景图像。
注意的是,在第二示例性实施方式中,连接到硬盘62的信号线可以经由编码单元82连接到图像输入单元76以在掩蔽处理步骤之外对所谓的原始图像(原始数据)进行编码并且将编码图像存储在硬盘62中。因此,授权用户可以解码编码图像并且在需要时参考原始图像。
(第三示例性实施方式)
下面,将参考图11、图12A和图12B描述第三示例性实施方式。注意的是,与第一和第二示例性实施方式相同的组件将由相同的附图标记表示并且将在这里不进行进一步的描述。
第三示例性实施方式的特征在于不需要在第一和第二示例性实施方式中使用的红外线摄像头70,并且从由可见光摄像头68捕获的图像信息中检测字符信息,从而对于字符图像执行掩蔽处理。
图11是示出根据第三示例性实施方式的用于对由成像装置52捕获的图像信息执行图像处理并且将处理后的图像信息出处在硬盘62中的主控制器18中的操作的框图。注意的是,该框图示出了按功能划分的主控制器18中的操作,并且没有示出硬件构造。
成像控制器72连接到摄像头控制器18CMR的成像时刻控制器74。人体检测传感器30连接到成像时刻控制器74。当人体检测传感器30检测到移动体时,成像时刻控制器74将成像指令信号输出到成像控制器72。因此,成像控制器72控制可见光摄像头68的成像时刻。
可见光摄像头68利用由图3B的虚线指示的视角56执行正常的图像捕获,并且将捕获的图像信息(通过将光学信号转换为电信号获得的信息)输入到设置在摄像头控制器18CMR中的图像输入单元76。图像输入单元76执行所需的图像处理,并且将图像信息发送给掩蔽处理单元78。
注意的是,所需的图像处理可以包括诸如调整对比度、浓度、强度和亮度的通常的图像处理。此外,可见光摄像头68可以捕获大于预定图像区域的区域的图像并且执行图像处理以将该图像剪切为视角56。
除了掩蔽处理单元78之外,图像输入单元76还将捕获的图像信息发送给字符识别单元92。字符识别单元92从所捕获的图像信息中提取字符信息。一般来说,常常存在下述情况,字符信息集中在捕获图像(墙壁66W)中的纸质介质64上。因此, 当提取了字符信息时,所提取的字符信息的区域可以被一并识别为特定部分(矩形区域)(字符区域93)。
字符识别单元92将指示所划分的字符区域的视角56(参见图3B)中的位置信息发送给掩蔽处理单元78。注意的是,虽然在第三示例性实施方式中诸如公告栏的特定部分是字符区域93,但是各字符可以被识别为字符区域。
掩蔽处理单元78将基于指示字符区域的位置信息识别的字符区域(参见图12A的原始图像)替换为实心黑色图像(参见图12B)。之后,存储控制器80将结果存储在硬盘62中。该替换为实心黑色图像的处理是掩蔽处理。
在第三示例性实施方式中,利用上述过程对成像区域进行掩蔽处理不包括在处理期间暂时地将背景图像存储在硬盘62中的步骤,因此存储在硬盘62中的图像不包括除了人物之外的背景图像。
注意的是,在第三示例性实施方式中,连接到硬盘62的信号线可以经由编码单元82连接到图像输入单元76以在掩蔽处理步骤之外对所谓的原始图像(原始数据)进行编码并且将编码图像存储在硬盘62中。因此,授权用户可以解码编码图像并且在需要时参考原始图像。
此外,在一些情况下,例如,作为编码结果而成像的图像是一系列随机字符。因此,在执行编码的情况下,可以使用编码图像(例如,一系列随机字符)而没有如上述第一至第三示例性实施方式中的掩蔽处理那样执行所谓的“实心黑色图像”的生成。利用编码图像作为掩蔽处理图像可以使得能够减少存储的图像数据的量。
已经为了示出和描述的目的而提供了本发明的示例性实施方式的前面的描述。这些描述不意在是穷尽的或者将本发明限制到所公开的具体形式。显而易见的是,对于本领域技术人员来说,各种修改和变化都是明显的。为了最好地解释本发明的原理及其实际应用而选择并描述实施方式,从而使得本领域技术人员能够理解本发明的各种实施方式并且各种修改也适合于能够想到的特定使用。想要的是,本发明的范围由下面的权利要求及其等价物限定。

Claims (17)

1.一种操作历史图像存储设备,所述操作历史图像存储设备包括:
成像单元,所述成像单元捕获面对根据操作者的操作执行处理的处理设备的特定区域的图像;
控制器,所述控制器控制所述成像单元以捕获对于所述处理设备的操作状态的图像;
提取单元,所述提取单元从由所述成像单元捕获的所述特定区域的图像中提取人物图像;
掩蔽单元,所述掩蔽单元掩蔽由所述提取单元提取的人物图像之外的背景图像的全部或部分;以及
存储单元,所述存储单元存储由所述掩蔽单元掩蔽之后的所述特定区域的图像作为操作所述处理设备的操作者的操作历史信息。
2.根据权利要求1所述的操作历史图像存储设备,所述操作历史图像存储设备进一步包括:
移动体检测器,所述移动体检测器处于所述处理设备中,并且检测移动体是否进入至少包括所述特定区域的监视区域中;
其中,所述控制器使得所述成像单元在所述移动体检测器检测所述移动体的期间继续图像捕获。
3.根据权利要求1所述的操作历史图像存储设备,
其中,所述提取单元包括:
距离信息获得单元,所述距离信息获得单元获得与所述特定区域的图像相对应的距离信息;
比较单元,所述比较单元将由所述距离信息获得单元获得的距离与预定阈值进行比较;以及
确定单元,所述确定单元基于所述比较单元的比较结果将与小于所述阈值的距离相对应的图像确定为人物图像,并且
所述掩蔽单元掩蔽由所述确定单元确定的人物图像之外的背景图像的全部。
4.根据权利要求2所述的操作历史图像存储设备,
其中,所述提取单元包括:
距离信息获得单元,所述距离信息获得单元获得与所述特定区域的图像相对应的距离信息;
比较单元,所述比较单元将由所述距离信息获得单元获得的距离与预定阈值进行比较;以及
确定单元,所述确定单元基于所述比较单元的比较结果将与小于所述阈值的距离相对应的图像确定为人物图像,并且
所述掩蔽单元掩蔽由所述确定单元确定的人物图像之外的背景图像的全部。
5.根据权利要求3所述的操作历史图像存储设备,其中,所述距离信息获得单元基于由红外线摄像头获得的拍摄信息来获得所述距离信息。
6.根据权利要求4所述的操作历史图像存储设备,其中,所述距离信息获得单元基于由红外线摄像头获得的拍摄信息来获得所述距离信息。
7.根据权利要求1所述的操作历史图像存储设备,
其中,所述提取单元包括:
识别单元,所述识别单元分析由所述成像单元捕获的所述特定区域的图像并且识别需要掩蔽的掩蔽需要图像;以及
确定单元,所述确定单元将由所述识别单元识别出的所述掩蔽需要图像确定为所述人物图像之外的所述背景图像的一部分,并且
所述掩蔽单元对由所述确定单元确定为所述人物图像之外的所述背景图像的一部分的所述掩蔽需要图像进行掩蔽。
8.根据权利要求2所述的操作历史图像存储设备,
其中,所述提取单元包括:
识别单元,所述识别单元分析由所述成像单元捕获的所述特定区域的图像并且识别需要掩蔽的掩蔽需要图像;以及
确定单元,所述确定单元将由所述识别单元识别出的所述掩蔽需要图像确定为所述人物图像之外的所述背景图像的一部分,并且
所述掩蔽单元对由所述确定单元确定为所述人物图像之外的所述背景图像的一部分的所述掩蔽需要图像进行掩蔽。
9.根据权利要求7所述的操作历史图像存储设备,其中,所述识别单元包括字符识别单元,所述字符识别单元识别字符图像,并且将由所述字符识别单元识别出的所述字符图像识别为所述掩蔽需要图像。
10.根据权利要求8所述的操作历史图像存储设备,其中,所述识别单元包括字符识别单元,所述字符识别单元识别字符图像,并且将由所述字符识别单元识别出的所述字符图像识别为所述掩蔽需要图像。
11.根据权利要求1所述的操作历史图像存储设备,所述操作历史图像存储设备进一步包括:
阻止单元,所述阻止单元阻止所述存储单元执行存储操作,直到所述掩蔽单元掩蔽了所述特定区域的图像中的所述人物图像之外的所述背景图像的全部或部分;
其中,所述存储单元是非易失性存储器。
12.根据权利要求1所述的操作历史图像存储设备,所述操作历史图像存储设备进一步包括:
脸部识别单元,所述脸部识别单元从所述人物图像中识别脸部图像,
其中,所述掩蔽单元除了掩蔽所述人物图像之外的所述背景图像之外,还掩蔽由所述脸部识别单元识别出的所述脸部图像。
13.根据权利要求1所述的操作历史图像存储设备,其中,由所述掩蔽单元掩蔽的图像的原始图像被编码并且存储,并且能够通过由预定的操作者进行解码来解除掩蔽状态。
14.根据权利要求1至13中的任一项所述的操作历史图像存储设备,其中,由所述掩蔽单元掩蔽的图像是通过对原始图像进行编码而获得的图像,并且能够通过由预定的操作者进行解码来解除掩蔽状态。
15.一种图像处理设备,所述图像处理设备包括:
根据权利要求1至13中的任一项所述的操作历史图像存储设备,
其中,所述图像处理设备包括读取图像信息的图像读取设备和基于图像信息在记录纸上形成图像的图像形成设备中的至少任一方。
16.一种图像处理设备,所述图像处理设备包括:
根据权利要求14所述的操作历史图像存储设备,
其中,所述图像处理设备包括读取图像信息的图像读取设备和基于图像信息在记录纸上形成图像的图像形成设备中的至少任一方。
17.一种控制操作历史图像的存储的方法,所述方法包括:
捕获操作者在面对处理设备的特定区域中操作所述处理设备的操作状态的图像;
从捕获的所述特定区域的图像中提取人物图像;
掩蔽所提取的人物图像之外的背景图像的全部或部分;以及
存储掩蔽之后的所述特定区域的图像作为操作所述处理设备的操作者的操作历史信息。
CN201310403294.8A 2013-03-18 2013-09-06 操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法 Pending CN104065865A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-055309 2013-03-18
JP2013055309A JP2014182476A (ja) 2013-03-18 2013-03-18 操作履歴情報保存装置、画像処理装置、操作履歴情報保存制御プログラム

Publications (1)

Publication Number Publication Date
CN104065865A true CN104065865A (zh) 2014-09-24

Family

ID=51525962

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310403294.8A Pending CN104065865A (zh) 2013-03-18 2013-09-06 操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法

Country Status (3)

Country Link
US (1) US20140268217A1 (zh)
JP (1) JP2014182476A (zh)
CN (1) CN104065865A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108712589A (zh) * 2018-05-03 2018-10-26 江苏建筑职业技术学院 基于互联网共享的自助复印打印***的智能降耗方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6515539B2 (ja) * 2015-01-13 2019-05-22 富士ゼロックス株式会社 画像形成装置
CN108064386B (zh) * 2017-11-24 2022-04-05 深圳市汇顶科技股份有限公司 背景去除方法、影像模块及光学指纹辨识***
US10291805B1 (en) * 2018-03-20 2019-05-14 Kabushiki Kaisha Toshiba Image processing apparatus

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070024921A1 (en) * 2005-07-27 2007-02-01 Yasutoshi Ohta Image forming device and method for the same
CN101106623A (zh) * 2006-07-11 2008-01-16 索尼株式会社 图像捕捉装置、捕捉方法、处理设备、处理方法以及程序
CN101227595A (zh) * 2007-01-15 2008-07-23 株式会社日立制作所 电梯监视装置
US20090012433A1 (en) * 2007-06-18 2009-01-08 Fernstrom John D Method, apparatus and system for food intake and physical activity assessment
CN101510957A (zh) * 2008-02-15 2009-08-19 索尼株式会社 图像处理设备、方法、程序、摄像机设备、通信***
CN102567721A (zh) * 2012-01-10 2012-07-11 北京水晶石数字科技股份有限公司 一种检测多人躯干末端位置的方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11224032A (ja) * 1998-02-06 1999-08-17 Minolta Co Ltd 複写機管理システム
JP2001285762A (ja) * 2000-03-30 2001-10-12 Fuji Xerox Co Ltd 画像印刷装置
JP2003319158A (ja) * 2002-04-18 2003-11-07 Toshiyuki Tani 画像処理システム
JP2005014252A (ja) * 2003-06-23 2005-01-20 Ricoh Co Ltd 画像形成装置及び画像形成システム
JP5709367B2 (ja) * 2009-10-23 2015-04-30 キヤノン株式会社 画像処理装置、および画像処理方法
US8873852B2 (en) * 2011-09-29 2014-10-28 Mediatek Singapore Pte. Ltd Method and apparatus for foreground object detection

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070024921A1 (en) * 2005-07-27 2007-02-01 Yasutoshi Ohta Image forming device and method for the same
CN101106623A (zh) * 2006-07-11 2008-01-16 索尼株式会社 图像捕捉装置、捕捉方法、处理设备、处理方法以及程序
CN101227595A (zh) * 2007-01-15 2008-07-23 株式会社日立制作所 电梯监视装置
US20090012433A1 (en) * 2007-06-18 2009-01-08 Fernstrom John D Method, apparatus and system for food intake and physical activity assessment
CN101510957A (zh) * 2008-02-15 2009-08-19 索尼株式会社 图像处理设备、方法、程序、摄像机设备、通信***
CN102567721A (zh) * 2012-01-10 2012-07-11 北京水晶石数字科技股份有限公司 一种检测多人躯干末端位置的方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108712589A (zh) * 2018-05-03 2018-10-26 江苏建筑职业技术学院 基于互联网共享的自助复印打印***的智能降耗方法
CN108712589B (zh) * 2018-05-03 2020-05-19 江苏建筑职业技术学院 基于互联网共享的自助复印打印***的智能降耗方法

Also Published As

Publication number Publication date
US20140268217A1 (en) 2014-09-18
JP2014182476A (ja) 2014-09-29

Similar Documents

Publication Publication Date Title
US8917402B2 (en) Power-supply control device, image processing apparatus, non-transitory computer readable medium, and power-supply control method for controlling power-supply based on monitoring a movement and executing an individual recognition
US9497346B2 (en) Power supply control apparatus, image processing apparatus, and non-transitory computer readable medium
US20140104630A1 (en) Power supply control apparatus, image processing apparatus, power supply control method, and non-transitory computer readable medium
CN103118212A (zh) 供电控制装置、图像处理设备和供电控制方法
CN104065865A (zh) 操作历史图像存储设备、图像处理设备和控制操作历史图像的存储的方法
KR101493009B1 (ko) 전후면 차량 번호 인식 방법과 그 시스템
US10863056B2 (en) Login support system that supports login to electronic apparatus
CN111917967A (zh) 门监控***及其控制方法
CN111835956B (zh) 摄像头控制方法和装置、图像采集设备和电子设备
US11157761B2 (en) IR/Visible image camera with dual mode, active-passive-illumination, triggered by masked sensor to reduce power consumption
KR20150035108A (ko) 와이파이 다이렉트를 이용한 로봇 청소기 및 방범 시스템
KR20200003971A (ko) 영상의 프라이버시 보호 및 변조 방지를 위한 영상 처리 장치, 영상 검증 장치 및 그 방법
KR20180099368A (ko) 장애인 주차 단속 장치 방법
US11050978B2 (en) Monitoring system and image processing apparatus
JP2021140459A (ja) 画像処理システム
JP2008306373A (ja) 車両撮像装置
JP2008155439A (ja) 画像形成装置
JP2009267803A (ja) 画像処理装置
GB2575876A (en) A mobile device liveness detection system
CN111355943A (zh) 一种监控设备、方法及装置、存储介质、电子装置
KR101489859B1 (ko) X선을 이용한 차량 번호 인식 시스템
JP2012181567A (ja) 情報読取装置、情報読取方法、及びプログラム
CN215987334U (zh) 一种获取皮肤纹路图像的模组以及电子设备
JP6489657B2 (ja) 画像記録システムを用いた警備システム
CN116456181A (zh) 一种露营模式下的拍照方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140924