CN109756670A - 图像处理***及图像处理方法 - Google Patents

图像处理***及图像处理方法 Download PDF

Info

Publication number
CN109756670A
CN109756670A CN201811318716.0A CN201811318716A CN109756670A CN 109756670 A CN109756670 A CN 109756670A CN 201811318716 A CN201811318716 A CN 201811318716A CN 109756670 A CN109756670 A CN 109756670A
Authority
CN
China
Prior art keywords
camera
article
basic configuration
image processing
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811318716.0A
Other languages
English (en)
Inventor
安永真明
有賀徳政
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Publication of CN109756670A publication Critical patent/CN109756670A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Image Input (AREA)

Abstract

本发明公开了一种能够适当地摄像用于生成词库信息的图像的图像处理***及图像处理方法，该图像处理***包括摄像头接口以及处理器，所述摄像头接口从摄像物品的摄像头取得摄像图像；以及所述处理器取得所述物品的基本形状，通过所述摄像头接口，从所述摄像头取得以与所述基本形状对应的摄像参数所摄像的摄像图像。

Description

图像处理***及图像处理方法
本申请主张申请日为2017年11月07日、申请号为JP2017-214553的日本申请为优先权，并引用上述申请的内容，通过引用将公开内容全部结合于此。
技术领域
本发明的实施例涉及一种图像处理***及图像处理方法。
背景技术
目前，应用将对象物的图像与词库信息匹配，指定对象物的对象物识别的技术。用于执行那样技术的图像处理***预先生成取得物品的图像的词库信息。
为了生成词库信息所必须的图像的个数及摄像角度因各物品而不同。因此，图像处理***有摄像不必要的图像的问题。
发明内容
为解决上述问题，本发明提供一种能够适当地摄像用于生成词库信息的图像的图像处理***及图像处理方法。
为解决上述问题，本发明的一实施例，提供了一种图像处理***，该图像处理***包括摄像头接口及处理器。所述摄像头接口，从摄像物品的摄像头，取得摄像图像；所述处理器，取得所述物品的基本形状，通过所述摄像头接口，从所述摄像头取得以与所述基本形状对应的摄像参数所摄像的摄像图像。
根据这样的构成，能够适当地摄像用于生成词库信息的图像。
对于图像处理***，在一种可能的实施方式中，所述摄像参数包含摄像所述物品的角度。
根据这样的构成，能够效率地摄像物品。
对于图像处理***，在一种可能的实施方式中，还包括：操作部，接受所述基本形状的输入，所述处理器取得通过所述操作部输入的所述基本形状。
根据这样的构成，能够直接取得物品的所述基本形状。
对于图像处理***，在一种可能的实施方式中，所述处理器对所述基本形状进行判定。
根据这样的构成，能够取得已判定的所述物品的所述基本形状。
对于图像处理***，在一种可能的实施方式中，还包括：距离传感器，对与所述物品的各部的距离进行测定，所述处理器基于所述距离，对所述基本形状进行判定。
根据这样的构成，能够取得所述物品的所述基本形状。
对于图像处理***，在一种可能的实施方式中，还包括：转台，具有用于载置所述物品的透明的圆盘，基于控制装置的控制，使所述圆盘的上表面上所配置的物品转动。
根据这样的构成，能够无需操作员的手动操作。
对于图像处理***，在一种可能的实施方式中，所述摄像头具有第一摄像头、第二摄像头及第三摄像头，所述第一摄像头从上部摄像所述物品，所述第二摄像头从侧面摄像所述物品，所述第三摄像头从底部通过所述圆盘摄像所述物品。
根据这样的构成，能够通过多角度取得摄像图像，判定所述物品的所述基本形状。
本发明的另一实施例，提供一种图像处理方法，包括以下步骤：取得物品的基本形状；以及以与所述基本形状对应的摄像参数，摄像所述物品。
根据这样的方法，能够适当地摄像用于生成词库信息的图像。
对于图像处理方法，在一种可能的实施方式中，所述摄像参数包含摄像所述物品的角度。
根据这的方法，能够效率地摄像物品。
对于图像处理方法，在一种可能的实施方式中，取得通过接受所述基本形状的输入的操作部输入的所述基本形状。
根据这样的方法，能够直接取得物品的所述基本形状。
附图说明
下面，参照附图对实施例所涉及的图像处理***及图像处理方法进行说明。当结合附图考虑时，通过参照下面的详细描述，能够更完整更好地理解本发明以及容易得知其中许多伴随的优点，但此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定，其中：
图1是表示第一实施例所涉及的图像处理***的构成例的框图；
图2是表示第一实施例所涉及的控制装置的构成例的框图；
图3是表示第一实施例所涉及的参数表的一例的框图；
图4是表示第一实施例所涉及的输入输出装置的显示例的图；
图5是表示第一实施例所涉及的控制装置的动作例的流程图；
图6是表示第二实施例的图像处理***的构成例的框图；
图7是表示第二实施例所涉及的控制装置的构成例的框图；以及
图8是表示第二实施例所涉及的控制装置的动作例的流程图。
附图标记说明
1、1’ 图像处理*** 10、10’ 控制装置
3 处理器 3a 平板终端
11 处理器 12 ROM
13 RAM 14 NVM
15 台接口 16 摄像头接口
17 照明接口 18 输入输出接口
19 距离传感器接口 20 输入输出装置
30、30’ 摄像装置 31 壳体
31a 隔板 32 转台
32a 圆盘 41、42、43 摄像头
51、52、53 照明 61、62、63 图标
71 距离传感器
具体实施方式
下面，参照附图对实施例进行说明。
(第一实施例)
首先，对第一实施例进行说明。
第一实施例所涉及的图像处理***摄像物品用于生成词库信息。图像处理***通过操作员等将物品放置在规定的位置。图像处理***摄像已放置(安置)的物品，取得物品的图像。
词库信息是用于对象物识别的信息。即，词库信息是与对象物的图像匹配，用于指定对象物的信息。词库信息既可以是物品的图像，又可以是表示物品的图像的特征量的信息。
图1是表示图像处理***1的构成例。如图1所示，图像处理***1由控制装置10、输入输出装置20以及摄像装置30等构成。控制装置10与输入输出装置20及摄像装置30可通信连接。在这里，图像处理***1视为摄像物品A的***。
控制装置10控制图像处理***1整体。控制装置10基于操作员的指示等，用摄像装置30摄像物品A。例如，控制装置10通过输入输出装置20，接受操作员输入的指示。此外，控制装置10通过输入输出装置20向操作员显示各种的信息。
输入输出装置20是接受来自操作员的指示的输入，向操作员显示各种的信息的接口。输入输出装置20由接受指示的输入的操作部和显示信息的显示部构成。
输入输出装置20作为操作部的动作，将表示从操作员接受的操作的信号发送给控制装置10。在这里，操作部由触摸面板构成。
输入输出装置20作为显示部的动作，基于控制装置10的控制显示各种的信息。例如，显示部由液晶显示器构成。显示部与作为操作部的触摸面板一体的形成。
另外，操作部也可以由键盘或数字键构成。
摄像装置30基于来自控制装置10的控制摄像物品A。摄像装置30从各种的角度摄像物品A。
如图1所示，摄像装置30由壳体31、转台32、摄像头41～43、照明51～53等构成。另外，摄像装置30除图1所示那样的构成之外还具有根据所需的构成，又可以从摄像装置30除去指定的构成。
壳体30是形成摄像装置30的外形的框架。壳体30诸如由树脂等构成。壳体31形成为长方体状。壳体31在垂直方向的中腹部具备隔板31a。隔板31a水平形成。隔板31a与壳体31的形状一致，形成为矩形。此外，隔板31a由透明材料形成。例如，隔板31a是丙烯板等。
在壳体31的内部，形成有转台32、摄像头41～43、照明51～53。
转台32形成在隔板31a上。转台32基于来自控制装置10的控制，使被配置在上面的物品A转动。例如，转台32由载置物品A的圆盘32a及使圆盘转动的驱动部等构成。圆盘32a由透明材料形成。例如，圆盘32是丙烯板等。根据这样的构成，能够无需操作员的手动操作。
摄像头41～43基于来自控制装置10的控制，摄像物品A。摄像头41～43将摄像物品A获得的摄像图像发送给控制装置10。例如，摄像头41～43是CCD(Charge Coupled Device：电荷耦合器件)摄像头等。
摄像头41(第一摄像头)从规定的方向摄像物品A。摄像头41摄像物品A的上面。摄像头41以朝下的方式设置在壳体31的上面。摄像头41从上部摄像物品A。
摄像头42(第二摄像头)从与该规定的方向正交的方向摄像物品A。摄像头42摄像物品A的侧面。摄像头42以朝向侧面的方式设置在壳体31的侧面。摄像头42从侧部摄像物品A。
摄像头43(第三摄像头)从与该规定的方向相对的方向摄像物品A。摄像头43摄像物品A的下面。摄像头43以朝上的方式设置在壳体31的下面。摄像头43从底部摄像物品A。根据这样的构成，能够通过多角度取得摄像图像，判定所述物品的所述基本形状。
照明51～53基于来自控制装置10的控制，照亮物品A。例如，照明51～53由LED(light emitting diode：发光二极管)等构成。
照明51照亮摄像头41所摄像的区域。即，照明51照亮物品A的上面。照明51以朝下的方式设置在壳体31的上面。照明51从上部照亮物品A。
照明52照亮摄像头42所摄像的区域。即，照明52照亮物品A的侧面。照明52以朝向侧面的方式设置在壳体31的侧面。照明52从侧部照亮物品A。
照明53照亮摄像头43所摄像的区域。即，照明53照亮物品A的下面。照明53以朝上的方式设置在壳体31的下面。照明53从底部照亮物品A。
接着，对控制装置10的构成例进行说明。
图2是表示控制装置10的构成例的框图。如图2所示，控制装置10包括处理器11、ROM12、RAM13、NVM14、台(转台)接口15、摄像头接口16、照明接口17及输入输出接口18等。处理器11、ROM12、RAM13、NVM14、台接口15、摄像头接口16、照明接口17及输入输出接口18通过数据总线等相互连接。
另外，控制装置10除图2所示那样的构成之外还具备根据所需的构成，又可以从控制装置10除去指定的构成。
处理器11具有对控制装置10整体的动作进行控制的功能。处理器11也可以具备内部缓存及各种的接口等。处理器11通过执行内部存储器、ROM或NVM14所预先存储的程序来实现各种的处理。
另外，处理器11通过执行程序实现的各种的功能中的一部分也可以通过硬件电路实现。这时，处理器11控制通过硬件电路所执行的功能。
ROM12是预先存储有控制程序及控制数据等的非易失性的存储器。ROM12所存储的控制程序及控制数据根据控制装置10的规格被预先被编入。ROM12诸如存储控制控制装置10的电路基板的程序(例如，BIOS)等。
RAM13是易失性的存储器。RAM13暂时地存储处理器11的处理中的数据等。RAM13基于来自处理器11的指令，存储各种的应用程序。此外，RAM13也可以存储应用程序的执行所需的数据及应用程序的执行结果等。
NVM14是可数据的写入及改写的非易失性的存储器。NVM14诸如由HDD(Hard DiskDrive：硬盘驱动器)、SSD(Solid State Drive：固态硬盘)、EEPROM(注册商标)或闪存等构成。NVM14根据控制装置10的运用用途，存储控制程序、应用程序及各种的数据等。
此外，NVM14存储参数表。关于参数表后述。
台接口15是用于与转台32发送接收数据的接口。台接口15基于处理器11的控制，发送使圆盘32a转动的信号。此外，台接口15也可以从转台32接收表示圆盘32a的角度的信号。台接口15诸如也可以是支持USB连接的接口。
摄像头接口16是用于与摄像头41～43发送接收数据的接口。例如，摄像头接口16基于处理器11的控制，向摄像头41～43发送指示摄像的信号。此外，摄像头接口16从摄像头41～43取得通过摄像获得的摄像图像。摄像头接口16诸如也可以是支持USB连接的接口。
照明接口17是用于与照明51～53发送接收数据的接口。例如，照明接口17基于处理器11的控制，向照明51～53发送指示亮灯的信号。照明接口17诸如也可以是支持USB连接的接口。
输入输出接口18是用于与输入输出装置20发送接收数据的接口。例如，输入输出接口18从输入输出装置20接收表示从操作员接受到的操作的信号。此外，输入输出接口18基于处理器11的控制，将表示向操作员显示的画面的信息发送给输入输出装置20。输入输出接口18诸如也可以是支持USB连接的接口。
接着，对参数表进行说明。
参数表对应物品的基本形状，表示关于物品的摄像的摄像参数。
基本形状是物品的外形的类型。即，基本形状是物品的外形的大致形状。例如，基本形状是立方体、长方体、棱柱、圆柱、圆锥、球、棱锥或平面等。基本形状的内容不限于指定的构成。
摄像参数是为了生成物品的词库信息用于摄像必要的图像的参数。
图3表示参数表的一例。如图3所示，参数表对应存储“基本形状”和“摄像参数”。
“基本形状”表示基本形状的名称。此外，“基本形状”也可以是表示基本形状的ID等。
“摄像参数”表示对应的基本形状的摄像参数。“摄像参数”对应存储“摄像个数”、“摄像角度”及“亮灯位置”。另外，“摄像参数”除图3所示那样构成之外还具备根据所需的构成，又可以从“摄像参数”除去指定的构成。
“摄像个数”表示摄像的图像的个数。
“摄像角度”表示摄像商品的角度。例如，“摄像角度”表示摄像物品的面等。
“亮灯位置”表示在物品的摄像时进行亮灯的照明。“亮灯位置”也可以表示对应摄像角度亮灯的照明。
例如，参数表作为“立方体”的摄像参数，表示“6个”(摄像个数)、“正面/背面/上面/下面/左面/右面”(摄像角度)及“与摄像角度同方向”(亮灯位置)。即，参数表表示从正面/背面/上面/下面/左面/右面摄像“立方体”的物品。此外，参数表在摄像“立方体”的物品时，表示亮灯照亮摄像头所摄像的方向的照明。
接着，对控制装置10所实现的功能进行说明。控制装置10所实现的功能通过处理器11执行NVM14等所存储的程序来实现。
首先，处理器11具有接受被放置在转台32上的物品A的基本形状的输入的功能。
例如，处理器11通过输入输出装置20，接受物品A的基本形状的输入。处理器11设定被输入的基本形状。
图4是在输入输出装置20接受基本形状的输入时所显示的画面例的例子。如图4所示，输入输出装置20显示图标61～63。
图标61作为基本形状接受“立方体”的输入。
图标62作为基本形状接受“圆柱”的输入。
图标63作为基本形状接受作为未知的输入。
另外，输入输出装置20也可以显示接受其他的基本形状的输入的图标。
处理器11当检测对图标61或62的点击时，取得与被点击的图标61或62对应的基本形状。此外，处理器11当检测对图标63的点击时，识别基本形状为未知。
此外，处理器11具有取得与物品A的基本形状对应的摄像参数的功能。
处理器11参照参数表，取得与基本形状对应的摄像参数。处理器11设定已取得的摄像参数。
另外，在基本形状为未知时，处理器11也可以取得规定的摄像参数。
此外，处理器11具有按照已取得的摄像参数摄像物品的功能。
处理器11使用摄像头41～43、照明51～53及转台32，摄像物品A。
例如，在物品A的基本形状为“立方体”时，在图2所示的例子中，处理器11摄像物品A的“正面/背面/上面/下面/左面/右面”。摄像时，处理器11亮灯与各摄像头41～43对应的照明51～53。
例如，处理器亮灯照明51。当亮灯照明51时，处理器11用摄像头41摄像物品A的“上面”。当摄像物品A的“下面”时，处理器11亮灯照明53。当亮灯照明53时，处理器11用摄像头43摄像物品A的“下面”。
当摄像物品A的“侧面”时，处理器11用转台32将物品A转向规定的方向。当将物品A转向规定的方向时，处理器11亮灯照明52。当亮灯照明52时，处理器11用摄像头42摄像物品A的规定的侧面(正面、背面、左面或右面)。
当摄像物品的规定的侧面(正面、背面、左面或右面)时，处理器11用转台32将物品A向规定的方向转动。在将物品A向规定的方向转动时，处理器11用摄像头42摄像物品A的其他的侧面(正面、背面、左面或右面)。处理器11重复上述的动作，摄像物品A的正面、背面、左面或右面。
另外，处理器11也可以同时摄像物品A的上面、下面及一个侧面。
处理器11也可以将已摄像的图像存储到NVM14中。此外，处理器11也可以将已摄像的图像存储到外部的存储器中。此外，处理器11也可以将已摄像的图像发送给外部装置。
接着，对控制装置10的动作例进行说明。
图5是用于对控制装置10的动作例进行说明的流程图。在这里，物品A视为放置在转台32上。
首先，控制装置10的处理器11通过输入输出装置20，接受物品A的基本形状的输入(ACT11)。当接受物品A的基本形状的输入时，处理器11对能否取得物品A的基本形状进行判定(ACT12)。
当判定能够取得物品A的基本形状时(ACT12的YES)，处理器11参照参数表，取得与已取得的基本形状对应的摄像参数(ACT13)。
当判定不能取得物品A的基本形状(基本形状为未知)时(ACT12的NO)，处理器11取得规定的摄像参数(ACT14)。
在已取得与基本形状对应的摄像参数时(ACT13)、或已取得规定的摄像参数时(ACT14)，处理器11基于已取得的摄像参数，摄像物品A(ACT15)。
当摄像物品A时，处理器11结束动作。
另外，处理器11在物品A的基本形状为未知时，也可以结束动作。
此外，摄像装置30也可以具备可移动的摄像头。这时，处理器11按照摄像参数，移动摄像头以规定的角度摄像物品A。
此外，输入输出装置20也可以与控制装置10一体形成。
此外，处理器11也可以从外部装置取得摄像参数。
此外，处理器11也可以对物品设定多个的基本形状。例如，处理器11也可以对应物品的部分设定基本形状。此外，处理器11也可以设定与各部分对应的摄像参数，用于摄像物品的各部分。即，处理器11对应物品的部分以不同的摄像参数进行摄像。
如以上那样构成的图像处理***取得生成词库信息的物品的基本形状。图像处理***基于基本形状，设定词库信息的生成所需的摄像参数。图像处理***按照已设定的摄像参数摄像物品。其结果，图像处理***能够防止摄像生成词库信息所不需要的图像。因此，图像处理***能够适当地摄像物品。
此外，图像处理***具备从上部、侧部及下部摄像物品的各摄像头。其结果，图像处理***即使操作员不进行使物品转动等的动作，也能够摄像所需的图像。
(第二实施例)
接着，对第二实施例进行说明。
第二实施例所涉及的图像处理***在处理器11判定物品的基本形状的点上与第一实施例所涉及的图像处理***1不同。因此，对于其他的点附加相同的符号并省略详细的说明。
图6是表示第二实施例所涉及的图像处理***1’。如图6所示，图像处理***1’具备控制装置10’、输入输出装置20及摄像装置30’。摄像装置30’具备距离传感器71。
距离传感器71设置在壳体31的内部。在这里，距离传感器71以朝下的方式设置在壳体31的上面。距离传感器71测定从基准点或基准面到物品的各部的距离(例如，离距离传感器71的距离或从水平面到距离传感器71的距离)。
例如，距离传感器71基于从光源照射的光(可视光或不可视光)的反射光，测定距离。例如，距离传感器71也可以进行基于照射的光经测定对象反射到达距离传感器71的时间，测定与该测定对象的距离的ToF(Time－fo－Flight：飞行时间)方式。
此外，距离传感器71也可以由3D摄像头构成。距离传感器71也可以基于2个摄像头摄像的各图像的视差，计算距离。
距离传感器71的构成不限定于指定的构成。
接着，对控制装置10’的构成例进行说明。
图7是表示控制装置10’的构成例的框图。如图7所示，控制装置10’具备距离传感器接口19。处理器11和距离传感器接口19通过数据总线等相互连接。
另外，控制装置10’除图7所示那样构成之外还具备根据所需的构成，从控制装置10’除去指定的构成。
距离传感器接口19是用于与距离传感器71发送接收数据的接口。例如，距离传感器接口19基于处理器11的控制，向距离传感器71发送指示测定距离的信号。此外，距离传感器接口19从距离传感器71取得表示已测定的距离的信号。距离传感器接口19诸如也可以是支持USB连接的接口。
接着，对控制装置10’所实现的功能进行说明。控制装置10’在控制装置10所实现的功能上，实现以下的功能。控制装置10’所实现的功能通过处理器11执行NVM14等所存储的程序来实现。
处理器11具有对放置在转台32上的物品A的基本形状进行判定的功能。
例如，处理器11用距离传感器71测定从基准点或基准面到物品A的各部的距离。处理器11基于已测定的距离，判定基本形状。例如，处理器11基于已测定的距离，判定物品A的上面及侧面等的形状，判定物品A的基本形状。
此外，处理器11用摄像头41～43摄像物品A。处理器11基于已摄像的图像，判定基本形状。例如，处理器11提取各图像的边缘，判定物品A的上面、侧面及下面等的形状。处理器11基于已判定的各形状，判定物品A的基本形状。
另外，处理器11也可以基于用摄像头41～43的任一个或2个摄像的图像，判定基本形状。
此外，摄像装置30’还可以具备摄像用于判定基本形状的图像的摄像头。处理器11也可以基于用该摄像头摄像的图像，判定物品A的基本形状。
此外，处理器11也可以基于用距离传感器71测定的距离及用摄像头41～43摄像的图像，判定物品A的基本形状。
在这里，处理器11视为基于用距离传感器71测定的距离及用摄像头41～43摄像的图像，判定物品A的基本形状。
另外，处理器11判定物品A的基本形状的方法不限于指定的方法。
此外，处理器11具有取得与物品A的基本形状对应的摄像参数的功能。
在基本形状的判定成功时，处理器11参照参数表，取得与已判定的基本形状对应的摄像参数。处理器11设定已取得的摄像参数。
另外，在基本形状的判定失败时，处理器11也可以取得规定的摄像参数。
接着，对控制装置10’的动作例进行说明。
图8是用于对控制装置10’的动作例进行说明的流程图。在这里，物品A视为放置在转台32上。
首先，控制装置10’的处理器11用摄像头41～43摄像物品A(ACT21)。当摄像物品A时，处理器11用距离传感器71测定距离(ACT22)。
当测定距离时，处理器11基于已摄像的图像及已测定的距离等，判定物品A的基本形状(ACT23)。
当物品A的基本形状的判定成功时(ACT24的YES)，处理器11参照参数表，取得与已判定的基本形状对应的摄像参数(ACT25)。
当物品A的基本形状的判定失败时(ACT24的NO)，处理器11取得规定的摄像参数(ACT26)。
在已取得与基本形状对应的摄像参数时(ACT25)、或已取得规定的摄像参数时(ACT26)，处理器11基于已取得的摄像参数，摄像物品A(ACT27)。
当摄像物品A时，处理器11结束动作。
另外，摄像装置30’也可以具备多个距离传感器。各距离传感器测定距离相互不同的基准点或基准面的距离。处理器11也可以基于各距离传感器已测定的距离，判定物品的基本形状。
如上述构成的图像处理***判定已放置的物品的基本形状。图像处理***设定与已判定的基本形状对应的摄像参数。图像处理***按照已设定的摄像参数摄像物品。其结果，图像处理***即使操作员不输入基本形状，也能够设定适当的摄像参数。
虽然对本发明的几个实施例进行了说明，但是这些实施例是作为例子提出的，并不意图限定发明的范围。这些新颖的实施例可以用其他的各种形式来实施，在不脱离发明要旨的范围内可以进行各种省略、替换、变更。这些实施例及其变形均被包含在发明的范围或要旨中，而且，包含在权利要求的范围所记载的发明和其均等的范围内。
在本发明中，提供了一种终端设备，包括：处理器、存储器、接口和总线，所述处理器、所述存储器和所述接口通过所述总线完成相互间的通信，所述存储器存储至少一可执行指令，所述可执行指令使所述处理器执行如上述的控制方法所对应的操作。通过这样，能够适当地摄像用于生成词库信息的图像。
本发明的一个或多个实施例可以被实施为计算机可读记录介质，可以将由计算机执行的诸如程序模块之类的命令或指令记录在该计算机可读记录介质上。计算机可读记录介质可以为能够由计算机访问的任何介质，如易失性介质等。此外，计算机可读记录介质可以为计算机存储介质或可以为任何信息传输媒介的通信介质。

Claims (10)

1.一种图像处理***，包括：
摄像头接口，从摄像物品的摄像头，取得摄像图像；以及
处理器，取得所述物品的基本形状，通过所述摄像头接口，从所述摄像头取得以与所述基本形状对应的摄像参数所摄像的摄像图像。
2.根据权利要求1所述的图像处理***，其中，
所述摄像参数包含摄像所述物品的角度。
3.根据权利要求1或2所述的图像处理***，还包括：
操作部，接受所述基本形状的输入，
所述处理器取得通过所述操作部输入的所述基本形状。
4.根据权利要求1至2所述的图像处理***，其中，
所述处理器对所述基本形状进行判定。
5.根据权利要求4所述的图像处理***，还包括：
距离传感器，对与所述物品的各部的距离进行测定，
所述处理器基于所述距离，对所述基本形状进行判定。
6.根据权利要求5所述的图像处理***，还包括：
转台，具有用于载置所述物品的透明的圆盘，基于控制装置的控制，使所述圆盘的上表面上所配置的物品转动。
7.根据权利要求6所述的图像处理***，其中，
所述摄像头具有第一摄像头、第二摄像头及第三摄像头，
所述第一摄像头从上部摄像所述物品，
所述第二摄像头从侧面摄像所述物品，
所述第三摄像头从底部通过所述圆盘摄像所述物品。
8.一种图像处理方法，包括以下步骤：
取得物品的基本形状；以及
以与所述基本形状对应的摄像参数，摄像所述物品。
9.根据权利要求8所述的图像处理方法，其中，
所述摄像参数包含摄像所述物品的角度。
10.根据权利要求8或9所述的图像处理方法，其中，
取得通过接受所述基本形状的输入的操作部输入的所述基本形状。
CN201811318716.0A 2017-11-07 2018-11-07 图像处理***及图像处理方法 Pending CN109756670A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP2017-214553 2017-11-07
JP2017214553A JP2019087008A (ja) 2017-11-07 2017-11-07 画像処理システム及び画像処理方法

Publications (1)

Publication Number Publication Date
CN109756670A true CN109756670A (zh) 2019-05-14

Family

ID=64172407

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811318716.0A Pending CN109756670A (zh) 2017-11-07 2018-11-07 图像处理***及图像处理方法

Country Status (4)

Country Link
US (2) US20190139245A1 (zh)
EP (1) EP3480733A1 (zh)
JP (2) JP2019087008A (zh)
CN (1) CN109756670A (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5566280A (en) * 1993-09-20 1996-10-15 Kabushiki Kaisha Toshiba 3D dynamic image production system with automatic viewpoint setting
JP2002077707A (ja) * 2000-08-30 2002-03-15 Minolta Co Ltd 撮像装置および撮像方法
US20030035098A1 (en) * 2001-08-10 2003-02-20 Nec Corporation Pose estimation method and apparatus
US20070216784A1 (en) * 2006-03-17 2007-09-20 Casio Computer Co., Ltd. Imaging apparatus, picked-up image correcting method, and program product
CN101680752A (zh) * 2007-05-25 2010-03-24 丰田自动车株式会社 形状评价方法、形状评价装置及三维检查装置
CN102375309A (zh) * 2010-08-26 2012-03-14 鸿富锦精密工业（深圳）有限公司 投影机光线调整***及方法
CN103167232A (zh) * 2012-10-26 2013-06-19 苏州比特速浪电子科技有限公司 摄像装置、图像合成装置及图像处理方法
CN103902241A (zh) * 2012-12-25 2014-07-02 华硕电脑股份有限公司 影像显示***以及影像显示方法
CN104243843A (zh) * 2014-09-30 2014-12-24 北京智谷睿拓技术服务有限公司 拍摄光照补偿方法、补偿装置及用户设备
KR101630154B1 (ko) * 2015-12-31 2016-06-15 주식회사 디앤에스테크놀로지 차량 하부 영상 검색 시스템 및 방법
CN106395528A (zh) * 2015-07-27 2017-02-15 株式会社日立制作所 距离图像传感器的参数调整方法、参数调整装置及电梯***

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01224651A (ja) * 1988-03-04 1989-09-07 Mitsubishi Heavy Ind Ltd びん内容液中の異物検出装置
JPH04106672A (ja) * 1990-08-28 1992-04-08 Hitachi Ltd 物体の照明条件推定方法，物体の３次元情報生成方法，物体の形状と質感の生成方法，物体の形状と質感の生成装置
US6407817B1 (en) 1993-12-20 2002-06-18 Minolta Co., Ltd. Measuring system with improved method of reading image data of an object
JP4066488B2 (ja) 1998-01-22 2008-03-26 ソニー株式会社 画像データ生成装置及び画像データ生成方法
JP3052926B2 (ja) 1998-02-27 2000-06-19 日本電気株式会社 三次元座標計測装置
KR100382439B1 (ko) 1998-05-25 2003-05-09 마쯔시다덴기산교 가부시키가이샤 레인지파인더 장치와 카메라
JP2002150315A (ja) 2000-11-09 2002-05-24 Minolta Co Ltd 画像処理装置および記録媒体
JP2003042732A (ja) * 2001-08-02 2003-02-13 Topcon Corp 表面形状測定装置及びその方法、表面形状測定プログラム、並びに表面状態図化装置
JP4877891B2 (ja) * 2001-08-03 2012-02-15 株式会社トプコン 校正用被写体
JP2003167927A (ja) * 2001-12-03 2003-06-13 Sharp Corp 要素分割装置、要素分割方法、要素分割プログラムおよび要素分割プログラムを記録したコンピュータ読取可能な記録媒体
JP2005241668A (ja) * 2004-02-24 2005-09-08 Wista:Kk 被写体スタンド
US7711179B2 (en) * 2004-04-21 2010-05-04 Nextengine, Inc. Hand held portable three dimensional scanner
JP4446383B2 (ja) * 2004-08-12 2010-04-07 Ｋｄｄｉ株式会社 画像処理装置および画像認識装置
US7756325B2 (en) 2005-06-20 2010-07-13 University Of Basel Estimating 3D shape and texture of a 3D object based on a 2D image of the 3D object
JP4111231B2 (ja) 2006-07-14 2008-07-02 富士ゼロックス株式会社 立体表示システム
US8090194B2 (en) 2006-11-21 2012-01-03 Mantis Vision Ltd. 3D geometric modeling and motion capture using both single and dual imaging
JP2008154027A (ja) * 2006-12-19 2008-07-03 Seiko Epson Corp 撮影装置、撮影方法、およびプログラム
WO2009110589A1 (ja) 2008-03-07 2009-09-11 株式会社ニコン 形状測定装置および方法、並びにプログラム
KR101251372B1 (ko) 2008-10-13 2013-04-05 주식회사 고영테크놀러지 3차원형상 측정방법
JP2011174896A (ja) * 2010-02-25 2011-09-08 Mitsubishi Heavy Ind Ltd 撮像装置及び撮像方法
US8964189B2 (en) 2010-08-19 2015-02-24 Canon Kabushiki Kaisha Three-dimensional measurement apparatus, method for three-dimensional measurement, and computer program
US8600192B2 (en) 2010-12-08 2013-12-03 Cognex Corporation System and method for finding correspondence between cameras in a three-dimensional vision system
GB201110156D0 (en) 2011-06-16 2011-07-27 Light Blue Optics Ltd Touch-sensitive display devices
JP5132832B1 (ja) 2011-07-11 2013-01-30 キヤノン株式会社 計測装置および情報処理装置
JP2013101045A (ja) 2011-11-08 2013-05-23 Fanuc Ltd 物品の３次元位置姿勢の認識装置及び認識方法
CA2899272A1 (en) * 2012-01-26 2013-08-01 Alexander Brunner Device and methods for fabricating a two-dimensional image of a three-dimensional object
KR101614061B1 (ko) 2012-03-29 2016-04-20 주식회사 고영테크놀러지 조인트 검사 장치
TWI465825B (zh) 2012-06-27 2014-12-21 Acer Inc 影像擷取裝置與其光源輔助拍攝方法
JP2014126494A (ja) * 2012-12-27 2014-07-07 Seiko Epson Corp 検査支援装置、検査支援方法、ロボットシステム、制御装置、ロボット、及び、プログラム
US9041914B2 (en) 2013-03-15 2015-05-26 Faro Technologies, Inc. Three-dimensional coordinate scanner and method of operation
JP6371044B2 (ja) * 2013-08-31 2018-08-08 国立大学法人豊橋技術科学大学 表面欠陥検査装置および表面欠陥検査方法
US9256775B1 (en) * 2014-12-23 2016-02-09 Toshiba Tec Kabushiki Kaisha Image recognition apparatus and commodity information processing apparatus
WO2016137899A1 (en) * 2015-02-23 2016-09-01 Li-Cor, Inc. Fluorescence biopsy specimen imager and methods
JP6529314B2 (ja) * 2015-04-09 2019-06-12 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
WO2017119088A1 (ja) * 2016-01-06 2017-07-13 株式会社日立製作所 ロボットシステムおよび制御方法
JP6602690B2 (ja) * 2016-02-23 2019-11-06 株式会社Ｆｕｊｉ 部品装着機
JP6800597B2 (ja) 2016-03-30 2020-12-16 キヤノン株式会社 制御装置、制御方法およびプログラム
US11176382B2 (en) * 2017-03-06 2021-11-16 Conduent Business Services, Llc System and method for person re-identification using overhead view images

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5566280A (en) * 1993-09-20 1996-10-15 Kabushiki Kaisha Toshiba 3D dynamic image production system with automatic viewpoint setting
JP2002077707A (ja) * 2000-08-30 2002-03-15 Minolta Co Ltd 撮像装置および撮像方法
US20030035098A1 (en) * 2001-08-10 2003-02-20 Nec Corporation Pose estimation method and apparatus
US20070216784A1 (en) * 2006-03-17 2007-09-20 Casio Computer Co., Ltd. Imaging apparatus, picked-up image correcting method, and program product
CN101680752A (zh) * 2007-05-25 2010-03-24 丰田自动车株式会社 形状评价方法、形状评价装置及三维检查装置
CN102375309A (zh) * 2010-08-26 2012-03-14 鸿富锦精密工业（深圳）有限公司 投影机光线调整***及方法
CN103167232A (zh) * 2012-10-26 2013-06-19 苏州比特速浪电子科技有限公司 摄像装置、图像合成装置及图像处理方法
CN103902241A (zh) * 2012-12-25 2014-07-02 华硕电脑股份有限公司 影像显示***以及影像显示方法
CN104243843A (zh) * 2014-09-30 2014-12-24 北京智谷睿拓技术服务有限公司 拍摄光照补偿方法、补偿装置及用户设备
CN106395528A (zh) * 2015-07-27 2017-02-15 株式会社日立制作所 距离图像传感器的参数调整方法、参数调整装置及电梯***
KR101630154B1 (ko) * 2015-12-31 2016-06-15 주식회사 디앤에스테크놀로지 차량 하부 영상 검색 시스템 및 방법

Also Published As

Publication number Publication date
JP2022121671A (ja) 2022-08-19
US20210042953A1 (en) 2021-02-11
JP2019087008A (ja) 2019-06-06
EP3480733A1 (en) 2019-05-08
US11328438B2 (en) 2022-05-10
US20190139245A1 (en) 2019-05-09

Similar Documents

Publication Publication Date Title
CN109583287B (zh) 实物识别方法及验证方法
US10332306B2 (en) Method and apparatus for digitizing the appearance of a real material
US11778318B2 (en) Depth sensing techniques for virtual, augmented, and mixed reality systems
CN108696682B (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
CN108700932A (zh) 能够进行眼睛追踪的可穿戴设备
CN109583285A (zh) 对象识别方法
CN108475145A (zh) 图像识别装置、图像识别方法以及图像识别单元
CN107211099A (zh) 用于实施并使用摄像机装置的方法及设备
CN109614983A (zh) 训练数据的生成方法、装置及***
CN102055892A (zh) 摄像装置
EP3381015B1 (en) Systems and methods for forming three-dimensional models of objects
ES2938471T3 (es) Método de procesamiento de datos, dispositivo electrónico y medio de almacenamiento legible por ordenador
CN108351199A (zh) 信息处理装置、信息处理方法及程序
CN110232707A (zh) 一种测距方法及装置
WO2022077238A1 (zh) 成像显示方法、遥控终端、装置、***及存储介质
CN109756670A (zh) 图像处理***及图像处理方法
CN110837295A (zh) 一种手持控制设备及其追踪定位的方法、设备与***
CN108718532A (zh) 信息处理装置、信息处理方法及程序
US20170256091A1 (en) Method and apparatus for displaying a collectible
CN108810516A (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
WO2020196196A1 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
Dutta et al. Performance Characterization of Reactive Visual Systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190514

RJ01 Rejection of invention patent application after publication