CN101379460B - 图像处理方法 - Google Patents

图像处理方法 Download PDF

Info

Publication number
CN101379460B
CN101379460B CN2007800041673A CN200780004167A CN101379460B CN 101379460 B CN101379460 B CN 101379460B CN 2007800041673 A CN2007800041673 A CN 2007800041673A CN 200780004167 A CN200780004167 A CN 200780004167A CN 101379460 B CN101379460 B CN 101379460B
Authority
CN
China
Prior art keywords
image
paper
mentioned
dot pattern
mask
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007800041673A
Other languages
English (en)
Other versions
CN101379460A (zh
Inventor
吉田健治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IP Solutions Inc
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of CN101379460A publication Critical patent/CN101379460A/zh
Application granted granted Critical
Publication of CN101379460B publication Critical patent/CN101379460B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/80—Creating or modifying a manually drawn or painted image using a manual input device, e.g. mouse, light pen, direction keys on keyboard
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/626—Detection of non-electronic marks, e.g. fluorescent markers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G06F3/0321—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface by optically sensing the absolute position with respect to a regularly patterned surface forming a passive digitiser, e.g. pen optically detecting position indicative tags printed on a paper sheet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00007—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00007—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
    • H04N1/00015—Reproducing apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026—Methods therefor
    • H04N1/00031—Testing, i.e. determining the result of a trial
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026—Methods therefor
    • H04N1/00045—Methods therefor using a reference pattern designed for the purpose, e.g. a test chart
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026—Methods therefor
    • H04N1/00053—Methods therefor out of service, i.e. outside of normal operation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00071—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for characterised by the action taken
    • H04N1/00082—Adjusting or controlling
    • H04N1/00087—Setting or calibrating
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00358—Type of the scanned marks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00368—Location of the scanned marks
    • H04N1/00374—Location of the scanned marks on the same page as at least a part of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00355—Mark-sheet input
    • H04N1/00379—Means for enabling correct scanning of a mark sheet or area, e.g. registration or timing marks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00392—Other manual input means, e.g. digitisers or writing tablets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H04N1/00416—Multi-level menus
    • H04N1/00419—Arrangements for navigating between pages or parts of the menu
    • H04N1/00424—Arrangements for navigating between pages or parts of the menu using a list of graphical elements, e.g. icons or icon bar
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H04N1/00416—Multi-level menus
    • H04N1/00419—Arrangements for navigating between pages or parts of the menu
    • H04N1/00427—Arrangements for navigating between pages or parts of the menu using a menu list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00464—Display of information to the user, e.g. menus using browsers, i.e. interfaces based on mark-up languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00482—Output means outputting a plurality of job set-up options, e.g. number of copies, paper size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32267—Methods relating to embedding, encoding, decoding, detection or retrieval operations combined with processing of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • H04N1/6033—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer using test pattern analysis
    • H04N1/6044—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer using test pattern analysis involving a sensor integrated in the machine or otherwise specifically adapted to read the test pattern
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0089—Image display device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0098—User intervention not otherwise provided for, e.g. placing documents, responding to an alarm
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3249—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document data relating to a linked page or object, e.g. hyperlink
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3253—Position information, e.g. geographical position at time of capture, GPS data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3254—Orientation, e.g. landscape or portrait; Location or order of the image data, e.g. in memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3269—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of machine readable codes or marks, e.g. bar codes or glyphs
    • H04N2201/327—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of machine readable codes or marks, e.g. bar codes or glyphs which are undetectable to the naked eye, e.g. embedded codes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3271—Printing or stamping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3274—Storage or retrieval of prestored additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/328—Processing of the additional information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供对屏幕上显示的图像进行正确的位置指定，可进行图像数据的加工、修正的技术。在印刷光点图形的纸上印刷上述图像时，通过设定显示装置上的图像的基准点、利用可目视的标记印刷该基准点和上述图像，利用摄像装置摄取印刷的纸标记，执行使该纸上的标记的位置坐标与上述图像的基准点一致的校准，在以后的纸上进行通过摄像装置(扫描器)的选择输入方面和对图像的处理方面，可防止产生坐标的偏移。

Description

图像处理方法
技术领域
本发明涉及使用印刷有光点图形的纸和板，对显示器和投影器屏幕上显示的图像进行加工、修正的技术。
背景技术
作为加工、修正显示器屏幕和投影器屏幕上投影的图像的技术，一般是使用鼠标和感应板(tablet)等坐标输入辅助装置，修正个人电脑等信息处理装置中保存的图像数据的颜色和线图。
发明内容
发明要解决的课题
但是，使用鼠标和感应板，必须边凝视屏幕边进行鼠标和感应板的操作，手上的操作感觉不一定能正确地反映到屏幕上的位置指定。
即，鼠标和感应板为了使向XY方向的移动量转换为屏幕上的移动量并进行显示，由于屏幕上的指针的移动量相对于鼠标的移动量过小或过大，给操作者(使用者)带来不协调感的情况较多。
特别是使脸图像显示在屏幕上进行类似化妆的着色、颜色修正时，以及指定地图上的领域进行处理时，存在使用鼠标和感应板很难进行正确的位置指定的问题。
本发明是鉴于上述几点而发明的，其技术课题是提供对屏幕上显示的图像，进行正确的位置指定，可进行图像数据的加工、修正的技术。
解决课题的方案
本发明的权利要求1是，一种图像处理方法，是对于显示装置上显示的图像，在印刷光点图形的纸上印刷上述图像，利用摄像装置摄取该光点图形，识别图像的位置，在图像上进行处理的图像处理方法，其特征在于，由以下步骤构成，在纸上印刷表示XY坐标的光点图形；在印刷上述光点图形的纸上，印刷显示装置的屏幕上显示的图像；在上述图像的印刷步骤中，设定显示装置上的图像基准点，用可目视的标记印刷该基准点和上述图像；利用摄像装置摄取印刷的纸标记，执行使该纸上的标记的位置坐标与上述图像的基准点一致的校准；用摄像装置，对上述纸上印刷的图像进行图像处理。
这样，在印刷光点图形的纸上印刷显示装置上的图像时，通过设定显示装置上的图像的基准点、利用可目视的标记印刷该基准点和上述图像，利用该标记进行校准作业，因此在以后的纸上进行通过摄像装置(扫描器)的选择输入方面和对图像的处理方面，可防止产生坐标的偏移。
权利要求2是，一种图像处理方法，是对于显示装置上显示的图像，在印刷光点图形的纸上印刷上述图像，利用摄像装置摄取该光点图形，识别图像的位置，在图像上施加处理的图像处理方法，其特征在于，由以下步骤构成，在纸上印刷表示XY坐标的光点图形；在印刷上述光点图形的纸上，印刷显示装置上显示的图像；用摄像装置扫描印刷有上述纸上的图像的所定领域，使其描绘封闭图形，指定掩模领域；在与存储装置设定的上述图像领域对应的掩模表格的上述掩模的领域设定标志；用摄像装置摄取上述纸的掩模领域的光点图形；读入上述掩模领域的光点图形，在是参照掩模表格设定的掩模领域时，参照定义了与上述掩模对应的命令处理的掩模、处理命令对应表格，执行处理命令。
这样，在事先印刷光点图形的纸上印刷显示装置显示的图像，在该图像上的任意领域设定掩膜，在该纸上通过摄像装置选择输入掩模领域时，参照掩模表格，可执行与其相关的处理，例如访问通过浏览器程序的互联网上所定的地址(URL)等。
权利要求3是，一种图像处理方法，是对显示装置上显示的图像，在事先印刷光点图形的纸上印刷上述图像，用摄像装置摄取该光点图形，识别图像的位置，在图像上进行处理的图像处理方法，其特征在于，由以下步骤构成，在事先印刷表示XY坐标的光点图形的纸上，印刷显示装置屏幕上显示的图像；在上述图像的印刷步骤中，设定显示装置上的图像的基准点，用可目视的标记印刷该基准点和上述图像；用摄像装置摄取印刷的纸的标记，执行使该纸上的标记的位置坐标与上述图像的基准点一致的校准；使用摄像装置对上述纸上印刷的图像执行图像处理。
权利要求4是，一种图像处理方法，是对显示装置上显示的图像，通过光学读取装置摄取印刷光点图形的媒介物，进行对应上述光点图形的图像处理的图像处理方法，其特征在于，具有作为上述图像处理用的命令代码或坐标值被图形化的光点图形与图标图像重合印刷的媒介物的控制器，由以下步骤构成，通过利用光学读取装置顺次摄取上述控制器上的图标图像，选择图像处理用的笔；同样的，通过利用光学读取装置摄像控制器上的图标图像，选择描画色；通过使用上述光学读取装置在上述控制器上扫描，在显示装置的屏幕上进行对应该扫描轨迹的描画处理。
权利要求5是，根据权利要求1～4中任一项所述的图像处理方法，其特征在于，上述图像处理是通过利用摄像装置对上述纸面进行所定的动作，指定与上述纸面对应的显示装置上显示的图像领域的一部分或全部，对该领域进行二维图像处理或三维变形处理。
这样，事先印刷XY坐标的纸作为提供商品供给，在该纸上印刷显示装置上显示的图像，同时可对该图像进行图像处理。
这里，通过摄像装置的网格滚动(grid grind)动作，即在相对于媒介物面的垂直线的摄像光轴保持一定倾斜的倾斜状态下、使垂直线围绕中心转动，可使图像领域变形。于是，图像领域的变形，可以是向上述图像领域中Z方向的***状的变形，或向-Z方向的下陷状的变形(权利要求6)。
权利要求7是，根据权利要求5或6所述的图像处理方法，其特征在于，上述图像处理是在上述图像上的造型处理，指定上述图像的所定的位置，使该图像部位在Z方向或-Z方向上呈***状或下陷状变形。
权利要求8是，根据权利要求7所述的图像处理方法，其特征在于，上述造型处理是，在图像的所定形状上进行掩模设定，图像的该部位沿着该掩模形状在Z方向或-Z方向上伸长或***。
权利要求9是，根据权利要求1～7中任一项所述的图像处理方法，其特征在于，上述图像的基准点至少设置2个，上述标记也与其对应，在纸上的2个以上的部位印刷。
这样，通过使用2个标记进行校准，可抑制扫描器在纸上选择输入时的向XY方向及θ方向的角度偏移。另外，这样的校准可以使用3个以上的标记提高精度。
发明效果
通过本发明，对屏幕显示的图像，可在纸上印刷的图像上进行正确的位置指定，可容易地进行显示装置的屏幕上的图像数据的加工、修正。
附图说明
图1是表示本发明使用的扫描器及电脑的***构成的方框图。
图2是表示光点图形的一例的说明图。
图3是表示光点图形的信息点的一例的放大图。
图4是说明信息点的配置的说明图。
图5是表示信息点及在此被定义的数据的字节表示的例子，表示其他形态。
图6是信息点及在此被定义的数据的字节表示的例子，(a)是配置2个点，(b)是配置4个点，(c)是配置5个点。
图7是表示光点图形的变形例，(a)是信息点6个配置型的简略图，(b)是信息点9个配置型的简略图，(c)是信息点12个配置型的简略图，(d)信息点36个配置型的简略图。
图8是说明控制器领域中点代码格式的附图。
图9是说明XY坐标领域中点代码格式的附图。
图10是在图2～图7所示的光点图形中，改变信息点的配置方法，定义方块的方向的说明图。
图11是在图2～图7所示的光点图形中，改变信息点的配置方法，定义方块的方向的说明图，表示信息点的配置。
图12是说明掩模制作、Web链接用纸控制器的说明图。
图13是说明用于掩模指定处理的光点代码、处理命令的对应表格的说明图。
图14是表示掩模指定处理的说明图，是说明掩模制作用纸感应板的主视图。
图15是表示掩模指定处理的说明图，是说明指定掩模的方法的附图。
图16是表示用于掩模指定处理的掩模表格的说明图。
图17是表示用于掩模指定处理的掩模·地址的对应表格的说明图。
图18是说明掩模指定处理的其他实施方式的附图。
图19是表示用于掩模指定处理的表格的说明图，(a)是掩模、光点代码对应表格，(b)是光点代码、地址对应表格。
图20是表示造型用控制器的说明图。
图21是说明造型处理的说明图，表示在纸上进行遮蔽的状态的附图。
图22是表示造型处理的说明图，是表示进行造型的附图。
图23是表示通过转动扫描器进行造型的功能的说明图，(a)是表示扫描器的动作附图，(b)是表示通过扫描器的动作而进行的处理的附图。
图24是表示通过转动扫描器进行造型的功能的说明图，(a)是表示扫描器的动作，(b)是表示通过扫描器的动作而进行的处理的附图。
图25是表示扫描器的方向和倾斜的说明图。
图26是说明在通过扫描器的倾斜而进行各种操作时，测定倾斜方向和角度的方法的附图。
图27是说明在通过扫描器的倾斜而进行各种操作时，测定倾斜方向和角度的方法的附图。
图28是说明在通过扫描器的倾斜而进行各种操作时，测定倾斜方向和角度的方法的附图。
图29是说明在通过扫描器的倾斜而进行各种操作时，通过使用傅里叶(Fourier)函数测定倾斜方向的附图。
图30是说明在通过扫描器的倾斜而进行各种操作时，通过使用n次方程式测定倾斜方法的附图。
图31是表示化妆模拟的说明图，(a)是表示显示装置的屏幕上显示的图像的附图，(b)是表示用于本实施方法的纸的附图，(c)是表示在纸上印刷脸图像和控制器的状态的附图。
图32是表示化妆模拟的说明图，表示化妆用控制器的具体例的附图。
图33是表示化妆模拟的说明图，说明使用事先印刷光点图形的供给纸，印刷脸图像时的附图。
图34是说明化妆模拟的说明图，说明在白纸上同时印刷光点图形和图像时的附图。
符号说明
1        光点图形
2        关键点
3        信息点
4        基准格子点
5        假想格子点
CPU      中央处理装置
MM       主存储器
USB I/F  USB接口
HD       硬盘装置
DISP     显示装置(显示装置)
KBD      键盘
NW I/F     网络接口
SCN        扫描器
具体实施方式
<硬件方框图>
图1是表示电脑和扫描器结构的硬件方框图。
如同图所示，个人电脑以中央处理装置(CPU)为中心，具有主存储器(MM)，用总线链接的硬盘装置(HD)，作为输出装置的显示装置(DISP)，作为输入装置的键盘(KBD)。
而且，通过USB接口(USB I/F)链接作为摄像装置的扫描器(SCN)。
另外，虽省略图示，但除显示装置(DISP)之外，作为输出装置，还链接打印机、扬声器等。
此外，总线(BUS)通过网络接口(NW I/F)与互联网等通用网络(NW)链接，可通过没有图示的服务器下载电子地图数据、文字信息、图像信息、声音信息、动画信息、程序等。
在硬盘(HD)内，录入了操作***(OS)及本实施方式中使用的光点图形的解析程序等应用程序、电子地图数据、文字信息、图像信息、声音信息、动画信息和各种表格等的数据。
中央处理装置(CPU)通过利用总线(BUS)和主存储器(MM)顺次读入硬盘内的应用程序并对此执行处理，同时读出数据、输出显示在显示装置(DISP)上，实现本实施方式中说明的功能。
扫描器(SCN)虽省略了图示，但设置有红外线照射装置(红色LED)和红外线滤波器(infrared filter)以及CMOS传感器、CCD传感器等光学摄像元件，具有摄像照射在媒介面上的照射光的反射光的功能。这里，媒介面上的光点图形用碳素墨水印刷，光点图形以外的部分用非碳素墨水印刷。
由于该碳素墨水具有吸收红外光的特性，在上述光学摄像元件的摄像图像中，仅光点部分为黑色。
这样读取的光点图形的摄像图像被扫描器内的中央处理装置(CPU)解析，转换成坐标值或代码值，通过USB电缆发送给个人电脑。
个人电脑的中央处理装置(CPU)参照表示接收到的坐标值或代码的数据表，可将与其对应的电子地图数据、文字信息、图像信息、声音信息、动画信息从显示装置和没有图示的扬声器中输出。
<光点图形的说明GRID1>
下面，用图2～图7说明本发明中使用的光点图形。
图2是表示本发明的光点图形的一例的GRID1的说明图。
另外，在该些图中，横竖方向的格子线是为了说明方便而添加的，在实际的印刷面上并不存在。构成光点图形1的关键点2、信息点3、标准格子点4等，在作为摄像装置的扫描器具有红外线照射装置时，最好用吸收该红外光的不可视墨水或碳素墨水印刷。
图3是表示光点图形的信息光点及被其定义的数据的光点表示的一例的放大图。图4(a)、(b)是表示在中心配置关键点的信息点的说明图。
使用本发明的光点图形的信息输入输出方法由光点图形1的生成、该光点图形1的识别、从该光点图形1输出信息和程序的装置组成。即，利用照相机将光点图形作为图像数据取入，首先，抽出标准格子点4，接着，通过不在本来具有标准格子点4的位置上打点，抽出关键点2，接着，通过抽出信息点3使其数字化，抽出信息领域，实现信息的数值化，该数值信息从该光点图形1输出信息和程序。例如，从该光点图形1，将声音等的信息和程序输出到信息输出装置、个人电脑、PDA或手机等上。
本发明的光点图形1的生成是为了通过点代码生成演算法识别声音等信息，根据所定的规则排列微小的点即关键点2、信息点3、标准格子点4。如图2所示，表示信息的光点图形1的方块以关键点2为基准配置5×5的标准格子点4，在被4个标准格子点4包围的中心的想象格子点5的周围配置信息点3。在该方块上定义任意数值信息。另外，在图2的图例中，表示4个光点图形1的方块(粗线框内)并列配置的状态。但是，当然，光点图形1并不限定于4个方块。
可在1个方块上输出1个对应的信息和程序，或者可在多个方块上输出1个对应的信息和程序。
标准格子点4，在用照相机取入作为图像数据的该光点图形1时，可矫正由于该照相机的镜头的歪斜和倾斜造成的摄像、纸面的伸缩、媒介物表面的弯曲、印刷时的歪斜。具体的，求出将歪斜的4个标准格子点4变换成原来的正方形的修改用函数(Xn，Yn)＝f(Xn’，Yn’)，用该相同的函数修改信息点3，求出正确的信息点3的矢量。
在光点图形1中配置标准格子点4时，利用照相机取入该光点图形的图像数据，由于修改因为照相机而产生的歪斜，因此在用具有高歪斜率的镜头的普通型照相机取入光点图形1的图像数据时也能正确地识别。此外，对于光点图形1的表面，即使倾斜照相机读取，也能正确地识别该光点图形1。
如图2所示，关键点2是在一定方向上偏移配置位于方块四角的4个标准格子点4的点。该关键点2是表示信息点3的1个方块份的光点图形1的代表点。例如，是光点图形1的位于方块四角的标准格子点4向上方偏移0.1mm的点。信息点3表示X、Y坐标值时，关键点2向下方移动0.1mm的位置为坐标点。但，该数值不仅限定于此，可根据光点图形1的方块的大小而变化。
信息点3是识别各种信息的点。该信息点3以关键点2为代表点配置在其周边，同时以4个标准格子点4包围的中心作为想象格子点5，以此为始点配置在用矢量表示的终点上。例如，该信息点3被标准格子点4包围，如图3(a)所示，与该想象格子点5距离0.1mm的光点，为了具有用矢量表示的方向和长度，在顺时针方向上的每45°转动的8个方向上配置，表现3字节。因此，用1个方块的光点图形1可表现3字节×16个＝48字节。
图3(b)是，在图2的光点图形中，每个格子具有2字节的信息点3的定义方法，在+方向和×方向上偏移光点定义各2字节的信息。由此，本来可定义48字节的信息，但根据用途分割，可每隔32字节赋予数据。通过+方向和×方向的组合，可实现最大216(约65000)的光点图形格式。
另外，在图示例中，在8个方向上配置，表现3字节，但并不限定于此，也可在16个方向上配置，表现4字节，可以多种变化。
关键点2、信息点3或标准格子点4的点的直径，考虑到醒目、对纸质的印刷精度、照相机的解像度以及最适宜的数字化，最好是0.05mm左右。
此外，考虑到对摄像面积的必要信息量和各种点2、3、4的误认，标准格子点4的间隔最好是横·竖0.5mm左右。考虑到标准格子点4及与信息点3的误认，关键点2的偏移最好是格子间隔的20％左右。
该信息点3和4个标准格子点4包围的想象格子点5的间隔最好是相邻的想象格子点5之间距离的15～30％。因为当信息点3和想象格子点5之间的距离比该距离小时，光点之间容易被看成大块，很难看到光点图形1。相反的，当信息点3和想象格子点5之间的距离比该距离大时，很难确认以相邻的任何想象格子点5为中心、具有矢量方向性的信息点3。
例如，信息点3，如图4(a)所示，从方块中心顺时针转动，配置I1至I16格子间隔为0.5mm，用2mm×2mm表现3字节×16＝48字节。
另外，在方块内具有分别独立的信息内容，且可进一步设置不受其他信息内容影响的子块(subblock)。图4(b)为其的图示，由4个信息点3构成的子块[I1、I2、I3、I4]、[I5、I6、I7、I8]、[I9、I10、I11、I12]、[I13、I14、I15、I16]是各自独立的数据(3字节×4＝12字节)在信息点3展开而成的。通过这样设置子块，可通过子块单位容易地进行错误校验(error check)。
信息点3的矢量方向(转动方向)最好平均每30°～90°设定。
图5是信息点3及在此被定义的数据的字节表示的一例，表示其他的方式。
此外，对于信息点3，使用来自被标准格子点4包围的想象格子点5的长·短2种，当矢量方向为8个方向时，可表现4字节。此时，长的最好是相邻的想象格子点5之间距离的25～30％，短的最好是15～20％。但是，长·短的信息点3的中心间隔最好比这些光点的直径长。
被4个标准格子点4包围的信息点3，考虑到醒目，最好是1个光点。但是，在想要忽略醒目、大量获得信息量时，通过每一个矢量配置1字节、用多个光点表现信息点3，可具有大量的信息。例如，在同心圆的8个方向的矢量中，用被4个格子光点4包围的信息点3可表现28个信息，用1个方块的16个信息点表现2128个信息。
图6是信息点及在此被定义的数据的字节表示的一例，(a)表示配置2个点，(b)表示配置4个点，(c)表示配置5个点。
图7表示光点图形的变形例，(a)是6个信息点的配置型示意图，(b)是9个信息点的配置型示意图，(c)是12个信息点的配置型示意图，(d)是36个信息点的配置型示意图。
图2和图4所示的光点图形1表示在1个方块上配置16(4×4)个信息点3的一例。但是，不限定在1个方块上配置16个该信息点3，可多种变化。例如，根据必要的信息量的大小或照相机的解像度，有以下的配置，(a)是在1个方块上配置6个(2×3)信息点3、(b)是在1个方块上配置9个(3×3)信息点3、(c)是在1个方块上配置12个(3×4)信息点3、或(d)是在1个方块上配置36个信息点3。
接着，图8至图9表示光点图形和代码值和XY坐标值的关系的说明图。
如图8(b)所示，光点图形是在4×4个方块领域中构成的光点图形，该方块内被划分为C1-0～C31-30。表示各领域的光点代码格式的是图8(a)和图9。
图8(a)表示控制器领域中的光点代码格式。分别在C0～C15上登录操作码，在C16～C29上登录控制器ID，在C30～C31上登录奇偶性。
此外，图9表示纸板(paper tablet)等的XY坐标领域中的光点代码格式。分别在C0～C7上登录Y坐标，在C8～C15上登录X坐标，在C16～C29上登录纸ID，在C30～C31上登录奇偶性。
这样，在本光点图形中，4×4个格子领域中，可登录X坐标、Y坐标，以及与其对应的代码信息(代码值)。
<光点图形的说明方向光点>
图10～图11是说明光点图形的其他例的附图。
图10(a)和(b)是，在图2～图7说明的光点图形中，在由3×3＝9个的格子领域构成的方块的光点图形中，通过仅将特定的格子领域(方向领域)的信息点3的配置方向改变成其他的格子领域，定义方块的方向。
即，图10(a)中，左下的格子领域34a、中央的格子领域34b、左下的格子领域34c从中心沿横竖方向配置信息点3，在其他的格子领域中，从中心沿倾斜方向配置信息点3。由于这样配置格子领域34a、34b、34c，连接该格子领域而成的三角形的形状，即从对于底边34a、34c的顶点34b的关系，可以识别该方块朝上。
这样，通过改变方块内的信息点3的配置方向(从中心沿横竖方向配置信息点)的格子领域34a、34b、34c的配置关系(这里为三角形)，可定义方块的方向。由此，由于可在方块中的全部格子领域中配置信息点3，为了关键点不牺牲格子领域，可在全部格子领域中配置信息点3。
另外，图10(b)是沿横竖方向每隔2个连接如10(a)所示方块的附图。
图11(a)及(b)是表示对应图10(a)及(b)的信息点3的配置状态的附图。
<第1种实施方式掩模(mask)指定方法>
下面，用图12～图19说明指定掩模领域、对应地址的技术。
(纸控制器)
图12是对于印刷有光点图形的纸，表示设定掩模领域的纸控制器。这里，在该纸上，显示屏幕上的图像与光点图形重叠，印刷。于是，该纸和显示图像可执行校准作业。
所谓校准，是在提供作为预先印刷有表示XY坐标的光点图形的提供商品的纸时所必需的作业。
即，在预先印刷有XY坐标的纸上印刷显示装置上显示的图像时，为了使显示装置上显示的图像和纸(XY坐标)上印刷的图像之间产生偏移，需要算出该调整值。这就是校准。因此，对于白纸的纸，在印刷光点图形和显示器图像上显示的图像时，由于一开始显示器图像就和印刷的图像一致，因此不需要校准作业。
为了校准，在XY坐标作为光点图形被印刷的纸上，印刷显示装置上显示的图像时，连同该图像，同时印刷如图31(a)及(c)所示的校准标记。
在实际的校准中，最好使用至少2点的校准标记，通过用扫描器顺次读取该校准标记来进行。此时，读取的校准标记为X、Y时，可利用x＝f(X)、y＝f(Y)计算实际在表示装置中的位置。
以后，最好使用利用该计算式、由从纸读取的XY坐标值算出的xy坐标值。
另外，校准标记为3点以上，可提高精度。
在该纸控制器的各图标图像(用四角形和三角形表示的各领域)上，分别印刷代码值作为光点图形，通过用扫描器摄像(点击)该些图标领域，该代码值在个人电脑中转换成指令过渡到应用程序。
例如，在该纸控制器上，可进行掩模制作处理。
首先，使用者使用扫描器选择输入(摄像)该纸控制器的左半图上显示的掩模制作领域的“掩模制作开始”领域时，在显示装置的屏幕上显示制作开始。使用者使用扫描器选择输入(摄像)想要制作的形状的图标(例如，多角形和曲线等)。
接着，在纸面上扫描想要作为掩模领域的印刷图像上的边界领域，制作掩模。
另外，移动作成的掩模时，选择输入“移动”后，用扫描器选择输入(摄像)对应移动地的位置的纸面上的位置。
使生成的掩模左转动时，用扫描器选择输入(摄像)“左转动”，使其右转动时，选择输入(摄像)“右转动”。此外，使生成的掩模放大时，用扫描器选择输入(摄像)“放大”，使其缩小时，选择输入(摄像)“缩小”。
此外，想要在显示装置上返回上一屏幕重新操作时，用扫描器选择输入(摄像)掩模制作领域的“返回上一步”领域。中途中止掩模的制作时，用扫描器选择输入(摄像)“中止”。
最后，在完成掩模的制作时，用扫描器选择输入(摄像)“登录”。
另外，用扫描器选择输入(摄像)“删除”领域时，显示装置上会显示“删除吗？”。这里，用扫描器选择输入(摄像)掩模制作领域的“是”领域时，选择的掩模被删除。不进行删除时，用扫描器选择输入(摄像)“否”。
例如，用扫描器摄像(点击)该纸控制器的左半图上显示的掩模制作领域的“掩模制作开始”图标，选择输入作为掩模领域的图形(多角形和曲线等)之后，用扫描器摄像(点击)“URL复制/链接”领域的“复制执行”图标，复写(复制)所需的互联网地址(URL)。接着，用扫描器选择输入(摄像)“复制&链接执行/结束”图标，在上述指定的掩模领域中连接上述URL。由此，以后在用扫描器选择输入(摄像)纸上的掩模领域时，浏览器程序访问与其关联的URL。
这样的掩模领域和URL的链接可以在显示装置的屏幕上表示的控制板上显示。对于显示装置的屏幕上显示的控制板，通过用扫描器选择输入(摄像)纸控制器的“控制板操作”领域的各图标，可删除URL的链接，使控制板上的指针上下移动，滚动(scroll)控制板屏幕。
此外，通过用扫描器选择输入(摄像)纸控制器的“Web阅览”领域的各图像，可以进行浏览器屏幕的移动(上下方向和返回(退回)过去的参照页和向前(前进)操作)和滚动操作。该些操作，可通过代码值在各图像领域作为光点图形被登录，应用程序解析该代码值，对浏览器程序进行中断处理来实现。
图13表示硬盘装置中登录的光点代码、处理命令对应数据表的内容。
该数据表用于图12表示的纸控制器。在纸控制器的各领域中(纸控制器用领域)，印刷光点图形。光点代码对应各光点图形，处理命令(指令)对应光点代码。用扫描器指定输入(点击)光点图形时，可执行任何处理命令。例如，指示掩模制作，指示掩模的登录。
接着，用图14～图19说明掩模指定处理的具体例。
图14是表示掩模制作纸板的附图。首先，在事先印刷有光点图形的纸上印刷显示装置屏幕上显示的图像。于是，如图15所示，掩模制作纸板和图形或文件被重叠印刷。接着，执行校准作业，调整纸和显示装置的屏幕的位置关系。
接着，在印刷有图像的纸上，使用图12所示的纸控制器，通过上述操作，用扫描器扫描作为掩模领域的领域的外缘。
例如，想要涂覆图15纸的左上的车图形时，用扫描器沿纸的车图形的外缘扫描。按照这样扫描的外缘，在硬盘装置(HD)内设置的掩模数据表(参照图16)上，在被该外缘包围的领域内设定掩模标志(mask flag)。图16中，在掩模数据表内设定掩模1号的掩模标志(mask flag)和掩模2号的掩模标志(mask flag)。
应用程序通过参照该掩模表格，可以了解最好处理图像的哪部分。
图17是设定在硬盘装置(HD)内的掩模·地址对应数据表的内容。
在掩模、地址对应数据表中，对应掩模编号登录地址。例如，在掩模1上登录互联网地址(URL)，在掩模2上登录本地驱动器(local drive)和可执行文件。这样的登录，如上所述，使纸控制器通过进行URL的复制及链接操作来进行。
例如，在用扫描器指定输入掩模1时，浏览器程序启动，访问(access)该掩模·地址对应数据表中登录的互联网地址(URL)。
此外，用扫描器指定输入掩模2的领域时，本地的C驱动器(C drive)的所定执行程序(例如图像处理程序等)启动。
图18～图19是说明掩模指定方法的其他实施例。
图14～图17中，在掩模制作纸板上印刷显示装置的屏幕上显示的图像之后，指定掩模。
在本实施例中，使用者用鼠标等在显示装置的屏幕上扫描图像的外缘，指定掩模。之后，进行印刷处理时，如图18所示，只在指定掩模的领域上印刷光点图形，在该领域以外的领域不印刷光点图形。
由此，仅在必要领域印刷光点图形。
图19是说明设定在硬盘装置(HD)内的数据表的附图。
图19(a)是掩模·光点代码对应数据表的内容。
在掩模·光点代码对应数据表中，对应掩模编号登录光点代码。例如，掩模1上登录光点代码54001，掩模2上登录光点代码54002。
图19(b)是光点代码·地址对应数据表的内容。
图19(a)中登录光点代码时，对应光点代码的地址被登录。使用者通过使用图12的纸控制器进行URL的复制及链接操作，或使用键盘直接输入地址来登录。
由此，用扫描器指定输入掩模1的领域时，浏览器程序启动，访问该光点代码·地址对应数据表中登录的互联网地址(URL)。
此外，用扫描器指定输入掩模2的领域时，本地C驱动器的所定执行程序(例如图像处理程序等)启动。
<第2种实施方式>
接着，用图20～图30，对在指定显示装置上显示的图像一部分的领域，在该指定领域中对图像进行三维处理，进行类似着色、修正的图像修正加工时的掩模加工技术进行说明。
<造型用控制器>
图20是表示制作掩模领域，对该领域进行三维造型，着色(涂色)时的控制用纸(造型用控制器)的附图。
该造型用控制器在分割成上段、中段、下段的领域中，印刷印有各种指示指令的领域，在该些领域中，印刷表示坐标或代码的光点图形(图示省略)。因此，通过使用扫描器指定输入(摄像)各自的领域，被将领域中印刷的光点图形转换成坐标值或代码值的中央处理装置(CPU)读入，通过应用程序执行与其对应的命令。
在上段的掩模制作指示领域中，可指定掩模制作开始指示用领域(掩模制作开始)和多角形，曲线，圆等掩模图形。
在中段的造型作业指示领域中，指示在被掩模制作指示领域指定的掩模领域内的造型处理。具体地，是指向地图等的图像数据的Z方向的三维处理，可以进行用扫描器向指定涂色的上下方向(Z方向)的造型处理。此时的三维处理可使用各种函数进行，可进行使整个掩模领域在Z方向浮起，仅中心在+Z方向上呈吊钟状凸起的三维造型处理。
另外，下段的涂色指示领域可利用扫描器指示输入对于掩模领域的着色。
接着，说明使用图20中说明的造型用控制器的掩模制作、造型处理、涂色处理的具体实例。
<掩模制作>
首先使用者在用扫描器选择输入(摄像)造型用控制器的“掩模制作开始”领域时，制作屏幕打开，在显示装置的屏幕上显示。使用者用扫描器选择输入(摄像)想要制作形状的图形(例如，多角形和曲线等)。
接着，在造型用控制器的纸面上扫描想要作为掩模领域的印刷图像上的边界领域，制作掩模。
另外，移动制作的掩模时，选择输入“移动”后，用扫描器选择输入(摄像)对应移动地位置的纸面上的位置。
使生成的掩模左转动时，用扫描器选择输入(摄像)“左转动”，使其右转动时，选择输入(摄像)“右转动”。此外，使生成的掩模放大时，用扫描器选择输入(摄像)“放大”，使其缩小时，选择输入(摄像)“缩小”。
此外，想要在显示装置上返回上一屏幕重新操作时，用扫描器选择输入(摄像)造型用控制器的“返回上一步”领域。中途中止掩模的制作时，用扫描器选择输入(摄像)“中止”。
最后，掩模制作完成时，用扫描器选择输入(摄像)“登录”。
另外，用扫描器选择输入(摄像)“删除”领域时，显示器上会显示“删除吗？”。这里，用扫描器选择输入(摄像)造型用控制器的“是”领域时，选择的掩模被删除。不进行删除时，用扫描器选择输入(摄像)“否”。
(造型)
使用者用扫描器选择输入(摄像)“造型开始”图形，开始造型。
接着，选择造型的方法。具体地，用扫描器选择输入(摄像)“点上、下”，“影响领域上、下”，“掩模领域平面上、下”或“掩模领域曲面上、下”中任一图标(领域)。
接着，决定进行造型的位置。在纸面上用扫描器选择输入(摄像)想要***的位置时，在显示装置的屏幕上，纸面上的最接近扫描器选择输入(摄像)的位置的网格交点(点)闪烁。此时，选择“掩模领域平面上、下”或“掩模领域曲面上、下”作为造型方法时，掩模的轮廓与点一起闪烁。
接着，进行造型。使用者用扫描器选择输入(摄像)“上”“下”的三角图形，使网格***进行造型。***形状是根据上述操作中选择的造型方法而成的。想要使其很高地***或很深地下陷时，用扫描器多次地选择输入(摄像)，例如可在纸面上用扫描器进行连续地轻敲(tapping)动作。
图21和图22是表示掩模形状和与其对应的向Z方向***形状的造型处理的附图。在这些图中，左侧的图形表示用扫描器选择输入(摄像)“掩模领域曲面上、下”，呈山状(吊钟状)***的造型处理状态。此外，右侧的图形表示用扫描器选择输入(摄像)“掩模领域平面上、下”，像大厦一样呈立方体状***的造型处理状态。此时，掩模的指定可以用扫描器指定掩模形状内部的任意点。
另外，在造型作业的中途，想要返回上一操作重新操作时，用扫描器分别选择输入(摄像)“返回上一步”，在中途停止造型时，用扫描器分别选择输入(摄像)“中止”。
形成所需的形状(***形状和下陷形状等)后，用扫描器选择输入(摄像)“决定”。由此，造型确定。
但是，在纸面上沿垂直方向倾斜扫描器时由于在摄像领域内的倾斜方向上产生明暗差，因此由于通过个人电脑的图像识别程序识别，可识别倾斜扫描器的方向。利用这个原理，通过网格旋转(grid grind)动作，即在相对于纸面的垂直线的摄像光轴保持一定的倾斜的倾斜状态下，围绕中心转动垂直线，也就是通过识别摄像光轴的倾斜状态的变化，可以指示显示装置上显示的图像处理。
例如，通过在倾斜扫描器的状态下摄像范围一定，同时在所定时间内顺时针转动(旋转)扫描器的后端(图23(a)的上端)，如图23(b)所示，可执行在Z方向上的下陷造型处理。
此外，相反地，通过在所定时间内逆时针转动(旋转)扫描器的后端(图24(a)的上端)，如图24(b)所示，可执行在Z方向上的***造型处理。
图25～图30是说明识别扫描器的倾斜和转动的方法的附图。
如图25所示，在识别扫描器的摄像图像的明暗，其明暗领域对于摄像中心变化时，中央处理装置可识别如图23～图24所示的扫描器的动作。
图25是说明扫描器的倾斜和角度的关系的附图。
纸面上的光点图形在与纸面的纵方向的同方向上重叠印刷。如(a)所示，光点图形的方向与扫描器内的照相机方向所成的角度为α。此外，如(b)所示，使用者倾斜扫描器时，扫描器的倾斜与照相机的方向所成的角度为β。此时，光点图形的方向与扫描器的倾斜所成的角度γ为相对于纸面倾斜扫描器的角度。即角度γ为，γ＝α+β。
图26至图27是说明在上述扫描器的动作中，扫描器的摄像图像的明暗及倾斜方向的算出方法的附图。
扫描器(摄像装置)对于媒介面的垂直方向的倾斜，如图25(b)所示，可利用该扫描器的摄像视野的明暗差识别。
扫描器的倾斜方向是指，如图25(a)所示，扫描器与纸面所成的角度。使用者向哪个方向倾斜扫描器，可通过以下的方法求出。
首先，进行校准(calibration)。这里的校准不是整合上述显示装置的屏幕与纸的坐标值的校准，而是为了彻底调整扫描器与纸面的角度而进行的校准。扫描器垂直于纸面，测定这时的图26所示的单元1～48的明亮度。图26是扫描器周边的领域。此时的明亮度为BL0(i)。i是测定的单元的值，例如，24号的单元的明亮度表示为BL0(24)。
在扫描器内部，设置2个LED。因此，即使扫描器垂直于纸面，LED附近的单元与远离LED位置上的单元的明亮度不同。因此，进行校准。
接着，测定倾斜扫描器时的明亮度。如图27(a)所示，测定扫描器向一定方向倾斜时的单元1至单元48的明亮度，单元i的明亮度为BL(i)。接着，计算各单元的BL(i)与BL0(i)的差。接着，计算Max(BL0(i)-BL(i))。
倾斜扫描器时，与倾斜方向相反的方向变暗。这是因为由于LED也在倾斜扫描器的方向上倾斜，与LED的距离在与倾斜方向相反的方向上变远而造成的。因此，如图27(b)所示，与差的最大值的单元相反的方向为倾斜扫描器的位置。
由此决定倾斜扫描器的方向。
接着，通过利用图26～图27进行校准，说明决定倾斜方向和角度的其他方法。
最初，进行校准。首先，扫描器垂直于纸面，测定图26所示的单元1至单元48的明亮度，单元i的明亮度为BL0(i)。
接着，扫描器倾斜45°，如图27所示，以笔尖为轴绕一周。此时，扫描器来到单元i的位置时的明亮度为BL45(i)。求出单元1至单元48中的BL45(i)。通过以上的操作结束校准。
接着，测定使用者倾斜扫描器时的单元1至单元48的明亮度，单元i的明亮度为BL(i)，i＝1，n(＝48)。于是，求出
Max BL 0 ( i ) - BL ( i ) BL 0 ( i ) - BL 45 ( i ) , i＝1，n＝1，n(＝48)。
由于BL0(i)-BL45(i)是一定的，BL0(i)-BL(i)的值为最大，即BL(i)为最小值时，
BL ( i ) - BL ( i ) BL 0 ( i ) - BL 45 ( i ) , i＝1，n＝1，n(＝48)
为最大值。如上所述，由于与倾斜扫描器方向相反的方向最暗，因此此时的单元i的相反方向为倾斜扫描器的方向。
此外，倾斜扫描器的角度为
&theta; = 45 &times; BL 0 ( i ) - BL ( i ) BL 0 ( i ) - BL 45 ( i ) , i＝1，n＝1，n(＝48)。
另外，上述算式是假定对于明亮度，角度θ为线形的情况，但若严密的话，利用三角函数等进行以下的近似，可提高精确度。这样的话，角度为
&theta; = 1 2 cos - 1 [ BL ( i ) - BL 45 ( i ) BL 0 ( i ) - BL 45 ( i ) ] .
图29是用傅里叶(Fourier)函数测定倾斜方向的方法。
如图28所示，以1至8的8个单元为测点，测定各个单元的明亮度。
sin函数用αj{sin(1/2)j-1(θ-βj)}表示。即，未知数为2个。
因此，有n个测点时，由于分散的点为n个，因此求出n/2个的sin函数的和，这是解析中心到半径的明亮度BL(i)。即，
BL ( i ) = &Sigma; j = 1 2 &alpha; j { sin ( 1 2 ) j - 1 ( &theta; - &beta; j ) }
但是，用n＝2m(n为测点数)表示。
本实施方式中，由于测点为8个，所以n＝8。因此，通过合成4个sin函数式，求出傅里叶级数的α1～α4和β1～β4。接着，用4个sin函数的和表示解析中心到半径的明亮度BL(i)。
根据上述算式，BL(i)为最小值时的角度θ为最暗的位置，其180度相反的方向为倾斜扫描器的方向。
图30是通过解n次方程式测定倾斜方向的方法。
图30的图表表示n次函数。使用n次函数时，解析中心到半径的明亮度BL(i)为
BL(i)＝α1(θ-β1)·α2(θ-β2)····αj(θ-βj)
但是，用j＝n/2，n＝2m表示。
如图28所示，本实施方式中，由于测点为8个，因此必须求出8个解。在1个方程式中，由于含有αj，βj2个未知数，因此要解4个方程式，求出α1～α4和β1～β4。
由此，求出BL(i)为最小值时的角度θ。角度θ的位置为最暗的位置，其180度相反的方向为倾斜扫描器的方向。
另外，通过图29和图30的测定方法不能测定相对纸的垂直线的扫描器的倾斜。这里，可通过结合图26～图27所示的测定方法具体测定倾斜角度。
如图25所示，中央处理装置(CPU)识别扫描器的摄像图像的明暗，摄像图像的明暗对于上述摄像中心转动而变化时，中央处理装置(CPU)判定扫描器转动。
<涂色>
使用者通过涂色功能，可在网格上涂色，在掩模领域内粘贴图样和照片。
首先，用扫描器(光学读取装置)选择输入(摄像)造型用控制器的“涂色开始”的领域。
接着，选择输入(摄像)“笔”“喷墨(spray)”“毛笔”中的任何一个，决定笔的种类。
接着，决定笔的参数(parameter)。决定笔的粗细时扫描器选择输入(摄像)“粗细”，决定阴影时扫描器选择输入(摄像)“阴影”，决定透明感时扫描器选择输入(摄像)“透明感”。这里，通过使用扫描器选择输入“提高”“下降”的三角图像，可改变笔的参数。返回初期状态时，用扫描器选择输入(摄像)“初期状态”。这样，当决定了笔的参数后，用扫描器选择输入(摄像)“决定”。
接着，在颜色托盘(color pallet)上选择颜色。使用者用扫描器选择输入(摄像)颜色托盘内的希望的颜色的控制板。
接着，选择描绘方式。
描绘折线时用扫描器选择输入(摄像)“直线”，用扫描器使纸面上的位置顺次移动，远离纸面时，描绘折线。
描绘曲线时用扫描器选择输入(摄像)“曲线”，用扫描器使纸面上的位置顺次移动，远离纸面时，自动地描绘曲线。
涂覆整个掩模领域时，用扫描器选择输入(摄像)“掩模领域涂覆”，用扫描器选择输入(摄像)与设定的掩模的边界的内侧领域对应的纸面上的位置时，用上述选择的颜色在掩模内着色。
在掩模领域粘贴图样和照片时，用扫描器选择输入(摄像)“图样”或“照片”，监视器上会显示图样和照片的清单。
使用者用扫描器选择输入(摄像)三角图标，选择影线表示的图样、照片。这里，使用图样、照片用影线表示时，用扫描器选择输入(摄像)“决定”，选择其图样、照片。
接着，在用扫描器选择输入(摄像)与设定掩模的边界的内侧领域对应的纸面上的位置时，在其掩模领域内，粘贴上述选择的图样或照片。
另外，想要返回显示装置的屏幕上的上一屏幕的操作，重新操作时，用扫描器选择输入(摄像)造型用控制器的“返回上一步”，想要再进一步时，用扫描器选择输入(摄像)“下一步”。
最后，结束涂色时，用扫描器选择输入(摄像)“结束”。
<第3种实施方式化妆模拟>
图31～34是说明本发明的一个实施方式的化妆模拟的附图。
对事先准备印刷有上述光点图形的纸，在该纸上用扫描器修正、加工显示装置(监视器)上显示的图像的方法进行说明。
作为图1中说明的硬盘装置(HD)内的应用程序之一，安装(install)化妆模拟程序。该化妆造型程序是执行对显示装置上显示的脸图像(可以是照片图像或CG加工图像)施以化妆的模拟。
在本实施方式中，使用印刷上述光点图形的纸，进行该造型用腮红刷和颜色托盘的选择。
在该纸上，如同图(b)所示，印刷事先在图2等中说明的光点图形。
在本实施方式中，纸的光点图形是印刷表示XY坐标的光点图形。
该纸在没有图示的印刷装置(打印机)中，印刷图31(a)所示的脸的图像。此时，在纸的上半部分，印刷脸的图像，下半部分印刷控制器图像(化妆控制器)(参照图32)。该控制器图像是以四角形和三角形印刷进行“化妆品的种类”，“化妆文件夹”，“颜色托盘”，“满意”等输入的指定领域。通过使用扫描器光学的读取该指定领域，该指定领域的光点图形的坐标或代码通过解析程序转换为指示指令，过渡到造型程序。
这里，为了使扫描器的化妆料等选择输入对于显示装置的屏幕上显示的脸图像正确地反映，有必要使屏幕和纸的位置关系一致。
校准作业如下进行，以使其一致。
首先，在纸上，事先设定图像和显示装置上的图像的基准点，可目视该基准点的标记(用●表示)与上述图像一起被印刷。该标记也可以显示在显示装置的屏幕上。
使用这样印刷的标记进行校准作业时，首先，用扫描器指定(点击)印刷有图32的上半部分所显示的脸图像的纸中的、用左上的●(黑点)表示的校准按钮(标记)。
接着，用扫描器顺次指定(点击)右下的●(黑点)、右上的●(黑点)、左下的●(黑点)。通过该4个校准按钮的指定(点击)，纸上的校准按钮的各自的坐标位置过渡到造型程序，使其与显示装置上的4个校准按钮的位置一致。
通过这样的校准作业，纸上的坐标位置与显示装置上的图像的位置关系一致，可在正确的位置上对屏幕上显示的脸图像施以化妆处理。
<化妆用控制器>
接着，具体说明通过使用图32的下半部分图中说明的化妆用控制器的化妆模拟程序而进行模拟的步骤。
首先，使用者用扫描器选择输入(摄像)“化妆开始”，开始化妆模拟。
接着，选择化妆文件夹。选择输入“选择”时，在显示装置上显示已经登录的文件夹的一览表。使用者选择输入(摄像)向上及向下的三角图像，选择影线表示的化妆文件夹。使用的化妆文件夹用影线表示，用扫描器选择输入(摄像)“决定”。
接着，选择化妆品的种类。这里，化妆模拟程序的化妆品种类的默认值设定为腮红刷。因此，在选择默认值的腮红刷时，过渡到下面的操作。在选择“口红·红笔”“眼影刷”“睫毛膏”“眉笔”“眼线笔”时，用扫描器选择输入(摄像)希望的化妆品。
接着，决定笔的大小、阴影、透明感。选择笔的大小时，用扫描器选择输入(摄像)“笔的大小”，变大时选择输入(摄像)向上的三角图像，变小时选择输入(摄像)向下的三角图像。返回到初期设定时，用扫描器选择输入(摄像)“初期设定”。决定了大小之后，用扫描器选择输入(摄像)“决定”。决定阴影、透明度时，也同样地用扫描器选择输入(摄像)“阴影”“透明度”来决定。
接着，进行化妆模拟。首先在颜色托盘中选择颜色。使用者用扫描器选择输入(摄像)希望的颜色的控制板。
另外，满意选择的颜色进行登录时，用扫描器选择输入(摄像)“登录”，追加其颜色。如果该化妆品的颜色已经选择了5种时，用扫描器选择输入(摄像)想要改变的编号。此外，从已经满意登录的颜色中选择时，用扫描器选择输入(摄像)已登录的化妆品编号(腮红1)。
决定了化妆品的种类和颜色后，用扫描器选择输入(摄像)脸照片上想要化妆的部分，在显示装置上进行化妆模拟。
进行化妆模拟之后，想要返回化妆前重新操作时，用扫描器选择输入(摄像)“化妆前”。想要返回上一化妆屏幕时，用扫描器选择输入(摄像)“返回上一步”。之后，想要进行下一步时，用扫描器选择输入(摄像)“进行下一步”。
接着，登录化妆文件夹。
化妆模拟完成之后，用扫描器选择输入(摄像)化妆文件夹的“登录”进行文件登录时，显示装置的屏幕上显示“替换吗？”。使用者用扫描器选择输入(摄像)“是”“否”中的任何一个，决定是否替换。不替换时，显示装置的屏幕上显示“请输入文件夹名称”。使用者输入任意文件夹后作成新的文件夹。
另外，在进行登录时，不仅登录化妆后的屏幕也登录化妆的过程。
最后，用扫描器选择输入(摄像)“化妆结束”，结束化妆模拟。
另外，在图31的脸图像的加工、修正中，只说明了用光点图形指定XY坐标进行着色和颜色修改时的基本技术，在这种情况下，例如可以指定唇的范围、颊的范围、头发的范围，可以指定其颜色修正所影响的范围。
此时，需要在屏幕上进行掩模指定处理。该掩模指定处理与上述实施方式相同因此省略说明。
图33～图34是说明化妆用控制器的印刷方法的其他实施例的附图。
图33是事先印刷有控制器的附图。在纸的上半部分，事先印刷表示XY坐标值的光点图形。在纸的下半部分，印刷控制器，在控制器的各个图像上重叠印刷表示代码值的光点图形。该纸置于没有图示的印刷装置(打印机)内，印刷显示装置上显示的脸图像时，在印刷有表示XY坐标的光点图形的领域，输出脸图像。使用者在脸图像上进行上述校准后，进行化妆模拟。
这样，通过事先印刷控制器，使用者可容易地进行化妆模拟。此外，不仅限于化妆模拟用的控制器，还可作成各种控制器并事先印刷，因此可提供符合使用者需要的控制器。
图34是从白纸印刷化妆用控制器的附图。使用者使用鼠标等扫描显示装置上显示的脸图像的周边以及控制器图像的外线，指定掩模。白纸置于没有图示的印刷装置(打印机)中进行印刷处理时，脸图像及其周边重叠印刷表示XY坐标的光点图形，控制器的各个图像，重叠印刷并输出表示代码的光点图形和图像。此时，不需要校准操作，使用者可在印刷后立即进行化妆模拟。
另外，上述各实施方式中的各种操作，不使用控制器，通过在显示装置的屏幕的表面上粘贴印刷有光点图形的薄层等，选择输入(摄像)显示装置的屏幕上的相应位置来进行。
而且，代替上述纸，在印刷光点图形的白板和屏幕上利用投影器投影图像，利用扫描器对该投影的图像进行扫描，可进行对应光点图形的处理。
产业上的可利用性
本发明可在显示装置的屏幕上的控制技术方面利用。

Claims (9)

1.一种图像处理方法，是对于显示装置上显示的图像，在印刷光点图形的纸上印刷上述图像，利用摄像装置摄取该光点图形，识别图像的位置，在图像上进行处理的图像处理方法，其特征在于，由以下步骤构成，
在纸上印刷表示XY坐标的光点图形；
在印刷上述光点图形的纸上，印刷显示装置的屏幕上显示的图像；
在上述图像的印刷步骤中，设定显示装置上的图像基准点，用可目视的标记印刷该基准点和上述图像；
利用摄像装置摄取印刷的纸标记，执行使该纸上的标记的位置坐标与上述图像的基准点一致的校准；
用摄像装置，对上述纸上印刷的图像进行图像处理。
2.一种图像处理方法，是对于显示装置上显示的图像，在印刷光点图形的纸上印刷上述图像，利用摄像装置摄取该光点图形，识别图像的位置，在图像上施加处理的图像处理方法，其特征在于，由以下步骤构成，
在纸上印刷表示XY坐标的光点图形；
在印刷上述光点图形的纸上，印刷显示装置上显示的图像；
用摄像装置扫描印刷有上述纸上的图像的所定领域，使其描绘封闭图形，指定掩模领域；
在与存储装置设定的上述图像领域对应的掩模表格的上述掩模的领域设定标志；
用摄像装置摄取上述纸的掩模领域的光点图形；
读入上述掩模领域的光点图形，当是参照掩模表格设定有掩模的领域时，参照与上述掩模领域对应的定义了处理命令的掩模、处理命令对应表格，执行被定义的处理命令。
3.一种图像处理方法，是对显示装置上显示的图像，在事先印刷光点图形的纸上印刷上述图像，用摄像装置摄取该光点图形，识别图像的位置，在图像上进行处理的图像处理方法，其特征在于，由以下步骤构成，
在事先印刷表示XY坐标的光点图形的纸上，印刷显示装置屏幕上显示的图像；
在上述图像的印刷步骤中，设定显示装置上的图像的基准点，用可目视的标记印刷该基准点和上述图像；
用摄像装置摄取印刷的纸的标记，执行使该纸上的标记的位置坐标与上述图像的基准点一致的校准；
使用摄像装置对上述纸上印刷的图像执行图像处理。
4.一种图像处理方法，是对显示装置上显示的图像，通过光学读取装置摄取印刷光点图形的纸，进行对应上述光点图形的图像处理的图像处理方法，其特征在于，
由以下步骤构成，通过利用光学读取装置顺次摄取重合印刷有表示代码值或坐标值的光点图形与图标图像的控制器上的图标图像，选择图像处理用的笔；
同样的，通过利用光学读取装置摄像控制器上的图标图像，选择描画色；
通过使用上述光学读取装置在上述控制器上扫描，在显示装置的屏幕上进行对应该扫描轨迹的描画处理。
5.根据权利要求1～4中任一项所述的图像处理方法，其特征在于，上述图像处理是通过利用摄像装置对上述纸面进行所定的动作，指定与上述纸面对应的显示装置上显示的图像领域的一部分或全部，对该领域进行二维图像处理或三维变形处理。
6.根据权利要求5所述的图像处理方法，其特征在于，上述所定的三维变形的动作是摄像装置的网格滚动(grid grind)动作，即通过在相对于媒介物面的垂直线的摄像光轴保持一定倾斜的倾斜状态下、使垂直线围绕中心转动，识别摄像光轴的倾斜状态的变化，图像领域的变形是向上述图像领域中Z方向的***状的变形或向-Z方向的下陷状的变形。
7.根据权利要求5或6所述的图像处理方法，其特征在于，上述图像处理是在上述图像上的造型处理，指定上述图像的所定的位置，使该图像部位在Z方向或-Z方向上呈***状或下陷状变形。
8.根据权利要求7所述的图像处理方法，其特征在于，上述造型处理是，在图像的所定形状上进行掩模设定，图像的该部位沿着该掩模形状在Z方向或-Z方向上伸长或***。
9.根据权利要求1或3中任一项所述的图像处理方法，其特征在于，上述图像的基准点至少设置2个，上述标记也与其对应，在纸上的2个以上的部位印刷。
CN2007800041673A 2006-01-31 2007-01-31 图像处理方法 Expired - Fee Related CN101379460B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006049190 2006-01-31
JP049190/2006 2006-01-31
PCT/JP2007/052064 WO2007089021A1 (ja) 2006-01-31 2007-01-31 画像処理方法

Publications (2)

Publication Number Publication Date
CN101379460A CN101379460A (zh) 2009-03-04
CN101379460B true CN101379460B (zh) 2011-09-28

Family

ID=38327577

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800041673A Expired - Fee Related CN101379460B (zh) 2006-01-31 2007-01-31 图像处理方法

Country Status (7)

Country Link
US (3) US8368954B2 (zh)
EP (1) EP1983412A4 (zh)
JP (1) JP4253029B2 (zh)
KR (1) KR101048012B1 (zh)
CN (1) CN101379460B (zh)
CA (1) CA2640579C (zh)
WO (1) WO2007089021A1 (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5582563B2 (ja) * 2007-12-12 2014-09-03 健治 吉田 情報入力装置、情報処理装置、情報入力システム、情報処理システム、２次元書式情報サーバ、情報入力方法、制御プログラム、および記録媒体
AU2007254595B2 (en) * 2007-12-20 2011-04-07 Canon Kabushiki Kaisha Constellation detection
DE102008017168A1 (de) * 2008-04-02 2009-10-08 Crossmedia Solution Gmbh & Co. Kg Verfahren zum Speichern und Auslesen von Daten
JP4385169B1 (ja) * 2008-11-25 2009-12-16 健治 吉田 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート
JP5387193B2 (ja) * 2009-07-16 2014-01-15 富士ゼロックス株式会社 画像処理システム、画像処理装置およびプログラム
US9749607B2 (en) 2009-07-16 2017-08-29 Digimarc Corporation Coordinated illumination and image signal capture for enhanced signal detection
JP5440926B2 (ja) * 2009-10-09 2014-03-12 大日本印刷株式会社 情報処理システム及びそのプログラム
JP5888838B2 (ja) * 2010-04-13 2016-03-22 グリッドマーク株式会社 手書き入力ボードを用いた手書き入力システム、手書き入力ボード、スキャナーペンおよび手書き入力ボードを用いた情報処理システム
US8602893B2 (en) * 2010-06-02 2013-12-10 Sony Computer Entertainment Inc. Input for computer device using pattern-based computer vision
JP5490627B2 (ja) * 2010-06-17 2014-05-14 株式会社ミツトヨ 画像機器の校正用パターン
JP4716453B1 (ja) * 2010-07-13 2011-07-06 健治 吉田 プログラム、情報処理装置、情報処理システム
EP2672428A3 (en) * 2010-09-21 2014-01-01 King Jim Co., Ltd. Image processing program
CN102323868B (zh) * 2011-10-26 2013-07-31 中国人民解放军国防科学技术大学 基于红外图像的人机多点交互方法及装置
US20150190597A1 (en) 2012-03-11 2015-07-09 Airway Medix Spolka Z.O.O. Oral care system method and kit
KR101398188B1 (ko) * 2012-03-13 2014-05-30 주식회사 네오위즈블레스스튜디오 캐릭터 화장을 제공하는 온라인 게임 제공 방법 및 그 시스템
JPWO2013161246A1 (ja) * 2012-04-26 2015-12-21 パナソニック株式会社 表示制御システム及び表示装置
JP5949261B2 (ja) * 2012-07-20 2016-07-06 セイコーエプソン株式会社 ラベル作成システム、ラベル作成方法、印刷装置およびプログラム
US9311549B2 (en) * 2012-08-17 2016-04-12 Evernote Corporation Using surfaces with printed patterns for identification of imaging and data processing activities
US10424038B2 (en) 2015-03-20 2019-09-24 Digimarc Corporation Signal encoding outside of guard band region surrounding text characters, including varying encoding strength
US9635378B2 (en) 2015-03-20 2017-04-25 Digimarc Corporation Sparse modulation for robust signaling and synchronization
CN105446550B (zh) * 2014-08-20 2019-03-08 联想(北京)有限公司 输入装置及其定位方法、电子设备及输入***
KR101817153B1 (ko) * 2015-01-28 2018-01-11 한국전자통신연구원 기하학적 왜곡에 강인한 점 기반 정보를 사용하는 정보 삽입 방법, 정보 추출 방법 및 정보 추출 장치
US10783601B1 (en) 2015-03-20 2020-09-22 Digimarc Corporation Digital watermarking and signal encoding with activable compositions
WO2016153936A1 (en) 2015-03-20 2016-09-29 Digimarc Corporation Digital watermarking and data hiding with narrow-band absorption materials
US10872392B2 (en) 2017-11-07 2020-12-22 Digimarc Corporation Generating artistic designs encoded with robust, machine-readable data
US11062108B2 (en) 2017-11-07 2021-07-13 Digimarc Corporation Generating and reading optical codes with variable density to adapt for visual quality and reliability
US10896307B2 (en) 2017-11-07 2021-01-19 Digimarc Corporation Generating and reading optical codes with variable density to adapt for visual quality and reliability
US11216981B2 (en) 2019-07-26 2022-01-04 Cnh Industrial America Llc System and method for calibrating image data during an agricultural operation using a color indicator
CN110766771B (zh) * 2019-10-18 2023-07-28 天津津航计算技术研究所 一种基于fpga的字符描边方法
WO2022017574A1 (ar) * 2020-07-19 2022-01-27 محمد مصطفى صابر جلو، طريقة لمعالجة وتعديل الصورة قبل عرضها باستخدام جهاز العرض ( البروجكتر ) تمنع وصول الاشعة الضارة وضوء الجهاز إلى العين
KR20220106259A (ko) 2021-01-21 2022-07-29 삼성디스플레이 주식회사 표시 장치 및 이를 포함하는 터치 입력 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1512442A (zh) * 2002-12-27 2004-07-14 李林子 一种数字信息的记录与传输的方法
CN1695158A (zh) * 2003-03-17 2005-11-09 吉田健治 使用点图形的信息输入输出方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5416312A (en) * 1992-11-20 1995-05-16 Cherloc Document bearing an image or a text and provided with an indexing frame, and associated document analysis system
JPH09189519A (ja) * 1996-01-11 1997-07-22 Ushio Inc パターン検出方法およびマスクとワークの位置合わせ装置
DK148597A (da) * 1997-12-18 1999-06-19 Kanitech A S Fremgangsmåde til brugerindstilling samt til bevægelseskorrektion af en inputanordning, et lagermedium samt en inputanordni
US6198472B1 (en) * 1998-09-16 2001-03-06 International Business Machines Corporation System integrated 2-dimensional and 3-dimensional input device
US7322524B2 (en) * 2000-10-20 2008-01-29 Silverbrook Research Pty Ltd Graphic design software using an interface surface
CN100430873C (zh) * 1999-12-23 2008-11-05 阿诺托股份公司 信息管理***及相关方法和用途
US6958752B2 (en) * 2001-01-08 2005-10-25 Sensable Technologies, Inc. Systems and methods for three-dimensional modeling
US6842538B2 (en) * 2001-03-23 2005-01-11 Shih-Jong J. Lee Automatic detection of alignment or registration marks
US6732927B2 (en) * 2001-06-26 2004-05-11 Anoto Ab Method and device for data decoding
WO2003054683A2 (en) * 2001-12-07 2003-07-03 Canesta Inc. User interface for electronic devices
JP2004029975A (ja) 2002-06-21 2004-01-29 Sony Corp タッチペン及びタッチパネル搭載電子機器
CN102999746B (zh) * 2002-09-26 2016-11-23 Ip解决方案株式会社 使用光点图形的信息重放、输入输出方法、信息重放装置、便携信息输入输出装置以及电子玩具
JP2004246433A (ja) * 2003-02-12 2004-09-02 Hitachi Ltd データ入力システム
US20050138568A1 (en) * 2003-12-18 2005-06-23 International Business Machines Corporation System integrated window sizing device
US20050139666A1 (en) * 2003-12-24 2005-06-30 Henwell Chou Verifiable voting input system
WO2005064530A1 (ja) * 2003-12-25 2005-07-14 Kenji Yoshida ドットパターンを用いた情報入出力方法
US20050149258A1 (en) * 2004-01-07 2005-07-07 Ullas Gargi Assisting navigation of digital content using a tangible medium
JP3871693B2 (ja) 2004-02-16 2007-01-24 健治 吉田 ドットパターンを用いたセキュリティシステム
US7545362B2 (en) * 2004-02-26 2009-06-09 Microsoft Corporation Multi-modal navigation in a graphical user interface computing system
JP4008952B2 (ja) 2004-05-24 2007-11-14 健治 吉田 ドットパターン読取ユニット及びこれを備えたマウス
EP2730426B1 (en) * 2004-10-15 2018-03-07 YOSHIDA, Kenji Printing unit
AU2004326049B2 (en) * 2004-12-28 2011-08-18 Kenji Yoshida Information input/output method using dot pattern
AU2005331401B2 (en) * 2005-04-28 2012-07-12 Kenji Yoshida Information input/output method using dot pattern
JP3771252B1 (ja) * 2005-07-01 2006-04-26 健治 吉田 ドットパターン
JP3830956B1 (ja) * 2005-09-14 2006-10-11 健治 吉田 情報出力装置
JP4142683B2 (ja) 2005-11-18 2008-09-03 健治 吉田 ドットパターン
JP5178384B2 (ja) * 2007-08-14 2013-04-10 キヤノン株式会社 インクジェット記録装置およびインクジェット記録方法
JP5274293B2 (ja) * 2008-09-22 2013-08-28 株式会社ニューフレアテクノロジー マスク検査装置、それを用いた露光方法及びマスク検査方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1512442A (zh) * 2002-12-27 2004-07-14 李林子 一种数字信息的记录与传输的方法
CN1695158A (zh) * 2003-03-17 2005-11-09 吉田健治 使用点图形的信息输入输出方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2004-29975A 2004.01.29

Also Published As

Publication number Publication date
JPWO2007089021A1 (ja) 2009-06-25
US8368954B2 (en) 2013-02-05
US20130215438A1 (en) 2013-08-22
WO2007089021A1 (ja) 2007-08-09
CA2640579C (en) 2015-08-04
CA2640579A1 (en) 2007-08-09
KR101048012B1 (ko) 2011-07-15
EP1983412A1 (en) 2008-10-22
US8917426B2 (en) 2014-12-23
CN101379460A (zh) 2009-03-04
US20090059299A1 (en) 2009-03-05
KR20080080237A (ko) 2008-09-02
US9716812B2 (en) 2017-07-25
EP1983412A4 (en) 2011-07-20
US20160182767A1 (en) 2016-06-23
JP4253029B2 (ja) 2009-04-08

Similar Documents

Publication Publication Date Title
CN101379460B (zh) 图像处理方法
US5767860A (en) Digital mark-making method
Song et al. ModelCraft: capturing freehand annotations and edits on physical 3D models
TWI261546B (en) Preview apparatus, electronic equipment, and image forming apparatus
CN104133562A (zh) 信息输入输出装置
CN102385274B (zh) 图像处理装置及其控制方法
US10643491B2 (en) Process, system and method for step-by-step painting of an image on a transparent surface
JP4716453B1 (ja) プログラム、情報処理装置、情報処理システム
US4751503A (en) Image processing method with improved digital airbrush touch up
US20210031014A1 (en) Touch and Virtual Application for Art, Designs and Tattoos
GB2377607A (en) Analysing and displaying motion of hand held instrument
Chavez et al. Adobe Photoshop Classroom in a Book (2021 Release)
JP5714425B2 (ja) 画像編集装置、画像編集方法及びプログラム
JP2006113232A (ja) 表示装置および表示制御プログラム
Karlins Adobe illustrator CC for dummies
JPS60182263A (ja) 黒板描画情報入力装置
JP2013154616A (ja) 画像評価装置、画像評価方法及びプログラム
Wertheim Adobe Photoshop for demonstrating latent print uniqueness
JPS644112Y2 (zh)
JPS5911937B2 (ja) 対話型作図装置
JPS60182261A (ja) 黒板描画情報入力装置
JPS60182260A (ja) 黒板描画情報入力装置
JPH01105258A (ja) 印刷製版用レイアウト装置
CN107783398A (zh) 图像形成设备和打印片材
JPS60182264A (ja) 黒板描画情報入力装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160929

Address after: Japan Tokyo paper Ishikawa Beijing yidingmu 9 No. 14-2302

Patentee after: IP Solutions Inc.

Address before: Tokyo, Japan, Japan

Patentee before: Yoshida Kenji

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110928

Termination date: 20190131