CN103856714A - 书画照相机、书画照相机的控制方法 - Google Patents

书画照相机、书画照相机的控制方法 Download PDF

Info

Publication number
CN103856714A
CN103856714A CN201310631918.1A CN201310631918A CN103856714A CN 103856714 A CN103856714 A CN 103856714A CN 201310631918 A CN201310631918 A CN 201310631918A CN 103856714 A CN103856714 A CN 103856714A
Authority
CN
China
Prior art keywords
image
operating body
photographed images
describe
track
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310631918.1A
Other languages
English (en)
Other versions
CN103856714B (zh
Inventor
樱井慎二
宫泽康永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN103856714A publication Critical patent/CN103856714A/zh
Application granted granted Critical
Publication of CN103856714B publication Critical patent/CN103856714B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/48Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/132Overhead projectors, i.e. capable of projecting hand-writing or drawing during action
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Accessories Of Cameras (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Input (AREA)

Abstract

本发明提供能够在实现向摄像图像进行仿真写入时,对被摄体进行直观的描绘操作的书画照相机、书画照相机的控制方法。该书画照相机具备对被摄体进行摄像的摄像部、对被朝向被摄体操作的操作体的指示位置进行识别的位置识别部、以及将规定的图像投影至操作体的指示位置的投影部。

Description

书画照相机、书画照相机的控制方法
技术领域
本发明涉及书画照相机、书画照相机的控制方法。
背景技术
以往,作为这种技术,公知有由书画照相机、手写板终端以及显示器构成的映像解决方案。例如,在非专利文献1中公开了合成书画照相机的摄像图像与基于对手写板终端的描绘操作的描绘图像并显示于显示器的构成。通过该构成,能够向显示于显示器的摄像图像进行仿真写入。
但是,在非专利文献1的情况下,需要一边观看显示器,一边在手中的手写板终端上进行描绘操作,因此存在难以在显示器显示的摄像图像的所希望的位置进行描绘的问题。鉴于此,为了解决该问题,提出了专利文献1。专利文献1涉及由书画照相机、带显示功能的手写板终端构成的资料提示***,将书画照相机的摄像图像以无线的方式发送至手写板终端,并使手写板终端的操作及显示面显示该摄像图像。在手写板终端侧,在操作及显示面上进行描绘操作,并将该描绘结果反映至操作及显示面上。通过该构成,能够实现对显示于手写板终端的摄像图像的描绘操作,与需要一边观看显示于显示器的摄像图像一边进行描绘操作的非专利文献1的构成相比较,存在操作性好的效果。
非专利文献1:エルモソリューションカンパニーインタラクティブ書画カメラ(実物投影機)L-12(http://www.elmosolution.co.jp/products/visual/l_12/index.html)
专利文献1:日本特开2012-138666号公报
但是,即使是在专利文献1的构成中,由于对显示于手写板终端的摄像图像间接地进行描绘,所以与对被摄体直接进行描绘的情况相比较,存在缺乏直观性这一问题。特别是在被摄体为立体物的情况下,估计存在由于被摄体的形状、摄像方向的不同而导致难以向所希望的位置进行描绘的情况。
发明内容
本发明鉴于上述问题点,目的在于提供一种在实现向摄像图像进行仿真写入时,能够对被摄体进行直观的描绘操作的书画照相机、书画照相机的控制方法。
本发明的书画照相机的特征在于,具备对被摄体进行摄像的摄像部、识别对被朝向被摄体操作的操作体的指示位置的位置识别部、以及将规定的图像投影于操作体的指示位置的投影部。
本发明的书画照相机的控制方法的特征在于,执行以下步骤,即:对被摄体进行摄像的摄像步骤、识别被朝向被摄体操作的操作体的指示位置的位置识别步骤、以及将规定的图像投影至操作体的指示位置的投影步骤。
根据本发明的构成,由于将规定的图像投影至被朝向被摄体操作的操作体的指示位置,所以用户能够获得犹如直接对被摄体描绘那样的操作感。另外,即使是在被摄体为立体物的情况下,由于朝向立体物的被摄体本身指出所希望的位置,所以与对被摄体的摄像图像在二维上指定描绘位置的现有构成相比较,能够容易地指出并示出所希望的位置。
此外,“规定的图像”可以是箭头等指针,也可以是点。
在上述书画照相机中,投影部随着操作体的指示位置的移动,投影对将指示位置的移动轨迹可视化而得的描绘轨迹。
根据本发明的构成,随着被朝向被摄体操作的操作体的指示位置的移动,投影将该移动轨迹可视化而得的描绘轨迹,因此用户能够获得犹如直接对被摄体进行写入那样的操作感。
此外,本构成能够通过以短时间间隔连续识别操作体的指示位置,并随着指示位置的移动而连续投影“点”(规定的图像)来实现。
上述书画照相机的特征在于,还具备:辨别是否正通过操作体进行描绘操作的描绘辨别部、和将图像输出至图像显示装置的输出部,输出部在未通过操作体进行描绘操作的情况下,输出通过摄像部摄像的实时的摄像图像,在正通过操作体进行描绘操作的情况下,输出被摄体的摄像图像与描绘轨迹的合成图像。
根据本发明的构成,能够根据是否正通过操作体进行描绘操作,来将适当的图像输出至图像显示装置。即,在正进行描绘操作的期间,通过输出被摄体的摄像图像与描绘轨迹的合成图像,能够从输出图像中排除操作体、拿着操作体的用户的“手”,进而能够仅将被认为本来所需的信息包含于输出图像中。
上述书画照相机的特征在于,描绘辨别部根据操作体的状态,辨别是否正通过操作体进行描绘操作。
另外,上述书画照相机的特征在于,位置识别部识别搭载于操作体的发光体的位置作为操作体的指示位置,描绘辨别部在检测到发光体发光时,辨别为正进行描绘操作,在未检测到发光体发光时,辨别为未进行描绘操作。
根据本发明的构成,能够根据操作体的状态(例如,发光体有无发光)容易辨别是否正进行描绘操作。
此外,作为发光体能够使用红外线、LED(Light Emitting Diode)、激光光源等。
上述书画照相机的特征在于,还具备存储部,上述存储部存储通过由摄像部定期进行摄像而获得的最近的1张以上的摄像图像,输出部在通过操作体开始描绘操作时,从存储部读取规定的摄像图像,在正通过操作体进行描绘操作的期间,输出该规定的摄像图像与描绘轨迹的合成图像。
根据本发明的结构,由于从存储部读取未包含操作体、用户的“手”以及描绘轨迹的描绘开始前的摄像图像,所以能够容易获得被摄体的摄像图像(仅被摄体的图像)。
此外,从存储部读取的“规定的摄像图像”可以是在描绘开始之前摄像的图像(最新的摄像图像),也可以是在存储部存储有多张摄像图像的情况下,在存储过程中规定第几张摄像而得的图像。
上述书画照相机的特征在于,还具备辨别是否正通过操作体进行描绘操作的描绘辨别部、和将图像输出至图像显示装置的输出部,输出部在正通过操作体进行描绘操作的期间,不输出通过摄像部摄像的实时的摄像图像而输出不包含描绘轨迹的除去图像。
根据本发明的构成,虽然希望在被摄体上确认描绘轨迹的情况,但也能够用于在不希望输出图像中包含描绘轨迹的情况(不希望使图像显示装置显示描绘轨迹的用途)。例如,能够利用于在智育现场,在教育者向学生提出问题时,预先在被摄体上标记答案,并等待来自学生的回答,其后在图像显示装置上公开答案(描绘轨迹)的情况等。
上述书画照相机的特征在于,还具备存储部,上述存储部存储通过由摄像部定期进行摄像而获得的最近的1张以上的摄像图像,除去图像是在通过操作体开始描绘操作时从存储部读取的规定的摄像图像。
根据本发明的构成,通过读取描绘开始前的摄像图像,能够容易地获得除去图像。另外,作为除去图像,能够获得未包含操作体、用户的“手”以及描绘轨迹的仅被摄体的图像。
上述书画照相机的特征在于,除去图像是从通过摄像部摄像的实时的摄像图像中除去描绘轨迹后的图像。
根据本发明的构成,通过从通过摄像部摄像的实时的摄像图像中除去描绘轨迹,从而不用预先存储描绘开始前的摄像图像,便能够获得除去图像。
上述书画照相机的特征在于,还具备选择部,上述选择部针对输出部的输出,选择通过摄像部摄像的实时的摄像图像、除去图像、以及描绘轨迹中的任意一种,输出部在正通过操作体进行描绘操作的期间,输出通过选择部选择出的图像。
根据本发明的构成,由于能够从“实时的摄像图像”、“除去图像”、“描绘轨迹”中选择用户所希望的输出图像,所以能够提高使用的便利性。
上述书画照相机的特征在于,投影部能够朝向被摄体投影预先存储的图像数据或者从外部输入的图像数据。
根据本发明的构成,不仅能够投影随着描绘操作而产生的图像(规定的图像、描绘轨迹等),还能够投影任意的图像数据。例如,能够利用于在智育现场将文字的范本作为图像数据投影,并使用操作体在该范本上描绘文字的情况等。
上述书画照相机的特征在于,位置识别部基于摄像部的摄像结果对操作体的指示位置进行识别。
根据本发明的构成,由于能够通过单一的摄像传感器摄像被摄体、识别操作体的位置,所以能够省略二者的校准。另外,能够使书画照相机的装置结构简单化,从而能够实现低廉化。
附图说明
图1是本发明的一个实施方式的投影***的***构成图。
图2是第一实施方式的书画照相机的框图。
图3(a)、图3(b)是表示被摄体、描绘轨迹、投影区域、摄像区域的一个例子的图。
图4(a)是表示实时的摄像图像的一个例子的图,图4(b)是表示合成图像的一个例子的图。
图5是表示第一实施方式的书画照相机的动作的流程图。
图6是第二实施方式的书画照相机的框图。
图7(a)是表示实时的摄像图像的一个例子的图,图7(b)是表示除去图像的一个例子的图,图7(c)是表示描绘轨迹的一个例子的图。
图8是表示第二实施方式的书画照相机的动作的流程图。
具体实施方式
以下,参照附图对本发明的一个实施方式的书画照相机、书画照相机的控制方法详细地进行说明。在各实施方式中,对于使用投影仪作为图像显示装置的情况进行例示。
第一实施方式
图1是本发明的一个实施方式的投影***SY的***构成图。投影***SY由书画照相机1和投影仪2构成,二者经由线缆4连接。
书画照相机1具备箱状的筐体11、从筐体11的端部向上方延出的支承臂12、以及固定于支承臂12的上端的摄像头13。在筐体11的上表面设有从上方(摄像头13侧)观察呈矩形的工作台11a、以及配列有多个操作键的操作面板14。另外,在工作台11a上载置有平面体或者立体物的被摄体50(在该图中示出了载置有平面体的被摄体50的情况)。
另外,书画照相机1附带有发光笔3(操作体)。发光笔3的前端的笔尖32具备LED(发光体),若用户使笔尖32抵接于被摄体50,则LED发光。另外,在发光笔3的主体31设有开关3a,每次按下该开关3a都能够切换LED的发光/灭光。此外,也可以构成为,在持续按下开关3a期间,LED发光,并通过解除对开关3a的按下使LED灭光。
另一方面,在摄像头13朝向下方(工作台11a侧)而设有摄像传感器111和投影透镜151。摄像传感器111对载置于工作台11a上的被摄体50、发光笔3进行摄像。另外,投影透镜151朝向被摄体50投影通过将发光笔3(笔尖32的LED)的移动轨迹可视化而得的描绘轨迹L(规定的图像)。此外,摄像传感器111与投影透镜151优选设置为尽可能接近。
通过上述构成,书画照相机1从摄像传感器111的摄像结果获取被摄体50的摄像图像50m(参照图4(b)),并且生成描绘轨迹L。而且,将合成它们而得到的合成图像、或者通过摄像传感器111摄像的实时的摄像图像作为输出图像G(参照图5等)输出至投影仪2。投影仪2从书画照相机1取得该输出图像G,并将投影仪用投影图像61投影至屏幕SC。
接下来,参照图2对书画照相机1的功能构成进行说明。书画照相机1具备摄像部110、图像解析部120、存储部130、操作部140、投影部150、图像处理部160以及外部输出部170作为主要的功能构成。技术方案中的“输出部”相当于图像处理部160以及外部输出部170。另外,技术方案中的“存储部”相当于存储部130内的摄像图像存储部131。
摄像部110具有上述摄像传感器111、和使由被摄体50等反射的光在摄像传感器111的受光面成像的摄像透镜(省略图示),摄像部110对工作台11a上的摄像区域E2(参照图3)进行摄像。摄像传感器111不仅用于摄像被摄体50,还用于识别发光笔3的指示位置。在摄像传感器111的受光面上形成有配列为矩阵状的多个受光像素,以规定的帧速率生成基于各像素的受光量的图像数据。另外,摄像传感器111由CMOS(互补金属氧化物半导体:Complementary Metal OxideSemiconductor)传感器、CCD(电荷耦合元件:Charge Coupled Device)传感器构成。
此外,在进行描绘操作的情况下,在由摄像部110拍摄的摄像图像中,除了包含被摄体50、以及通过投影部150投影的描绘轨迹L之外,还包含在描绘操作时使用的发光笔3、把持发光笔3的用户的“手”等。但是还会考虑到存在不希望投影仪用投影图像61中包含发光笔3、“手”等信息的情况。因此,在本实施方式中,根据情况,在通过摄像部110摄像的“实时的摄像图像”与不包含发光笔3、“手”等信息的“合成图像”之间,切换输出图像G的内容。对于详细情况将后述。
图像解析部120进行摄像部110的摄像结果亦即摄像图像的图像解析,其具有描绘辨别部121以及位置识别部122。描绘辨别部121判别是否正通过发光笔3进行描绘操作。具体而言,在通过摄像传感器111检测到笔尖32的LED发光时,辨别为正进行描绘操作,在未检测到LED发光时,辨别为未进行描绘操作。另外,位置识别部122对笔尖32的位置(LED的发光位置)进行识别。其中,位置识别部122优选以1/60秒间隔~1/24秒间隔等短时间间隔进行位置识别,以便随着发光笔3的移动来实时(用户无不协调感地)对描绘轨迹L进行描绘。
存储部130由闪存ROM等可改写的存储介质构成,并具有摄像图像存储部131以及图像数据存储部132。摄像图像存储部131对通过摄像部110定期进行摄像而得到的摄像图像中的最近的1张图像进行存储。在通过描绘辨别部121辨别为描绘开始的时刻读取该摄像图像,并将该摄像图像用于生成合成图像。此外,在摄像图像存储部131不是仅存储有最近的1张图像,而是存储有最近的多张摄像图像,并从中将规定的1张图像(例如,在存储有3张摄像图像时将其中的第二新的摄像图像等)用于生成合成图像。
另一方面,图像数据存储部132对朝向被摄体50投影的图像数据70(参照图3(b))进行存储。例如,在智育的现场使用本实施方式的投影***SY的情况下,假设了将文字写入框、文字的范本、方格纸、绘图纸等作为图像数据70进行投影的情况。此外,也可以不在书画照相机1内设置图像数据存储部132,而是能够从可与书画照相机1通信的网络服务器、投影仪2、或者书画照相机1可读取的外部存储介质输入图像数据70。
操作部140是用户为了进行各种操作而使用的,有发光笔3。在本实施方式中,若用户使发光笔3朝向被摄体50移动,则被摄像传感器111摄像,并基于该摄像结果通过位置识别部122识别移动轨迹。然后,通过投影部150投影通过将该移动轨迹可视化而得的描绘轨迹L。
图像处理部160使用图像解析部120的解析结果进行图像处理,其具有投影图像生成部161以及输出图像生成部162。投影图像生成部161生成通过投影部150而投影的投影图像。投影图像中包括描绘轨迹L以及图像数据70。
输出图像生成部162根据描绘辨别部121的辨别结果生成用于输出至投影仪2的输出图像G。具体而言,在辨别为未进行描绘操作的情况下,生成通过摄像部110摄像的实时的摄像图像作为输出图像G。图4(a)是表示将实时的摄像图像作为输出图像G的情况的一个例子的图。如该图所示,在未进行描绘操作的情况下,将通过摄像部110摄像的实时的图像(包含被摄体50的图像50g、描绘轨迹L的图像Lg、发光笔3的图像3g、用户的“手”的图像Hg的动态图像)作为输出图像G输出。
另外,输出图像生成部162在辨别为正进行描绘操作的情况下,生成通过摄像部110摄像的被摄体50的摄像图像50m与从位置识别部122的识别结果得到的描绘轨迹L的合成图像。此处,“被摄体50的摄像图像50m”是指在辨别为描绘操作开始的时刻从摄像图像存储部131读取的摄像图像。也就是说,视为描绘操作前的摄像图像中未包含发光笔3、“手”等信息,用作“从摄像图像存储部131读取出的摄像图像”=“仅被摄体50的摄像图像”。图4(b)是表示将合成图像作为输出图像G的情况下的一个例子的图。如该图所示,在正进行描绘操作的情况下,将对从摄像图像存储部131中读取的被摄体50的摄像图像50m(静止图像)合成描绘轨迹L(动态图像)而得的合成图像作为输出图像G输出。
投影部150朝向被摄体50投影通过投影图像生成部161生成的投影图像(描绘轨迹L以及/或者图像数据70),其具有投影透镜151。另外,虽未特别进行图示,但是在投影部150中还包括有金属卤化物灯、LED、激光光源等光源装置、液晶面板等光调制装置。图3是表示投影部150的投影区域E1、以及描绘轨迹L的图。如图3(a)、图3(b)两图所示,投影部150(投影透镜151)以含有摄像部110的摄像区域E2的投影区域E1作为投影对象。即,投影部150能够对摄像区域E2整体进行投影。作为被摄体50可以考虑有该图(a)所示的立体物、该图(b)所示的平面体。该图(b)是表示在白纸的被摄体50上投影文字写入框(带格子边框的文字框)的图像数据70而在其上进行描绘的例子。这样,在本实施方式中,能够随着通过位置识别部122识别出的发光笔3的移动来投影描绘轨迹L而不取决于被摄体50的形状。
此外,为了消除发光笔3的指示位置与投影部150的投影位置之间的偏离,需要预先对二者进行校准。例如,可以考虑通过摄像传感器111对通过投影部150投影的规定的图案进行摄像,从而进行校准。
另外,直到用户进行删除操作为止,通过投影部150投影的描绘轨迹L都保持被投影的状态。删除操作可考虑通过按下设于操作面板14的规定的操作键而进行。另外,也可以通过投影部150将包含多个操作键的GUI(图形用户界面:Graphical User Interface)的操作面板作为图像数据投影,并用发光笔3选择表示“删除”的操作键,从而进行删除操作。在该情况下,优选在GUI安装与“全部删除”、“删除刚才的描绘”等各种删除操作对应的操作键。
另外,基于投影部150的投影能够通过仅显示描绘轨迹L并将除此以外的部分(描绘轨迹L的背景部分)显示为黑色,以便看起来为正对被摄体50进行实时描绘。另外,还能够通过以白色等亮色显示除描绘轨迹L以外的部分,从而用作照亮被摄体50的辅助光源。
外部输出部170对投影仪2以规定的帧速率输出通过图像处理部160(输出图像生成部162)生成的输出图像G。此外,在书画照相机1搭载有录像及再生功能的情况下,外部输出部170将再生图像(再生映像)输出至投影仪2。
接下来,参照图5的流程图对书画照相机1的动作的流程进行说明。书画照相机1若检测到发光笔3的发光(S01:是),则辨别为描绘开始,并从摄像图像存储部131读取描绘操作开始前的摄像图像(S02)。另外,根据发光笔3的移动轨迹来生成描绘轨迹L(S03),合成生成的描绘轨迹L和读取出的摄像图像来生成合成图像(S04)。然后,将生成而得的合成图像输出至投影仪2(S05)。接着,书画照相机1辨别发光笔3的灭光,在未灭光的情况下(S06:否)返回至S03。另一方面,在发光笔3灭光的情况下(S06:是),切换至输出通过摄像部110摄像的实时的摄像图像(S07),然后返回至S01。另外,在S01中,即使是在未检测到发光笔3的发光的情况下(S01:否),也输出实时的摄像图像(S07),并在直到检测到发光笔3的发光为止继续输出。
如以上说明那样,根据本发明的第一实施方式,随着被朝向被摄体50操作的发光笔3的移动,将其移动轨迹可视化而得的描绘轨迹L投影到被摄体50,因此用户能够获得犹如直接对被摄体50进行写入那样的操作感。
另外,辨别是否正通过发光笔3进行描绘操作,在正进行描绘操作的期间,不输出实时的摄像图像而输出被摄体50的摄像图像50m与描绘轨迹L的合成图像,因此能够从输出图像G中排除发光笔3、用户的“手”的信息,从而能够仅将被认为本来就需要的信息输出至投影仪2。另外,读取从摄像图像存储部131读取出的描绘开始前的摄像图像作为被摄体50的摄像图像50m,因此能够容易地生成合成图像。
此外,在上述实施方式中,根据发光笔3的移动轨迹生成描绘轨迹L,并朝向被摄体50投影该描绘轨迹L,但是不一定需要使发光笔3移动。例如,也可以朝向被摄体50用发光笔3指示被摄体50的任意位置,从而将规定的图像投影至该指示位置。作为“规定的图像”,除了可以考虑有箭头等指针、边框、文字、符号、数字等之外,还可以考虑用于天体学习的星型标记等各种图形及图案。
另外,用户也可以选择使用何种图像作为“规定的图像”。在该情况下,还可以通过投影部150投影GUI,并根据用发光笔3选择的操作键来决定“规定的图像”。并且,也可以通过GUI选择发光笔3的描绘色、描绘线的粗细。
另外,也可以不投影“规定的图像”,而针对发光笔3的指示位置,对被摄体50实施规定的装饰。例如,可以考虑在被摄体50为立体物的情况下,仅对包含指示位置的一面着色的不显示指示位置的周边(在电源开启时等,以利用预先摄像并存储的被摄体载置面的图像,仅使一面透过的方式进行显示)等。
另外,也可以形成为能够使用多种操作体(发光笔3),并根据操作体的种类来决定“规定的图像”、装饰方法。也就是说,可以考虑在用第一根笔指示的情况下投影指针,在用第二根笔指示的情况下投影边框,在用第三根笔指示的情况下对包含指示位置的面进行着色等的使用方法。
另外,在上述实施方式中,根据发光笔3有无发光,来辨别是否进行了描绘操作,但是也可以用其他方法进行辨别。例如,在发光笔3上搭载描绘开始时按下的按钮(省略图示),并利用红外线或者无线电通信等将该按钮的按下信号发送至书画照相机1主体。书画照相机1(描绘辨别部121)通过该按下信号的接收来辨别是处于描绘过程中还是处于非描绘过程中。根据该构成,能够准确地辨别是否正进行描绘操作。
另外,在上述实施方式中,作为发光笔3的发光体例示了LED,但是也可以使用脉冲状的信号重叠的发光体,并使其状态周期性地变化。例如,LED的光可以不是单色,例如可以是按红、蓝、绿等色依次变化的光。另外,发光状态也可以不恒定,发光宽度、发光振幅等变化也可以变化,光的波长、脉冲、强度、调制、质量等也可以变化。并且,也可以形成为能够检测多种光(LED、红外线、激光光源等)。此外,在使用激光光源作为发光体的情况下,技术方案中的“操作体的指示位置”是指激光对被摄体50的照射位置。
另外,技术方案中的“根据操作体的状态辨别是否正通过操作体进行描绘操作”是指,包括根据上述操作体(发光笔3)的颜色变化、发光状态来辨别有无描绘操作的方法。
另外,操作体的指示位置的检测并不局限于使用了摄像结果的图像解析,也可以使用无线电、超声波、方位传感器、压力传感器(例如,在被摄体50为平面体的情况下,可以考虑将其组装于被摄体50的载置面的情况)等。另外,也可以组合使用这些检测方法中的任意两种以上检测方法。
另外,在上述实施方式中,视为“仅被摄体50的摄像图像”=“从摄像图像存储部131读取的摄像图像”来生成合成图像,但是也可以用其他方法生成合成图像。例如,也可以将被摄体50视为静止物,并从由摄像部110拍摄的实时的摄像图像中,除去发光笔3、用户的“手”以及描绘轨迹L等动画信息,从而生成“仅被摄体50的摄像图像”。
另外,在上述实施方式中,向摄像图像存储部131定期地存储摄像图像,但是也可以构成为在用户进行规定的操作后进行存储。规定的操作使用操作面板14、或者通过投影部150投影的GUI进行即可。
另外,也可以在书画照相机1搭载有录像及再生功能的情况下,在辨别为正进行描绘操作的期间,不录像实时的摄像图像而录像合成图像。另外,也可以形成为用户能够选择录像哪一种图像。
另外,在上述实施方式中,直到用户进行删除操作为止,通过投影部150投影的描绘轨迹L都处于投影中的状态,但是也可以构成为在发光笔3每次灭光时,都删除在此之前的描绘轨迹L。根据该构成,能够省略用户的删除操作。
另外,在上述实施方式中,通过一个摄像传感器111进行了被摄体50和发光笔3的位置识别,但是也可以分别设置专用的传感器。但是,在该情况下,需要用于进行各传感器的位置对准的校准。作为校准的方法,是用摄像用传感器对通过投影部150投影的规定的图案进行摄像,并且用发光笔3的位置识别用传感器进行位置识别,并通过比较二者来进行的。
第二实施方式
接下来,参照图6~图8,对本发明的第二实施方式进行说明。在上述第一实施方式中,在进行描绘操作的情况下,生成被摄体50的摄像图像50m与描绘轨迹L的合成图像作为输出图像G,但是在本实施方式中,用户选择在正进行描绘操作的情况下输出的输出图像G。以下,仅对与第一实施方式不同的方面进行说明。其中,在本实施方式中,对与第一实施方式相同的构成部分标注相同的标记,并省略详细的说明。另外,对与第一实施方式相同的构成部分适用的变形例,对于本实施方式也同样适用。
图6是第二实施方式的书画照相机1的框图。本实施方式的书画照相机1与第一实施方式(参照图2)相比较,在操作部140内追加了输出图像选择部141的方面不同。输出图像选择部141在正进行描绘操作的期间,选择输出通过摄像部110摄像的“实时的摄像图像”、输出“除去图像”以及输出“描绘轨迹”中的任意一种。输出图像选择部141可以由操作面板14(参照图1)构成,也可以由通过投影部150投影的GUI构成。另外,本实施方式的图像处理部160在正进行描绘操作的期间,生成通过输出图像选择部141选择出的图像。
图7是表示输出图像G的变化的图。例如,图7(a)表示选择“实时的摄像图像”的情况下的输出图像G的一个例子。在用户选择了“实时的摄像图像”的情况下,如该图所示,输出通过摄像部110摄像的实时的图像(包含被摄体50的图像50g、描绘轨迹L的图像Lg、发光笔3的图像3g、用户的“手”的图像Hg的动态图像)。
另外,在用户选择“除去图像”的情况下,如图7(b)所示,输出不包含描绘轨迹L的图像Lg的输出图像G。在该情况下,将在描绘操作开始时从摄像图像存储部131读取的摄像图像50m亦即描绘开始前的摄像图像用为“除去图像”。另外,在用户选择“描绘轨迹”的情况下,如图7(c)所示,将根据通过位置识别部122识别出的发光笔3的移动轨迹生成的描绘轨迹L作为输出图像G输出。
接下来,参照图8的流程图对本实施方式的书画照相机1的动作的流程进行说明。书画照相机1在未检测到发光笔3的发光的情况下(S11:否),辨别为未进行描绘操作,从而将通过摄像部110摄像的实时的摄像图像输出至投影仪2(S12)。然后,返回至S11。另外,在检测到发光笔3的发光的情况下(S11:是),辨别为正进行描绘操作,从而辨别输出图像G的选择结果(S13)。此处,在选择了“实时的摄像图像”的情况下,即使是在描绘过程中也输出通过摄像部110摄像的实时的摄像图像(S12)。
另外,在选择了“除去图像”作为描绘过程中的输出图像G的情况下,从摄像图像存储部131读取描绘操作开始前的摄像图像50m(S14),并输出读取的摄像图像50m(S15)。接着,辨别发光笔3的灭光,在未灭光的情况下(S16:否),返回至S15。另一方面,在发光笔3灭光的情况下(S16:是),切换为输出实时的摄像图像(S12)。另外,在选择了“描绘轨迹”作为描绘过程中的输出图像G的情况下,根据发光笔3的移动轨迹生成描绘轨迹L(S17),并输出生成的该描绘轨迹L(S18)。接着,辨别发光笔3的灭光,在未灭光的情况下(S19:否),返回至S17。另一方面,在发光笔3灭光的情况下(S19:是),切换为输出实时的摄像图像(S12)。
如以上说明那样,根据本发明的第二实施方式,由于能够从“实时的摄像图像”、“除去图像”、“描绘轨迹”中选择用户需要的输出图像G,所以能够提高使用的便利性。例如,虽然希望在被摄体50上确认描绘轨迹L,但通过选择“除去图像”能够利用于不希望在输出图像G中包含描绘轨迹L的情况(不希望使投影仪用投影图像61显示描绘轨迹L的用途)。例如,能够利用于以下情况等:在智育现场,在教育者对学生说明圆规的使用方法时,想让学生思考哪个位置相当于支点的情况等的期间,预先对作为被摄体50的圆规的支点部分标注标记,并等待学生的回答,其后在被摄体50或者投影仪用投影图像61上公开标记(描绘轨迹L)的情况。
另外,在选择“除去图像”作为输出图像G的情况下,从摄像图像存储部131读取描绘开始前的摄像图像50m,因此能够容易地获得未包含发光笔3、用户的“手”以及描绘轨迹L的信息的“除去图像”。
此外,在上述第二实施方式中,将从摄像图像存储部131读取的描绘开始前的摄像图像50m用作“除去图像”,但是也可以用其他方法生成“除去图像”。例如,也可以通过从通过摄像部110摄像的实时的摄像图像中除去描绘轨迹L来生成“除去图像”。在该情况下,另外预先存储从描绘开始时开始的描绘轨迹L,并按单位时间摄像实时的摄像图像,并从该实时的摄像图像中除去在描绘开始后描绘出的描绘轨迹L即可。根据该构成,不需要为了获得描绘开始前的摄像图像50m而通过摄像部110定期进行摄像。此外,在是本构成的情况下,在输出图像G中未包含描绘轨迹L,但是包含发光笔3的图像3g、以及用户的“手”的图像Hg。因此,为了仅将被摄体50的图像50g包含于输出图像G,也可以将被摄体50视为静止物,并从基于摄像部110的实时的摄像图像中除去发光笔3、用户的“手”以及描绘轨迹L等动画信息,由此生成“除去图像”。
另外,在上述第二实施方式中,作为描绘过程中的输出图像G,能够选择“实时的摄像图像”、“除去图像”、“描绘轨迹”中的任意一种,但是在进行描绘操作的情况下,也可以仅固定地输出“除去图像”或者“描绘轨迹”。即,也可以构成为在正进行描绘操作的情况下,输出“除去图像”或者“描绘轨迹”作为输出图像G,在未进行描绘操作的情况下,输出“实时的摄像图像”。
另外,也可以构成为在书画照相机1搭载有录像及再生功能的情况下,在正进行描绘操作的期间,对通过输出图像选择部141选择出的输出图像G进行录像。另外,也可以形成为能够从“实时的摄像图像”、“除去图像”、“描绘轨迹”中选择另外的录像用图像而与输出图像选择部141的选择无关。
以上,示出了两种实施方式,但是能够将各实施方式所示的投影***SY的各构成要素作为程序提供。另外,还能够将该程序存储于各种记录介质(CD-ROM,闪存等)中来提供。即,用于使计算机作为投影***SY的各构成要素发挥作用的程序、以及记录有该程序的记录介质也包含于本发明的权利范围中。
另外,在上述各实施方式中,作为图像显示装置例示有投影仪2,但是也可以使用其他显示器、PC(个人计算机)、手写板终端。另外,在不脱离本发明的主旨的范围内,能够进行适当地变更。
附图标记说明:
1…书画照相机;2…投影仪;3…发光笔;3a…开关;4…线缆;11…筐体;11a…工作台;12…支承臂;13…摄像头;14…操作面板;31…主体;32…笔尖;50…被摄体;50m…被摄体的摄像图像;61…投影仪用投影图像;70…图像数据;110…摄像部;120…图像解析部;121…描绘辨别部;122…位置识别部;130…存储部;131…摄像图像存储部;132…图像数据存储部;140…操作部;141…输出图像选择部;150…投影部;160…图像处理部;161…投影图像生成部;162…输出图像生成部;170…外部输出部;E1…投影区域;E2…摄像区域;G…输出图像;L…描绘轨迹;SC…屏幕;SY…投影***。

Claims (13)

1.一种书画照相机,其特征在于,具备:
摄像部,其对被摄体进行摄像;
位置识别部,其对被朝向所述被摄体操作的操作体的指示位置进行识别;以及
投影部,其将规定的图像投影至所述操作体的指示位置。
2.根据权利要求1所述的书画照相机,其特征在于,
所述投影部随着所述操作体的指示位置的移动对通过将所述指示位置的移动轨迹可视化而得的描绘轨迹进行投影。
3.根据权利要求2所述的书画照相机,其特征在于,还具备:
描绘辨别部,其辨别是否正通过所述操作体进行描绘操作;和
输出部,其将图像输出至图像显示装置,
所述输出部在未通过所述操作体进行描绘操作的情况下,输出通过所述摄像部摄像的实时的摄像图像,
所述输出部在正通过所述操作体进行描绘操作的情况下,输出所述被摄体的摄像图像与所述描绘轨迹的合成图像。
4.根据权利要求3所述的书画照相机,其特征在于,
所述描绘辨别部根据所述操作体的状态来判别是否正通过所述操作体进行描绘操作。
5.根据权利要求4所述的书画照相机,其特征在于,
所述位置识别部识别安装于所述操作体的发光体的位置来作为所述操作体的指示位置,
所述描绘辨别部在检测到所述发光体的发光时,辨别为正进行所述描绘操作,在未检测到所述发光体发光时,辨别为未进行所述描绘操作。
6.根据权利要求3~5中的任一项所述的书画照相机,其特征在于,
还具备存储部,所述存储部存储通过由所述摄像部定期进行摄像而获得的最近的1张以上的摄像图像,
所述输出部在通过所述操作体开始描绘操作时,从所述存储部读取规定的摄像图像,在正通过所述操作体进行描绘操作的期间,输出该规定的摄像图像与所述描绘轨迹的合成图像。
7.根据权利要求2所述的书画照相机,其特征在于,还具备:
描绘辨别部,其判别是否正通过所述操作体进行描绘操作;和
输出部,其将图像输出至图像显示装置,
所述输出部在正通过所述操作体进行描绘操作的期间,不输出通过所述摄像部摄像的实时的摄像图像而输出不包含所述描绘轨迹的除去图像。
8.根据权利要求7所述的书画照相机,其特征在于,
还具备存储部,所述存储部存储通过由所述摄像部定期进行摄像而获得的最近的1张以上的摄像图像,
所述除去图像是在正通过所述操作体开始描绘操作时从所述存储部读取的规定的摄像图像。
9.根据权利要求7所述的书画照相机,其特征在于,
所述除去图像是从通过所述摄像部摄像的实时的摄像图像中除去所述描绘轨迹后的图像。
10.根据权利要求7~9中的任一项所述的书画照相机,其特征在于,
还具备选择部,所述选择部针对所述输出部的输出来选择通过所述摄像部摄像的实时的摄像图像、所述除去图像、以及所述描绘轨迹中的任意一种,
所述输出部在正通过所述操作体进行描绘操作的期间,输出通过所述选择部选择的图像。
11.根据权利要求1~10中的任一项所述的书画照相机,其特征在于,
所述投影部能够朝向所述被摄体投影预先存储的图像数据或者从外部输入的图像数据。
12.根据权利要求1~11中的任一项所述的书画照相机,其特征在于,
所述位置识别部基于所述摄像部的摄像结果来识别所述操作体的指示位置。
13.一种书画照相机的控制方法,其特征在于,该控制方法执行以下步骤,即:
摄像被摄体的摄像步骤;
对被朝向所述被摄体操作的操作体的指示位置进行识别的位置识别步骤;以及
将规定的图像投影至所述操作体的指示位置的投影步骤。
CN201310631918.1A 2012-12-04 2013-11-29 书画照相机、书画照相机的控制方法 Active CN103856714B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012264855A JP6167511B2 (ja) 2012-12-04 2012-12-04 書画カメラ、書画カメラの制御方法
JP2012-264855 2012-12-04

Publications (2)

Publication Number Publication Date
CN103856714A true CN103856714A (zh) 2014-06-11
CN103856714B CN103856714B (zh) 2017-11-14

Family

ID=50825088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310631918.1A Active CN103856714B (zh) 2012-12-04 2013-11-29 书画照相机、书画照相机的控制方法

Country Status (3)

Country Link
US (1) US20140152843A1 (zh)
JP (1) JP6167511B2 (zh)
CN (1) CN103856714B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI653563B (zh) * 2016-05-24 2019-03-11 仁寶電腦工業股份有限公司 投影觸控的圖像選取方法
JP6903999B2 (ja) * 2017-03-29 2021-07-14 富士フイルムビジネスイノベーション株式会社 コンテンツ表示装置およびコンテンツ表示プログラム
WO2020027818A1 (en) * 2018-07-31 2020-02-06 Hewlett-Packard Development Company, L.P. Determining location of touch on touch sensitive surfaces

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070025612A1 (en) * 2004-03-31 2007-02-01 Brother Kogyo Kabushiki Kaisha Image input-and-output apparatus
US20080186255A1 (en) * 2006-12-07 2008-08-07 Cohen Philip R Systems and methods for data annotation, recordation, and communication
JP2009200846A (ja) * 2008-02-21 2009-09-03 Fuji Xerox Co Ltd 指示システム、指示プログラム及び指示装置
CN102196220A (zh) * 2010-03-04 2011-09-21 索尼公司 信息处理设备、信息处理方法和程序
JP2012185630A (ja) * 2011-03-04 2012-09-27 Nikon Corp 投影装置

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9405299D0 (en) * 1994-03-17 1994-04-27 Roke Manor Research Improvements in or relating to video-based systems for computer assisted surgery and localisation
JPH09114966A (ja) * 1995-10-20 1997-05-02 Ricoh Co Ltd 原稿表示装置
US6388654B1 (en) * 1997-10-03 2002-05-14 Tegrity, Inc. Method and apparatus for processing, displaying and communicating images
US7176881B2 (en) * 2002-05-08 2007-02-13 Fujinon Corporation Presentation system, material presenting device, and photographing device for presentation
US7164392B2 (en) * 2002-08-06 2007-01-16 Fujinon Corporation Material presentation device
JP4175070B2 (ja) * 2002-10-03 2008-11-05 セイコーエプソン株式会社 画像入出力装置、マンマシンインターフェイスシステムおよびプログラム
JP2005311598A (ja) * 2004-04-20 2005-11-04 Elmo Co Ltd 資料提示装置
JP4611116B2 (ja) * 2005-05-26 2011-01-12 富士通株式会社 プレゼンテーションに用いられる情報処理装置およびプログラム
US7980708B2 (en) * 2005-06-08 2011-07-19 Fujinon Corporation Document presentation device including a movable part
JP4770493B2 (ja) * 2006-02-02 2011-09-14 富士ゼロックス株式会社 遠隔指示システム及び遠隔指示方法
JP4712613B2 (ja) * 2006-05-25 2011-06-29 富士通株式会社 情報処理装置、情報処理方法およびプログラム
JP4111231B2 (ja) * 2006-07-14 2008-07-02 富士ゼロックス株式会社 立体表示システム
JP2008078690A (ja) * 2006-09-19 2008-04-03 Fuji Xerox Co Ltd 画像処理システム
GB0622451D0 (en) * 2006-11-10 2006-12-20 Intelligent Earth Ltd Object position and orientation detection device
JP2009169768A (ja) * 2008-01-17 2009-07-30 Fuji Xerox Co Ltd 情報処理装置及びプログラム
JP2009229509A (ja) * 2008-03-19 2009-10-08 Fuji Xerox Co Ltd 光学装置及び光学システム
CN102109929A (zh) * 2009-12-28 2011-06-29 鸿富锦精密工业(深圳)有限公司 电子白板***
JP5533127B2 (ja) * 2010-03-26 2014-06-25 セイコーエプソン株式会社 筆跡データ生成システム、筆跡データ生成方法、およびプログラム
US20110281252A1 (en) * 2010-05-11 2011-11-17 Pandya Shefali A Methods and systems for reducing the number of textbooks used in educational settings
US9421692B2 (en) * 2010-05-14 2016-08-23 Automated Vision, Llc Methods and computer program products for processing of coverings such as leather hides and fabrics for furniture and other products
JP2012053584A (ja) * 2010-08-31 2012-03-15 Sanyo Electric Co Ltd 情報表示システムおよびプログラム
US20120050160A1 (en) * 2010-09-01 2012-03-01 Texas Instruments Incorporated Method and apparatus for measuring of a three-dimensional position of mouse pen
JP2012124620A (ja) * 2010-12-07 2012-06-28 Elmo Co Ltd 資料提示装置
JP2012138666A (ja) * 2010-12-24 2012-07-19 Elmo Co Ltd 資料提示システム
US9560314B2 (en) * 2011-06-14 2017-01-31 Microsoft Technology Licensing, Llc Interactive and shared surfaces
CN104024936A (zh) * 2011-07-29 2014-09-03 惠普发展公司,有限责任合伙企业 投影捕获***,程序和方法
US9521276B2 (en) * 2011-08-02 2016-12-13 Hewlett-Packard Development Company, L.P. Portable projection capture device
JP2013061552A (ja) * 2011-09-14 2013-04-04 Ricoh Co Ltd プロジェクタ装置および操作検出方法
US8896688B2 (en) * 2011-11-04 2014-11-25 Hewlett-Packard Development Company, L.P. Determining position in a projection capture system
US8982261B2 (en) * 2012-10-13 2015-03-17 Hewlett-Packard Development Company, L.P. Imaging with interleaved detection accumulations
US9148573B2 (en) * 2013-03-15 2015-09-29 Hewlett-Packard Development Company, L.P. Non-uniform correction illumination pattern
JP6175866B2 (ja) * 2013-04-02 2017-08-09 富士通株式会社 インタラクティブプロジェクタ

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070025612A1 (en) * 2004-03-31 2007-02-01 Brother Kogyo Kabushiki Kaisha Image input-and-output apparatus
US20080186255A1 (en) * 2006-12-07 2008-08-07 Cohen Philip R Systems and methods for data annotation, recordation, and communication
JP2009200846A (ja) * 2008-02-21 2009-09-03 Fuji Xerox Co Ltd 指示システム、指示プログラム及び指示装置
CN102196220A (zh) * 2010-03-04 2011-09-21 索尼公司 信息处理设备、信息处理方法和程序
JP2012185630A (ja) * 2011-03-04 2012-09-27 Nikon Corp 投影装置

Also Published As

Publication number Publication date
CN103856714B (zh) 2017-11-14
JP2014110572A (ja) 2014-06-12
JP6167511B2 (ja) 2017-07-26
US20140152843A1 (en) 2014-06-05

Similar Documents

Publication Publication Date Title
CN101945217B (zh) 拍摄设备和方法
US8995785B2 (en) Light-field processing and analysis, camera control, and user interfaces and interaction on light-field capture devices
RU2456659C2 (ru) Устройство снятия изображения, устройство отображения и снятия изображения и электронное устройство
JP4577612B2 (ja) 情報表示システム、及び、情報表示方法
JP2013089987A (ja) プロジェクター及び画像描画方法
CN107667526A (zh) 电子设备及方法
JP5316386B2 (ja) ヘッドマウントディスプレイ及びそのプログラム
CN103677444A (zh) 交互***、交互***的控制方法以及投影仪
JP6059012B2 (ja) 光通信装置、光通信方法および肌撮像システム
CN103856714A (zh) 书画照相机、书画照相机的控制方法
US20150254488A1 (en) Code symbol reading apparatus and method for reading code symbol
KR101613438B1 (ko) 증강현실 컨텐츠의 생성 및 재생 시스템과, 이를 이용한 방법
JP2005354171A (ja) 画像表示装置
KR20130131154A (ko) 디스플레이 장치, 디스플레이 장치와 연결된 입력 장치 및 그 제어 방법
CN108629726A (zh) 信息处理装置、图像显示方法、显示***以及记录介质
US11431899B2 (en) Display method and display apparatus
CN103179346A (zh) 数字图像处理设备及其控制方法
JP2008310393A (ja) 毛筆ディスプレイ装置および毛筆画像表示方法
CN106709427B (zh) 键盘动作检测方法及装置
JP7416231B2 (ja) 設置支援装置、設置支援方法、およびプログラム
US20120050302A1 (en) Method and apparatus for enhancing a white-board
CN113642567A (zh) 一种任意切换点读、手写、扫描的智能装置及方法
JP2017173675A (ja) 表示装置及び表示装置の制御方法
KR102588518B1 (ko) 전자 장치 및 이의 디스플레이 방법
JP5187001B2 (ja) 情報処理システム及び情報処理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant