CN1103518C - 数据发送/接收装置 - Google Patents

数据发送/接收装置 Download PDF

Info

Publication number
CN1103518C
CN1103518C CN98100497A CN98100497A CN1103518C CN 1103518 C CN1103518 C CN 1103518C CN 98100497 A CN98100497 A CN 98100497A CN 98100497 A CN98100497 A CN 98100497A CN 1103518 C CN1103518 C CN 1103518C
Authority
CN
China
Prior art keywords
pictorial data
portable terminal
data
mail
sends
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CN98100497A
Other languages
English (en)
Other versions
CN1194514A (zh
Inventor
山北徹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP9055781A external-priority patent/JPH10254989A/ja
Priority claimed from JP6574697A external-priority patent/JPH10260916A/ja
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN1194514A publication Critical patent/CN1194514A/zh
Application granted granted Critical
Publication of CN1103518C publication Critical patent/CN1103518C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H04N1/00214Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/025Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H04N7/035Circuits for the digital non-picture data signal, e.g. for slicing of the data signal, for regeneration of the data-clock signal, for error detection or correction of the data signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H04N1/00214Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of transmission
    • H04N1/00217Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of transmission only involving computer data transmission protocols, e.g. SMTP, WAP or HTTP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00236Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server using an image reading or reproducing device, e.g. a facsimile reader or printer, as a local input to or local output from a computer
    • H04N1/00241Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server using an image reading or reproducing device, e.g. a facsimile reader or printer, as a local input to or local output from a computer using an image reading device as a local input to a computer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • H04N1/00355Mark-sheet input
    • H04N1/00358Type of the scanned marks
    • H04N1/0036Alphanumeric symbols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • H04N1/00355Mark-sheet input
    • H04N1/00368Location of the scanned marks
    • H04N1/00374Location of the scanned marks on the same page as at least a part of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32037Automation of particular transmitter jobs, e.g. multi-address calling, auto-dialing
    • H04N1/32042Automation of particular transmitter jobs, e.g. multi-address calling, auto-dialing with reading of job-marks on a page
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0015Control of image communication with the connected apparatus, e.g. signalling capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0015Control of image communication with the connected apparatus, e.g. signalling capability
    • H04N2201/002Selecting or switching between an image communication channel and a non-image communication channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0065Converting image data to a format usable by the connected apparatus or vice versa
    • H04N2201/0068Converting from still picture data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0086Image transceiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0096Portable devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3212Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image
    • H04N2201/3222Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image of processing required or performed, e.g. forwarding, urgent or confidential handling

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)
  • Computer And Data Communications (AREA)

Abstract

一便携式终端的用户在纸上写待被作为e-mail发送的句子、邮寄地址、和指示请求主机装置提供的服务为“邮件发送”的信息作为笔记。通过使用安装在该便携式终端中的图象输入单元,该纸被成象。该便携式终端将该图象数据发送给主机装置。该主机装置通过使用图象识别单元分析接收的图象数据,启动邮件发送/接收单元。该邮件发送/接收单元将该图象数据中包括的所写的笔记的内容发送给由该图象数据中包括的邮件地址指定的一终端。

Description

数据发送/接收装置
技术领域
本发明涉及一种数据发送/接收装置。
本发明是基于于1997年3月11日递交的申请号55781/1997的日本专利申请和于1997年3月19日递交的申请号为65746/1997的日本专利申请,该两申请的内容在此引入作为参考。
背景技术
在当前的数字化的社会中,各种文件和图纸,特别是用于商业用途的,被处理为电子格式。在某些情况下,即使内容仅仅是笔记,仍期望存储为一电子文件。
在最通用的生成一电子文件的方法中,一文件的应用程序被存储在一个人计算机上且一人通过键盘逐字符地输入一文件。在最通用的生成电子图纸的方法中,一图纸的应用程序被存储且一人通过键盘和鼠标输入该图纸的数据。
近来,电子摄象机已得到广泛的应用。一电子摄象机读取一目标的图象数据以生成数字数据。如果该电子摄象机经一预定接口被连接至一个人计算机等类似装置,由该电子摄象机读取的图象数据可由该个人计算机处理。因此,通过用电子摄象机读取写在纸上的文件,将该电子摄象机读取的图象数据输入给一个人计算机或类似装置,并执行字符识别处理,该写在纸上的文件可被转换成一电子文件。
一电子文件通常是通过使用键盘和鼠标而形成的。在特殊情况下,在通过使用图象扫描仪读取的图象数据上执行图象识别处理。
然而,不能说对所有的用户来说使用键盘或鼠标的操作是容易的。也还有不善于使用它们的用户。而且,在一笔记的内容将被转换成一电子文件的情况下,需要启动一用于编辑文件的应用程序且然后每当需要键输入时开始操作。这是很麻烦的,而书写却能在短时间内进行。
另一方面,在通过使用电子摄象机或类似装置将一所写内容成象在纸等类似物品上的方法中,难以仅输入一所需要的区域而很大可能地将不是期望被进行图象识别处理的文件的一文件也输入了。在此情况下,需要在一个人计算机的显示器上显示出摄象机读取的图象数据并指定一图象识别区域,或对得到的一文件进行修改作为图象识别的结果,这也是很麻烦的。
在以上所述的使用电子摄象机的方法中,如果没有携带笔记本电脑或类似装置,为了执行图象识别处理,在一远程地点(例如商业旅行目的地)获得的图象数据不能在那个地点被马上转换成了电子文件。
而且,性能良好的字符识别软件通常是一很大的程序。而在一简单的便携式终端或类似装置上装入这样大的程序不是所期望的。
而且,近年来,电子邮件(e-mail)迅速地在商业用途和个人用途上被广泛使用。e-mail具有从例如在一LAN(局域网)中发送联络内容的小规模局间邮寄***到经因特网将一e-mail发送到位于全世界范围内的另一方的一***的应用分布的广泛范围。
当发送一e-mail时,用户通常通过使用键输入一待被发送的文件和一目的地地址且因此写一封信。然后通过敲击例如e-mail应用程序上的一“发送”按钮而将该封信发送给网络。或在某些情况下,替代输入待被发送的文件,通过图象扫描仪或类似装置扫描印刷在纸等类似物品上的语句作为图象数据并对该图象数据执行字符识别处理而得到待被发送的文件。一旦接收到一封信(确切地是存储该封信的一数据包),根据该封信中设置的目的地地址,该网络将该封信发送到由用户指定的目的地。
当发送一e-mail时,由用户通过键所输入的一字符串或至少被转换成一字符码串的信息被发送出给该网络。目的地地址由用户输入。
在使用e-mail中强烈需求一简单的接口。例如,有许多期望通过使用除键输入以外的一方法来输入一字符串的用户。在已知的作为除键输入以外的字符输入方法的格式中,有用一特殊的笔在终端装置的显示屏上书写字符。然而,在某些情况下,难以画出精确的图形。当期望发送一已被写在纸等类似物品上的内容作为一e-mail时,需要使用该特殊的笔再次输入该内容,非常麻烦。而且,有许多其中用户通过使用便携式终端从运动的目的地发送一e-mail的情况。然而,即使通过使用某些装置将写在纸等类似物品上的字符串取作为图象数据,如果该便携式终端不具有字符识别软件,这样所取的内容不能作为e-mail文件被发送。总之,性能良好的字符识别软件具有很大的程序尺寸。将这样大的程序装在一简单的便携式终端或类似装置上不是所期望的。
发明内容
因此,本发明的目的在于提供一种可发送e-mail,具有简单结构且易于操作的数据发送/接收装置。
根据本发明,提供了一种可通过一网络连接至一便携式终端的主机装置,包括接收处理装置,用于接收自该便携式终端发送的图象数据,该图象数据包括指示一发送指令的第一特定信息和指示该便携式终端的使用者希望发送的一内容图象的第二特定信息,该装置通过字符识别由该第一特定信息指示的图象数据来检测该发送指令并从该图象数据中抽取由该第二特定信息指示的内容图象;及发送装置,用于根据该检测的发送指令以一种方式发送该抽取的图象。
根据本发明,还提供了一种便携式终端装置,包括:图象读取装置,用于读取作为一图象的,指示通过使用一标识图形而待被识别的数据的数据;处理装置,用于自读出的所述图象数据中检测该标识图形,并根据所述标识图形,抽取待被识别的一区域中包括的图象数据;通信控制器,用于根据由处理装置给出的一指令生成一发送数据包;及收发机,用于将由该通信控制器生成的该数据包发送给一连接至一网络的主机装置。
根据本发明,包括一所期望的手写的笔记或类似的一文件通过包括在一便携式终端中的摄象机被取作为图象数据,且仅通过请求一主机装置执行识别处理而能将该手写的笔记等转换成一电子文件。这样,本发明提供了一种在操作性能上被改进的用户接口。该图象仅通过抽取一闭环图形内的一区域,一包括被下划线的字符串的区域,或一包括以特定颜色画的图形的区域而被识别。结果,只有所需要的信息被准确地识别。
而且,在本发明中,通过以包括在一便携式终端中的摄象机或类似装置接收一包括所期望的字符串的文件作为图象数据,一手写的笔记等可作为e-mail或传真被简单地发送给的期望的另一方,并向主机装置请求所需要的服务。这样,本发明提供了一种操作性能被改进的用户接口。
而且,由于在便携式终端一侧不执行需要以高速执行的图象数据处理,特别是图形识别处理和字符识别处理,可能不用提供一大容量存储器或一高性能处理器而得到完善的图象数据处理的结果。
在以下的描述中将可以看到本发明的其它目的和优点,且部分将是显而易见的,或可通过对本发明的实践而被理解。
附图简述
被结合且作为说明书的一部分的附图说明了本发明的当前优选实施例,并连同以上给出的概述和以下给出的对这些优选实施例的详细描述一起用于说明本发明的原理,附图中:
图1为本发明的一实施例的***构成示意图;
图2为一便携式终端的外视图;
图3为该便携式终端的构成示意图;
图4为将用该便携式终端中的一摄象机成象所接收的图象数据发送给一主机装置并请求一预定服务的处理的流程图;
图5A和5B示出了由一摄象机输入的且显示在该便携式终端的显示单元上的图象数据的第一个示例;
图6A和6B示出了由一摄象机输入的且显示在该便携式终端的显示单元上的图象数据的第二个示例;
图7示出了由一摄象机输入的且显示在该便携式终端的显示单元上的图象数据的第三个示例;
图8A和8B示出了由一摄象机输入的且显示在该便携式终端的显示单元上的图象数据的第四个示例;
图9为说明本实施例的“识别”概念的示意图;
图10A为显示自该便携式终端发出的一数据包的结构的示意图;
图10B为数据包生成处理的详细流程图;
图11为用于识别目的的抽取图象数据的处理的流程图;
图12为表示图4中所示的图象处理的应用的一示例的示意图;
图13A和13B示出了待被识别的一图象的判别的示例;
图14A和14B为说明在如图13A和13B所示地写一笔记等的情况下,用于抽取识别对象的抽取图象数据的处理的流程图;
图15为一主机装置的构成示意图;
图16和17为说明该主机装置的处理的流程图;
图18为说明用于由用户请求的对接收的图象数据进行的识别服务的处理的流程图;
图19为说明用于从接收的图象数据抽取邮件语句的一字符串的处理的流程图;
图20为说明邮件发送处理的流程图;
图21示出了说明一存储有邮件语句的数据包的示意图;
图22为说明当从另一终端接收到一邮件查询时所执行的处理的流程图;以及
图23为一存储有属于各群的e-mail地址以与一群名相关联的表的构成示意图。
具体实施方式
下面将参照附图对根据本发明的一数据发送/接收装置的优选实施例进行描述。
图1为本发明的第一实施例的***构成示意图。便携式终端1具有通信的功能,且能请求被连接到一网络3的另一装置执行给定数据处理,接收处理的结果并显示其。便携式终端1通过使用一经一附近的基站,在无线信道上发送/接收数据的方案,一通过使用Ir(红外线)发送/接收数据至/自一具有通信功能的装置(光学链路单元)的方案,或一发送/接收数据的有线方案而被连接至网络3。便携式终端1具有包括一电子摄象机的图象输入单元1a。便携式终端1具有将通过使用图象输入单元1a所接收的数据发送给连接至网络3的另一装置(例如主机装置4,并请求该另一装置执行图象处理的功能。而且,便携式终端1还能对通过使用图象输入单元1a接收的图象数据进行处理并在图象显示单元1C上显示所接收或处理的图象数据。
网络3是一公共电话网,PHS网或LAN。主机装置4为一服务器。根据自便携式终端1传送的一请求,主机装置4执行数据处理。主机装置4具有一图象识别单元5、一邮件发送/接收单元6、和一传真发送/接收单元7。图象识别单元5对自便携式终端1发送的图象数据执行图形识别处理或字符识别处理,并检测包含在接收的图象数据中的预定图形和预定字符串。邮件发送/接收单元6具有发送/接收一e-mail至/自经例如因特网8被连接的另一终端9的功能,并能发送由图象识别单元5识别的字符串数据给另一终端9。传真发送/接收单元7具有发送/接收一传真信号至/自经例如网络3被连接的一传真终端10的功能,并能发送自便携式终端1传送的图象数据给该传真终端10。
当便携式终端1的用户希望将作为一笔记的写在例如纸等类似物品上的内容作为e-mail发送给终端9时,用户将终端9的邮寄地址和表示主机装置4被请求的服务是“邮件发送”的信息加至该所写的笔记作为该纸上的图象信息,通过使用图象输入单元1a(被连接至便携式终端1的电子摄象机)接收该纸上的该图象,并将这样接收的图象数据发送给主机装置4。主机装置4通过使用图象识别单元5分析所接收的图象数据。一旦识别来自便携式终端1的被向主机装置4请求的服务是“邮件发送”,主机装置4启动邮件发送/接收单元6,并将该图象数据中包含的所写的笔记的内容发送给该图象数据中包含的邮寄地址。
采用同样的方法,当便携式终端1的用户希望将作为笔记的写在例如纸等类似物品上的内容作为一传真发送给传真终端10时,用户将传真终端10的电话号和表示主机装置4被请求的服务是“传真发送”的信息加至该所写的笔记作为该纸上的图象信息,通过使用图象输入单元1a接收该纸上的该图象,并将这样接收的图象数据发送给主机装置4。一旦识别由便携式终端1请求的服务是“传真发送”,主机装置4启动传真发送/接收单元7,并将该图象数据中包含的所写的笔记的内容发送给具有该图象数据中包含的电话号的装置,作为一传真发送。
主机装置4可由单个计算机构成。或者图象处理服务器装置、邮件服务器装置、及传真服务器装置可分别由独立计算机构成。主机装置4是一设置在一因特网提供方、一个人计算机通信公司、或一因特网管理部门的服务器计算机。
当希望在本实施例的***中执行一e-mail发送或一传真发送时,仅需要通过使用一摄象机或类似装置扫描期望被发送的写在该文件上的内容并将扫描数据作为图象数据发送给主机装置4。因此,用户可仅通过在纸等类似物品上写期望的字符和/或图形作为笔记并用摄象机读取来接收该e-mail发送服务或传真发送服务。而且,便携式终端1仅需要具有接收图象数据的功能和通信功能作为接收上述服务的组成条件。结果,可实现重量减轻及成本降低。
当便携式终端1的用户希望将手写在例如纸上的笔记等转换成一电子文件时,用户画一闭环图形以围绕纸上的一区域,该笔记等被写在该区域中,且通过使用图象输入单元1a读取纸上的图象。图象处理单元1b分析由输入单元1a读取的图象数据。一旦检测到一闭环图形、图象处理单元1b抽取该闭环图形中一区域的图象数据。在该被抽取的图象数据中,不需要的区域已被从写在纸上的笔记等中删除。便携式终端1经网络3将由图象处理单元1b抽取的图象图形数据发送给主机装置4。
一旦接收到来自便携式终端1的图象图形数据,主机装置4使图象识别单元5分析该图象图形。这里由图象识别单元5分析和识别的图象图形是由用户写在纸上等类似物品上的内容自身,而不需要的图象被去除。因此,主机装置4可获得仅由用户写在纸等类似物品上的内容作为识别的结果。
可替代地,可采取这样一构成以使图象处理单元1b的处理由主机装置4执行。在此情况下,便携式终端1发送通过使用图象输入单元1a读取的图象,且图象识别单元5抽取位于该闭环图形内一区域中的图象数据,并分析该被抽取的图象图形。
由图象识别单元5执行的识别的结果可被存储在主机装置4中,或它可自动或响应于请求被发送给便携式终端1。在此情况下,便携式终端1在图象显示单元1C上显示自主机装置4接收的识别结果。而且,由识别单元5执行的识别的结果可被发送给一预定的终端装置。再者,检索处理可通过使用该识别结果作为一关键字而被执行,且该识别结果可被译成一预定的语言。
图象识别单元5可被实现为通过主机装置4执行一预定程序而获得的一功能,或可由独立于主机装置4之外的一计算机实现。
当希望在本实施例的***中将作为笔记的写在纸等上的字符或图形转换成一电子文件(数字数据)时,用户仅需要画一闭环图形以围绕纸上的一区域,该笔记等被写在该区域中,用摄象机或类似装置使其成象,并将该图象数据(或经过预定图象处理的图象数据)发送给主机装置4。换句话说,仅需要用户用闭环图形围绕该笔记等并用摄象机或类似装置使其成象。这很简单。作为识别上述笔记等的构成条件,便携式终端不需要具有字符识别功能,且仅需要具有读取图象的功能和通信功能。根据该构成,也要求检测一闭环图形的功能。因此,可减轻重量和减少成本。
图2是便携式终端1的外视图。便携式终端1具有一LCD显示单元11、一摄象机12、一IC卡口13和一无线通信天线14。而且,为了支持其它的通信方案,便携式终端1具有一Ir通信插孔15和一有线通信插孔16。LCD显示单元11具有触摸屏面功能。因此,便携式终端1可处理手写输入信息。数字17表示一电源开关。
图3为便携式终端1的构成示意图。CPU21执行存储在存储装置(ROM和RAM)22中的程序。CPU21和存储装置22经一总线23被互连。
存储装置22通过一半导体存储器、一磁记录媒体、或一光学记录媒体而被构成,并存储程序和数据。存储装置22可被固定地安装在便携式终端1中,或它可被可拆装地安装。
记录媒体驱动器24被连接至总线23。记录媒体驱动器24是一用于读取存储一可拆装的记录媒体25(包括一半导体存储器、一磁盘、一光盘或一光学磁盘)中的数据或将数据写入该可拆装的记录媒体25中的装置。假设IC卡被使用作为该可拆装的记录媒体25的一示例。CPU21也可执行存储在该可拆装记录媒体25中的程序。
记录在存储装置22中的程序和数据可自经一通信线路等连接的另一装置接收并存储在其中。而且,CPU21可经通信线路等使用安装在另一装置侧上的存储装置中存储的程序和数据。
对应于LCD显示单元11的一单元由以下元件构成:一液晶显示器(LCD)31;一存储器32,用于存储待被显示在液晶显示器(LCD)31上的信息;一LCD驱动器33,用于在LCD控制器34的控制下,将存储在存储器32中的信息输出给液晶显示器31;一LCD控制器34,用于控制存储器32和LCD驱动器33;一触摸屏单元35和一通知CPU21由触摸屏单元35检测的输入信息的触摸屏控制器36。
摄象机12例如是一CCD摄象机。CCD摄象机12的输出通过一A/D转换器37被转换成位图形式的数字数据,并被写入一存储器38中。摄象机控制器39根据由CPU21给出的一指令将存储器38中存储的图象数据输出给总线23。
当从便携式终端1发出数据时,通信控制器40根据由CPU21给出的一指令生成一发送数据包并将其发送给一无线收发机41或42,或一有线收发机43。当接收数据时,通信控制器40将经无线收发机41或42,或有线收发机43接收的一数据包中存储的数据输出到总线23上。无线收发机41被连接至图2中所示的无线通信天线14,并发送/接收无线数据至/自一无线基站。无线收发机42是一用于执行Ir通信的收发机。有线收发机43例如是一调制解调顺。无线收发机42和有线收发机43被任意地安装。便携式终端1还具有一时钟44。
图4是一显示将由便携式终端1的摄象机12接收的图象数据发送给主机装置4并请求期望的服务的处理的流程图。实现该流程图中所示的各功能的程序被以可由CPU21读取的程序码的形式存储在存储装置22中。
该流程图示出了在便携式终端1在一输入等待状态中检测到一些输入之后执行的处理。而且,在该实施例中,现将描述作为笔记的由用户所写的字符等通过摄象机被输入的一示例。
在步骤S1,确定被检测的输入是否为来自摄象机12的输入,步骤S2及随后步骤的处理是否被执行。如果它是来自一不同装置的输入,在步骤S13执行对应于该输入的其它处理。如果这些字符等通过用户由摄象机12输入,步骤S2及其随后步骤的处理被启动。如果有该摄象机输入,自时钟44输出的时间信息被存储。在步骤S2,由摄象机12接收的图象数据被显示在LCD显示元11上。换句话说,由摄象机12接收的图象数据被写入LCD显示单元11的存储器32中,且该图象数据被显示在液晶显示器31上。结果,用户可看到该点上的输入图象。图5A示出了由摄象机接收的图象数据的显示的一示例。在该示例中,用户写邮件语句“你好!谢谢你的e-mail,至于下周的日程安排,…”作为笔记。而且“E-mail发送”被写为对主机装置4所请求的服务且“abc@xyz、co.jp”被写为发送目的地的邮寄地址。具有其中写入这些信息的一摄象机输入范围Q被成象。各被指定的服务和地址被置入方括号中。
为将图象数据发送给主机装置4并使主机装置4根据该图象数据中包含的信息执行数据发送,指定服务的信息和指定邮件发送目的地的信息必须相对于邮件语句(邮件内容)是可识别的,如以上参照图1所描述的。在图5A的示例中,通常是将各指定服务的信息和指定邮件发送目的地的信息置入方括号中。这些方括号可由其它的标点符号,例如圆括号替代。可替代地,通常对指定服务的信息和指定邮件发送目的地的信息进行字符装饰,例如下划线。且,服务分类可与颜色相关联。例如,预先确定指示邮件发送服务的一指令用红色表示而指示传真发送服务的指令用蓝色表示。通常用这样一颜色所写的内容指定发送目的地。在图5B所示的一示例中,“[email protected]”用红色写。因此,通过分析包含该图象的图象数据,主机装置4可识别由用户请求的服务“E-mail发送”及发送目的地地址为“[email protected]”。不管怎样,指示该服务的指令和指定邮件发送目的地的信息由例如符号、字符装饰或颜色的判别信息所辩别。
当期望将由摄象机12输入的一图象作为传真发送给一期望的传真终端时,用户在期望待被发送的笔记(这里为一地图)附近写“传真发送”作为对主机装置4请求的服务,并将该字符串置入方括号中,如图6A所示。而且,用户还连同方括号一起写下发送目的地的传真终端的电话号。
当通过使用摄象机12读取作为e-mail或传真待被发送的内容时,可使用一预定的格式。图6B示出了用于输入期望作为e-mail待被发送的内容的格式的一示例。该格式具有一地址输入区和一邮件语句输入区。
对于主机装置4被要求提供的服务,除了到一期望的装置的数据发送,例如e-mail发送或传真发送外,一对接收的邮件的查询也是可能的。在对接收的邮件的查询中,要求将一写有该用户地址的邮件下载给便携式终端1,该邮件被送至一邮件服务器(图1中的邮件发送/接收单元6)。在此情况下,用户在纸等上写“邮件查询”作为对主机装置4的一请求指令的笔记,并将该字符串置入方括号中,如图7所示。当用户希望仅读取来自一具体个人的邮件时,该用户例如在纸上写“来自Mr.k”。该纸上具有所写笔记的摄象机输入范围Q通过摄象机12被成象,且该输入的图象数据被发送给主机装置4。
返回到图4的流程图,在步骤S3确定该摄象机输入的图象数据是否被修改。这里,将描述当通过步骤S2的处理,图8A中所示的一屏面被显示时用户所执行的操作的一示例。当用户希望修改所显示的屏面的内容时,用户通过使用一手写笔在LCD显示单元11上输入修改的内容。例如,当“这个月投放市场的××××的便携式终端具有丰富的邮件功能,…。顺便,…”中的“顺便”是不需要的。如图8B所示,通过使用该手写笔在LCD显示单元11上的“顺便”上写一删除符号。当对显示的内容的修改被完成时,用户输入修改完成指令。通过例如在LCD显示单元11上显示由摄象机12输入的图象时也同样显示一“修改结束”按钮来执行这一处理。用户用该手写笔按压该按钮。在没有修改的情况下,用户不修改由摄象机12输入的图象,按压该结束按钮。
继续用户的上述操作,步骤S3和S4被执行。换句话说,如果在步骤S3检测到该修改结束按钮被按压,处理前进到步骤S4。当用户不修改在LCD显示单元11上显示的图象数据而按压该修改结束按钮时,步骤S4被跳过且处理前进到步骤S5。
在步骤S4,根据来自用户的笔输入,更新该图象数据。换句话说,通过笔输入在LCD显示单元11按压的轨迹图形在存储器32中被重写作为一位图形式的数据。在此时,当前显示在LCD显示单元11上的图象数据被存储在存储器32中。因此,由摄象机接收的图象数据和由笔输入而所写的轨迹图形被合并。
在步骤S5,用于使用户指定由摄象机接收的图象是否应被发送给主机装置4的一屏面被显示在LCD显示单元11上。在此时,存储在存储器32中的图象数据被保存在存储装置22的RAM中。用于使用户指定期望的服务的该屏面的图象数据被从存储装置22的ROM读出并写入存储器32中。该用户的指令输入屏包括用于输入处理指令的按钮,例如“发送”、“识别”、“存储”和“删除”。
如果用户输入该用户的指令输入屏上的处理指令,即用户按压一显示的按钮时,步骤S6及后续步骤的处理被执行。首先,在步骤S6识别该用户的指令。在步骤S7,确定该用户的指令是否为“发送”。如果该发送按钮被按压,该用户的指令被判定包括一指令,例如e-mail发送或传真发送且处理前进到步骤S8。
在步骤S8,当将由摄象机接收的图象数据发送给主机装置4时生成一用于存储图象数据的数据包。该数据包生成处理在后将被描述。在步骤S9,在步骤S8生成的数据包被发出给网络3,如图1所示。
如果用户指令该用户的指令输入屏上的“识别”,则在步骤S10检测到用户按压该识别按钮,该用户的指令被确定为图象识别服务,且处理前进到步骤S11。
图9为一说明该实施例的图象识别服务的概念的示意图,且其示出了当由使用者手写在纸上的笔记被摄象机成象时所得到的一图象的示例。在该示例中,一笔记在具有预先写在字母a至z的纸的一空白中被写作为“在8月18日与M r.k.会见”且该笔记由摄象机12的所读取。为了在期望被进行字符识别处理的一部分和其余部分之间进行判别,用户在纸上画一闭环以围绕该期望被进行字符识别处理的笔记语句。该闭环可通过使用普通的钢笔或铅笔被写在纸上。
用户扫视该纸以便至少该期望被进行字符识别的笔记语句和围绕该笔记语句的闭环图形可被读取。在此时,在图9所示的例子中,位于摄象机输入范围P中的不需要的图象,即字母Q至Z连同该笔记一起被读取为图象数据。
即使在此状态下,在该实施例的图象处理中,图象识别处理相对于位于该闭环图形内的区域“Q”被执行。因此,位于该闭环图形外侧的字母Q至Z不被识别,而只有写作为“在8月18日与Mr.k.会见”的笔记被识别。这样,只有期望的图形可被识别,同样删除了不需要的图形。
再返回到图4的流程图,由摄象机12输入的图象数据被暂时存储在存储装置22的RAM区中,且在步骤S11,识别对象的图象数据被从存储的图象数据中抽取。在例如图9所示的例子中,位于闭环图形内的区域被看作为识别对象的区域,且该区域的图象数据被抽取。后面将详细地描述步骤S11的处理。接着,在步骤S8,生成用于将在步骤S7抽取的图象数据发送给主机单元4的数据包。后面也将描述步骤S8的处理。在步骤S9,在步骤S8生成的数据包被发出给图1中所示的网络3。
另一方面,如果在步骤S10判定的用户的指令不是“识别”,在步骤S12确定用户是否按压该存储按钮。如果用户按压该存储按钮,在步骤S14,图象数据被存储在便携式终端1的一侧。另一方面,如果用户不按压该存储按钮,认为该用户按压删除按钮且图象数据在步骤S13被删除。
一旦读取到其中该识别对象的区域由一闭环图形表示的该图象时,便携式终端1仅将该闭环图形内的区域看作为该识别对象的区域,抽取该区域,并将抽取的该识别对象的区域的图象数据发送给主机装置4。如上所述,该抽取的图象数据包含有将实际地经受图象识别的该区域,并从其删除一不需要的图象。
图10A为一表示自便携式终端1发出的数据包的结构的示意图。这数据包是在图4中所示的步骤8生成的。
各数据包由一首部部分和一数据部分组成。该首部部分存储一发送源地址、一目的地地址等。被存储作为发送源地址和目的地地址的***地址属于哪个依据于采用本实施例的网络构成。在TCP/IP通信中,例如,IP地址被存储。
在数据部分中,应用程序识别信息、终端ID、图象数据、时间信息等被存储。该应用程序识别信息是识别待在目的地终端(这里为主机装置4)中被启动的应用程序的信息。换句话说,该应用程序识别信息是一用于启动接收目的地的终端中的一预定程序的指令。在本实施例中,一识别邮件发送、传真发送、邮件读出、传真读出、识别等的指令被设定。在TCP/IP通信中,该应用程序识别信息被指定为一端口号。
该终端ID为便携式终端1的识别号。该图象数据是由摄象机接收的图象数据,并当存储在一数据包中时被压缩。如果有一用手写笔的输入,该笔输入的轨迹图形也被合并为图象数据,如前参照图8所示。该时间信息是当发出给主机装置4的图象数据被由摄象机输入时的时间。
图10B为一图4中所示的步骤S8的数据包生成处理的详细流程图。在步骤S21,待被发送给主机装置4的图象数据被压缩并被存储在该数据部分中。该压缩方案例如为JPEG。在步骤S22,表示通过摄象机输入上述图象数据的时间的时间信息被设定。在步骤S23,识别一图象数据分析及识别程序的信息被设定为应用程序识别信息。在步骤S24,该终端ID被设定为识别该便携式终端1的信息(即识别其自己的装置的信息)。而且,在步骤S25,生成该首部部分。在该首部部分中,至少该便携式终端1的地址(即其自己装置的地址)和主机装置4的地址被分别设定为发送源地地址和目的地地址。
如上所述生成的数据包被发出给网络。根据该数据包的目的地地址,网络3发送给数据包给主机装置4。
图11为图4中所示的步骤S11的处理的详细流程图,且它示出了抽取该识别对象的图象数据的处理。在步骤S31,由摄象机12读取的图象数据被从存储装置22的RAM区中读出并经过预处理以去除该图象数据的噪声,且然后执行线检测处理。该线检测处理是一已知的技术。例如,当检查该图象数据的密度分布或颜色分布时,通过连接各具有一较大变化比的点可检测一“线”。而且在某一区域和另一区域之间的一边界中,该密度分布或颜色分布的变化比变得较大。然而,在一“线”和区域之间的一“边界”之间的辩别被以一常规技术执行。通过对经过上述预处理的图象数据的整个区域中的密度分布或颜色分布进行检查,包含在该图象中的“线”被检测。
在步骤S32,执行用于连接在步骤S31检测的“线”的断开的线连接处理。例如,在图9所示的示例中,闭环图形基本上围绕该手写的笔记。然而,其一部分被断开,有一所谓的“线断开”。进行该线连接处理,用于修补这样一“线断开”。这也是一已知的技术。例如,从其上产生该“线断开”的一线的端点开始,在该线的伸展方向上延伸具有一预定长度的一段线。绕该线的端点,该伸展的线段在一预定的角度范围内被转动。如果该线段与另一线接触,执行连接该两线的处理。通过该线连接处理,部分中断的闭环图形(基本闭合的环的图形)被修补以变成一完全闭合的环图形。
在该图象数据中包含的闭环图形内,在步骤S33检测一其所围绕的区域面积大于一预定值的闭环图形。例如,图9中的字母“Q”被视作为一闭环图形的可能性存在。因此,通过执行步骤S33,除了指定识别对象的区域的闭环图形以外的闭环图形被排除。通过该处理检测的闭环图形数不需要为一,而可以是二或更多。在步骤S34,由在步骤S33检测的闭环图形围绕的区域中的图象数据被输出。
图12为一表示上述图象处理的应用的一示例的示意图。如上所述,可通过检查该图象数据的密度分布或颜色分布来检测区域之间的一边界。在图12所示的示例中,该技术被采用。现假定期望待被进行图象识别处理的一笔记被写在纸Q上。其上写有笔记的该纸Q被置放在一具有不同于纸Q的颜色的桌或类似物品上。当通过使用摄象机将纸Q成象时,包括纸Q的一摄象机输入区域P被成象。
对于这样接收的摄象机输入区域P内的图象数据,图4的步骤S11被执行。由于该纸的颜色不同于该桌的顶表面的颜色,该纸的***边被检测为一闭环图形图形,且只有该纸的图象被抽取为该识别对象的图象数据。如果成象方法被这样改变,不用钢笔或铅笔画一围绕该纸上的笔记的闭环图形就可抽取所需的区域。在图9或12所示的示例中,通过用一基本封闭的环图形围绕该手写的笔记而使该图象识别对象的区域区别于一不需要的区域。然而,也可采用一不同的方法。例如,通常是“对待被识别的一字符串作下划线”且只有被下划线的字符串可从通过使用摄象机12接收的图象数据中被抽取。在图13A所示的示例中,只有在“8月18日与Mr.k会见”被下划线。在此情况下,字母Q至Z不被抽取,而只有“在8月18日与Mr.k会见”被检测。
图14A为一说明在待被识别的字符串通过下划线被识别的情况下,识别对象图象数据抽取处理的流程图。在图4的流程图中,该处理作为步骤S11被执行。
步骤S41和S42分别与图11的步骤S31和S32相同。“线”被从由摄象机12读取的图象数据中检测到,且这些“线”被修补。在通过上述处理得到的这些“线”中,在步骤S43,在水平方向或接近于水平方向上比一预定长度长的“线”被检测。这里检测到的“线”可以是多于一条的。在图13所示的示例中,两条线被检测到。沿着在步骤S43检测到的各条“线”,该“线”上方的一区域被以一预定宽度切出,且在步骤S44,这些切出的区域被输出作为识别对象区域。
作为一种用于标识该图象识别的对象区域的方法,也可采用一种颜色。例如,通常“用红色写该字符串”。在通过使用摄象机12接收的图象数据中,只有用红色所写的字符串被抽取。在图13B所示的例子中,只有字符“在8月18日与Mr.k会见”被用红色写,而其余的字符被用黑色写。在此情况下,字母Q至Z未被抽取,而只有“在8月18日与Mr.k会见”被抽取。
图14B为一说明在为了识别而事先用一指定的颜色写识别对象的字符串的情况下,执行识别对象数据的处理的流程图。该处理在图4的流程图中作为步骤S7被执行。在步骤S51,包含有事先以一预定密度或更多指定的颜色的象素的一区域被从通过使用摄象机12接收的图象数据中切出,且包括在该切出区域中的图象数据被输出作为识别对象区域。该识别对象的字符串可通过使用除了下划线或颜色以外的其它字符装饰信息而被指定。
图15为主机装置4的构成示意图。存储装置51由一半导体存储器、磁记录媒体、或光学记录媒体构成,并存储程序、数据等。存储装置51可被固定地安装在主机装置4中,或可被安装成被自由地装上和拆下。
记录媒体驱动器52为一用于读出存储在一可拆装的记录媒体53(包括一半导体存储器、磁盘、光盘、光学磁盘等)中的数据,或将数据写入该可拆装记录媒体53中的装置。通信控制器54是一用于控制相对于网络的数据交换的单元。相对于便携式终端1的数据包的发送和接收也由通信控制器54所控制。
CPU55将来自存储装置51或可拆装记录媒体53的程序等装入存储器56中并执行其。记录在存储装置51中的程序、数据等可通过将存储在可拆装记录媒体53中的程序、数据等写入存储装置51中,或经通信线路等接收来自网络上另一装置的程序、数据等并将其记录入存储装置51中而被得到。而且,CPU55可经通信线路等使用安装在网络上的另一装置内存储的程序数据等。图1中所示的图象识别单元5、邮件发送/接收单元6和传真发送/接收单元7代表由CPU55和经通信控制器54的程序所执行的功能。
图16和17为说明主机装置4的处理的流程图。主机装置4接收自便携式终端1发出的数据包(即,通过图4的流程图的处理生成的数据包),并根据在其数据部分中设定的信息处理该图象数据。将描述当主机装置4接收到来自网络3的一数据包时执行的操作。
在步骤S31,一旦接收到一数据包,在步骤S32,发出该数据包的终端通过检查该数据包中设定的终端ID而被识别。在步骤S33,确定该接收的数据包是否包含e-mail数据。如果包含有e-mail数据,则它被识别为邮件接收且处理进到步骤S41。在步骤S41,邮件发送/接收单元6被启动并被请求执行有关邮件接收的处理。邮件发送/接收单元6通过使其目的地作为密钥而存储该接收的e-mail,并响应于请求,通知目的地的用户接收到该邮件。
在步骤S34,确定接收到的数据包是否包含有传真数据。如果包含有传真数据,被认为“传真接收”且处理进到步骤S42。在步骤S42,传真发送/接收单元7被启动并被请求执行有关传真接收的处理。传真发送/接收单元7通过使用其目的地作为密钥而存储该接收的传真,并响应于请求,通知目的地的使用者接收到该传真。
在步骤S35,由设定在接收到的数据包中的应用程序识别信息所指定的一应用程序被启动。在步骤S36,确定被启动的应用程序中是否包含有图象识别处理。如果该应用程序不包含有图象识别处理,在步骤S43执行该应用程序的处理。如果该应用程序包含有图象识别处理,在步骤S37,包含在接收数据包中的图象数据被扩展且在步骤S38对图象数据执行图形识别处理和字符识别处理。通过该图象识别处理。用户所请求的服务被识别。步骤S38的识别处理将在后面进行描述。
在步骤S51,确定由用户请求的服务是否为“邮件发送”。如果该服务为“邮件发送”,处理进到步骤S52。在步骤S52,对在步骤S37扩展的图象数据执行图形识别处理和字符识别处理。在步骤S38,当仅对一被要求的区域执行字符识别处理以识别由用户请求的服务时,在步骤S52,对该被扩展的图象数据的整个区域执行字符识别处理。通过该字符识别处理所获得的字符被转换成一预定的字符码(例如ASCIID码或JIS码)。在此获得的字符码为通过使用便携式终端1由用户输入的邮件语句。在步骤S53,邮件发送/接收单元6被启动,且该邮件发送/接收单元6发送在步骤S52获得的邮件语句。后面将对步骤S52和S53进行详细描述。
在步骤S54,确定由用户请求的服务是否为“传真发送”。如果该服务为“传真发送”,处理进到步骤S55。在步骤S55,传真发送/接收单元7被启动,且该传真发送/接收单元7将在步骤S37扩展的图象数据发送给在该图象中被指定的一发送目的地。
在步骤S56,确定由用户请求的服务是否为“邮件读出”。如果该服务为“邮件读出”,处理进到步骤S57。在步骤S57,邮件发送/接收单元6被启动。如果具有在步骤S32被检测的作为其目的地的终端ID的邮件被接收,该邮件发送/接收单元6将该邮件发送给具有该终端ID的终端。后面将对步骤S57进行描述。
在步骤S58,确定由用户请求的服务是否为“传真取出”。如果该服务为“传真取出”,处理进到步骤S59。在步骤S59,传真发送/接收单元7被启动。如果具有在步骤S32被检测的作为其目的地的终端ID的传真被接收,该传真发送/接收单元7将该传真发送给具有该终端ID的终端。
如果在步骤S74被判定的服务为识别服务,则存储在接收的数据包中的图象数据在步骤S76被扩展,且对该图象数据执行图形识别处理和字符识别处理。经受该识别处理的图象数据为在图4的步骤S11被抽取的图象数据。换句话说,在图9或13的示例中,仅对包含“在8月18日与Mr.k会见”的区域的图象数据执行图象识别处理。因此,作为图象识别处理的结果,只有由用户所写的作为笔记的内容被识别。
如果在步骤S76的识别结果包含有字符,这些字符在步骤S77被转换成一字符码(例如ASSCII码或JIS码)。在步骤S78,生成用于将该识别结果返回给便携式终端1的一数据包。换句话说,该数据包的发送目的地地址是该便携式终端1,且上述识别结果被存储在其数据部分中。在步骤S79,该生成的数据包被发出给网络3。
在步骤S79发送给网络3的数据包被发送给便携式终端1。一旦接收到该数据包,便携式终端1在LCD显示单元11上显示由主机装置4执行的该图象识别处理的结果。而且,该识别结果根据用户的指令被存储在便携式终端1内。
如上所述,该图象识别的结果可被存储在主机装置4中。在此情况下,该识别结果被存储以与发送不同的图象数据的终端装置(即便携式终端1)的终端ID相关联。而且,该识别结果可被发送给一事先被指定的预定的终端装置。而且,可通过使用该识别结果中包含的一字符串作为密钥来执行检索处理,或该字符串可被译成一预定的语言。在此情况下,该检测结果或翻译结果被发送给便携式终端1。
便携式终端的尺寸、重量和成本期望能被减少。在本发明的应用中,通过将由便携式终端执行的一部分处理转移给主机装置可满足这些需求。例如,可使主机装置4执行图4的流程图的步骤S11的处理。如上所述,步骤S11包含有图象处理。如果尝试以高精度或在较短的时间内实现这一处理,通常需要具有高处理能力的处理器和较大的程序。因此,使主机装置4执行步骤S11的处理可有效地减少便携式终端1的尺寸、重量和成本。
在主机装置4执行步骤S11的处理的情况下,便携式终端1将通过使用摄象机12读取的图象数据发送给主机装置4。在图17的流程图中,主机装置4执行在步骤S75的处理之后的步骤S11的处理。
如上所述,本实施例的图象处理***被构成以使其上写有一笔记的纸的图象由便携式终端1的一摄象机或类似装置接收且主机装置4只对该图象内一所要求的区域执行识别处理。因此,通过提供具有接收图象并将其发送给主机装置4的功能和请求主机装置4执行处理的功能(及在某些构成中,具有抽取一所要求的区域的功能)的便携式终端1,所写笔记的内容可以一简单的接口被转换成一电子文件,一手写的笔记等通过使用一摄象机而被输入。
图18为图16的步骤S38的详细流程图。通过对在接收的数据包中存储的图象数据执行图形识别处理和字符识别处理,由用户所请求的服务被检测。
在步骤S61,根据一预定规则自接收的图象数据检测一特定符号或颜色。例如,在使用括号作为表示指定服务的一字符串或指定发送目的地的一字符串的位置的符号的情况下,如图5A所示,该括号内的图象被抽取。在服务类别与一颜色相关联且发送目的地通过使用由一特定颜色表示的一字符串而被指定的情况下,如图5B所示,使用该特定颜色的一区域被抽取。
在步骤S62,对在步骤S61抽取的图象数据执行字符识别处理。在步骤S63,由用户请求的服务被从该字符识别处理的结果中所检测到。在图5A或5B所示的例子中,与检测到由用户请求的服务为“e-mail发送”同时地检测到e-mail的发送目的地的地址。
图19为图17的步骤S52的详细流程图。并示出了对作为邮件语句待被发送的各字符串的字符码进行检测的处理。
在步骤S71,对接收的图象数据执行字符识别处理,且由便携式终端1所成象的字符被识别。这里,不对在步骤S38所处理的区域执行字符识别处理。
在步骤S72,在步骤S71所检测的各字符的位置被检测,例如,各字符的中心位置被检测为相对于通过使用摄象机所成象的屏面左上角的一相对位置。
在步骤S73,字符之间的间距被检查,且确定这些语句是垂直写的还是水平写的。在水平写的情况下,水平方向上的字符间的间距通常小于垂直方向上字符间的间距。在垂直写的情况下,垂直方向上的字符间的间距通常小于水平方向上字符间的间距。这里,这一特性被采用。
在步骤S74,抽取该方向上的在步骤S73获得的字符。例如,在语句被水平写的情况下,从左向右逐个地抽一顶行上的字符,然而,按次序对下面的行执行同样的处理。这些抽取的字符逐字符地按次序地被转换成字符码并被存储。
通过上述处理,用户使用便携式终端1所成象的字符被按次序抽取并被转换成字符码。
图20是图17的步骤S53的详细流程图,并示出了邮件发送处理。该处理由图1的邮件发送/接收单元6执行。
在步骤S81,在步骤S38获得的发送目的地地址由便携式终端1的用户确认。换句话说,在步骤S38通过图象识别处理所获得的发送目的地地址被发送给具有在步骤S32检测的终端ID的终端,而且,对该发送目的地地址是否正确作出查询。一旦接收到该查询,便携式终端1在显示单元上显示所接收的发送目的地地址,并等候用户的指令。
在步骤S82和S83,等候来自便携式终端1的答复。如果在预定时间内没有答复,该处理结束。另一方面,如果有答复,在步骤S84和S85确定该答复为“正确:发送目的地地址被确认”。在“正确”的情况下,处理进到步骤S91。如果包含有一变换指令,则根据步骤S86的指令变换该地址,并且处理返回到步骤S81。如果来自便携式终端1的答复既不是“正确”也不是一变换指令,在步骤S87执行一差错步理。
在步骤S91,生成图21中所示的TCP段,换句话说,在一TCP首部中设定一端口号、序列号等。该端口号例如是一指定一SMTP的号。对于数据,在步骤S52获得的字符串被存储作为邮件语句。
在步骤S92,对应于包括在该图象数据中的发送目的地址的一IP地址被获得。该IP地址是通过例如查询一存在于该网络上且未被图示的一DNS(域名服务器)而获得的。在步骤S93,生成图21中所示的一IP数据字(datagram)。在此生成的该IP数据字的首部中,在步骤S92获得的该IP地址被设定。该IP数据字的一数据部分在其中存储有一TCP段。
在步骤S94,生成图21中所示的发送数据包。该发送数据包的一数据部分在其中存储有上述的IP数据包。该数据包的格式通过主机装置4被连接至其的网络3上的一通信协议而被确定。在步骤S95,在步骤S94生成的该发送数据包被发出给网络3。
在步骤S96,确定上述发送数据包可否被正常发出,在步骤S97,便携式终端1被通知该邮件发送被完成且在步骤S98,该发送的邮件被存储在主机装置4中。另一方面,当上述发送数据包不能被正常发出时,便携式终端1被通知该情况。
图22为图17的步骤S57的详细流程图,并示出了便携式终端1读出存储在主机装置4中的邮件的处理。该处理在例如以下的情况中被执行。被寄至便携式终端1的用户的邮件由邮件发送/接收单元6所接收。该邮件发送/接收单元6管理该邮件。在此情况下,便携式终端1通过使用摄象机将图7中所示的笔记进行成象并将该图象数据发送给主机装置4。
在步骤S101,查询源的终端(用户)的邮箱被访问。该终端由在上述步骤S32检测到的终端ID所识别。同时,到达邮件发送/接收单元6的邮件根据其目的地被置入一特定的邮箱中。例如,如果被寄给便携式终端1的用户的邮件已到达,邮件发送/接收单元6将其存入该邮箱中,该邮箱是为该便携式终端1的用户而建立的。因此,通过使用在步骤S32检测的终端ID作为密钥进行访问,被寄至该终端(用户)的该封信可被读出。
在步骤S102,通过对接收的图象数据执行字符识别处理,确定是否有邮件发送人的说明。如果没有说明,在步骤S103,存储在该终端的邮箱中的所有邮件被读出。另一方面,如果有邮件发送人的说明,在步骤S104,只有来自该邮件发送人的邮件被读出。在图7所示的例子的情况下,只有来自Mr.K的邮件被读出。在步骤S105,读出的邮件被发送给该查询源的终端。
在上述实施例中,某一地址被指定为e-mail的发送目的地。替代地,包括多个终端的一群可被指定。在此情况下,需要事先在邮件发送/接收单元6中寄存一如图23中所示的表。现假定图23的表被设定而5A的发送目的地地址由“商业部门”所替代。这样一笔记由摄象机12输入且其图象数据被发送给主机装置4。通过对接收的图象数据执行字符识别处理,主机装置4识别该邮件发送目的地为“商业部门”。如果在此时,通过使用便携式终端1的终端ID对图23的表进行访问,属于“商业部门”的一或多个e-mail地址被获得。后继的处理与上述相同。
在上述实施例中,由主机装置4执行的处理程序,即实现图16至20和图22的流程图中所示的功能的程序,和用于对经网络发送的信息进行翻译和处理的程序被以可由CPU55读取程序码的形式事先存储在存储装置51中或可拆装的记录媒体53中,或者使用经网络连接的另一装置中存储的程序。
图19至23示出了e-mail发送的操作,基本上,传真发送的操作是相同的。但是,当发送一传真时,需要通过对接收到的图象数据执行图象识别处理来检测发送目的地的电话号。但对于作为传真待被发送的内容(传真语句),不需要执行识别处理。
在上述实施例中,示出了通过使用摄象机接收图象数据的构成。但是,本发明并不限于这一构成。例如,通过使用一图象扫描仪读取的图象数据可被发送给主机装置。
这样,在根据本实施例的图象数据处理***中,由便携式终端1接收的图象数据被发送给主机装置4。通过分析该图象数据,主机装置4分析由便携式终端1的用户所请求的服务,并根据该图象数据中包含的目的地信息,将包含在该图象数据中的传送数据作为e-mail或传真进行发送。因此,通过提供仅具有接收图象数据等并将其发送给主机装置4的功能和请求主机装置4执行处理的功能的便携式终端,e-mail等能以这样一通过摄象机成象一手写笔记等的用户接口被发送。换句话说,便携式终端1不需要执行高精确度图形识别处理和各种需要高速处理的处理。因此,便携式终端1不需要具有大容量的存储器或高性能的处理器而能享有在主机装置4中执行的完善的图象处理。
本领域的熟练技术人员可易于发现其它的优点和改型。因此,本发明在其更广的方面并不限于这些特定的细节、代表性的装置和在这里图示及描述的示例。因此,在不脱离的所附权利要求及其等同物限定的本发明的精神及范围的前提下,可作出各种改型。

Claims (9)

1.一种可通过一网络连接至一便携式终端的主机装置,包括:
接收处理装置,用于接收自该便携式终端发送的图象数据,该图象数据包括指示一发送指令的第一特定信息和指示该便携式终端的使用者希望发送的一内容图象的第二特定信息,该装置通过字符识别由该第一特定信息指示的图象数据来检测该发送指令并从该图象数据中抽取由该第二特定信息指示的内容图象;及
发送装置,用于根据该检测的发送指令以一种方式发送该抽取的图象。
2.根据权利要求1的主机装置,其中如果该检测的发送命令是一电子邮件发送指令,所述发送装置通过一电子邮件发送该抽取的图象。
3.根据权利要求1的主机装置,其中如果该检测的发送命令是一传真发送指令,所述发送装置通过一传真发送该抽取的图象。
4.根据权利要求1的主机装置,其中所述接收处理装置接收自该便携式终端发送的图象数据,该图象数据还包括指示一发送目的地地址的一第三特定信息,该接收处理装置通过字符识别由该第三特定信息指示的图象数据来检测该发送目的地地址;及
所述发送装置将抽取的图象发送给该检测的发送目的地地址。
5.根据权利要求4的主机装置,其中所述发送装置将该检测的发送目的地地址发送给该便携式终端以确认该检测的发送目的地地址并且如果该便携式终端发送以修改指令,则修改该检测的发送目的地地址。
6.根据权利要求1的主机装置,还包括:
存储装置,用于存储电子邮件;
抽取发送装置,用于如果接收处理装置检测到一邮件查询指令,抽取用于该便携式终端的电子邮件并发送该抽取的电子邮件。
7.一种便携式终端装置,包括:
图象读取装置,用于读取作为一图象的,指示通过使用一标识图形而待被识别的数据的数据;
处理装置,用于自读出的所述图象数据中检测该标识图形,并根据所述标识图形,抽取待被识别的一区域中包括的图象数据;
通信控制器,用于根据由处理装置给出的一指令生成一发送数据包;及
收发机,用于将由该通信控制器生成的该数据包发送给一连接至一网络的主机装置。
8.根据权利要求7的便携式终端装置,其中所述标识图形由一指示一识别范围的基本封闭的坏或用于待被识别的字符的字符装饰信息所表示,且所述检测装置抽取所述基本封闭的环中或具有加至其的字符装饰信息的字符的范围中的一区域作为待被识别的一图象。
9.根据权利要求7的便携式终端装置,其中所述收发机包括:
接收装置,用于接收经一网络从所述便携式终端发送的包括有图象数据的数据,并识别该图象数据中包括的信息;及
发送装置,用于将识别结果的数据发送给发送该数据的终端。
CN98100497A 1997-03-11 1998-03-11 数据发送/接收装置 Expired - Lifetime CN1103518C (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP55781/1997 1997-03-11
JP9055781A JPH10254989A (ja) 1997-03-11 1997-03-11 画像処理システムおよびその方法
JP55781/97 1997-03-11
JP6574697A JPH10260916A (ja) 1997-03-19 1997-03-19 画像データ処理システム
JP65746/1997 1997-03-19
JP65746/97 1997-03-19

Publications (2)

Publication Number Publication Date
CN1194514A CN1194514A (zh) 1998-09-30
CN1103518C true CN1103518C (zh) 2003-03-19

Family

ID=26396685

Family Applications (1)

Application Number Title Priority Date Filing Date
CN98100497A Expired - Lifetime CN1103518C (zh) 1997-03-11 1998-03-11 数据发送/接收装置

Country Status (6)

Country Link
US (1) US6366698B1 (zh)
EP (1) EP0865192B1 (zh)
KR (1) KR100308543B1 (zh)
CN (1) CN1103518C (zh)
DE (1) DE69821040T2 (zh)
HK (1) HK1016389A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105790786A (zh) * 2015-01-13 2016-07-20 苹果公司 具有阻抗测量电路的电子设备

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11313105A (ja) * 1998-04-24 1999-11-09 Canon Inc サーバ、クライアント、サーバの制御方法、クライアントの制御方法、クライアントサーバシステムおよび記憶媒体
US7268774B2 (en) 1998-08-18 2007-09-11 Candledragon, Inc. Tracking motion of a writing instrument
JP3223506B2 (ja) * 1998-11-19 2001-10-29 日本電気株式会社 画像編集サービスシステム
US6867887B1 (en) * 1999-05-04 2005-03-15 Hewlett-Packard Development Company, L.P. Photograph facsimile apparatus and method
US7330974B1 (en) 1999-05-25 2008-02-12 Silverbrook Research Pty Ltd Method and system for delivery of a secure document
JP4118470B2 (ja) * 1999-08-30 2008-07-16 富士通株式会社 電子メール装置,電子メール送信方法及び記録媒体
DE60041634D1 (de) 1999-11-22 2009-04-09 Ntt Advanced Tech Kk System für die verteilung von informationen, endgerät für mobilfunkkommunikation und verfahren für die verteilung von informationen
GB9928170D0 (en) * 1999-11-29 2000-01-26 British Telecomm Indirect data transmission
JP2001186360A (ja) * 1999-12-27 2001-07-06 Canon Inc 画像通信装置およびその方法
EP1128629A1 (en) * 2000-02-22 2001-08-29 TELEFONAKTIEBOLAGET L M ERICSSON (publ) A method of transmitting digital information from an electronic utility device to a server
AU2001249942A1 (en) * 2000-04-10 2001-10-23 Digital Ink., Inc. Using handwritten information
ATE355681T1 (de) * 2000-06-09 2006-03-15 Cit Alcatel Prozessinstruktionübertragung von einem drahtlosen telekommunikationsgerät zu einem nahen terminal
US7289110B2 (en) 2000-07-17 2007-10-30 Human Messaging Ab Method and arrangement for identifying and processing commands in digital images, where the user marks the command, for example by encircling it
SE0002691D0 (sv) * 2000-07-17 2000-07-17 Maarten Hansson Embedded commands in digital images
SE519405C2 (sv) * 2000-07-19 2003-02-25 Jacob Weitman Tillämpningar för en avancerad digitalkamera som tolkar den tagna bilden utifrån dess informationsinnehåll, såsom att överföra bilden, beordra en tjänst, styra ett flöde mm
JP2002063120A (ja) * 2000-08-23 2002-02-28 Sony Corp データ通信システム及びデータ通信方法
JP2002140065A (ja) * 2000-10-31 2002-05-17 Toshiba Corp 無線通信端末の表示制御器
JP3554271B2 (ja) * 2000-12-13 2004-08-18 パナソニック コミュニケーションズ株式会社 情報通信装置
US7050635B2 (en) * 2001-03-30 2006-05-23 The University Of Connecticut Multi-dimensional pattern recognition by use of digital holography
US8054971B2 (en) 2001-04-27 2011-11-08 Comverse Ltd Free-hand mobile messaging-method and device
US20020164978A1 (en) * 2001-05-01 2002-11-07 Moskowitz Paul Andrew System and method for making telecommunication calls
JP3695581B2 (ja) * 2001-08-08 2005-09-14 ソニー株式会社 記録装置および記録方法、記録媒体、並びに、電子カメラ
KR20030032123A (ko) * 2001-10-10 2003-04-26 김덕우 무선 통신 단말기의 인터넷 접속 장치 및 그 접속 방법
JP3988475B2 (ja) * 2002-02-05 2007-10-10 ソニー株式会社 送信装置、受信装置およびそれらの方法
US7028075B2 (en) * 2002-04-23 2006-04-11 Flashpoint Technology, Inc. Method and system for sharing digital images over a network
JP2003323587A (ja) * 2002-05-02 2003-11-14 Pfu Ltd 視覚障害者用文書作成方法及び装置並びにプログラム
JP2004152036A (ja) * 2002-10-31 2004-05-27 Nec Saitama Ltd 文字認識機能付携帯電話機器及び認識文字の修正方法並びにプログラム
JPWO2004102448A1 (ja) * 2003-05-14 2006-07-13 富士通株式会社 ユーザサポートシステム及び方法
WO2005043312A2 (en) * 2003-10-24 2005-05-12 Caringfamily, Llc Use of a closed communication service to diagnose and treat conditions in subjects
JP4220408B2 (ja) * 2004-02-13 2009-02-04 株式会社日立製作所 テーブル型情報端末
US8832316B2 (en) * 2004-09-28 2014-09-09 Presto Services Inc. Method and system for message delivery using a secure device and simple output without the use of a personal computer
US20060204098A1 (en) * 2005-03-07 2006-09-14 Gaast Tjietse V D Wireless telecommunications terminal comprising a digital camera for character recognition, and a network therefor
JP4508921B2 (ja) * 2005-03-28 2010-07-21 キヤノン株式会社 用紙搬送システム
US7847964B2 (en) * 2005-06-14 2010-12-07 Celery, Llc Document delivery system
US8155312B2 (en) * 2005-10-18 2012-04-10 The University Of Connecticut Optical data storage device and method
US7755026B2 (en) 2006-05-04 2010-07-13 CandleDragon Inc. Generating signals representative of sensed light that is associated with writing being done by a user
US8694590B2 (en) * 2006-05-22 2014-04-08 Presto Services, Inc. Method and system for formatting messages into stylized messages for print out
KR100721312B1 (ko) * 2006-08-22 2007-05-25 최진관 필기 내용 전송기능을 갖는 전자 노트
JP5658547B2 (ja) * 2009-12-29 2015-01-28 シャープ株式会社 ネットワークシステム、通信方法、および通信端末
US9285984B2 (en) 2012-07-24 2016-03-15 Casio Computer Co., Ltd Information processing apparatus and computer readable medium
JP6019885B2 (ja) * 2012-07-26 2016-11-02 カシオ計算機株式会社 情報処理装置及びプログラム
JP5980446B2 (ja) * 2013-11-29 2016-08-31 京セラドキュメントソリューションズ株式会社 電子メール送信装置
US10277755B2 (en) * 2016-02-29 2019-04-30 Kyocera Document Solutions Inc. Electronic device and marker processing method

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61262982A (ja) 1985-05-17 1986-11-20 Casio Comput Co Ltd 画像情報認識装置
JPH0814822B2 (ja) 1986-04-30 1996-02-14 カシオ計算機株式会社 命令入力装置
DE68918534T2 (de) * 1988-08-02 1995-03-23 Canon Kk Informationsverarbeitungseinrichtung.
US5115326A (en) 1990-06-26 1992-05-19 Hewlett Packard Company Method of encoding an e-mail address in a fax message and routing the fax message to a destination on a network
US5175684A (en) * 1990-12-31 1992-12-29 Trans-Link International Corp. Automatic text translation and routing system
US5287199A (en) 1992-02-27 1994-02-15 At&T Bell Laboratories Facsimile message processing and routing system
JP3131859B2 (ja) 1993-04-02 2001-02-05 カシオ計算機株式会社 情報認識装置
GB9407760D0 (en) * 1994-04-19 1994-06-15 Optionexist Ltd Portable communication apparatus
US5862321A (en) * 1994-06-27 1999-01-19 Xerox Corporation System and method for accessing and distributing electronic documents
JPH0818717A (ja) * 1994-06-29 1996-01-19 Fuji Xerox Co Ltd ファクシミリ電子メール変換システム
US5461488A (en) * 1994-09-12 1995-10-24 Motorola, Inc. Computerized facsimile (FAX) system and method of operation
US5933478A (en) * 1994-09-28 1999-08-03 Hitachi, Ltd. Data transfer system and handheld terminal device used therefor
JPH08180003A (ja) * 1994-12-22 1996-07-12 Hitachi Ltd 電子メールシステム
JP3555700B2 (ja) * 1994-12-28 2004-08-18 株式会社リコー ファクシミリ通信装置
US5873077A (en) * 1995-01-13 1999-02-16 Ricoh Corporation Method and apparatus for searching for and retrieving documents using a facsimile machine
JPH08331286A (ja) * 1995-06-02 1996-12-13 Toshiba Corp 携帯用ファクシミリ装置
US5892845A (en) * 1995-06-02 1999-04-06 Ricoh Company, Ltd. Data communication and processing system in which code data generated by recognition of image data is transmitted
US5805298A (en) * 1996-02-06 1998-09-08 Ho; Shu-Kuang Communications device with remote device identifier recognition and transmission in accordance with the recognized identifier
JP3267141B2 (ja) * 1996-03-14 2002-03-18 富士通株式会社 画像処理装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105790786A (zh) * 2015-01-13 2016-07-20 苹果公司 具有阻抗测量电路的电子设备
CN105790786B (zh) * 2015-01-13 2019-05-10 苹果公司 具有阻抗测量电路的电子设备

Also Published As

Publication number Publication date
KR100308543B1 (ko) 2001-11-30
HK1016389A1 (en) 1999-10-29
EP0865192B1 (en) 2004-01-14
EP0865192A2 (en) 1998-09-16
DE69821040D1 (de) 2004-02-19
KR19980080129A (ko) 1998-11-25
CN1194514A (zh) 1998-09-30
EP0865192A3 (en) 2000-05-17
DE69821040T2 (de) 2004-06-17
US6366698B1 (en) 2002-04-02

Similar Documents

Publication Publication Date Title
CN1103518C (zh) 数据发送/接收装置
CN1285236C (zh) 用于图像处理的方法、设备及程序
CN100338619C (zh) 字符识别处理设备、字符识别处理方法和便携式终端设备
CN1298269A (zh) 具有能提供应用项管理等功能的改进的用户接口的移动台
CN1874395A (zh) 图像处理装置、图像处理方法及计算机产品
CN1739100A (zh) 同步程序
CN101042706A (zh) 文档搜索设备、文档管理***、文档搜索***和方法
CN1815490A (zh) 数据处理装置和方法、以及图像处理装置和方法
CN1685434A (zh) 用于编辑拾取图像的便携式无线通信终端
CN1783933A (zh) 图像处理装置及其方法
CN1423768A (zh) 显示信息的方法和***
CN1728760A (zh) 通信设备和方法
CN2798182Y (zh) 数据处理设备、具有数据处理功能的传真机以及与数据处理设备相关联的数据管理设备
CN1625209A (zh) 通信设备和数据转换设备
CN101047767A (zh) 图像处理设备、***以及信息处理设备
CN1359501A (zh) 提供基于网络的咨询服务的方法和装置
CN1842129A (zh) 图像处理装置及其方法
CN1747522A (zh) 二维编码信息处理装置
JP5014074B2 (ja) 多機能入出力装置
CN1163836C (zh) 图象信息检索***和方法
CN1738354A (zh) 图像生成控制***及程序、图像生成装置、外部设备
CN1689289A (zh) 电子邮件服务器设备
JP2009124258A6 (ja) 多機能入出力装置
CN1602474A (zh) 通信***和方法、信息处理终端和方法、以及信息处理装置和方法
CN1484165A (zh) 文件信息的输入设备,输入方法,输入程序以及记录介质

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: KNOWLEDGE VENTURE HOLDINGS 56 CO.,LTD.

Free format text: FORMER OWNER: CASIO COMPUTER CO., LTD.

Effective date: 20090417

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20090417

Address after: Nevada

Patentee after: Casio Computer Co., Ltd.

Address before: Tokyo, Japan

Patentee before: CASIO Computer Co., Ltd.

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20030319