CN1984304A - 图像转换装置,图像信号处理装置,摄像机***以及图像信号处理方法 - Google Patents

图像转换装置,图像信号处理装置,摄像机***以及图像信号处理方法 Download PDF

Info

Publication number
CN1984304A
CN1984304A CNA2006100642013A CN200610064201A CN1984304A CN 1984304 A CN1984304 A CN 1984304A CN A2006100642013 A CNA2006100642013 A CN A2006100642013A CN 200610064201 A CN200610064201 A CN 200610064201A CN 1984304 A CN1984304 A CN 1984304A
Authority
CN
China
Prior art keywords
image
frame
frame rate
memory
signal processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006100642013A
Other languages
English (en)
Other versions
CN1984304B (zh
Inventor
小清水干男
佐藤泰史
津村武男
南庆浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1984304A publication Critical patent/CN1984304A/zh
Application granted granted Critical
Publication of CN1984304B publication Critical patent/CN1984304B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种图像转换装置，其包括能够存储将被播放的图像的帧信息的存储器，以及图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放状态，将帧速率转换为预定的帧速率。

Description

图像转换装置，图像信号处理装置，摄像机***以及图像信号处理方法
本发明所包含的主题涉及在2005年10月20日向日本专利局申请的日本专利申请JP2005-305538的主题，在此通过引用将它的全部内容并入本文中。
技术领域
本发明涉及一种图像转换装置、图像信号处理装置、摄像机***以及图像信号处理方法，例如其可以转换帧速率和/或运动或静止图像的分辨率。
背景技术
随着半导体技术和显示设备技术的发展，以更高的分辨率和帧速率来处理的高质量的运动或静止图像的数量也得到了增长。
然而，即使是按照前述的方式所创建的图像也可能无法在所有的显示装置上进行播放，例如在显示器或电视机上。
因此，例如JP-A-2004-221999(专利文献1)提出了“一种图像处理方法”，其允许“以小于拍摄时的帧速率的第二帧速率播放”。
同样，JP-1-2002-320203(专利文献2)提出了“一种视频信号记录装置和视频信号播放装置”，其允许“自动调整视频信号的播放速度和转换速率”。
运动图像的时间和信息量增加了。因此，在建立图像之后，用户需要花费时间来检查这些运动图像。
因此，JP-A-2005-27337(专利文献3)提出了“一种多显示的方法和装置”，其允许“同时显示”所选定的“在同一时间段内”的“多个角度和多个场景”。
此外，普通的可快速摄像的图像记录装置、视频摄像机或数字摄像机***具有能够以15fps至60fps的帧速率进行拍摄的图像传感器和图像处理部件，对于人眼的视觉敏感度而言，这一时间分辨率是足够的。
这些装置允许以较高的帧速率进行拍摄，例如120fps和240fps，包含在该装置内的存储区域的容量和传输速率可以支持这样高速的拍摄。
此外，为了改变帧速率，通常需要在拍摄之前定义帧速率。
发明内容
然而，在专利文献1中所公开的“图像处理方法中”，尽管可以“以小于拍摄时的帧速率的第二帧速率播放”，但可能需要为每一个显示装置分别定义可显示的“第二帧速率”。
对于专利文献2中所公开的“视频信号记录装置和视频信号再现装置”，尽管可以“自动调整视频信号的再现速率和转换速率”，但其只包含一个“播放器”并且可能每次只输出一个“再现的视频信号”。
对于在专利文献3中所公开的“一种多显示的方法和装置”，尽管可以“同时显示”所选定的“在同一时间段内”的“多个角度和多个场景”，但可能无法显示不同时间段的图像或者不能通过不同的播放方法同时显示同样的场景。
此外，处理高质量的图像时非常不利地增加了电路以及装置的频率和能量消耗，并且因此增加了存储器的使用数量。
对于普通的可快速摄像的图像记录装置、视频摄像机或数字摄像机***，虽然它们允许以120fps和240fps的较高帧速率进行拍摄，包含在该装置内的存储区域的容量和传输速率可以支持这样高速的拍摄，但当稍后对这些以高帧速率拍摄的数据进行显示以进行浏览时，它们特别缺乏一种设备，用来为那些从以正常速率拍摄的数据连续地以高帧速率拍摄的数据自然地提供观者，因为只有高帧速率的数据部分是独立的并且通常是独立播放的。
此外，在改变帧速率的方法中，可能需要在拍摄前定义帧速率，用户无法随时改变帧速率，因为在拍摄过程中是无法改变帧速率设置的。
因此，使用较高的帧速率设置进行拍摄将导致图像数据量的增加，这可能需要大容量的存储器。
因此，希望发明一种图像转换装置、图像信号处理装置、摄像机***以及图像信号处理方法，其能够按照给定的显示装置和/或其内部状态提供最佳的帧速率和分辨率。
还希望发明一种摄像机***，其能够将从以正常速率拍摄的数据连续地以高帧速率拍摄的数据自然地提供给观看者。
此外还希望发明一种摄像机***，其能够抑制存储器容量的增加并且用户可以利用其随时改变帧速率。
根据本发明的实施方式，提供了一种图像转换装置，其包括：存储器，其存储将被播放的图像的帧信息；以及图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率。
优选地，图像处理部件对帧速率的转换，不是通过改变全部图像的数量，而是通过减少在预定时间段内将被播放的帧的数量来实现的。
优选的，图像处理部件对帧速率的转换，不是通过改变全部图像的播放时间，而是通过减少在预定时间段内将被播放的帧的数量来实现的。
优选的，图像处理部件利用存储在存储器中的多个帧来创建新的帧，并且改变在预定时间段内的图像的帧速率以便创建出将被播放的新的帧。
优选的，图像处理部件还包括：具有计算功能的处理引擎，用来将图像的尺寸增加或减少到任意的尺寸，同时根据存储在存储器中的多个原始图像创建新的象素，其中图像处理部件基于处理引擎的处理结果创建出新的帧并且改变预定时间段内的图像的帧速率。
优选的，处理引擎从存储在存储器中的运动矢量信息计算出新的运动矢量。图像处理部件可以根据该新的运动矢量创建新的帧。
根据本发明的另一个实施方式，提供了一种图像信号处理装置，用于处理外部图像信号，该装置包括：存储器，其能够存储将被播放的图像的帧信息；以及图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率。
根据本发明的另一个实施方式，提供了一种图像信号处理装置，处理外部图像信号，该装置包括：存储器，其能够存储将被播放的图像的帧信息；图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率；连接部件，其可以连接至少一个显示装置，其中图像处理部件基于所连接的显示装置的性能以及连接部件的性能中的至少一项，转换帧速率。
优选的，图像处理部件能够按照该装置的内部状态进行帧速率转换。
优选的，图像处理部件能够按照频率、能耗以及存储器占用量中的至少一个进行帧速率转换。
优选的，。图像处理部件具有能够通过按不同的方法结合帧速率在连接的显示装置上显示图像的装置。
优选的，图像处理部件具有能够在多个显示装置上同时显示具有不稳定帧速率的图像的装置。
优选的，图像处理部件具有能够按照与显示设备相兼容的帧速率通过重新调整帧速率而显示图像的装置。
优选的，图像处理部件具有能够通过按照显示装置的帧速率降低帧速率，输出具有低帧速率的高质量图像，而不会由于该减少的帧速率降低帧的图像质量的装置。
优选的，图像处理部件具有对以超出了与显示装置兼容的范围的帧速率创建的图像进行重建的装置。
根据本发明的另一个实施方式，提供了一种摄像机***，其包括：摄像部件，其拍摄物体的图像并输出图像数据；以及图像信号处理装置，其对图像数据进行预定的处理，其中该图像信号处理装置包括：存储器，其能够存储将被播放的图像的帧信息；图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放状态，将帧速率转换为预定的帧速率；以及连接部件，其可以连接至少一个显示装置，并且图像处理部件可以根据所连接的显示装置的性能以及连接部件的性能中的至少一项，进行帧速率转换。
根据本发明的另一个实施方式，提供了一种摄像机***，其包括：摄像部件，其拍摄物体的图像并输出图像数据；以及图像信号处理装置，其对图像数据进行预定的处理，其中该图像信号处理装置包括：存储器；以及图像处理部件，其能够通过以步进方式改变按预定速率拍摄的图像帧的时间间隔并将疏间后的图像保存在存储器中，创建出具有依次不同的帧间隔的图像数据。
优选的，图像处理部件能够通过按照预置的任意变化率改变所拍摄的帧图像的时间间隔并保存疏间后的图像，创建具有依次不同的帧间隔的图像数据。
优选的该摄像机还包含连接部件，其可连接显示装置，其中，图像处理部件以相同的间隔在显示装置上对所有创建的图像数据的帧进行播放和显示，这些帧具有以步进方式存在的不同的帧间隔，由此以高帧速率记录的部分以看似慢动作的方式被播放，而以按步进方式变化的帧速率记录的部分则按照从正常显示速度逐渐减少到慢动作的显示速度或者从慢动作逐渐增加到正常显示速度的显示速度被播放。
优选的，图像处理部件以相同的间隔在显示装置上对所有创建的图像数据的帧进行播放和显示，这些帧具有以任意方式存在的不同的帧间隔，由此播放速度可以被任意改变。
优选的，对于已经按照预定帧速率记录的图像数据，图像处理部件按照步进的方式对这些帧进行疏间处理(processing of thinning out)。
优选的，图像处理部件还包括：输入设备，其用于指定拍摄时的帧速率，其中按照输入进输入设备的强度，任意改变用于拍摄的帧速率。
根据本发明的另一个实施方式，提供了一种摄像机***，其包括：摄像部件，其拍摄物体的图像并输出图像数据；图像处理部件，其对图像数据进行预定的处理；以及操作部件，通过其可以在拍摄过程中发出改变帧速率的指令，其中摄像部件可以以按照操作部件的指令改变的帧速率进行拍摄。
优选的，操作部件按照按下按键开关的强度指示以步进或连续的方式改变帧速率。
优选的，摄像部件具有固态成像器件；并且帧速率是通过控制水平和/或垂直的消隐周期改变的，而不改变该固态成像器件的驱动频率。
优选的，摄像部件具有固态成像器件；并且帧速率是通过选择将被使用的帧而改变的，而不改变该固态成像器件的驱动频率。
优选的，摄像部件具有固态成像器件；并且固态成像器件的帧速率是通过动态地改变用于固态成像部件的驱动频率而改变的。
根据本发明的另一个实施方式，提供了一种图像信号处理方法，用于处理外部图像信号，其包括如下步骤：从存储器中读出帧信息；并且响应预定的状态并且按照播放状态，将帧速率转换为预定的帧速率。
根据本发明的实施方式，能够按照给定的显示装置和/或其的内部状态获得最佳的帧速率和分辨率。
可以从以正常速度拍摄的数据连续而自然地提供给用户以高帧速率拍摄的数据。
可以抑制存储器容量的增长，并且用户可以随时更改帧速率。
附图说明
附图1示出了对根据本发明的第一实施方式的帧速率转换装置的结构示例；
附图2A到2C示出了正常播放、慢放和疏间播放的示例；
附图3示出了附图1中的运动图像转换电路中的图像处理模块的结构示例；
附图4A和4B示出了根据实施方式通过图像缩放引擎进行缩放处理的示例；
附图5是流程图，示出了在根据实施方式通过图像缩放引擎对运动图像进行处理的过程中，计算运动矢量的处理步骤；
附图6是框图，示出了根据本发明的第二实施方式的图像信号处理装置的结构示例；
附图7是框图，示出了根据本发明的第三实施方式的图像信号处理装置的结构示例；
附图8是流程图，示出了根据所连接的设备或显示装置，改变分辨率和帧速率的处理；
附图9是框图，示出了根据本发明的第四实施方式的图像信号处理装置的结构示例；
附图10是框图，示出了根据本发明的第五实施方式的图像信号处理装置的结构示例；
附图11是框图，示出了根据本发明的第六实施方式的图像信号处理装置的结构示例；
附图12是流程图，示出了根据第六实施方式，以两种形式进行播放的操作示例；
附图13示出了附图11中的图像信号处理装置的电路工作示例；
附图14是框图，示出了根据本发明的第七实施方式的图像信号处理装置的结构示例；
附图15示出了具有根据第七实施方式的图像信号处理装置(***)的图像显示装置的示例；
附图16是框图，示出了应用了根据本发明的第八实施方式的图像信号处理装置的摄像机***的结构示例；
附图17A到17C示出了图像数据结构，其能够提供一种根据第八实施方式的显示效果，其中，包含一部分以正常帧速率拍摄的数据，一部分以步进方式变化的帧速率所拍摄的数据，以及一部分以预置的高帧速率所拍摄的数据被连续地显示，这样最终在慢放时出现渐隐和消失的效果。
附图18是流程图，示出了根据第八实施方式使用摄像机***进行拍摄时的操作示例；
附图19是流程图，示出了根据第八实施方式使用摄像机***进行播放时的操作示例；
附图20是框图，示出了根据本发明的第九实施方式的摄像机***的结构示例；
附图21A到21C示出了根据第九实施方式的通过使用垂直和/或水平同步信号改变帧速率的方法；
附图22示出了一种根据第九实施方式的通过使用垂直和/或水平同步信号改变帧速率的方法；
附图23示出了一种根据第九实施方式的改变帧速率的方法，其通过选择将被使用的帧来实现，而不改变图像传感器(固体成像器件)的时钟；并且
附图24示出了一种根据第九实施方式的改变帧速率的方法，其动态地控制图像传感器(圆体成像器件)的时钟。
具体实施方式
通过参考附图，下面将对本发明的实施方式进行说明。
第一实施方式
附图1示出了根据本发明的第一实施方式的帧速率转换装置的结构示例。
如图1所示，帧速率转换装置10包括：运动图像转换电路11，CPU12和外部存储器13。
运动图像转换单元11具有存储器控制器111，图像处理模块112和内部存储器113。
该运动图像转换电路11是由CPU12控制的，并且主要转换存储在外部存储器13中的运动图像的帧速率。
现在，将详细描述以一种帧速率播放运动图像的方法。
附图2A到2C示出了所谓的正常播放、慢放和疏间播放(thin-out play)的示例。
有三种方法，包括：按照原样进行播放的第一方法、虽然被播放的全部运动图像的数量没有变化但每秒钟所播放的帧数被减少的第二方法，以及通过选择被播放的帧，用于播放所有运动图像的时间没有减少，但每秒钟所播放的帧数被减少的第三方法。这样，由于与原始的运动图像相比较，播放的时间被增加了，所以第二种方法导致了慢放。与原始运动图像相比，第三种方法以较少的单元减少了运动。
附图2A到2C示出了对应于240fps的三种方法的正常播放、慢放和疏间播放。
此外，可以增加每秒钟所播放的图像数量。
例如用于选择将被播放的帧，以便减少每秒钟将被播放的帧的数量的方法包括一种按照原样选择并播放某些帧的方法和另一种所播放的帧是通过平均多个帧新创建出来的方法。
根据第一实施方式的帧速率转换装置10是一个电路的示例，它可以实现前述的方法并且转换运动图像的帧速率。
如前所述，在CPU12的控制下，帧速率转换装置10的运动图像转换电路11转换存储在外部存储器13上的运动图像的帧速率。
为了只选择将被播放的帧，通过存储器控制器111，运动图像转换电路11仅仅从外部存储器13中读写那些将被播放的帧。
为了创建新的将被播放的帧，通过存储器控制器111，运动图像转换电路11每次将多个帧读取到内部存储器113中。之后图像处理模块112利用内部存储器113中的多个帧计算并创建最佳的帧，并且通过存储器控制器111将帧写入到外部存储器13中。
用于利用多个帧计算并创建最佳帧的方法可以通过CPU12定义。
附图3示出了附图1中的运动图像转换电路中的图像处理模块的结构示例。
如图3所示，该图像处理模块112具有计算器1121，图像缩放引擎1122，图像缩放引擎1123，存储器存取电路1124以及控制电路1152。
该存储器存取电路1124存取存储器控制器111和内部存储器113，以便从那里读取数据或将数据写入到那里。
根据通过CPU12定义的帧计算方法，该控制电路1152控制对计算器1121、图像缩放引擎1122和图像缩放引擎1123的操作。
图像缩放引擎1122和1123均是电路，分别具有用于将图像缩放至任意尺寸的计算功能。该功能可以通过利用一个图像中的多个象素的色度和亮度信息来过滤和计算出新的象素的色度和亮度信息来实现。
附图4A和4B示出了根据这一实施方式通过图像缩放引擎进行缩放处理的示例。图4A示出了普通缩放处理，并且图4B示出了在帧速率转换过程中的缩放处理。
如图4A所示，图像缩放引擎1122(或1123)在存储器113上利用原始图像OIM的多个象素创建出新的象素NPXL。
之后如图4B所示，该新的象素被用于帧速率转换。
在图4B示出的帧速率转换中，图像缩放引擎1122(或1123)在存储器113上利用多个原始图像OIM1，OIM2和OIM3创建出新的象素NPXL。
利用多个帧创建新的帧的能力可以增加或减少在预定时间段内的运动图像的帧速率。
在MPEG中，运动矢量的数值表示了每个象素相对于之前或之后的帧的冲程(stoke)，并且可以被替代使用。
多个时间的运动矢量被输入进图像缩放引擎1122(或1123)，由此可以计算出不同时间的运动矢量。新的运动矢量可以被用于创建新的图像。
在图3所示的情况中，计算器1121也被用于创建图像。为了处理非MPEG的运动图像，计算器1121可以利用多个时间的帧计算出运动矢量。
附图5是流程图，示出了根据这一实施方式，通过图像缩放引擎对运动图像进行处理的过程中，计算运动矢量的处理步骤；
这时，可以确定存储器113是否具有运动矢量信息(ST1)。如果没有，则从外部存储器13从读取图像(ST2)，并且计算器1121计算出运动矢量(ST3)。如果存储器113具有足够的运动矢量(ST4)，则运动矢量被输入进图像缩放引擎(ST5)，由此计算出新的运动矢量(ST6)。
之后，从存储器13中读取图像(ST7)，并且计算器1121计算出运动矢量(ST8)。新的运动矢量被用于创建新的帧(ST9)。
在图4A、4B和5中所示出的方法可以被同时使用。
由于在图3中示出的图像处理模块112的电路具有两个图像缩放引擎，对运动图像的缩放转换和帧速率的转换都可以被进行。
当只使用一个缩放引擎时，通过使用控制电路1125对图像缩放引擎进行两次控制和操作，可以实现使用两个缩放引擎时相同的处理。
可以在图像处理模块112中提供任意数量的图像缩放引擎和计算器。
因此，对包含由图3中示出的控制电路1152的图像处理模块112的应用可以实现对运动图像的缩放转换和对帧速率的转换。
除了这些方法，可以使用更简单的方法来转换，通过选择并存储必要的帧而不是通过计算。该转换方法可以被任意地选择。
第二实施方式
附图6是框图，示出了根据本发明的第二实施方式的图像信号处理装置的结构示例。
该图像处理装置具有使用了根据第一实施方式的帧速率转换装置的结构。
图像信号处理装置200包括运动图像转换电路201、CPU202、内部存储器203、外部接口(I/F)204、图像压缩/扩展部件205、存储器接口(I/F)206、外部存储器207、存储接口(I/F)208以及外部保存存储器209。
图6中示出的图像信号处理装置200被用于作为LSI(大规模集成电路)使用，例如其内部包含了根据第一实施方式的转换装置。
在图6中，运动图像转换电路201、CPU202、外部保存存储器209和/或外部存储器207分别对应于图1中的运动图像转换电路11、图1中的CPU12和图1中的外部存储器13。
图6示出了一个示例，其中内部存储器203通过总线连接至运动图像转换电路201。
这些结构和功能与第一实施方式中的是相同的，因此这里省略其详细的说明。
例如CPU202控制运动图像转换电路201、图像压缩/扩展部件205和整个电路。
外部接口204作为接口使用，例如其允许USB以及PCI的连接。
图像压缩/扩展部件205可以具有解码器的功能，也就是能够读取并且扩展存储在作为图像存储器使用的内部存储器203中的压缩数据，并且具有编码器的功能，也就是通过对诸如来自摄像机的信号的多个图像数据段进行信号压缩以创建图像源。
图像压缩/扩展部件205可以通过存储接口208将图像数据保存至图像保存存储器209或者从存储器209中播放图像数据。
该图像保存存储器209可以是闪速存储器、HDD或DVD，其是非易失性的存储器。
在图像信号处理装置200中，图像压缩/扩展部件205可以编码或解码运动图像。在外部保存存储器209中的运动图像可以被图像压缩/扩展部件205解码并且在运动图像转换电路201中被处理。运动图像可以被图像压缩/扩展部件205再次编码并且被写入到外部保存存储器209中或者通过外部接口204被输出。
使用该装置可以轻松地转换运动图像的分辨率和帧速率。因此，具有不同分辨率和/或帧速率的运动图像可以被轻松地处理。此外，可以显示帧速率和/或分辨率超出了规格的运动图像，不需要改变原始文件的帧速率和/或分辨率。
第三实施方式
附图7是框图，示出了对应于本发明的第三实施方式的图像信号处理装置的结构示例。
该图像处理装置具有使用了根据第一实施方式的转换装置的结构。
根据第三实施方式的图像信号处理装置200A不同于根据第二实施方式的图像信号处理装置200之处在于，图像信号处理装置200A进一步提供了显示装置接口210和显示装置211，以取代存储器接口206和外部存储器207，并且可以按照所连接的设备或显示设备，通过改变分辨率和/或帧速率来输出运动图像。
显示装置接口210将要显示的图像数据输出至显示装置211，以显示静止图像或运动图像。
例如，该显示装置211可以是液晶显示器(LCD)。
在图7所示的图像信号处理装置200A中，图像压缩/扩展部件205可以被用于将外部保存存储器209上的运动图像文件解码并写入到图像存储器中。相反，该图像压缩/扩展部件205可以编码运动图像文件。
当使用USB来连接外部设备时，按照标准，该USB具有用于标识设备的标识符诸如供应商ID和产品ID。如果该电路在其存储器中存在设备性能的数据库，则控制CPU202可以确定所连接设备的性能。
当使用LAN来连接时，所连接设备的名称和性能可以通过在设备上用于信息通信的规格标识。
利用信息通信的规格，通过显示装置接口210可以轻松地识别出显示装置211的性能。
如果无法实现与显示装置211间的信息通信，可以在规格范围内通过连接时的电压变化来确定性能。此外，可以因此确定显示装置211的可显示图像的最大尺寸。当诸如USB的外部接口204被用于连接显示装置211时，可以实现如前所述的识别。
基于该性能，控制CPU202确定合适的分辨率和帧速率并且控制运动图像转换电路201。
如果所连接设备或显示装置的性能较低，则控制CPU202利用原始的运动图像，减少其的分辨率和帧速率。相反，如果所连接设备或显示装置的性能较高，则可以提高分辨率和帧速率。
运动图像转换电路201不仅可以依照所连接设备或显示装置的性能被控制，而且可以依照连接接口的性能被控制。与原始的运动图像相比，依照连接接口的传输速率，可以增加或减少分辨率和帧速率。
如果所连接设备或显示装置的性能是未知的，则运动图像的分辨率和帧速率被转换至诸如最低值的标准值或基值。该基值可以由用户自由地(或随意地)定义。
附图8是流程图，示出了按照所连接的设备或显示装置，改变分辨率和帧速率的过程。
例如，连接了显示装置(ST10)。在对显示装置的性能进行识别之后(ST11)，判断是否可以识别该装置的名称(ST12)。当确定了该装置的名称时，CPU202确定该装置的性能(ST13)。然后，该装置的性能被识别出来(ST14)。
之后，判断是否指定了任意的数值(ST15)。如果是，则读取该数值(ST16)，并且判断该数值是否高于该装置的性能(ST17)。
如果高的话，发出报警信息(ST18)，并且移至步骤ST19处进行对数值的判断。
如果在步骤ST12中无法识别该装置的名称，则读取基值(ST20)，并且判断是否指定了任意的数值(ST21)。如果是，则该数值被读取(ST22)。如果没有指定，则读取基值(ST23)，并且移至步骤ST19处进行对数值的判断。
如果在步骤ST15中没有指定数值，则根据装置的性能定义该数值(ST24)，并且移至步骤ST19处进行对数值的判断。
之后，该数值被确定，并且确定了最合适的分辨率和帧速率(ST25)。
不使用这些功能，用户可以指定任意的分辨率和帧速率，并且利用它们进行转换。如果所连接设备或显示装置的性能可以被识别，并且所指定的分辨率和帧速率高于该性能，则控制CPU202向用户发出报警信息。
使用该装置可以依照所连接设备或显示装置的性能，将运动图像自动转换至最佳的分辨率和帧速率。即使运动图像具有较高的分辨率和帧速率，它也可以被自动转换为所连接设备或显示装置可以处理的形式。因此，运动图像可以被轻松地播放或输出。
第四实施方式
附图9是框图，示出了根据本发明的第四实施方式的图像信号处理装置的结构示例。
该图像处理装置具有使用了根据第一实施方式的帧速率转换装置的结构。
根据第四实施方式的图像信号处理装置200B不同于根据第三实施方式的图像信号处理装置200A之处在于，除了图7中所示出的结构外，图像信号处理装置200B包括时钟模块212，电源控制部件213和存储器控制部件214，并且其按照电路装置内部的状态，自动转换运动图像的分辨率和帧速率。
时钟模块212控制着整个电路装置的频率并且具有向控制CPU202通告频率信息的功能。
电源控制部件213控制着整个电路装置的电源，并且具有向控制CPU202通告有关整个电路装置的功耗信息的功能。在移动装置中，其电池的剩余电量可以被通知给控制CPU202。
存储器控制部件214具有将图像存储器203的存取状态和存储器的未使用区域数通告给控制CPU202的功能。
通常，随着电路频率的降低，可以处理的数据量也会随之降低。因此，可以处理的运动图像的分辨率和帧速率依赖于该频率。
因此，相应于频率信息，利用控制CPU202，可以通过将运动图像的分辨率和帧速率转换到最佳值来顺利的处理运动图象。
相反，控制CPU202可以根据运动图像的分辨率和帧速率指示时钟模块212对电路的频率进行增加或减少。
随着数据存取量的增加，整个电路的电力消耗也在增加。因此，电力消耗也依赖于运动图像的分辨率和帧速率。
因此，按照当前的电力消耗和电池的剩余电量，通过控制CPU202将运动图像的分辨率和帧速率转换到最佳值，可以减少电力的消耗。
相反，控制CPU202可以根据运动图像的分辨率和帧速率指示电源控制部件增加或减少电路的电压。
在处理具有高分辨率和帧速率的运动图像时，会增加所使用的存储器数量和对存储器的存取频率。在存储器中一个非常小的可用区域可能会阻止正常的处理，其可能终止或延迟对运动图像的显示或输出。
因此，按照剩余的可用存储器的数量和对存储器的存取状态，利用CPU202指令运动图像转换电路分辨率和帧速率，运动图像可以被顺利地显示或输出。
通过选择简单的转换方法，前述的对存储器的存取，电力的消耗以及频率都可以被降低。
这些功能可以被组合使用。频率、电力消耗、所使用的存储器数量以及分辨率和帧速率之间的关系，可以由用户定义。
通过使用该电路装置，可以实现具有低电力消耗的运动图像播放***和长时间运动图像播放***。
第五实施方式
附图10是框图，示出了采用根据本发明的第五实施方式的图像信号处理装置的摄像机***的结构示例。
包括按照第五实施方式的图像信号处理装置的摄像机***200C除了包括图7所示的根据第三实施方式的图像信号处理装置200A的结构外，还包括：光学***215、包括CCD和CMOS传感器的图像传感器(成像装置)216、模拟信号处理部件217、模拟/数字(A/D)转换器218、数字信号处理部件219、操作设备220以及用户接口221。对于该***结构，没有提供外部接口。
成像部件包括光学***215、包含CCD和CMOS传感器的图像传感器(成像装置)216以及模拟信号处理部件217。
该光学***215主要包括镜头，并且未示出的物体的图像形成在图像传感器216的感光面上，该传感器是成像部件。
图像传感器216进行光电转换并且将通过光学***215形成的物体图像信息输出至模拟信号处理部件217。
模拟信号处理部件217对图像传感器216的模拟输出进行相关双采样(CDS)处理，模拟放大等等的处理，并且将处理后的模拟图像数据输出至A/D转换器218。
A/D转换器218将模拟信号处理部件217输出的模拟图像数据转换为数字信号并且将数字信号输出至数字信号处理部件219。
数字信号处理部件219在拍摄前可以确定拍摄时的快门速度，调整所拍摄图像的亮度和/或色度并且在记录介质的图像存储器203中按照后述的压缩方案对所拍摄的图像数据进行压缩，从图像存储器203中读出并扩展(或解压缩)写入的图像数据。
控制模块(或CPU)202C包括控制CPU、电源控制部件、存储器控制部件和例如根据第四实施方式的时钟模块。使用控制模块202C可以实现第一至第四实施方式所述的功能。
控制模块202C按照通过用户接口221在操作设备220上所做的操作执行控制。
操作设备220包括快门按键，功能选择键(Jog Dial)和触摸屏。
摄像机***200C可以拍摄静止和/或运动图像，将图像存储在存储器中，并且播放或输出存储器上的运动图像。
为了创建静止或运动图像，图像传感器216首先捕捉来自光学***215的镜头中光线并转换为电信号。通过模拟信号处理部件217、A/D转换器218以及数字信号处理部件219，该信号被转换为图像信号。
该图像信号被图像压缩/扩展部件205编码，由此创建出静止或运动图像的文件。所创建的文件通过存储接口208被存储在存储器209中。
为了播放该图像，存储器上的文件被读取并且通过图像压缩/扩展部件205进行解码。所输出的结果被运动图像转换电路201处理，由显示装置接口210读出，并且显示在诸如LCD的显示装置211上。
当图像信号没有被图像压缩/扩展部件205编码时，其可以被运动图像转换电路201处理并且被显示在显示装置211上。这时，正在通过光学***215进行拍摄的图像可以被实时地显示。
利用第一至第四实施方式所述的功能，可以实现对将被显示的静止或运动图像的分辨率和帧速率进行转换。然而，静止或运动图像可以不被转换，以原始的分辨率和帧速率显示出来。
可以实现低耗电的运动图像播放***和长时间运行的运动图像播放装置。使用该摄像机***进行拍摄和显示时，可以实现在显示装置中以最佳状态自动显示一个运动图像文件，该文件可以保存在存储区域。
第六实施方式
附图11是框图，示出了根据本发明的第六实施方式的图像信号处理装置的结构示例。
根据第六实施方式的图像信号处理装置200D不同于根据第五实施方式的图像信号处理装置200C之处在于，在数字信号处理部件219的输入侧提供了输入信号处理部件222，代替光学***215、图像传感器(成像装置)216、模拟信号处理部件217和A/D转换器218。
在图像信号处理装置200D中，运动图像转换电路201D和图像压缩/扩展部件205D的内部包含着多个电路。
在该实施方式中，运动图像转换电路201D包括两个电路，即第一运动图像转换电路201-1和第二运动图像转换电路201-2。该图像压缩/扩展部件205D也包括两个电路，即第一图像压缩/扩展部件205-1和第二图像压缩/扩展部件205-2。
控制模块202D控制整个电路并定义其的运行。来自输入信号处理部件222的静止或运动图像可以被显示或被存储在存储器中。作为另一种选择，存储器上的静止图像或运动图像可以被显示。
输入信号处理部件222可以将输入图像或视频信号转换为一种可以由数字信号处理部件219所处理的格式。如所输入的信号是模拟信号，则该输入信号处理部件222也可以作为A/D转换器使用。
图像压缩/扩展部件205D通过数字信号处理部件219对图像或视频信号进行编码，由此可以创建静止图像或运动图像的文件。该文件通过存储接口208存储到存储器209中。
运动图像转换电路201D可以在编码前转换图像的分辨率和帧速率。存储器上的文件可以被图像压缩/扩展部件205D解码并通过显示装置接口210显示在显示装置211上。运动图像转换电路可以在解码后转换分辨率和帧速率。
运动图像不仅可以在被转换后进行播放，还可以被再次编码并存储在存储器上。因此，运动图像可以按照转换后的分辨率和帧速率存储。采用降低的分辨率和帧速率进行存储可以降低文件的大小。
由于根据本实施方式，运动图像转换电路201D和图像压缩/扩展部件205D具有多个电路，一个运动图像文件可以按照多种播放方法被同时显示。也可以开始播放不同的场景，并且可以指定不同的播放起始点。
这可以通过指定由图像压缩/扩展部件205D进行解码的点实现。之后，每一个运动图像转换电路201D被命令处理由图像压缩/扩展部件205-1或205-2所处理的运动图像，由此可以自由地选择播放的起始点。
可以在运动图像转换电路201一1和201-2之间定义不同的分辨率和帧速率值。所创建的运动图像可能需要被减小，以便同时显示在同一个显示装置211上。
附图12是流程图，示出了根据第六实施方式，以两种形式进行播放的操作示例。
在图12的示例中，在定义播放模式时(ST30)，第一运动图像转换电路201-1被定义使用由第一图像压缩/扩展部件205-1所处理的数据(ST31)。
之后，在第一图像压缩/扩展部件205-1中定义用于运动图像的起始点(ST32)。然后，在第一运动图像转换电路201-1中定义分辨率和帧速率(ST33)。
然后，确定是否以两种形式进行同时显示(ST34)。
如果不，则开始运行第一图像压缩/扩展部件205-1(ST35)，并且开始运行第一运动图像转换电路201-1(ST36)。
之后，通过存储接口208从存储器209中读取运动图像文件(ST37)并且开始播放(ST38)。
另一方面，如果在步骤ST34中确定以两种形式进行播放，则判断播放起始点是否相同(ST39)。如果不，则在第二图像压缩/扩展部件205-2中定义用于运动图像的起始点(ST40)，并且定义第二运动图像转换电路201-2使用由第二图像压缩/扩展部件205-2所处理的数据(ST41)。在另一方面，如果起始点是相同的，则第二运动图像转换电路201-2使用由第一图像压缩/扩展部件205-1所处理的数据(ST42)。
之后，第一运动图像转换电路201-1被定义减少用于同时显示的运动图像的大小(ST43)，并且第二运动图像转换电路201-2被定义减少用于同时显示的运动图像的尺寸(ST44)。
之后，则开始运行第一图像压缩/扩展部件205-1和第二图像压缩/扩展部件205-2(ST45)，并且开始运行第一运动图像转换电路201-1和第二运动图像转换电路201-2(ST46)。之后，所进行的步骤跳转到之前的步骤ST37。
可以改变转换方法。显示装置接口210在一个屏幕上显示所创建的多个运动图像。
附图13示出了附图9和11中的图像信号处理装置的电路工作示例
根据第六实施方式，控制模块202D控制并定义在图13中所示的步骤ST51的模块的运行。
首先，在步骤ST52至ST54中，存储接口208将被显示的运动图像从存储器(memory)209读取到图像存储器203中。
之后，在步骤ST55中，第一图像压缩/扩展部件205-1从所定义的起始点开始解码并且写入运动图像到图像存储器203中。
在步骤ST56中，第一运动图像转换电路201-1读取该运动图像并将其转换至所定义的运动图像的分辨率和帧速率。该转换也包括将运动图像的尺寸减少到在一个屏幕上显示多个图像的适合尺寸。作为结果所创建的用于显示的运动图像被写入到图像存储器中。
类似于第一图像压缩/扩展部件205-1和第一运动图像转换电路201-1所进行的操作，第二图像压缩/扩展部件205-2在步骤S57中和第二运动图像转换电路201-2在步骤ST58中都要读取相同的运动图像文件并将用于以另一种形式显示的运动图像写入图像存储器203中。
在图像存储器203上存储的，所创建用于显示的多个运动图像被显示装置接口210在步骤ST59中同步，之后在步骤ST60中，它们被显示在显示装置211上。
在步骤ST61中，用于显示一个运动图像文件的的多个运动图像被同时显示在显示装置211的显示屏上。
虽然在本实施方式中，只是同时显示了两种形式的运动图像，但通过在图像信号处理装置中提供两个或更多的图像压缩/扩展部件以及运动图像转换电路，也可以同时显示更多形式的运动图像。
通过为一次显示多次操作，可以利用仅仅一个图像压缩/扩展部件和运动图像转换电路来实现多种形式的播放。因此，图像压缩/扩展部件和运动图像转换电路的数量可以不相等。
根据第六实施方式，因为一个运动图像文件的多个运动图像可以在同一个屏幕上从不同的起始点开始播放，与以往相比，该***的用户可以更快地检查运动图像文件的内容。用户可以通过在一个屏幕上显示并比较多个通过不同分辨率、帧速率和转换方法进行播放的运动图像来确定适合的分辨率、帧速率和转换方法。
因此，通过使用降低的分辨率和帧速率来保存运动图像文件，可以轻松地减少文件的尺寸而不破坏运动图像文件的图像质量。***自身也可以自动比较分辨率和帧速率并进行转换。
第七实施方式
附图14是框图，示出了根据本发明的第七实施方式的图像信号处理装置的结构示例。
根据第七实施方式的图像信号处理装置200E不同于根据第六实施方式的图像信号处理装置200D之处在于，其在图像信号的输入部件中提供了多个(本实施方式中是两个)模拟信号处理部件和数字信号处理部件，并且在其中提供了多个(本实施方式中是两个)显示接口。
第七实施方式的图像信号处理装置200E内部包含多个显示装置接口，这样静止和/或运动图像可以在多个显示装置211-1和211-2上显示。
因为有多个输入信号处理部件，所以不同的运动图像可以显示在显示装置上。
即使当连接了不同种类的显示设备时，第三实施方式所述的功能可以轻松地显示静止和/或运动图像。
利用第六实施方式所述的功能，可以实现在其他显示设备上同时显示原始的运动图像和多种形式的运动图像。此外，一个运动图像可以通过改变播放起始点、分辨率和帧速率中的一个或多个，而在显示装置上显示。
附图15示出了应用根据第七实施方式的图像信号处理装置(***)的图像显示装置300的示例。
在图15中示出的图像显示装置300是具有两个LCD301和302的薄显示装置。
图像或视频信号可以从两个视频输入端口输入。一个运动图像可以显示在两个LCD上，或者一个运动图像的不同播放形式或者不同类型的运动图像可以显示在两个LCD上。
这两个LCD不必始终使用，并且可以只使用一个LCD而关闭另一个。
这样一个图像显示装置允许两个用户同时使用以用于不同的目的。
上述的第一至第七实施方式提供了如下的作用：
1、与之前相比，可以使用具有更高的分辨率和更高的帧速率的静止图像或运动图像；
2、可以创建、拍摄或使用具有与显示装置不兼容的分辨率和帧速率的静止或运动图像；
3、可以生产具有更小的存储器和更低的功耗的图像显示装置或摄像机装置；
4、可以不必为多种类型的显示设备准备静止或运动图像文件；
5、可以更快地检查运动图像的内容；
6、与之前相比，可以更轻松地选择运动图像的最佳保存形式；
7、与之前相比，用于保存静止或运动图像的文件容量可以被减少；
8、用于转换和/或显示具有不稳定的分辨率和帧速率的运动图像的电路和/或装置的尺寸可以被减少；并且
9、一个显示装置可以用于多个用户。
第八实施方式
附图16是框图，示出了应用了根据本发明的第八实施方式的图像信号处理装置的摄像机***的结构示例。
摄像机***400包括光学***401、包含CCD和CMOS传感器的图像传感器(成像装置)402、模拟信号处理部件403、A/D转换器404、数字信号处理部件405、图像压缩/扩展部件406、作为图像临时记录存储器和显示存储器使用的图像存储器407、显示装置接口(I/F)408、显示装置409、控制CPU410、操作装置411、用户接口412、存储接口413，以及外部存储存储器414。
在该摄像机***400中，数字信号处理部件405、图像压缩/扩展部件406、图像存储器407和显示装置接口408是通过总线415连接的。
成像部件包括光学***401、包含CCD和CMOS传感器的图像传感器(成像装置)402，以及模拟信号处理部件403。
光学***401主要包括镜头，未示出的物体的图像形成在作为成像部件的图像传感器402的感光面上的。
图像传感器402光电转换通过光学***401形成的物体图像信息并将结果输出至模拟信号处理部件403。
模拟信号处理部件403对图像传感器402的模拟输出进行相关双采样(CDS)处理，模拟放大等处理，并且将处理后的模拟图像数据输出至A/D转换器404。
A/D转换器404将模拟信号处理部件403输出的模拟图像数据转换为数字信号并且将数字信号输出至数字信号处理部件405。
数字信号处理部件405在拍摄前可以确定拍摄时的快门速度，调整所拍摄图像的亮度和/或色度，并且按照后述的压缩方案对所拍摄的图像数据进行压缩，将结果写入作为记录介质的图像存储器407中，从图像存储器407读取图像数据并扩展(或解压缩)该图像数据。
图像压缩/扩展部件406可以具有解码器的功能，即读取并扩展存储在图像存储器407中的压缩数据，也可以具有编码器的功能，即通过对诸如来自摄像机的信号的多个图像数据段进行信号压缩处理以创建图像源。
图像压缩/扩展部件406可以通过存储接口413将图像数据保存到图像存储存储器414中或者从存储器414中播放图像数据。
图像存储存储器414可以是闪速存储器、HDD或DVD，其是非易失性的存储器。
显示装置接口408将被显示的图像数据输出至显示装置409以便进行显示。
该显示装置409可以是液晶显示装置(LCD)。
控制CPU410控制图像传感器402、数字信号控制部件405、图像压缩/扩展部件406和整个电路。
控制CPU410按照通过用户接口412在操作设备411上所做的操作执行控制。
例如，操作设备411包括快门按键，功能选择键(ajogdial)和触摸屏。
根据第八实施方式，摄像机***400将快速拍摄的数据***到以正常速度拍摄的数据中，并且创建出新的数据，该数据在快速拍摄的数据和以正常速度拍摄的数据间具有以步进方式增加或减少的帧速率的图像数据。所创建的图像数据的所有帧都可以以正常的或其他预置的帧速率进行播放，从而，最终在慢放时可以呈现给观众渐进和渐出的显示效果。
附图17示出了一种图像数据结构，一部分以正常帧速率拍摄的数据，一部分以步进方式变化的帧速率所拍摄的数据，以及一部分以预置的高帧速率所拍摄的数据可以被连续地显示，以提供前述的显示效果(也就是最终在慢放时出现渐进和渐出的效果)。
在图17中，每一个阴影表示的帧都是被用于存储的帧。
在该示例中，在开始进行快速拍摄的位置进行正常帧速率的显示。当播放的显示最终至达快速拍摄点时，视觉上的播放速度逐渐下降。
之后，视觉上的播放速度达到了预置的慢放部分，并且这一状态的播放将保持一段时间。之后，播放的速度逐渐从视觉上的慢放增加到正常速度并且最终回到正常速度的播放。
在附图16中的摄像机***400应用了可以创建这样的图像数据的摄像记录装置。
如前所述，根据第八实施方式的数字摄像机***400具有图像传感器402，其能以超过60fps的较高帧速率进行拍摄，也就是捕捉图像，倘若对人的视觉敏感度来说是有效的显示效果。
图像传感器402之后是用于增益控制的模拟处理部件403，A/D转换部件404和数字信号处理部件405，它们可以依次地高速处理来自传感器一侧馈送的图像数据。
这里，已经信号处理的数据被传送至图像存储器407或者作为临时图像记录部件使用的外部存储存储器414，并且也可以传送至显示在诸如LCD或TV的显示装置409上所需要的显示存储器。
控制CPU410包括控制部件，该部件主要包含微型计算机，并且接收用户通过安键操作输入的指令并且将该指令反馈给信号处理部件或其他部件。
响应于用户通过诸如按键的输入设备输入的快速拍摄的指令，图像传感器402以诸如240fps的极高帧速率进行拍摄，开始为后续组件提供许多的图像数据，诸如每秒钟240个。
后续的信号处理部件已经识别出了来自用户的快速拍摄指令，并且在从传感器侧接收到图像数据之前，就增加了处理的速度和能力，以便进行高帧速率的处理。
这里，具有渐入/渐出效果或其他显示效果的图像数据可以通过对处理帧进行疏间处理并适当地选择将被记录和显示的帧来创建，而不是通过处理、记录和显示所有馈送的帧。
附图18是流程图，示出了使用根据第八实施方式的摄像机***进行拍摄时的操作示例。附图19是流程图，示出了使用根据第八实施方式的摄像机***进行播放时的操作示例。
如上所述，通过图18中示出的步骤ST70至ST80的处理实现了拍摄。
如上所述，通过图19中示出的步骤ST90至ST99的处理实现了播放。
例如响应于用户发出的拍摄指令，该装置通常以30fps的速度拍摄运动图像。
当该装置基于输入设备输入的用户指令或由于诸如定时器设置以及通过控制CPU410产生的图像的特征量(诸如屏幕亮度和与整个屏幕的差别)的其他因素所产生的指令，接收在高帧速率下进行工作的命令时，该装置命令图像传感器402以高帧速率进行拍摄。
由图像传感器402以高帧速率拍摄的图像数据通过A/D转换器404被依次馈送给数字信号处理部件405，例如以1/240秒的间隔。
开始时，1/60秒处理一个图像，并且存储在临时存储区域中，并不从开始处理所有的被馈送的帧。当该处理在若干图像上被重复之后，将被处理的帧的疏问速率被改变，并且1/90秒选择、处理和保存一个图像。
该疏间速率的变化被连续地重复，并且在1/120秒处理一个图像的疏间速率之后，是1/180秒处理一个图像，最终图像以非疏间的处理或最低的疏间速率被处理和保存。
拍摄持续一个预定的时间段，期间不进行疏间处理或最低的疏间速率。持续拍摄，直到该装置从用户或根据其他的因素，或者当临时存储区域407或作为永久存储设备的存储器414的容量和/或传输速率达到了极限时接收了停止高帧速率拍摄的指令。
例如，当存储部件的容量和/或传输速率达到了极限时，从存储部件控制部件向CPU传送表示存储部件的性能极限的信号，这等同于来自用户的停止以高帧速率进行拍摄的命令。
当CPU410识别出停止高帧速率拍摄的命令时，用于将被保存的帧的疏间速率被逐渐降低，这一处理是和开始高帧速率拍摄时相反的处理。
例如，1/240秒保存一个图像的速率可以被改变给1/180秒、1/120秒、1/90秒等等，并且被疏间的没有保存的帧的数量在逐渐增加。最终，帧速率返回到进行高帧速率拍摄模式前的水平。同时，由传感器所进行的拍摄也恢复到以正常帧速率进行拍摄和提供图像的水平。
特别是，通过随意地改变传感器的拍摄速率可以创建出具有不同帧间隔的图像数据，而不是如前所述通过信号处理部件来改变拍摄和保存的帧速率。
然而，由传感器产生的连续变化的拍摄速率，可能无法使图像传感器402侧的所有帧保持相同的质量。
可以存在一种图像传感器402自身可以更轻易地处理的拍摄帧速率，而且它难于控制曝光量和/或快门环境。
此外，由之前的图像传感器402产生的具有不同帧速率变化的图像需要按照不同的帧速率由后来的信号处理部件进行处理，虽然并非不可能，但这通常会使设计用于同步图像传感器402和信号处理部件的运行速度的控制方案变得很困难。
在用于播放利用步进方式的疏间帧处理所创建的图像数据的方法中，在一连串的拍摄步骤结束后，临时或永久记录的数据被读取到显示存储器中。
由于之前所述的原因，读取帧的时间间隔是不同的。然而，考虑到帧具有相同时间间隔以及正常拍摄的帧速率(诸如30fps)，将帧传送至显示装置。显示装置以1/30秒的方式例如在其的面板上显示每一帧。
在播放时，正常拍摄的帧被正常地播放，而且实际上以诸如1/90秒间隔的高帧速率拍摄的帧，也按照1/30秒的间隔被显示，这样就在视觉上产生了一个慢放的显示效果。
之后，间隔为1/120秒和1/180秒的帧依次按照30fps的间隔被播放，并且播放的速度在视觉上是逐渐地减慢的，这就产生了一个逐渐增强的慢放的显示效果，也就是以慢放效果消失。
之后，在以同样慢的播放速度播放间隔为1/240秒的拍摄数据之后，慢放速度发生相反的变化，其逐渐增加到正常的播放速度，并且显示模式也返回到正常的播放模式。
为了正常地显示所记录的全部图像数据而不出现慢放的效果，可以只选择在高帧速率拍摄的部分中间隔为1/30秒的帧，并将其传送至显示装置。
这样，在慢放播放中的渐进和渐出的效果可以仅仅由一个视频摄像机或数字摄像机装置提供。
除了之前所述的记录方法，已经以高帧速率拍摄的数据最终可以在计算机中通过软件转换至之前所述的具有不同帧速率的并且可以使用渐进/渐出的效果进行播放的图像数据，。
这样，以诸如240fps的最高帧速率所拍摄的帧可以通过连续地改变疏间速率来保存或显示，就像在摄像机***400中所进行的处理。
除了之前所述的预定义的模式外，也就是之前所述的渐进/渐出的效果，图像可以以任意的帧速率存储。这样，可以按照任意的模式提供播放效果。拍摄时的拍摄速率可以通过被用户操作的输入设备以步进的方式进行选择。例如，拍摄速率可以根据按键按下的程度来变化，或者拍摄速率可以根据输入控制杆设备的控制杆角度来变化。
根据第八实施方式，可以为观看者提供具有特效显示的图像显示，即显示的速度逐渐从正常的速度减少到慢放的速度，然后通过完整地显示一会儿慢动作，逐渐地增加到正常的速度。
此外，还可以为观看者提供具有如下的特效显示的图像显示，即显示的速度通过慢放的速度逐渐从正常的速度最终增加到静止状态。
此外，还可以为观看者提供具有如下的特效显示的图像显示，也就是开始时的慢放显示逐渐返回到正常的速度。
此外，这些显示效果可以通过单个的数字摄像机***实现，而不必使用单独的特殊的图像显示装置。因此，可以在拍摄后立即观看这些显示效果。
具有以预置拍摄速率进行拍摄的摄像部件的***可以被用于创建具有前述的显示效果的图像数据，而不必使用在摄像部件中的特殊功能。
已经拍摄的图像数据可以被处理以创建具有这些显示效果的图像数据。
第九实施方式
附图20是一个框图，示出了根据本发明的第九实施方式的摄像机***的结构示例。
摄像机***500具有包含CCD和CMOS传感器的图像传感器(固态成像部件)501、作为控制部件使用的CPU502、存储器503、时间变焦按键(开关)504、信号处理部件505、一个解码部件(CODEC)506和定时产生器(TG)507。
在拍摄运动图像的过程中，第九实施方式的摄像机***500可以通过用户的决定来改变帧速率，并且具有降低由此产生的图像数据量的功能。
根据第九实施方式，所提供的时间变焦按键可以被用户随意地操作，并且可以按照时间变焦按键504被按下的程度(或操作的程度)来改变帧速率。
术语“时间变焦”表示对帧速率的改变，并且在下文中提供该功能的开关被称做时间变焦按键。
图像传感器(固态成像装置)501对光线聚集的图像进行光电转换并且按照所接收光线量输出视频信号。
CPU502参照通过时间变焦按键504变化的帧速率向定时产生器507输出帧速率控制信号FCTL。
存储器503是临时存储区域，用于由信号处理部件505转换至预定格式的图像数据。
信号处理部件505将图像数据转换至预定的格式并且将转换后的图像数据存储在存储器503中。该图像格式可以是由ITU-R BT601或ITU-R BT709定义的亮度/色差形式。
解码部件(CODEC)506将信号压缩至预定的图像格式并且创建诸如JPEG和MPEG的压缩后的图像格式。
定时产生器(TG)507输出用于驱动图像传感器(固态成像装置)501的驱动信号DRV。
附图21A到21C示出了根据第九实施方式通过使用垂直/水平同步信号改变帧速率的方法。
根据本实施方式，时间变焦按键504是按压式开关。
在拍摄运动图像的过程中可以通过按动该时间变焦开关来改变帧速率。
帧速率依赖于时间变焦按键504被按下的深度而变化，并且被控制以步进或连续的方式变化。
下面将对用于控制图像传感器(固态成像部件)的方法进行说明，根据本发明的第九实施方式，该方法可以实现帧速率的动态变化。
前述的改变帧速率的方法包括如下三种方法：
1、通过使用垂直/水平同步信号来改变帧速率的方法；
2、通过从存储器中选择将被处理的帧来改变帧速率的方法，该存储器是一个用于图像数据的临时存储区域；以及
3、通过动态地控制固态成像部件的驱动时钟来改变帧速率的方法。通过使用垂直/水平同步信号来改变帧速率的方法
附图22示出了一种根据第九实施方式通过使用垂直/水平同步信号改变帧速率的方法。
在这里假设在实现改变帧速率的方法的过程中，固态成像装置是工作在最高驱动频率下的。
在这里进一步假设图像传感器(固态成像装置)501的最高驱动频率是Nfps，并且在时间变焦按键504被按下之前，运动图像是按照1/4Nfps的帧速率被记录的。
这里，每1/(1/4N)秒就从定时产生器(TG)507中输出用于控制帧的切换的垂直同步信号。
于是，由于图像传感器(固态成像装置)501工作在最高驱动频率下，所以图像传感器(固态成像装置)501的有效的输出和图像传感器(固态成像装置)501工作在最高帧速率时的输出是同时输出的，并且剩余的是消隐周期。
之后，如果在任意一个时刻，时间变焦按键504被按下设置1/2Nfps，则每1/(1/2N)秒就从定时产生器(TG)507中输出垂直同步信号。
这里，图像传感器(固态成像装置)501的有效的输出和图像传感器(固态成像装置)501工作在最高帧速率时的输出是同时输出的，并且剩余的是消隐周期。
之后，如果在任意一个时刻，时间变焦按键504被按下以设置最高的帧速率，则每1/N秒就从定时产生器(TG)507中输出垂直同步信号。这里，消隐周期是一个必要的最小周期。
替代使用垂直同步信号，同样的效果也可以通过使用作为帧速率变化的控制信号的水平同步信号或同时使用垂直和水平同步信号来实现。
如前所述，通过仅仅控制垂直/水平同步信号可以以任意的帧速率拍摄运动图像，而不需要改变图像传感器(固态成像装置)的驱动频率。
通过选择将被处理的帧来改变帧速率的方法
附图23示出了一种根据第九实施方式改变帧速率的方法，其通过选择一个将被使用的帧来实现，而不是通过改变图像传感器(固体成像器件)的时钟。
假设在实现改变帧速率的方法的过程中，图像传感器(固态成像装置)501是工作在最高驱动频率下的。
在这里进一步假设图像传感器(固态成像装置)501的最高驱动频率是Nfps，并且在时间变焦按键504被按下之前，运动图像是按照1/4Nfps的帧速率被记录的。
这里，图像传感器(固态成像装置)501以Nfps的速率输出象素数据，并且信号处理部件505以Nfps的速率将图像数据存储在存储器503中。
对于存储在存储器503中的图像数据，解码部件(CODEC)506处理并记录四个图像数据段中的一个，以满足1/4Nfps的帧速率。
之后将考虑这样一种情况，即在任意一个时刻，通过按下时间变焦按键504，运动图像开始按照1/2Nfp的速率被记录。
这里，图像传感器(固态成像装置)501以Nfps的速率输出象素数据，并且信号处理部件505以Nfps的速率将图像数据存储在存储器503中。
对于存储在存储器503中的图像数据，解码部件(CODEC)506处理并记录两个图像数据段中的一个，以满足1/2Nfps的帧速率。
如果在任意时刻，时间变焦按键504被按下，并且设置以最高帧速率记录运动图像，则图像传感器(固态成像装置)501以Nfps的速率输出图像数据，并且信号处理部件505以Nfps的速率将图像数据保存在存储器503中。
解码部件(CODEC)506处理并记录存储在存储器503中图像数据的全部图像数据段，以满足Nfps的帧速率。
如前所述，通过选择将被解码部件(CODEC)压缩的图像，可以以任意帧速率拍摄运动图像，而不需要改变对固态成像部和信号处理的控制。
通过动态地控制固态成像部件的驱动时钟来改变帧速率的方法
附图24示出了一种根据第九实施方式改变帧速率的方法，其动态地控制图像传感器(固体成像器件)的时钟。
假设图像传感器(固态成像装置)501的最高帧速率是Nfps，并且在时间变焦按键504被按下之前运动图像是以1/4Nfps的帧速率被记录的。
这时，定时产生器(TG)507输出给图像传感器(固态成像装置)501的时钟等于图像传感器(固态成像装置)501的最高工作频率的1/4。
图像传感器(固态成像装置)501以1/4Nfps的速率输出象素数据，并且信号处理部件505以1/4Nfps的速率处理像素数据并记录图像数据至存储器503中。
解码器部件(CODEC)506以1/4Nfps的速率处理并记录保存在存储器503中的图像数据。
之后将考虑这样一种情况，即在任意一个时刻，通过按下时间变焦按键504，运动图像开始按照1/2Nfps的速率被记录。
这时，定时产生器(TG)507输出给图像传感器(固态成像装置)501的时钟等于图像传感器(固态成像装置)501的最高工作频率的1/2。
图像传感器(固态成像装置)501以1/2Nfps的速率输出象素数据，并且信号处理部件505以1/2Nfps的速率处理像素数据并保存图像数据至存储器503中。
解码器部件(CODEC)506以1/2Nfps的速率处理并记录保存在存储器503中的图像数据。
现在将考虑这样一种情况，即在任意一个时刻，通过按下时间变焦按键504，运动图像开始按照最高帧速率被记录。
这时，定时产生器(TG)输出给图像传感器(固态成像装置)501图像传感器(固态成像装置)501的最高工作频率。
图像传感器(固态成像装置)501以Nfps的速率输出象素数据，并且信号处理部件505以Nfps的速率处理像素数据并将图像数据保存到存储器503。
解码器部件(CODEC)506以Nfps的速率处理并记录保存在存储器503中的图像数据。
根据第九实施方式，帧速率可以被动态地改变，这将只允许对必要场景的拍摄只在最高帧速率下进行。
由于可以实现动态地选择按照最高帧速率拍摄的场景，与以固定的较高帧速率进行拍摄相比，可以更加有效地减少图像数据的大小。
本领域的技术人员应该了解，可以在所附的权利要求或其等同物的范围内，基于设计的需要和其他因素对本发明进行不同的修改、组合、子组合以及替换。

Claims (30)

1、一种图像转换装置，其包括：
存储器，其存储将被播放的图像的帧信息；以及
图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率。
2、如权利要求1所述的图像转换装置，其中图像处理部件对帧速率的转换，不是通过改变全部图像的数量，而是通过减少在预定时间段内将被播放的帧的数量来实现的。
3、如权利要求1所述的图像转换装置，其中图像处理部件对帧速率的转换，不是通过改变全部图像的播放时间，而是通过减少在预定时间段内将被播放的帧的数量来实现的。
4、如权利要求1所述的图像转换装置，其中图像处理部件利用存储在存储器中的多个帧来创建新的帧，并且改变在预定时间段内的图像的帧速率以便创建出将被播放的新的帧。
5、如权利要求4所述的图像转换装置，进一步包括：
具有计算功能的处理引擎，用来将图像的尺寸增加或减少到任意的尺寸，同时根据存储在存储器中的多个原始图像创建新的象素，
其中图像处理部件基于处理引擎的处理结果创建出新的帧并且改变预定时间段内的图像的帧速率。
6、如权利要求5所述的图像转换装置，其中处理引擎从存储在存储器中的运动矢量信息计算出新的运动矢量；并且
图像处理部件可以根据该新的运动矢量创建新的帧。
7、一种图像信号处理装置，用于处理外部图像信号，该装置包括：
存储器，其能够存储将被播放的图像的帧信息；以及
图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率。
8、一种图像信号处理装置，处理外部图像信号，该装置包括：
存储器，其能够存储将被播放的图像的帧信息；
图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放的状态，将帧速率转换为预定的帧速率；
连接部件，其可以连接至少一个显示装置，
其中图像处理部件基于所连接的显示装置的性能以及连接部件的性能中的至少一项，转换帧速率。
9、如权利要求8所述的图像信号处理装置，其中图像处理部件能够按照该装置的内部状态进行帧速率转换。
10、如权利要求9所述的图像信号处理装置，其中图像处理部件能够按照频率、能耗以及存储器占用量中的至少一个进行帧速率转换。
11、如权利要求8所述的图像信号处理装置，其中图像处理部件具有能够通过按不同的方法结合帧速率在连接的显示装置上显示图像的装置。
12、如权利要求8所述的图像信号处理装置，其中图像处理部件具有能够在多个显示装置上同时显示具有不稳定帧速率的图像的装置。
13、如权利要求8所述的图像信号处理装置，其中图像处理部件具有能够按照与显示设备相兼容的帧速率通过重新调整帧速率而显示图像的装置。
14、如权利要求8所述的图像信号处理装置，其中图像处理部件具有能够通过按照显示装置的帧速率降低帧速率，输出具有低帧速率的高质量图像，而不会由于该减少的帧速率降低帧的图像质量的装置。
15、如权利要求8所述的图像信号处理装置，其中图像处理部件具有对以超出了与显示装置兼容的范围的帧速率创建的图像进行重建的装置。
16、一种摄像机***，其包括：
摄像部件，其拍摄物体的图像并输出图像数据；以及
图像信号处理装置，其对图像数据进行预定的处理，
其中该图像信号处理装置包括：
存储器，其能够存储将被播放的图像的帧信息；
图像处理部件，其能够从存储器中读取帧信息，响应预定的状态并且按照播放状态，将帧速率转换为预定的帧速率；以及
连接部件，其可以连接至少一个显示装置，并且
图像处理部件可以根据所连接的显示装置的性能以及连接部件的性能中的至少一项，进行帧速率转换。
17、如权利要求16所述的摄像机***，其中图像处理部件能够按照该装置的内部状态进行帧速率转换。
18、一种摄像机***，其包括：
摄像部件，其拍摄物体的图像并输出图像数据；以及
图像信号处理装置，其对图像数据进行预定的处理，
其中该图像信号处理装置包括：
存储器；以及
图像处理部件，其能够通过以步进方式改变按预定速率拍摄的图像帧的时间间隔并将疏间后的图像保存在存储器中，创建出具有依次不同的帧间隔的图像数据。
19、如权利要求18所述的摄像机***，其中图像处理部件能够通过按照预置的任意变化率改变所拍摄的帧图像的时间间隔并保存疏间后的图像，创建具有依次不同的帧间隔的图像数据。
20、如权利要求18所述的摄像机***，进一步包括：
连接部件，其可连接显示装置，
其中，图像处理部件以相同的间隔在显示装置上对所有创建的图像数据的帧进行播放和显示，这些帧具有以步进方式存在的不同的帧间隔，由此以高帧速率记录的部分以看似慢动作的方式被播放，而以按步进方式变化的帧速率记录的部分则按照从正常显示速度逐渐减少到慢动作的显示速度或者从慢动作逐渐增加到正常显示速度的显示速度被播放。
21、如权利要求19所述的摄像机***，其中图像处理部件以相同的间隔在显示装置上对所有创建的图像数据的帧进行播放和显示，这些帧具有以任意方式存在的不同的帧间隔，由此播放速度可以被任意改变。
22、如权利要求19所述的摄像机***，其中对于已经按照预定帧速率记录的图像数据，图像处理部件按照步进的方式对这些帧进行疏间处理。
23、如权利要求19所述的摄像机***，进一步包括：
输入设备，其用于指定拍摄时的帧速率，
其中按照输入进输入设备的强度，任意改变用于拍摄的帧速率。
24、一种摄像机***，其包括：
摄像部件，其拍摄物体的图像并输出图像数据；
图像处理部件，其对图像数据进行预定的处理；以及
操作部件，通过其可以在拍摄过程中发出改变帧速率的指令，
其中摄像部件可以以按照操作部件的指令改变的帧速率进行拍摄。
25、如权利要求24所述的摄像机***，其中操作部件按照按下按键开关的强度指示以步进或连续的方式改变帧速率。
26、如权利要求24所述的摄像机***，其中摄像部件具有固态成像器件；并且
帧速率是通过控制水平和/或垂直的消隐周期改变的，而不改变该固态成像器件的驱动频率。
27、如权利要求24所述的摄像机***，其中摄像部件具有固态成像器件；并且
帧速率是通过选择将被使用的帧而改变的，而不改变该固态成像器件的驱动频率。
28、如权利要求24所述的摄像机***，其中摄像部件具有固态成像器件；并且
固态成像器件的帧速率是通过动态地改变用于固态成像部件的驱动频率而改变的。
29、一种图像信号处理方法，用于处理外部图像信号，其包括如下步骤：
从存储器中读出帧信息；并且
响应预定的状态并且按照播放状态，将帧速率转换为预定的帧速率。
30、如权利要求29所述的图像信号处理方法，其中对帧速率的转换是根据所连接的显示装置的性能以及显示装置的连接部分的性能中的至少一项进行的。
CN2006100642013A 2005-10-20 2006-10-20 图像转换装置,图像信号处理装置,摄像机***以及图像信号处理方法 Expired - Fee Related CN1984304B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005305538A JP4887727B2 (ja) 2005-10-20 2005-10-20 画像信号処理装置、カメラシステム、および画像信号処理方法
JP2005305538 2005-10-20
JP2005-305538 2005-10-20

Publications (2)

Publication Number Publication Date
CN1984304A true CN1984304A (zh) 2007-06-20
CN1984304B CN1984304B (zh) 2013-04-03

Family

ID=37984934

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006100642013A Expired - Fee Related CN1984304B (zh) 2005-10-20 2006-10-20 图像转换装置,图像信号处理装置,摄像机***以及图像信号处理方法

Country Status (5)

Country Link
US (1) US8081255B2 (zh)
JP (1) JP4887727B2 (zh)
KR (1) KR101297773B1 (zh)
CN (1) CN1984304B (zh)
TW (1) TW200729927A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102404500A (zh) * 2010-09-08 2012-04-04 佳能株式会社 摄像装置及其控制方法、拍摄控制装置及拍摄控制方法
CN102413341A (zh) * 2010-09-17 2012-04-11 三星电子株式会社 图像数据处理方法以及显示装置
CN102930839A (zh) * 2011-08-08 2013-02-13 三星电子株式会社 显示装置及其驱动方法
CN103959197A (zh) * 2011-11-30 2014-07-30 英特尔公司 降低3d工作负荷的功率
CN105185284A (zh) * 2014-05-30 2015-12-23 辉达公司 可变刷新率***中的动态帧重复
CN105580345A (zh) * 2013-12-20 2016-05-11 索尼公司 成像器件、成像装置和电子装置
WO2017128314A1 (zh) * 2016-01-29 2017-08-03 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
CN108124113A (zh) * 2016-11-30 2018-06-05 佳能株式会社 显示装置及其控制方法和存储介质

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4909196B2 (ja) * 2007-07-09 2012-04-04 株式会社キーエンス 撮影制御装置、撮影制御方法及びプログラム
JP2009025643A (ja) * 2007-07-20 2009-02-05 Olympus Corp カメラ
JP2009044573A (ja) * 2007-08-10 2009-02-26 Casio Comput Co Ltd 撮像装置、画像処理プログラム及び画像処理方法
JP5018332B2 (ja) 2007-08-17 2012-09-05 ソニー株式会社 画像処理装置、撮像装置、画像処理方法、およびプログラム
JP2011151429A (ja) * 2008-05-12 2011-08-04 Mitsubishi Electric Corp 映像再生装置、及び、映像再生方法
JP4992860B2 (ja) * 2008-08-13 2012-08-08 カシオ計算機株式会社 撮像装置及びプログラム
JP5092983B2 (ja) 2008-08-13 2012-12-05 カシオ計算機株式会社 動画再生装置、撮像装置及びプログラム
JP4636142B2 (ja) * 2008-08-29 2011-02-23 ソニー株式会社 動画再生装置、動画再生方法およびプログラム
JP5401930B2 (ja) * 2008-11-07 2014-01-29 株式会社ニコン 撮像装置
JP4636474B2 (ja) 2008-11-17 2011-02-23 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 映像変換装置、映像再生装置、映像変換再生システム及びプログラム
JP5004309B2 (ja) * 2009-02-18 2012-08-22 ソニーモバイルコミュニケーションズ， エービー 動画出力方法および動画出力装置
US20100231735A1 (en) * 2009-03-13 2010-09-16 Nokia Corporation Methods, Apparatuses, and Computer Program Products for Facilitating Concurrent Video Recording and Still Image Capture
JP4886888B2 (ja) * 2009-12-01 2012-02-29 キヤノン株式会社 画像処理装置及びその制御方法
JP5088395B2 (ja) 2010-04-15 2012-12-05 株式会社ニコン 電子カメラ
JP5725981B2 (ja) * 2010-06-16 2015-05-27 株式会社東芝 医用画像表示装置及びｘ線コンピュータ断層撮影装置
JP5225365B2 (ja) * 2010-12-13 2013-07-03 キヤノン株式会社 画像再生装置、画像再生方法、プログラム及び記録媒体
JP5768381B2 (ja) 2011-01-20 2015-08-26 カシオ計算機株式会社 動画像処理装置、動画像処理方法及びプログラム
JP5778937B2 (ja) * 2011-02-07 2015-09-16 キヤノン株式会社 再生装置、及び、再生装置の制御方法
US9019188B2 (en) * 2011-08-08 2015-04-28 Samsung Display Co., Ltd. Display device for varying different scan ratios for displaying moving and still images and a driving method thereof
KR101805625B1 (ko) * 2011-09-09 2017-12-08 삼성전자주식회사 영상 스케일링을 통한 영상 레이트 변환 방법 및 그 장치
US9299301B2 (en) 2011-11-04 2016-03-29 Samsung Display Co., Ltd. Display device and method for driving the display device
US9208736B2 (en) 2011-11-28 2015-12-08 Samsung Display Co., Ltd. Display device and driving method thereof
US9378694B2 (en) * 2012-01-30 2016-06-28 Sharp Kabushiki Kaisha Drive control device, display device including the same, and drive control method
US9129572B2 (en) 2012-02-21 2015-09-08 Samsung Display Co., Ltd. Display device and related method
KR101301130B1 (ko) * 2012-03-15 2013-09-03 주식회사 엔티씨 모바일 디바이스에서의 이북 최적화 방법
WO2013190695A1 (ja) * 2012-06-22 2013-12-27 Ｎｅｃディスプレイソリューションズ株式会社 ディスプレイ装置
KR102160903B1 (ko) * 2012-07-17 2020-10-05 다우 글로벌 테크놀로지스 엘엘씨 고도로 치환된 하이드록시알킬 메틸셀룰로즈를 포함하는 고체 분산물
KR102043964B1 (ko) * 2013-01-03 2019-11-12 엘지전자 주식회사 영상 표시 기기 및 제어 방법
JP6224913B2 (ja) * 2013-05-10 2017-11-01 アイキューブド研究所株式会社 画像出力装置、画像出力方法、およびプログラム
JP2015004885A (ja) * 2013-06-21 2015-01-08 株式会社東芝 画像処理装置および画像表示装置
DE102014102689A1 (de) * 2014-02-28 2015-09-03 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Laufbildkameraanordnung und Verfahren zum Betreiben einer Laufbildkameraanordnung
US10991329B2 (en) * 2015-06-26 2021-04-27 Sony Corporation Control circuit, display device, electronic apparatus, and projection display apparatus
WO2017169499A1 (ja) * 2016-03-31 2017-10-05 ソニー株式会社 制御装置、制御方法及びコンピュータプログラム
JP6328681B2 (ja) * 2016-04-04 2018-05-23 株式会社藤商事 遊技機
KR102537210B1 (ko) * 2016-07-29 2023-05-26 삼성전자주식회사 동영상 컨텐츠 제공 방법 및 이를 지원하는 전자 장치
JP6354877B2 (ja) * 2017-02-17 2018-07-11 カシオ計算機株式会社 撮像制御装置、及びその制御方法とプログラム
JP6493454B2 (ja) * 2017-06-07 2019-04-03 株式会社ニコン 電子カメラ
KR102677285B1 (ko) 2019-01-25 2024-06-24 삼성전자주식회사 슬로 모션 영상 생성 방법 및 장치
EP4304167A1 (en) 2021-06-14 2024-01-10 Samsung Electronics Co., Ltd. Electronic device carrying out video call by using frc, and operation method for electronic device
KR20220167624A (ko) * 2021-06-14 2022-12-21 삼성전자주식회사 Frc를 이용한 영상 통화를 수행하는 전자 장치 및 전자 장치의 동작 방법
WO2023278320A1 (en) * 2021-06-28 2023-01-05 Gentex Corporation Stale video detection

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US127572A (en) * 1872-06-04 Improvement in governors for steam and other engines
JPH06133297A (ja) * 1992-10-14 1994-05-13 G C Technol Kk 解像度変換された画像の動き補償方法と装置
JPH06169419A (ja) * 1992-11-30 1994-06-14 Sony Corp 撮像装置
JP3720897B2 (ja) * 1996-03-01 2005-11-30 株式会社東芝 動画表示方法およびコンピュータシステム
JP3617573B2 (ja) * 1996-05-27 2005-02-09 三菱電機株式会社 フォーマット変換回路並びに該フォーマット変換回路を備えたテレビジョン受像機
JPH10285588A (ja) * 1997-04-10 1998-10-23 Matsushita Electric Ind Co Ltd 画像通信端末装置および画像通信方法
JPH10304334A (ja) * 1997-04-25 1998-11-13 Canon Inc 通信方法、通信装置、送信装置、受信装置、通信システム、及び記憶媒体
JP3917616B2 (ja) 1997-07-07 2007-05-23 株式会社東芝 多画面表示方法および多画面表示装置
US6031564A (en) * 1997-07-07 2000-02-29 Reveo, Inc. Method and apparatus for monoscopic to stereoscopic image conversion
JP4083266B2 (ja) * 1997-10-07 2008-04-30 株式会社日立製作所 動きベクトルの生成方法および装置
US6850564B1 (en) * 1998-06-26 2005-02-01 Sarnoff Corporation Apparatus and method for dynamically controlling the frame rate of video streams
US6727958B1 (en) * 1999-08-20 2004-04-27 Winbond Electronics Corp. Method and apparatus for displaying resized pictures on an interlaced target display system
KR100708091B1 (ko) * 2000-06-13 2007-04-16 삼성전자주식회사 양방향 움직임 벡터를 이용한 프레임 레이트 변환 장치 및그 방법
JP2002320203A (ja) * 2001-04-19 2002-10-31 Matsushita Electric Ind Co Ltd 映像信号記録装置および映像信号再生装置
KR100873763B1 (ko) * 2000-11-07 2008-12-15 파나소닉 주식회사 영상 신호 작성 시스템, 그 시스템의 영상 신호 기록 장치 및 영상 신호 재생 장치
US7242850B2 (en) * 2001-02-23 2007-07-10 Eastman Kodak Company Frame-interpolated variable-rate motion imaging system
JP2002271671A (ja) * 2001-03-09 2002-09-20 Kenwood Corp 携帯端末装置
JP2003153177A (ja) * 2001-11-08 2003-05-23 Mega Chips Corp 映像録画装置および映像録画方法
JP2003262788A (ja) * 2002-03-11 2003-09-19 Minolta Co Ltd オートフォーカス装置および撮像装置
KR100850706B1 (ko) * 2002-05-22 2008-08-06 삼성전자주식회사 적응적 동영상 부호화 및 복호화 방법과 그 장치
JP4281309B2 (ja) * 2002-08-23 2009-06-17 ソニー株式会社 画像処理装置、画像処理方法、および画像フレームデータ記憶媒体、並びにコンピュータ・プログラム
JP2004221999A (ja) 2003-01-15 2004-08-05 Canon Inc 画像処理方法
JP2004274219A (ja) * 2003-03-06 2004-09-30 Pioneer Electronic Corp 映像信号のフレームレート変換装置
US7158186B2 (en) * 2003-05-27 2007-01-02 Genesis Microchip Inc. Method and system for changing the frame rate to be optimal for the material being displayed while maintaining a stable image throughout
JP2005027068A (ja) * 2003-07-03 2005-01-27 Pioneer Electronic Corp 映像信号変換装置及び方法
JP3800207B2 (ja) * 2003-07-18 2006-07-26 ソニー株式会社 撮像装置
US7420618B2 (en) * 2003-12-23 2008-09-02 Genesis Microchip Inc. Single chip multi-function display controller and method of use thereof
WO2005076630A1 (ja) * 2004-02-03 2005-08-18 Matsushita Electric Industrial Co., Ltd. 復号化装置、符号化装置、補間フレーム生成システム、集積回路装置、復号化プログラムおよび符号化プログラム
US7639743B2 (en) * 2004-03-25 2009-12-29 Sony Corporation Image decoder and image decoding method and program
JP5062968B2 (ja) * 2004-08-11 2012-10-31 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP4359223B2 (ja) * 2004-10-29 2009-11-04 株式会社 日立ディスプレイズ 映像補間装置とこれを用いたフレームレート変換装置，映像表示装置
JP4396496B2 (ja) * 2004-12-02 2010-01-13 株式会社日立製作所 フレームレート変換装置、及び映像表示装置、並びにフレームレート変換方法
US20070067480A1 (en) * 2005-09-19 2007-03-22 Sharp Laboratories Of America, Inc. Adaptive media playout by server media processing for robust streaming

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102404500B (zh) * 2010-09-08 2014-11-19 佳能株式会社 摄像装置及其控制方法、拍摄控制装置及拍摄控制方法
CN102404500A (zh) * 2010-09-08 2012-04-04 佳能株式会社 摄像装置及其控制方法、拍摄控制装置及拍摄控制方法
US9338421B2 (en) 2010-09-08 2016-05-10 Canon Kabushiki Kaisha Imaging apparatus and control method for the same, shooting control apparatus, and shooting control method
CN102413341A (zh) * 2010-09-17 2012-04-11 三星电子株式会社 图像数据处理方法以及显示装置
US9363506B2 (en) 2010-09-17 2016-06-07 Samsung Display Co., Ltd. Method of processing image data, method of displaying image using the same and display apparatus performing the method of displaying image
CN102930839A (zh) * 2011-08-08 2013-02-13 三星电子株式会社 显示装置及其驱动方法
CN102930839B (zh) * 2011-08-08 2017-03-01 三星电子株式会社 显示装置及其驱动方法
US9672792B2 (en) 2011-08-08 2017-06-06 Samsung Display Co., Ltd. Display device and driving method thereof
CN103959197A (zh) * 2011-11-30 2014-07-30 英特尔公司 降低3d工作负荷的功率
CN103959197B (zh) * 2011-11-30 2017-01-18 英特尔公司 降低3d工作负荷的功率
CN105580345B (zh) * 2013-12-20 2019-05-10 索尼公司 成像器件和电子装置
CN105580345A (zh) * 2013-12-20 2016-05-11 索尼公司 成像器件、成像装置和电子装置
CN105185284A (zh) * 2014-05-30 2015-12-23 辉达公司 可变刷新率***中的动态帧重复
US9786255B2 (en) 2014-05-30 2017-10-10 Nvidia Corporation Dynamic frame repetition in a variable refresh rate system
CN107079135A (zh) * 2016-01-29 2017-08-18 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
WO2017128314A1 (zh) * 2016-01-29 2017-08-03 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
CN107079135B (zh) * 2016-01-29 2020-02-07 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
US10616480B2 (en) 2016-01-29 2020-04-07 SZ DJI Technology Co., Ltd. Method, system, device for video data transmission and photographing apparatus
CN111182268A (zh) * 2016-01-29 2020-05-19 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
CN111182268B (zh) * 2016-01-29 2021-08-17 深圳市大疆创新科技有限公司 视频数据传输方法、***、设备和拍摄装置
CN108124113A (zh) * 2016-11-30 2018-06-05 佳能株式会社 显示装置及其控制方法和存储介质

Also Published As

Publication number Publication date
JP2007116418A (ja) 2007-05-10
US8081255B2 (en) 2011-12-20
TW200729927A (en) 2007-08-01
TWI341682B (zh) 2011-05-01
US20070091204A1 (en) 2007-04-26
JP4887727B2 (ja) 2012-02-29
CN1984304B (zh) 2013-04-03
KR101297773B1 (ko) 2013-08-20
KR20070043618A (ko) 2007-04-25

Similar Documents

Publication Publication Date Title
CN1984304B (zh) 图像转换装置,图像信号处理装置,摄像机***以及图像信号处理方法
US8264573B2 (en) Imaging apparatus and reproducing apparatus which changes frame rate based on zoom operation
CN100542249C (zh) 摄影装置和显示控制方法
US7860321B2 (en) Image pickup apparatus with function of rate conversion processing and control method therefor
US20090103630A1 (en) Image processing device
US20110199496A1 (en) Image capturing apparatus, image capturing control method, and storage medium
US8577161B2 (en) Reproduction apparatus
JP5149283B2 (ja) 動画像再生装置、デジタルカメラ、半導体集積回路および動画像再生方法
JP2009111518A (ja) 撮像装置、画像再生装置及びそのプログラム、画像ファイルのデータ構造
JP2009194770A (ja) 撮像装置、動画再生装置及びそのプログラム
JP4252015B2 (ja) 画像撮像装置、画像再生装置及び画像撮像再生システム
JP2010147798A (ja) 画像処理装置及び画像処理方法
JP5076457B2 (ja) 映像信号処理装置、映像信号処理方法
KR100292498B1 (ko) 멀티모드캠코더및그의제어방법
JP2018195923A (ja) 記録装置
JP4075319B2 (ja) デジタルカメラ、動画再生方法及び動画記録方法
JPH10126741A (ja) 画像処理装置、その画像処理方法及びその方法を実現するプログラムが記録された記録媒体
JP2005229553A (ja) 画像処理装置
JP2003018532A (ja) 撮像装置
JP2005045620A (ja) 静止画像抽出装置
JP2932939B2 (ja) 映像信号切換装置
JP2003134462A (ja) 撮像装置
JP2015029211A (ja) 撮像装置
JPH11308573A (ja) 画像再生装置
JP2005006199A (ja) データ記録装置、記録残量出力方法、プログラム及び記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20170111

Address after: Kanagawa Japan Atsugi Asahi 4-14-1

Patentee after: SONY SEMICONDUCTOR SOLUTIONS Corp.

Address before: Tokyo, Japan

Patentee before: Sony Corp.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130403

Termination date: 20211020

CF01 Termination of patent right due to non-payment of annual fee