CN111861865B - 电路装置、电子设备以及移动体 - Google Patents

电路装置、电子设备以及移动体 Download PDF

Info

Publication number
CN111861865B
CN111861865B CN202010342413.3A CN202010342413A CN111861865B CN 111861865 B CN111861865 B CN 111861865B CN 202010342413 A CN202010342413 A CN 202010342413A CN 111861865 B CN111861865 B CN 111861865B
Authority
CN
China
Prior art keywords
image
coordinate
circuit
coordinates
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010342413.3A
Other languages
English (en)
Other versions
CN111861865A (zh
Inventor
J·埃里克
K·A·安纳德
秋叶泰俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019195845A external-priority patent/JP7467883B2/ja
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN111861865A publication Critical patent/CN111861865A/zh
Application granted granted Critical
Publication of CN111861865B publication Critical patent/CN111861865B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/08—Projecting images onto non-planar surfaces, e.g. geodetic screens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/18—Image warping, e.g. rearranging pixels individually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G06T3/606—Rotation of whole images or parts thereof by memory addressing or mapping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/011—Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/28—Indexing scheme for image data processing or generation, in general involving image processing hardware

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Image Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供电路装置、电子设备以及移动体，能够对与曲面显示器对应的变形校正进行高速处理。电路装置(100)包含坐标转换电路(20)和映射处理电路(30)。坐标转换电路(20)进行从输入坐标(IXY1)向输出坐标(QXY1)的坐标转换。映射处理电路(30)通过对所输入的第1图像(IMG1)进行基于输出坐标(QXY1)的映射处理，生成显示于显示面板的第2图像(IMG2)，所述显示面板用于在曲面显示器上显示图像。坐标转换电路(20)通过进行使用了表示坐标转换的二次以上多项式的运算处理，进行从输入坐标(IXY1)向输出坐标(QXY1)的坐标转换。

Description

电路装置、电子设备以及移动体
技术领域
本发明涉及电路装置、电子设备以及移动体等。
背景技术
公知有一种平视显示器(HUD：Head Up Display)，通过在透明屏幕等曲面显示器上显示图像而在用户的视野中重叠显示信息。在平视显示器直接显示输入图像的情况下，由于曲面显示器的变形，显示图像会看上去发生变形。因此，平视显示器对输入图像进行变形校正，通过显示该变形校正后的图像而显示出无变形的图像。在专利文献1中，公开了进行变形校正的平视显示器的现有技术。专利文献1的平视显示器包含存储坐标转换用的数学式的存储器，使用该坐标转换用的数学式来进行坐标转换，并根据其结果对输入图像进行映射处理，由此进行变形校正。
专利文献1：日本特开2010-164869号公报
在上述专利文献1中，公开了变形校正中的坐标转换用的数学式，但该数学式是原理上的数学式，包含积分或平方根等复杂的运算。因此，在专利文献1的技术中，存在例如难以对动态图像实时进行变形校正处理之类的高速处理的问题。专利文献1没有公开用于进行高速处理的具体的处理过程。
发明内容
本发明的一个方式涉及电路装置，包含：坐标转换电路，其进行从输入坐标向输出坐标的坐标转换；以及映射处理电路，其通过对所输入的第1图像进行基于所述输出坐标的映射处理，生成显示于显示面板的第2图像，所述显示面板用于在曲面显示器上显示图像，所述坐标转换电路通过进行使用了表示所述坐标转换的二次以上多项式的运算处理，来进行所述坐标转换。
附图说明
图1是电路装置的第1结构例。
图2是对第1结构例中的电路装置的动作进行说明的图。
图3是坐标转换电路的详细结构例。
图4是映射处理电路的详细结构例。
图5是电路装置的第2结构例。
图6是对第2结构例中的电路装置的动作进行说明的图。
图7是对平视显示器的安装公差与旋转校正之间的关系进行说明的图。
图8是电路装置的第3结构例。
图9是对第3结构例中的电路装置的动作进行说明的图。
图10是电路装置的第4结构例。
图11是对第4结构例中的电路装置的动作进行说明的图。
图12是电路装置的第5结构例。
图13是第1处理电路和第2处理电路的详细结构例。
图14是显示于平视显示器的图像的一例。
图15是从映射处理前的图像中提取的ROI的图像。
图16是对从显示于平视显示器的图像中提取的ROI的图像进行了逆映射处理的图像。
图17是边缘图像的例子。
图18是电子设备的结构例。
图19是移动体的例子。
标号说明
10：坐标计数器；20：坐标转换电路；21：第1运算电路；22：第2运算电路；30：映射处理电路；31：存储器控制电路；32：坐标计数器；33：图像存储器；34：写地址控制器；35：读地址控制器；40：旋转转换电路；50：坐标计数器；60：坐标转换电路；70：映射处理电路；80：旋转转换电路；100：电路装置；110：接口；131：第1处理电路；132：第2处理电路；133：存储部；135：图像处理电路；140：接口；145：比较电路；150：错误检测电路；160：存储部；170：寄存器电路；176：错误检测结果寄存器；178：阈值寄存器；190：接口；200：处理装置；206：汽车；208：控制装置；300：电子设备；310：处理装置；320：电路装置；330：显示驱动器；340：显示面板；350：存储装置；360：操作装置；370：通信装置；400：平视显示器；AC1～AC5：第1项运算电路～第5项运算电路；ADDC：加法电路；ADRD：读出地址；ADWR：写入地址；CF1：系数信息；CXYA1：第1计数坐标；CXYB1：第2计数坐标；IMA1、IMG1：第1图像；IMA2、IMG2：第2图像；IMA3：第3图像；IXY1：输入坐标；MC1：x2运算电路；MC2：y2运算电路；MC3：xy运算电路；QXY1：输出坐标；RT1：角度信息；a1～a6：系数。
具体实施方式
以下，对本公开的优选实施方式进行详细说明。另外，以下说明的本实施方式并非不当地限定权利要求书所记载的内容，在本实施方式中说明的结构并非全部都是必需的构成要件。
1.第1结构例
图1是本实施方式的电路装置100的第1结构例。图2是对第1结构例中的电路装置100的动作进行说明的图。
电路装置100是对平视显示器的图像显示进行控制的HUD控制器。但是，电路装置100不限于HUD控制器，例如也可以是对平视显示器的显示面板进行驱动的显示驱动器。在该情况下，电路装置100也可以包含根据图像IMG2来驱动显示面板的驱动电路。电路装置100是被称为IC(Integrated Circuit：集成电路)的集成电路装置。电路装置100是通过半导体工艺制造的IC，是在半导体基板上形成有电路元件的半导体芯片。
如图2所示，电路装置100将图像IMG1映射处理为图像IMG2。图像IMG1是输入图像，也称为第1图像。图像IMG2是输出图像，也称为第2图像。在映射处理中，对图像IMG2施加用于将平视显示器的曲面显示器所引起的变形消除的变形。即，在平视显示器的显示面板上显示的图像IMG2是变形后的图像。通过在曲面显示器上显示该图像IMG2而向用户提示无变形的显示图像。
将进行这样的变形校正中的图像转换的图像处理引擎称为扭曲引擎。在第1结构例中，对电路装置100为反向扭曲引擎(inverse wrap engine)的情况进行说明。反向扭曲引擎是指具有反向扭曲功能的扭曲引擎。反向扭曲是指根据输入图像中的任意位置的像素来求出扭曲引擎的输出图像的各像素的转换。如图2所示，电路装置100将作为输出图像的图像IMG2中的坐标(x，y)转换为作为输入图像的图像IMG1中的坐标(x’，y’)，根据该坐标来进行映射处理，由此实现反向扭曲。
另外，如在第2结构例中说明的那样，电路装置100也可以是正向扭曲引擎(forward wrap engine)。另外，如在第3结构例、第4结构例中说明的那样，电路装置100还可以进一步进行图像旋转。
以下，对电路装置100为反向扭曲引擎的第1结构例进行详细说明。如图1所示，电路装置100包含作为第1坐标计数器的坐标计数器10、坐标转换电路20以及映射处理电路30。
坐标转换电路20进行从输入坐标IXY1向输出坐标QXY1的坐标转换。在第1结构例中，输入坐标IXY1是与图像IMG2上的坐标对应的坐标(x，y)，输出坐标QXY1是与图像IMG1上的坐标对应的坐标(x’，y’)。坐标转换电路20通过进行使用了表示坐标转换的二次以上多项式的运算处理，进行从输入坐标IXY1向输出坐标QXY1的坐标转换。下式(1)表示多项式为二次时的坐标转换式。
Figure BDA0002468998870000041
在上式(1)的第1行中，右边的a1×x2是求出x’的多项式的第1项。同样，a2×y2、a3×xy、a4×x、a5×y、a6是求出x’的多项式的第2项、第3项、第4项、第5项、第6项。a1是第1项的系数、即第1系数。同样，a2、a3、a4、a5、a6是第2系数、第3系数、第4系数、第5系数、第6系数。求出y’的式子也同样如此。
另外，坐标转换式不限于二次多项式，也可以是3次以上的多项式。例如，下式(2)表示多项式为3次时的坐标转换式。
Figure BDA0002468998870000042
映射处理电路30通过对所输入的图像IMG1进行基于输出坐标QXY1的映射处理而生成图像IMG2。具体而言，根据图像IMG1中的坐标(x’，y’)的像素值来求出图像IMG2中的坐标(x，y)的像素值。(x，y)是输入坐标IXY1，(x’，y’)是输出坐标QXY1。但是，映射处理电路30不使用输入坐标IXY1，而使用在内部生成的坐标和输出坐标QXY1来进行映射处理。这点在图4中进行后述。像素值例如是该坐标中的显示用的像素的颜色数据。
图像IMG2显示在平视显示器的曲面显示器上。例如，平视显示器包含光源、液晶显示面板、光学***以及透明屏幕。在液晶显示面板上显示图像IMG2。光源射出光，其射出光透过液晶显示面板，光学***将该透过光投影到透明屏幕上，由此在透明屏幕上投影出图像IMG2。在该情况下，透明屏幕相当于曲面显示器。或者，平视显示器包含由有机EL显示面板等构成的透明显示器。在该情况下，在透明显示器上直接显示图像IMG2。即，作为显示面板的透明显示器兼作曲面显示器。
根据本实施方式，坐标转换电路20通过使用了多项式的运算处理来进行坐标转换，由此能够进行变形校正的高速处理。具体而言，如上式(1)等所示，多项式由乘法和加法的组合而组成，不包含积分等复杂的计算。因此，通过使用多项式，与进行包含积分等的计算时相比，运算时间缩短。
另外，在多项式中，作为输入坐标IXY1的(x，y)和作为输出坐标QXY1的(x’，y’)是一一对应的。该对应可以直接用作映射处理中的输出图像IMG2的像素与输入图像IMG1的像素的对应。即，当将(x，y)逐个像素地逐次输入到坐标转换电路20时，与其对应地逐个像素地逐次输出(x’，y’)。映射处理电路30使用该对应来逐个像素地进行映射，由此能够构成一个画面的图像IMG2。这样的逐次处理与临时生成表等而进行映射处理的情况相比，更适合于实时处理。另外，在显示处理中，由于根据像素时钟来输入和输出像素数据，所以逐个像素的逐次处理适合于实时处理。
以下，以如上式(1)那样坐标转换式为二次多项式的情况为例来进行说明。
向坐标转换电路20输入多项式的系数信息CF1和输入坐标IXY1。坐标转换电路20通过基于系数信息CF1的运算处理来根据输入坐标IXY1求出输出坐标QXY1。系数信息CF1是上式(1)的系数a1～a6、b1～b6的信息。例如，电路装置100包含存储系数信息CF1的存储部，系数信息CF1被从存储部输入到坐标转换电路20。存储部是寄存器或存储器。存储器是RAM或非易失性存储器等半导体存储器。系数信息CF1例如在电路装置100启动时或在制造平视显示器时被写入存储部。
在使用了多项式的坐标转换中，根据多项式的系数来决定输入坐标IXY1与输出坐标QXY1的对应。即，通过将与曲面显示器的形状匹配的系数信息CF1输入到坐标转换电路20，能够实现适合于各种曲面显示器的变形校正。另外，坐标转换电路20根据所输入的输入坐标IXY1求出输出坐标QXY1，因此如上所述，能够进行适合于实时处理的逐个像素的坐标转换。
坐标计数器10输出基于像素时钟的像素单位的坐标即第1计数坐标。坐标转换电路20将第1计数坐标作为输入坐标IXY1来进行坐标转换。在第1结构例中，输入坐标IXY1与图像IMG2上的坐标对应，因此，映射处理电路30对图像IMG2进行处理时使用的像素时钟被输入到坐标计数器10。
设图像IMG2的尺寸为N×M像素。N、M为2以上的整数。例如，坐标计数器10在y＝0处按每个像素时钟使x每次增加1，输出(0，0)、(1，0)、(2，0)、···、(N-1，0)。接着，坐标计数器10使y＝1，按每个像素时钟使x每次增加1，输出(0，1)、(1，1)、(2，1)、···、(N-1，1)。坐标计数器10反复该过程直到(N-1，M-1)。另外，坐标的计数顺序不限于上述顺序，只要根据以哪种顺序对图像IMG2的像素进行处理来设定计数顺序即可。
在本实施方式中，坐标计数器10根据像素时钟来逐个像素地将坐标(x，y)输出到坐标转换电路20，坐标转换电路20进行坐标转换而逐个像素地输出坐标(x’，y’)。由此，映射处理电路30能够基于像素时钟来逐个像素地进行映射处理。由此，实现适合于实时处理的变形校正。
另外，将输入坐标IXY1转换为输出坐标QXY1的运算的处理时间也可以是像素时钟的多个周期。与输入坐标IXY1对应的输出坐标QXY1延迟处理时间而输出，但作为吞吐量，只要能够在像素时钟的一个周期中得到一个输出坐标QXY1即可。
图3是坐标转换电路20的详细结构例。坐标转换电路20包含第1运算电路21和第2运算电路22。第1运算电路21和第2运算电路22是逻辑电路，分别由单独的硬件电路构成。另外，在图3中，仅图示了求出x’的运算电路，但求出y’的运算电路也是同样的结构。
在设输入坐标IXY1为(x，y)时，第1运算电路21求出x2、y2和xy。具体而言，第1运算电路21包含x2运算电路MC1、y2运算电路MC2以及xy运算电路MC3，其中，该x2运算电路MC1对x进行平方运算而求出x2，该y2运算电路MC2对y进行平方运算而求出y2，该xy运算电路MC3将x与y相乘而求出xy。运算电路MC1～MC3分别是单独的硬件乘法器。
第2运算电路22根据第1运算电路21的运算结果和系数信息CF1来求出输出坐标QXY1。这里，第2运算电路22求出(x’，y’)中的x’。作为系数信息CF1，上式(1)的系数a1～a6被输入到第2运算电路22。第2运算电路22包含第1项运算电路～第5项运算电路AC1～AC5和加法电路ADDC。第1项运算电路～第5项运算电路AC1～AC5分别是单独的硬件乘法器。
第1项运算电路AC1将系数a1与x2相乘而求出第1项a1×x2。第2项运算电路AC2将系数a2与y2相乘而求出第2项a2×y2。第3项运算电路AC3将系数a3与xy相乘而求出第3项a3×xy。第4项运算电路AC4将系数a4与x相乘而求出第4项a4×x。第5项运算电路AC5将系数a5与y相乘而求第5项a5×y。加法电路ADDC将第1项～第5项与作为第6项的系数a6相加，将其结果作为x’输出。由此，实现上式(1)的x’的运算。
另外，第1运算电路21和第2运算电路22的结构不限于图3。例如，第1运算电路21包含3个运算电路，该3个运算电路也可以如流水线处理那样运算x2、y2和xy。而且，第2运算电路22也可以包含5个运算电路，该5个运算电路如流水线处理那样运算第1项～第5项。
根据本实施方式，第1运算电路21包含求出x2、y2和xy的运算电路MC1～MC3，第2运算电路22包含求出第1项～第5项的第1项运算电路～第5项运算电路AC1～AC5。由此，能够并行运算各项，能够进行适合于实时处理的高速处理。
另外，第2运算电路22只要包含第1项运算电路～第n项运算电路即可。第i项运算电路运算多项式的第i项。n为2以上的整数，i为1以上且n以下的整数。在如图3那样坐标转换式为二次多项式的情况下，n＝5。例如，在如上式(2)那样坐标转换式是3次多项式的情况下，也可以是n＝9。
图4是映射处理电路30的详细结构例。映射处理电路30包含存储器控制电路31、作为第2坐标计数器的坐标计数器32以及图像存储器33。
坐标计数器32输出基于像素时钟的像素单位的坐标即第2计数坐标CXYB1。将第2计数坐标CXYB1设为(xb，yb)。在第1结构例中，由于(xb，yb)指定图像IMG1上的坐标，所以与图像IMG1一起输入到映射处理电路30的像素时钟被输入到坐标计数器32。坐标计数器32通过与坐标计数器10同样的计数动作对(xb，yb)进行计数。
存储器控制电路31进行图像存储器33的访问控制。图像存储器33是临时存储图像IMG1的缓冲存储器，例如是RAM等半导体存储器。存储器控制电路31根据第2计数坐标CXYB1将图像IMG1写入到图像存储器33，根据来自坐标转换电路20的输出坐标QXY1从图像存储器33读出像素值，并将该像素值作为图像IMG2的像素值来输出。具体而言，存储器控制电路31包含写地址控制器34和读地址控制器35。
写地址控制器34将作为第2计数坐标CXYB1的(xb，yb)解码为写入地址ADWR，并将图像IMG1的(xb，yb)处的像素值写入到图像存储器33的地址ADWR。通过反复该动作，图像IMG1被写入到图像存储器33中。
读地址控制器35将作为输出坐标QXY1的(x’，y’)解码为读出地址ADRD，并从图像存储器33的地址ADRD读出像素值。这相当于读出图像IMG1的(x’，y’)处的像素值。读地址控制器35将读出的像素值作为图像IMG2的(x，y)处的像素值来输出。通过反复该动作，从映射处理电路30输出图像IMG2。
在以上的映射处理中，根据图像IMG1的(x’，y’)处的像素值来取得图像IMG2的(x，y)处的像素值。即，映射处理电路30作为在图2中说明的反向扭曲引擎来进行动作。
2.第2结构例
图5是电路装置100的第2结构例。图6是对第2结构例中的电路装置100的动作进行说明的图。
在第2结构例中，对电路装置100是正向扭曲引擎的情况进行说明。正向扭曲引擎是指具有正向扭曲功能的扭曲引擎。正向扭曲是指根据输出图像中的任意位置的像素来求出扭曲引擎的输入图像的各像素的转换。如图6所示，电路装置100将作为输入图像的图像IMG1中的坐标(x’，y’)转换为作为输出图像的图像IMG2中的坐标(x，y)，并根据该坐标来进行映射处理，由此实现正向扭曲。
如图5所示，电路装置100包含坐标计数器10、坐标转换电路20以及映射处理电路30。
在第2结构例中，坐标计数器10将作为第1计数坐标的(x’，y’)作为输入坐标IXY1而输出到坐标转换电路20。由于(x’，y’)与图像IMG1上的坐标对应，所以与图像IMG1一起输入到映射处理电路30的像素时钟被输入到坐标计数器10。
坐标转换电路20进行从输入坐标IXY1向输出坐标QXY1的坐标转换。在第2结构例中，输出坐标QXY1是与图像IMG2上的坐标对应的坐标(x，y)。下式(3)表示多项式为二次时的坐标转换式。下式(3)相当于上式(1)的逆坐标转换。
Figure BDA0002468998870000091
坐标转换电路20根据系数信息CF1来进行上式(3)的运算处理。在第2结构例中，系数信息CF1是上式(3)的系数c1～c6、d1～d6的信息。坐标转换电路20的结构与在图3中说明的第1结构例相同。但是，在第2结构例中，作为输入坐标，(x’，y’)被输入到第1运算电路21和第2运算电路22，系数c1～c6被输入到第2运算电路22，作为输出坐标，x从第2运算电路22输出。
映射处理电路30使图像IMG1中的坐标(x’，y’)的像素值移动到图像IMG2中的坐标(x，y)。(x’，y’)是输出坐标QXY1，(x，y)是输入坐标IXY1。映射处理电路30包含存储器控制电路31、坐标计数器32以及图像存储器33。
坐标计数器32输出(xb，yb)作为第2计数坐标CXYB1。在第2结构例中，(xb，yb)指定图像IMG2上的坐标，因此映射处理电路30对图像IMG2进行处理时使用的像素时钟被输入到坐标计数器32。
存储器控制电路31根据来自坐标转换电路20的输出坐标QXY1将图像IMG1写入到图像存储器33中，根据第2计数坐标CXYB1从图像存储器33读出像素值，并将该像素值作为图像IMG2的像素值来输出。
具体而言，写地址控制器34将作为输出坐标QXY1的(x，y)解码为写入地址ADWR，将图像IMG1的(x’，y’)处的像素值写入到图像存储器33的地址ADWR。这相当于使图像IMG1的(x’，y’)处的像素值移动到坐标(x，y)。即，写入到图像存储器33的图像IMG1成为通过变形校正而变形的图像。
读地址控制器35将作为第2计数坐标CXYB1的(xb，yb)解码为读出地址ADRD，从图像存储器33的地址ADRD读出像素值。读地址控制器35将读出的像素值作为图像IMG2的(x，y)处的像素值来输出。通过反复该动作，从映射处理电路30输出图像IMG2。
在以上的映射处理中，图像IMG1的(x’，y’)处的像素值被移动到图像IMG2的(x，y)的像素值。即，映射处理电路30作为在图6中说明的正向扭曲引擎来进行动作。
3.第3结构例
在第3结构例中，除了显示图像的变形校正之外，电路装置100还进行旋转校正。首先，使用图7对平视显示器的安装公差与旋转校正之间的关系进行说明。另外，在图7中，以平视显示器设置在汽车的仪表板上的情况为例进行说明，但平视显示器的设置场所并不限定于此。另外，在图7中，用平面来表示平视显示器的显示部DSP，但实际上是曲面显示器。
图7所示的方向DZ是与平视显示器的显示部DSP垂直的方向。具体而言，在作为曲面的显示部DSP的任意位置，方向DZ与显示部DSP垂直。例如，在显示部DSP的中央，方向DZ与显示部DSP垂直。方向DX是与方向DZ垂直的方向，方向DY是与方向DX和方向DZ垂直的方向。方向DX相当于水平方向。即，当汽车处于水平姿势时，方向DX与水平面平行。在平视显示器垂直设置在汽车的仪表板上的情况下，方向DY相当于垂直方向，方向DY与水平面垂直。但是，方向DY不限于垂直方向，方向DY也可以相对于水平面倾斜。在平视显示器向进深方向倾斜角度θX而设置在仪表板上的情况下，方向DY相对于水平面倾斜角度θX。
旋转RZ表示以与方向DZ平行的轴为旋转轴的显示部DSP的旋转。由于将平视显示器安装于仪表板时的公差，旋转RZ的旋转角度产生偏差。将公差为零时的旋转角度设为0度，将顺时针的旋转设为正，将逆时针的旋转设为负。当显示部DSP的旋转RZ为正的旋转角度时，从用户来看，显示图像顺时针旋转。电路装置100对图像进行负方向即逆时针旋转处理。由此，即使显示部DSP由于公差而倾斜，也能够显示从用户来看没有倾斜的图像。
图8是电路装置100的第3结构例。图9是对第3结构例中的电路装置100的动作进行说明的图。
在第3结构例中，对电路装置100为反向扭曲引擎的情况进行说明。如图9所示，电路装置100对作为输出图像的图像IMG2中的坐标(xa，ya)进行旋转转换，将旋转转换后的坐标(x，y)转换为作为输入图像的图像IMG1中的坐标(x’，y’)，通过基于该坐标来进行映射处理，实现图像旋转和反向扭曲。
如图8所示，电路装置100包含坐标计数器10、坐标转换电路20、映射处理电路30以及旋转转换电路40。另外，对于与第1结构例相同的结构和动作，适当省略说明。
坐标计数器10输出(xa，ya)作为第1计数坐标CXYA1。由于(xa，ya)与图像IMG2上的坐标对应，因此映射处理电路30对图像IMG2进行处理时使用的像素时钟被输入到坐标计数器10。
旋转转换电路40对第1计数坐标CXYA1进行旋转转换，将旋转转换后的坐标作为输入坐标IXY1而输出到坐标转换电路20。在第3结构例中，输入坐标IXY1为(x，y)。如下式(4)所示，旋转转换电路40使用仿射变换来进行坐标旋转。θ是旋转角度。
Figure BDA0002468998870000111
旋转转换电路40根据表示旋转角度θ的角度信息RT1，通过上式(4)将第1计数坐标CXYA1转换为输入坐标IXY1。例如，电路装置100包含存储角度信息RT1和系数信息CF1的存储部，角度信息RT1从存储部输入到旋转转换电路40，系数信息CF1从存储部输入到坐标转换电路20。存储部是寄存器或存储器。存储器是RAM或非易失性存储器等半导体存储器。角度信息RT1和系数信息CF1例如在电路装置100启动时或在制造平视显示器时被写入存储部。
坐标转换电路20根据系数信息CF1来进行从输入坐标IXY1向输出坐标QXY1的坐标转换。在第3结构例中，输出坐标QXY1是与图像IMG1上的坐标对应的坐标(x’，y’)。坐标转换式与第1结构例相同。
映射处理电路30根据图像IMG1中的坐标(x’，y’)的像素值来求出图像IMG2中的坐标(xa，ya)的像素值。(xa，ya)是第1计数坐标CXYA1，(x’，y’)是输出坐标QXY1。映射处理电路30的结构和动作与第1结构例相同。
在第3结构例的映射处理中，根据图像IMG1的(x’，y’)处的像素值来取得图像IMG2的(xa，ya)处的像素值。即，映射处理电路30作为在图9中说明的反向扭曲引擎来进行动作。另外，通过旋转转换电路40进行坐标旋转，在映射处理中，进行包含图像旋转的反向扭曲。
4.第4结构例
图10是电路装置100的第4结构例。图11是对第4结构例中的电路装置100的动作进行说明的图。
在第4结构例中，对电路装置100是正向扭曲引擎的情况进行说明。如图11所示，电路装置100对作为输入图像的图像IMG1中的坐标(xa，ya)进行旋转转换，将旋转转换后的坐标(x’，y’)转换为作为输出图像的图像IMG2中的坐标(x，y)，并根据该坐标来进行映射处理，由此实现图像旋转和正向扭曲。
如图10所示，电路装置100包含坐标计数器10、坐标转换电路20、映射处理电路30以及旋转转换电路40。另外，对与第2结构例和第3结构例相同的结构及动作适当省略说明。
坐标计数器10输出(xa，ya)作为第1计数坐标CXYA1。在第4结构例中，(xa，ya)与图像IMG1上的坐标对应，所以与图像IMG1一起输入到映射处理电路30的像素时钟被输入到坐标计数器10。
旋转转换电路40对第1计数坐标CXYA1进行旋转转换，将旋转转换后的坐标作为输入坐标IXY1输出到坐标转换电路20。在第4结构例中，输入坐标IXY1为(x’，y’)。如下式(5)所示，旋转转换电路40使用仿射变换来进行坐标旋转。θ是旋转角度。
Figure BDA0002468998870000121
旋转转换电路40根据表示旋转角度θ的角度信息RT1，通过上式(5)将第1计数坐标CXYA1转换为输入坐标IXY1。
坐标转换电路20根据系数信息CF1来进行从输入坐标IXY1向输出坐标QXY1的坐标转换。在第4结构例中，输出坐标QXY1是与图像IMG2上的坐标对应的坐标(x，y)。坐标转换式与第2结构例相同。
映射处理电路30使图像IMG1中的坐标(xa，ya)的像素值移动到图像IMG2中的坐标(x，y)。(xa，ya)是第1计数坐标CXYA1，(x，y)是输出坐标QXY1。映射处理电路30的结构和动作与第2结构例相同。
在第4结构例的映射处理中，图像IMG1的(xa，ya)处的像素值被移动到图像IMG2的(x，y)的像素值。即，映射处理电路30作为在图11中说明的正向扭曲引擎来进行动作。另外，通过旋转转换电路40进行坐标旋转，在映射处理中，进行包含图像旋转的正向扭曲。
5.第5结构例
图12是电路装置100的第5结构例。在第5结构例中，电路装置100通过对图像IMA2进行逆映射处理来生成图像IMA3，通过对图像IMA1和图像IMA3进行比较来检测图像IMA2的错误。
电路装置100包含接口110、存储部133、图像处理电路135、接口140、比较电路145、错误检测电路150、存储部160、寄存器电路170以及接口190。
接口110接收例如从处理装置200等发送到电路装置100的图像数据。接口110将接收到的图像数据转换为在电路装置100的内部使用的形式，并将该转换后的图像数据作为图像IMA1来输出。例如，接口110是OpenLDI(Open LVDS Display Interface：开放式LVDS显示接口)，将以LVDS(Low Voltage Differential Signaling：低电压差分信令)形式接收到的串行信号转换为RGB的并行信号。处理装置200例如是SoC(System on a Chip：片上***)、MCU(Micro Control Unit：微控制单元)或CPU(Central Processing Unit：中央处理单元)。
图像处理电路135包含第1处理电路131和第2处理电路132，该第1处理电路131按照平视显示器的曲线显示器所具有的表面形状来对图像进行映射，该第2处理电路132进行其逆映射。第1处理电路131也称为第1扭曲引擎，第2处理电路132也称为第2扭曲引擎。以下，对第1处理电路131和第2处理电路132与变形校正一起进行图像旋转的例子进行说明，但第1处理电路131和第2处理电路132也可以仅进行变形校正。
另外，曲面显示器是平视显示器中的屏幕或显示面板。屏幕也称为被投影体。当曲面显示器为屏幕时，平视显示器包含将图像IMA2投影到屏幕上的投影装置。投影装置例如包含液晶显示面板、对该液晶显示面板进行驱动的显示驱动器、光源以及镜头。显示驱动器根据接收到的图像数据使液晶显示面板显示图像，光源向液晶显示面板输出光，通过了液晶显示面板的光被镜头投影到屏幕上。屏幕是透明的物体，并且具有对所投影的光进行反射的反射面。例如，在车载的平视显示器中，屏幕是安装于仪表板的透明屏幕或汽车的挡风玻璃。当曲面显示器是显示面板时，以用户直接看到该显示面板的显示图像的方式构成平视显示器，平视显示器将图像IMA2显示在显示面板上。显示面板例如是使用了有机EL面板的透明显示器，该透明显示器具有曲面。
第1处理电路131对图像IMA1进行使用了系数信息CF1的第1映射处理和使用了角度信息RT1的第1旋转处理，并输出处理后的图像IMA2。图像IMA1是第1图像，图像IMA2是第2图像。另外，第1处理电路131从图像IMA1中提取关注区域的图像IMA1’。关注区域也称为ROI(Region Of Interest：感兴趣区域)。另外，图像IMA1’也可以是整个图像IMA1。以下，以图像IMA1’是从图像IMA1提取的关注区域的图像的情况为例来进行说明，关注区域的图像IMA’也称为第1图像。
第2处理电路132对图像IMA2进行使用了系数信息CF2的第2映射处理和使用了角度信息RT2的第2旋转处理，并输出处理后的图像IMA3。图像IMA3是第3图像。具体而言，第2处理电路132从图像IMA2中提取关注区域的图像，对该图像进行第2映射处理和第2旋转处理。第2旋转处理是第1旋转处理的反向旋转处理。图像IMA3为从图像IMA2提取的关注区域的图像被进行了逆映射和反向旋转后的图像。
接口140将图像IMA2输出到电路装置100的外部。电路装置100的外部例如是对平视显示器的显示面板进行驱动的显示驱动器。例如，接口140是LVDS的接口，将来自图像处理电路135的RGB的并行信号转换为LVDS的串行信号。
存储部133是第1存储部。第1处理电路131将关注区域的图像IMA1’存储在存储部133中。存储部160是存储器。例如，存储器是RAM或非易失性存储器等半导体存储器。另外，存储部133和存储部160可以分别由单独的存储器构成，也可以由一个存储器构成。
比较电路145进行存储在存储部133中的图像IMA1’与图像IMA3之间的比较处理，并输出其比较结果。该比较结果用于检测图像IMA2的错误。即，用于验证第1处理电路131进行的第1映射处理和第1旋转处理是否正常。比较电路145求出表示图像IMA1与图像IMA3之间的相似度的指标。指标是后述的形状指标或可视性指标。或者，比较电路145也可以将SSD(Sum of Squared Difference：平方差总和)、SAD(Sum of Absolute Difference：绝对差总和)或NCC(Normalized Cross Correlation：归一化互相关)等作为指标来求出。
错误检测电路150通过对指标和阈值进行比较而进行第2图像IMA2的错误检测。阈值是表示能够允许图像IMA1’与图像IMA3具有何种程度的相似度的阈值。
在通过错误检测电路150检测到错误的情况下，图像处理电路135停止向接口140输出图像IMA2。或者，在通过错误检测电路150检测到错误的情况下，接口140停止图像IMA2的输出。接口140也可以将图像IMA2与错误信息一起输出，接收到该错误信息的显示驱动器进行基于错误信息的动作。或者，接口190也可以将错误信息输出到处理装置200，接收到该错误信息的处理装置200进行基于错误信息的动作。错误信息例如是错误判定标志或指标等。基于错误信息的动作例如是平视显示器的显示停止等。
接口190进行电路装置100与处理装置200的电路间通信。例如，接口190是SPI(Serial Peripheral Interface：串行外设接口)方式或I2C方式等的串行通信接口。来自处理装置200的设定信息和控制信息例如被写入到寄存器电路170，电路装置100进行与该设定信息和控制信息对应的动作。
构成为能够从处理装置200经由接口190访问寄存器电路170。寄存器电路170包含错误检测结果寄存器176和阈值寄存器178。
错误检测结果寄存器176存储由错误检测电路150输出的错误检测结果。错误检测结果例如是表示显示图像是否被判定为错误的错误判定标志。处理装置200能够通过经由接口190从错误检测结果寄存器176读出错误检测结果来判断是否发生了错误。
从处理装置200经由接口190对阈值寄存器178设定阈值。错误检测电路150将指标与设定在阈值寄存器178中的阈值进行比较来进行错误检测。
存储部160是第2存储部。存储部160存储系数信息CF1、CF2和角度信息RT1、RT2。具体而言，处理装置200将CF1、CF2、RT1以及RT2发送到接口190，存储部160存储由接口190接收到的CF1、CF2、RT1以及RT2。图像处理电路135根据从存储部160读取的CF1、CF2、RT1以及RT2来进行映射处理和旋转处理。存储部160例如是存储器或寄存器。例如，存储器是RAM或非易失性存储器等半导体存储器。
另外，图像处理电路135、比较电路145以及错误检测电路150是逻辑电路。图像处理电路135、比较电路145以及错误检测电路150可以构成为单独的电路，或者也可以构成为通过自动配置布线等而一体化的电路。另外，这些逻辑电路的一部分或全部也可以通过DSP(Digital Signal Processor：数字信号处理器)等处理器来实现。在该情况下，将记述了各电路的功能的程序或指令集存储在存储器中，通过使处理器执行该程序或指令集来实现各电路的功能。
在图12中，电路装置100包含错误检测电路150和错误检测结果寄存器176，但电路装置100也可以不包含错误检测电路150和错误检测结果寄存器176。在该情况下，接口190也可以将比较电路145求出的指标输出到处理装置200，接收到该指标的处理装置200通过对指标和阈值进行比较来进行错误检测。处理装置200在检测到错误时，可以进行平视显示器的显示停止等错误应对动作。
图13是第1处理电路131和第2处理电路132的详细结构例。
第1处理电路131包含作为第1坐标计数器的坐标计数器10、作为第1旋转转换电路的旋转转换电路40、作为第1坐标转换电路的坐标转换电路20以及作为第1映射处理电路的映射处理电路30。关于这些动作，如在第1结构例～第4结构例中说明的那样。另外，在第1处理电路131仅进行变形校正的情况下，也可以省略旋转转换电路40。
第2处理电路132包含作为第2坐标计数器的坐标计数器50、作为第2旋转转换电路的旋转转换电路80、作为第2坐标转换电路的坐标转换电路60以及作为第2映射处理电路的映射处理电路70。坐标计数器50输出计数坐标CXYA2。旋转转换电路80根据角度信息RT2将计数坐标CXYA2旋转转换为输入坐标IXY2。坐标转换电路60根据系数信息CF2，通过使用了二次以上多项式的运算处理，将输入坐标IXY2坐标转换为输出坐标QXY2。映射处理电路70根据输出坐标QXY2，将图像IMA2映射处理为图像IMA3。这些电路的详细结构和动作与坐标计数器10、旋转转换电路40、坐标转换电路20以及映射处理电路30相同。另外，在第2处理电路132仅进行变形校正的情况下，也可以省略旋转转换电路80。
另外，第2处理电路132的结构不限于图13所示的结构。例如，也可以将记述了第2映射处理中的坐标对应的映射表输入到第2处理电路132中。第2处理电路132也可以根据映射表和角度信息RT2来进行第2映射处理和第2旋转处理。
对由比较电路145进行的图像比较进行说明。
图14是平视显示器所显示的图像IMG2的一例。在图14中，在仪表图像DIM上重叠有图标ICA。图标ICA以某种透过率与仪表图像DIM混合。在本实施方式中，电路装置100验证图标ICA是否被适当地显示。在该情况下，如图14的虚线矩形所示，包含图标ICA的区域被设定为ROI。
图15是从映射处理前的图像IMG1提取出的ROI的图像IMG1’。在ROI内包含图标ICA和作为图标ICA的背景图像的仪表图像DIM。图16是从图像IMG2提取出的ROI的图像IMG2’被逆映射处理的图像IMG3。在图16中示出了图标ICA未被正确地显示的例子。在该情况下，图像IMG1’和图像IMG3仅背景图像一致，图标ICA部分是不同的。因此，作为比较结果的指标所示的相似度低。当在图像IMG3中图标ICA也被正确地显示的情况下，相似度变高。表示相似度的指标可以取连续或阶段性的值。错误检测电路150对指标和阈值进行比较，而通过调整该阈值，能够调整允许何种程度的相似度。
作为表示图像IMG1’与图像IMG3的相似度的指标，比较电路145求出形状指标或可视性指标、或者这两者。另外，如上所述，比较电路145也可以求出SSD、SAD或NCC等来作为指标。另外，相似度越高指标越大或者相似度越高指标越小的情况会根据指标的计算方法而不同。阈值是针对形状指标和可视性指标而分别设定的。
首先，对形状指标的第1计算方法进行说明。比较电路145求出颜色空间中的图像IMG1’与图像IMG3的图像间距离。颜色空间例如是RGB或YCrCb。具体来说，比较电路145求出在颜色空间中图像IMG1’的像素和与该像素对应的图像IMG3的像素之间的距离的平方值。比较电路145在图像内对该平方值进行累计，将该累计值设为图像间距离。在第1计算方法中，图像间距离相当于形状指标。
接着，对形状指标的第2计算方法进行说明。如图17所示，比较电路145通过提取图像IMG1’的边缘来求出边缘图像EIMG1’。另外，比较电路145通过提取图像IMG3的边缘来求出图像IMG3的边缘图像。以下，将图像IMG3的边缘图像设为EIMG3。比较电路145对边缘图像EIMG1’和边缘图像EIMG3进行比较。具体来说，比较电路145使用索贝尔滤波器等从图像IMA1’和图像IMG3提取边缘，并求出边缘图像EIMG1’与边缘图像EIMG3的相关值。在第2计算方法中，边缘图像的相关值相当于形状指标。
接着，对可视性指标的计算方法进行说明。这里，将颜色空间设为YCrCb，但颜色空间也可以是RGB等。比较电路145根据图像IMG1’的Y通道来求出直方图。同样，比较电路145根据图像IMG1’的Cr通道、Cb通道来求出直方图，根据图像IMG3的Y通道、Cr通道、Cb通道来求出直方图。
比较电路145对Y通道中的图像IMG1’和图像IMG3的直方图进行互相关运算。互相关运算是指将两个直方图错开延迟(lag)而求出相关值，并且一边使延迟变化一边求出相关值的运算。如果使延迟变化而存在两个直方图的相关值变高的地方，则在该延迟中出现峰。峰有可能出现多个。同样，比较电路145对Cr通道、Cb通道中的图像IMG1’和图像IMG3的直方图进行互相关运算。
比较电路145调查在所有通道的互相关信号中出现峰的延迟值，并求出该延迟值中的最大的延迟值。该最大的延迟值相当于可视性指标。在图标与背景图像的颜色的对比度高的情况下，最大的延迟值增大，因此可视性指标表示图标与背景图像的颜色的对比度。可认为颜色的对比度越高，可视性越高，因此判断为可视性指标越大，相似度越高。
通过使用以上说明的形状指标或可视性指标、或者这两者，能够判断ROI的图像IMG1’与IMG3的相似度。在使用了形状指标的情况下，在图像IMG1’与图像IMG3一致时，相似度最高。即，也可以将相似度另称为一致程度。例如在使图标ICA旋转而显示的情况下，与图标ICA不旋转的情况相比，相似度下降。另一方面，可视性指标表示颜色的对比度，因此即使在图标ICA发生旋转的情况下，相似度也不怎么变化。因此，在允许图标ICA发生旋转的情况等时，只要使用可视性指标即可。另外，由于形状指标和可视性指标的计算方法不同，所以能够通过使用这两者来提高错误检测的精度。
6.电子设备、移动体
图18是包含本实施方式的电路装置的电子设备的结构例。电子设备300包含处理装置310、电路装置320、存储装置350、操作装置360、通信装置370以及平视显示器400。电路装置320与第1结构例～第5结构例的电路装置100对应。平视显示器400包含显示驱动器330、显示面板340。处理装置310例如是MCU等。在图18的结构例中，电路装置320与显示控制器对应。但是，本实施方式的电路装置100不仅能够应用于显示控制器，只要是生成平视显示器用的显示图像的电路装置，便能够应用。
处理装置310将存储于存储装置350的图像数据或由通信装置370接收到的图像数据向电路装置320传送。电路装置320进行针对图像数据的图像处理、显示时刻控制以及向显示驱动器传送的图像数据的生成等。另外，电路装置320也可以如在第5结构例中说明的那样进行图像数据的错误检测。显示驱动器330根据从电路装置320传送的图像数据和电路装置320的显示时刻控制，对显示面板340进行驱动而显示图像。显示面板340例如是液晶显示面板或EL显示面板等。存储装置350例如是存储器、硬盘驱动器或光盘驱动器等。操作装置360是用于供用户操作电子设备300的装置，例如是按钮、触摸面板或键盘等。通信装置370例如是进行有线通信的装置、或进行无线通信的装置。有线通信例如是LAN、USB等。无线通信例如是无线LAN、无线近距离通信等。
作为包含本实施方式的电路装置的电子设备，可设想车载用的电子设备、工厂设备等的显示终端、搭载于机器人的显示装置或信息处理装置等各种设备。车载用的电子设备例如是仪表面板等。信息处理装置例如是PC等。
图19是包含本实施方式的电路装置320的移动体的例子。移动体包含：本实施方式的电路装置320；以及处理装置310，其向电路装置320发送图像数据。处理装置310也可以根据来自电路装置320的平视显示器用显示图像的错误检测结果来进行错误应对处理。移动体包含平视显示器400和控制装置208。控制装置208是ECU(Electronic Control Unit：电子控制单元)，在ECU中组装电路装置320和处理装置310。另外，电路装置320也可以组装于平视显示器400。本实施方式的电路装置320例如可以组装于汽车、飞机、摩托车、自行车或船舶等各种移动体。移动体例如是具有发动机或电动机等驱动机构、方向盘或舵等转向机构、各种电子设备并且在地上、空中或海上移动的设备或装置。图19概略地示出了作为移动体的具体例的汽车206。平视显示器400具有透明屏幕，该透明屏幕设置在驾驶席与挡风玻璃之间。或者，平视显示器也可以将挡风玻璃作为透明屏幕来使用，向挡风玻璃投影图像。平视显示器400例如作为汽车206的仪表面板来发挥功能。
以上说明的本实施方式的电路装置包含坐标转换电路和映射处理电路。坐标转换电路进行从输入坐标向输出坐标的坐标转换。映射处理电路通过对所输入的第1图像进行基于输出坐标的映射处理，生成显示于显示面板的第2图像，所述显示面板用于在曲面显示器上显示图像。坐标转换电路通过进行使用了表示坐标转换的二次以上多项式的运算处理，来进行坐标转换。
多项式由乘法和加法的组合而组成，不包含积分等复杂的计算。因此，通过使用多项式来进行坐标转换，与进行包含积分等的计算的情况相比，缩短了运算时间。另外，在多项式中，输入坐标与输出坐标一一对应。映射处理电路使用该对应来逐个像素地进行映射，由此能够构成1个画面的图像。这样的逐次处理与临时生成表等进行映射处理的情况相比，更适合于实时处理。
另外，在本实施方式中，也可以是，坐标转换电路被输入多项式的系数信息和输入坐标，通过基于系数信息的运算处理，根据输入坐标求出输出坐标。
在使用了多项式的坐标转换中，通过多项式的系数来决定输入坐标与输出坐标的对应。即，通过将与曲面显示器的形状匹配的系数信息输入到坐标转换电路，实现适合于各种曲面显示器的变形校正。另外，由于坐标转换电路根据输入的输入坐标来求出输出坐标，所以能够如上述那样进行适合于实时处理的逐个像素的坐标转换。
另外，在本实施方式中，也可以是，坐标转换电路包含第1项运算电路～第n项运算电路和加法电路。也可以是，第i项运算电路根据系数信息来运算多项式的第1项～第n项的第i项。n为2以上的整数，i为1以上且n以下的整数。也可以是，加法电路将第1项运算电路～第n项运算电路所输出的第1项～第n项相加，输出输出坐标。
这样，由于单独设置与多项式的各项对应的项运算电路，所以并列处理各项的运算。由此，能够高速地处理坐标转换。
另外，在本实施方式中，也可以是，坐标转换电路包含第1运算电路和第2运算电路。也可以是，在将输入坐标设为(x，y)时，第1运算电路求出x2、y2和xy。也可以是，第2运算电路根据第1运算电路的运算结果和系数信息，求出输出坐标。
这样，第1运算电路运算乘以系数之前的项x2、y2和xy，第2运算电路对该x2、y2和xy乘以系数，由此运算多项式的各项，并将求出的项相加，由此能够输出输出坐标。这样，通过使用多项式，能够利用乘法和加法来构成坐标转换的运算。
另外，在本实施方式中，也可以是，多项式包含a1×x2、a2×y2、a3×xy、a4×x、a5×y以及a6作为第1项～第6项。也可以是，系数信息包含a1、a2、a3、a4、a5以及a6的信息作为第1系数～第6系数。也可以是，第2运算电路包含：第1项运算电路，其将a1与x2相乘；第2项运算电路，其将a2与y2相乘；第3项运算电路，其将a3与xy相乘；第4项运算电路，其将a4与x相乘；第5项运算电路，其将a5与y相乘；以及加法电路。也可以是，加法电路将第1项运算电路～第5项运算电路输出的第1项～第5项以及作为第6项的a6相加，输出输出坐标。
这样，针对多项式的二次项和一次项，单独设置与各项对应的项运算电路。由此，针对多项式的二次项和一次项，并列处理各项的运算，因此能够高速地处理坐标转换。
另外，在本实施方式中，也可以是，电路装置包含第1坐标计数器。也可以是，第1坐标计数器输出第1计数坐标，该第1计数坐标是基于像素时钟的像素单位的坐标。也可以是，坐标转换电路将第1计数坐标作为输入坐标来进行坐标转换。
根据本实施方式，第1坐标计数器根据像素时钟来逐个像素地输出第1计数坐标，坐标转换电路将该第1计数坐标转换为输出坐标。由此，按照像素时钟逐个像素地输出输出坐标，因此映射处理电路能够根据像素时钟逐个像素地进行映射处理。由此，实现适合于实时处理的变形校正。
另外，在本实施方式中，也可以是，输入坐标是与第1图像和第2图像中的一个图像上的坐标对应的坐标。也可以是，输出坐标是与第1图像和第2图像中的另一个图像上的坐标对应的坐标。
在映射处理电路进行反向扭曲的情况下，输入坐标与第2图像上的坐标对应，输出坐标与第1图像上的坐标对应。在映射处理电路进行正向扭曲的情况下，输入坐标与第1图像上的坐标对应，输出坐标与第2图像上的坐标对应。在使用了多项式的运算处理中，通过使用与反向扭曲对应的系数或与正向扭曲对应的系数，能够实现反向扭曲和正向扭曲中的任意一个。
另外，在本实施方式中，也可以是，映射处理电路包含：第2坐标计数器，其输出第2计数坐标，该第2计数坐标是基于像素时钟的像素单位的坐标；图像存储器，其存储第1图像；以及存储器控制电路，其进行图像存储器的访问控制。也可以是，存储器控制电路根据第2计数坐标将第1图像写入到图像存储器中，输出根据输出坐标从图像存储器读出的像素值作为第2图像的第1计数坐标处的像素值，由此进行映射处理。或者，也可以是，存储器控制电路将第1图像的第1计数坐标处的像素值作为输出坐标处的像素值写入到图像存储器中，输出根据第2计数坐标从图像存储器读出的像素值作为第2图像的第2计数坐标处的像素值，由此进行映射处理。
在前者的映射处理中，在从图像存储器读出第2图像时，第2图像的输入坐标处的像素值是根据第1图像的输出坐标处的像素值而取得的。由此，实现反向扭曲。在后者的映射处理中，在向图像存储器写入第1图像时，第1图像的输入坐标处的像素值移动到输出坐标处的像素值。由此，实现正向扭曲。
另外，在本实施方式中，也可以是，电路装置包含旋转转换电路。也可以是，旋转转换电路进行坐标的旋转转换，输出旋转后坐标。也可以是，坐标转换电路将旋转后坐标作为输入坐标来进行坐标转换。
这样，作为旋转后坐标的输入坐标被转换为输出坐标，根据该输出坐标来进行映射处理。由此，能够实现与曲面显示器的安装误差等对应的图像旋转、和与曲面显示器的图像变形对应的图像变形校正。
另外，在本实施方式中，也可以是，电路装置包含第1坐标计数器。也可以是，第1坐标计数器输出第1计数坐标，该第1计数坐标是基于像素时钟的像素单位的坐标。也可以是，旋转转换电路通过对第1计数坐标进行旋转转换来求出旋转后坐标。
根据本实施方式，第1坐标计数器根据像素时钟来逐个像素地输出第1计数坐标，旋转转换电路将该第1计数坐标转换为旋转后坐标，坐标转换电路将该旋转后坐标转换为输出坐标。由此，按照像素时钟来逐个像素地输出输出坐标，因此映射处理电路能够根据像素时钟来逐个像素地进行映射处理。由此，实现适合于实时处理的旋转校正和变形校正。
另外，在本实施方式中，也可以是，第1计数坐标是对第1图像和第2图像中的一个图像上的坐标进行指定的坐标。也可以是，输出坐标是对第1图像和第2图像中的另一个图像上的坐标进行指定的坐标。
在映射处理电路进行反向扭曲的情况下，第1计数坐标与第2图像上的坐标对应，输出坐标与第1图像上的坐标对应。在映射处理电路进行正向扭曲的情况下，第1计数坐标与第1图像上的坐标对应，输出坐标与第2图像上的坐标对应。在使用了多项式的运算处理中，通过使用与反向扭曲对应的系数或与正向扭曲对应的系数，能够实现反向扭曲和正向扭曲中的任意一个。另外，由于旋转转换电路对第1计数坐标进行旋转转换，因此在第1图像被映射处理为第2图像时，同时进行变形校正和图像旋转。
另外，在本实施方式中，也可以是，映射处理电路包含：第2坐标计数器，其输出第2计数坐标，该第2计数坐标是基于像素时钟的像素单位的坐标；图像存储器，其存储第1图像；以及存储器控制电路，其进行图像存储器的访问控制。也可以是，存储器控制电路根据第2计数坐标将第1图像写入到图像存储器中，输出根据输出坐标从图像存储器读出的像素值作为第2图像的第1计数坐标处的像素值，由此进行映射处理。或者，也可以是，存储器控制电路将第1图像的第1计数坐标处的像素值作为输出坐标处的像素值写入到图像存储器中，输出根据第2计数坐标从图像存储器读出的像素值作为第2图像的第2计数坐标处的像素值，由此进行映射处理。
在前者的映射处理中，在从图像存储器读出第2图像时，第2图像的第1计数坐标处的像素值是根据第1图像的输出坐标处的像素值而取得的。由此，实现包含图像旋转和变形校正的反向扭曲。在后者的映射处理中，在向图像存储器写入第1图像时，第1图像的第1计数坐标处的像素值被移动到输出坐标处的像素值。由此，实现包含图像旋转和变形校正的正向扭曲。
另外，在本实施方式中，也可以是，多项式是a1×x2+a2×y2+a3×xy+a4×x+a5×y+a6。
这样，通过使用了二次多项式的运算处理来进行坐标转换。二次多项式的各项最大仅包含两次乘法。因此，使用了二次多项式的坐标转换与使用更高次多项式的情况相比，运算负荷变小，更适合于实时处理。
另外，在本实施方式中，也可以是，电路装置包含第2映射处理电路和比较电路。也可以是，第2映射处理电路对第2图像进行作为映射处理的逆映射处理的第2映射处理，由此生成第3图像。也可以是，比较电路进行第1图像与第3图像的比较，输出比较的结果来作为用于进行第2图像的错误检测的信息。
这样，电路装置能够验证为了显示于平视显示器而被变形校正的图像是否合适。或者，在错误检测信息被输出到电路装置的外部的情况下，接收该错误检测信息的外部装置能够实施上述验证。映射处理电路将第1图像映射为第2图像，第2映射处理电路将第2图像逆映射为第3图像，因此在第2图像正常的情况下，第3图像应恢复为与第1图像相同的图像。比较电路通过对该第3图像和第1图像进行比较，能够输出用于进行第2图像的错误检测的信息。
另外，本实施方式的电子设备包含上述任意一项所记载的电路装置。
另外，本实施方式的移动体包含上述任意一项所记载的电路装置。
另外，如上所述对本实施方式详细进行了说明，而对本领域技术人员而言，应能容易理解未实际脱离本公开的新事项和效果的多种变形。因此，这样的变形例都包括在本公开的范围内。例如，在说明书或者附图中，至少一次与更加广义或者同义的不同用语一同记载的用语在说明书或者附图的任意部分都可以置换为该不同用语。另外，本实施方式及变形例的全部组合也包含在本公开的范围内。另外，电路装置、平视显示器、电子设备以及移动体的结构和动作等也并不限定于本实施方式所说明的内容，能够实施各种变形。

Claims (14)

1.一种电路装置，其特征在于，该电路装置包含：
坐标转换电路，其进行从输入坐标向输出坐标的坐标转换；以及
映射处理电路，其通过对所输入的第1图像进行基于所述输出坐标的映射处理，生成显示于显示面板的第2图像，所述显示面板用于在曲面显示器上显示图像，
所述坐标转换电路通过进行使用了表示所述坐标转换的二次以上多项式的运算处理，来进行所述坐标转换，
所述坐标转换电路被输入所述多项式的系数信息和所述输入坐标，通过基于所述系数信息的所述运算处理，根据所述输入坐标求出所述输出坐标，
所述坐标转换电路具有：
第1项运算电路～第n项运算电路，其中的第i项运算电路根据所述系数信息来运算所述多项式的第1项～第n项的第i项，这里，n为2以上的整数，i为1以上且n以下的整数；以及
加法电路，其将所述第1项运算电路～所述第n项运算电路所输出的所述第1项～所述第n项相加，输出所述输出坐标。
2.根据权利要求1所述的电路装置，其特征在于，
该电路装置包含输出第1计数坐标的第1坐标计数器，该第1计数坐标是基于像素时钟的像素单位的坐标，
所述坐标转换电路将所述第1计数坐标作为所述输入坐标来进行所述坐标转换。
3.根据权利要求2所述的电路装置，其特征在于，
所述输入坐标是与所述第1图像和所述第2图像中的一个图像上的坐标对应的坐标，
所述输出坐标是与所述第1图像和所述第2图像中的另一个图像上的坐标对应的坐标。
4.根据权利要求2所述的电路装置，其特征在于，
所述映射处理电路包含：
第2坐标计数器，其输出第2计数坐标，该第2计数坐标是基于所述像素时钟的像素单位的坐标；
图像存储器，其存储所述第1图像；以及
存储器控制电路，其进行所述图像存储器的访问控制，
所述存储器控制电路根据所述第2计数坐标将所述第1图像写入到所述图像存储器中，输出根据所述输出坐标从所述图像存储器读出的像素值作为所述第2图像的所述第1计数坐标处的像素值，由此进行所述映射处理，或者，
所述存储器控制电路将所述第1图像的所述第1计数坐标处的像素值作为所述输出坐标处的像素值写入到所述图像存储器中，输出根据所述第2计数坐标从所述图像存储器读出的像素值作为所述第2图像的所述第2计数坐标处的像素值，由此进行所述映射处理。
5.根据权利要求1所述的电路装置，其特征在于，
该电路装置包含旋转转换电路，该旋转转换电路进行坐标的旋转转换，输出旋转后坐标，
所述坐标转换电路将所述旋转后坐标作为所述输入坐标来进行所述坐标转换。
6.根据权利要求5所述的电路装置，其特征在于，
该电路装置包含输出第1计数坐标的第1坐标计数器，该第1计数坐标是基于像素时钟的像素单位的坐标，
所述旋转转换电路通过对所述第1计数坐标进行所述旋转转换来求出所述旋转后坐标。
7.根据权利要求6所述的电路装置，其特征在于，
所述第1计数坐标是对所述第1图像和所述第2图像中的一个图像上的坐标进行指定的坐标，
所述输出坐标是对所述第1图像和所述第2图像中的另一个图像上的坐标进行指定的坐标。
8.根据权利要求6所述的电路装置，其特征在于，
所述映射处理电路包含：
第2坐标计数器，其输出第2计数坐标，该第2计数坐标是基于所述像素时钟的像素单位的坐标；
图像存储器，其存储所述第1图像；以及
存储器控制电路，其进行所述图像存储器的访问控制，
所述存储器控制电路根据所述第2计数坐标将所述第1图像写入到所述图像存储器中，输出根据所述输出坐标从所述图像存储器读出的像素值作为所述第2图像的所述第1计数坐标处的像素值，由此进行所述映射处理，或者，
所述存储器控制电路将所述第1图像的所述第1计数坐标处的像素值作为所述输出坐标处的像素值写入到所述图像存储器中，输出根据所述第2计数坐标从所述图像存储器读出的像素值作为所述第2图像的所述第2计数坐标处的像素值，由此进行所述映射处理。
9.根据权利要求1～4中的任意一项所述的电路装置，其特征在于，
所述多项式是a1×x2+a2×y2+a3×xy+a4×x+a5×y+a6。
10.根据权利要求1～4中的任意一项所述的电路装置，其特征在于，该电路装置包含：
第2映射处理电路，其对所述第2图像进行作为所述映射处理的逆映射处理的第2映射处理，由此生成第3图像；以及
比较电路，其进行所述第1图像与所述第3图像的比较，输出所述比较的结果来作为用于进行所述第2图像的错误检测的信息。
11.一种电路装置，其特征在于，该电路装置包含：
坐标转换电路，其进行从输入坐标向输出坐标的坐标转换；以及
映射处理电路，其通过对所输入的第1图像进行基于所述输出坐标的映射处理，生成显示于显示面板的第2图像，所述显示面板用于在曲面显示器上显示图像，
所述坐标转换电路通过进行使用了表示所述坐标转换的二次以上多项式的运算处理，来进行所述坐标转换，
所述坐标转换电路被输入所述多项式的系数信息和所述输入坐标，通过基于所述系数信息的所述运算处理，根据所述输入坐标求出所述输出坐标，
所述坐标转换电路包含：
第1运算电路，其在将所述输入坐标设为(x，y)时，求出x2、y2和xy；以及
第2运算电路，其根据所述第1运算电路的运算结果和所述系数信息，求出所述输出坐标。
12.根据权利要求11所述的电路装置，其特征在于，
所述多项式包含a1×x2、a2×y2、a3×xy、a4×x、a5×y以及a6作为第1项～第6项，
所述系数信息包含a1、a2、a3、a4、a5以及a6的信息作为第1系数～第6系数，
所述第2运算电路包含：
第1项运算电路，其将所述a1与所述x2相乘；
第2项运算电路，其将所述a2与所述y2相乘；
第3项运算电路，其将所述a3与所述xy相乘；
第4项运算电路，其将所述a4与所述x相乘；
第5项运算电路，其将所述a5与所述y相乘；以及
加法电路，其将所述第1项运算电路～所述第5项运算电路所输出的所述第1项～第5项以及作为所述第6项的a6相加，输出所述输出坐标。
13.一种电子设备，其特征在于，该电子设备包含权利要求1～12中的任意一项所述的电路装置。
14.一种移动体，其特征在于，该移动体包含权利要求1～12中的任意一项所述的电路装置。
CN202010342413.3A 2019-04-29 2020-04-27 电路装置、电子设备以及移动体 Active CN111861865B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962839849P 2019-04-29 2019-04-29
US62/839,849 2019-04-29
JP2019-195845 2019-10-29
JP2019195845A JP7467883B2 (ja) 2019-04-29 2019-10-29 回路装置、電子機器及び移動体

Publications (2)

Publication Number Publication Date
CN111861865A CN111861865A (zh) 2020-10-30
CN111861865B true CN111861865B (zh) 2023-06-06

Family

ID=72921556

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010342413.3A Active CN111861865B (zh) 2019-04-29 2020-04-27 电路装置、电子设备以及移动体

Country Status (2)

Country Link
US (1) US11010866B2 (zh)
CN (1) CN111861865B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024015460A (ja) * 2020-12-16 2024-02-02 ソニーグループ株式会社 表示装置及び表示システム
JP2023010142A (ja) * 2021-07-09 2023-01-20 セイコーエプソン株式会社 回路装置、制御装置及びレーザープロジェクター

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011181096A (ja) * 2011-05-16 2011-09-15 Digital Media Professional:Kk コンピュータ・グラフィックス回路及びこの回路を用いて、二次元表示システムに表示される三次元オブジェクトに適用される二次元擬似ランダム・テクスチャ・パターンを、一次元テクスチャ画像を用いて生成する三次元コンピュータ・グラフィックス装置
CN103854252A (zh) * 2012-12-04 2014-06-11 中山大学深圳研究院 一种图像变形的实现方法及其实现装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100525425B1 (ko) * 2003-02-04 2005-11-02 엘지전자 주식회사 영상 워핑 방법 및 장치
JP4843377B2 (ja) * 2006-05-18 2011-12-21 株式会社東芝 画像処理装置及び画像処理方法
US8154554B1 (en) * 2006-07-28 2012-04-10 Nvidia Corporation Unified assembly instruction set for graphics processing
TWI511122B (zh) 2006-08-11 2015-12-01 Geo Semiconductor Inc 校正相機之影像失真的校準方法與系統
US8406562B2 (en) 2006-08-11 2013-03-26 Geo Semiconductor Inc. System and method for automated calibration and correction of display geometry and color
US8731334B2 (en) * 2008-08-04 2014-05-20 Siemens Aktiengesellschaft Multilevel thresholding for mutual information based registration and image registration using a GPU
JP2010164869A (ja) 2009-01-19 2010-07-29 Toshiba Corp 車内表示装置
JP5803184B2 (ja) * 2010-11-19 2015-11-04 株式会社リコー 画像投影装置、メモリアクセス方法
JP6125201B2 (ja) * 2012-11-05 2017-05-10 株式会社東芝 画像処理装置、方法、及びプログラム、並びに、画像表示装置
JP6120603B2 (ja) 2013-02-18 2017-04-26 三菱電機株式会社 表示制御装置および方法
JP2015075516A (ja) 2013-10-07 2015-04-20 ソニー株式会社 画像処理装置、画像処理方法、および表示装置
JP2015087619A (ja) 2013-10-31 2015-05-07 日本精機株式会社 車両情報投影システム及び投影装置
US20170351092A1 (en) * 2015-06-30 2017-12-07 Mitsubishi Electric Corporation Display control apparatus, display control method, and computer readable medium
US11113845B2 (en) * 2017-09-18 2021-09-07 Apple Inc. Point cloud compression using non-cubic projections and masks

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011181096A (ja) * 2011-05-16 2011-09-15 Digital Media Professional:Kk コンピュータ・グラフィックス回路及びこの回路を用いて、二次元表示システムに表示される三次元オブジェクトに適用される二次元擬似ランダム・テクスチャ・パターンを、一次元テクスチャ画像を用いて生成する三次元コンピュータ・グラフィックス装置
CN103854252A (zh) * 2012-12-04 2014-06-11 中山大学深圳研究院 一种图像变形的实现方法及其实现装置

Also Published As

Publication number Publication date
US11010866B2 (en) 2021-05-18
US20200342567A1 (en) 2020-10-29
CN111861865A (zh) 2020-10-30

Similar Documents

Publication Publication Date Title
JP3884442B2 (ja) ３次元慣性航法システムに基づいた入力システムおよびその軌跡推定方法
CN111861865B (zh) 电路装置、电子设备以及移动体
CN111353951B (zh) 电路装置、电子设备以及移动体
EP2362345B1 (en) Method and apparatus for high-speed and low-complexity piecewise geometric transformation of signals
CN111800589B (zh) 图像处理方法、装置和***，以及机器人
US20140085409A1 (en) Wide fov camera image calibration and de-warping
US10013761B2 (en) Automatic orientation estimation of camera system relative to vehicle
US10412308B2 (en) Display controller and display control method
JP2019149760A (ja) 回路装置及び電子機器
JP2007006175A (ja) 車両用画像生成装置および方法
CN113129224B (zh) 显示***、电子设备、移动体和显示方法
CN103997602B (zh) 摄像设备及其控制方法
US10848686B2 (en) Method of providing image and electronic device for supporting the method
WO2020092051A1 (en) Rolling shutter rectification in images/videos using convolutional neural networks with applications to sfm/slam with rolling shutter images/videos
JP2008543071A (ja) ワーピング演算ユニットを有する集積回路
JP7467883B2 (ja) 回路装置、電子機器及び移動体
JP5047912B2 (ja) 車載用画像処理装置及びその画像処理方法
JP7480602B2 (ja) 表示システム、電子機器、移動体及び表示方法
EP3671722A2 (en) Circuit device, electronic device, and vehicle
JP5047915B2 (ja) 車載用画像処理装置及びその画像処理方法
JP2016063352A (ja) 車載用表示装置
CN117252932A (zh) 一种ar-hud标定方法、***、设备及汽车
CN116883231B (zh) 鱼眼相机的图像数据生成方法、装置、设备及存储介质
US20240020793A1 (en) Image processing device and image processing method
US10701293B2 (en) Method for compensating for off-axis tilting of a lens

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant