JP2001136518A - コンパクト形高解像度パノラマ画面表示システム - Google Patents

コンパクト形高解像度パノラマ画面表示システム

Info

Publication number
JP2001136518A
JP2001136518A JP2000266655A JP2000266655A JP2001136518A JP 2001136518 A JP2001136518 A JP 2001136518A JP 2000266655 A JP2000266655 A JP 2000266655A JP 2000266655 A JP2000266655 A JP 2000266655A JP 2001136518 A JP2001136518 A JP 2001136518A
Authority
JP
Japan
Prior art keywords
pyramid
image processing
screen display
display device
view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000266655A
Other languages
English (en)
Inventor
Vishvjit Singh Nalwa
シング ナルワ ヴィシュヴジット
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia of America Corp
Original Assignee
Lucent Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lucent Technologies Inc filed Critical Lucent Technologies Inc
Publication of JP2001136518A publication Critical patent/JP2001136518A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/1066Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/14Beam splitting or combining systems operating by reflection only
    • G02B27/143Beam splitting or combining systems operating by reflection only using macroscopically faceted or segmented reflective surfaces
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/403Edge-driven scaling; Edge-based scaling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/17Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

(57)【要約】 (修正有) 【課題】 共通の仮想の光学中心を持つ数台のカメラに
よるコンパクト形高解像度全方向又はパノラマ画面表示
装置を提供する。 【解決手段】 各カメラ(52,54,56,58)は
角錐40の各反射面(48,42,44,46)に夫々
関連し、例えばカメラ52は面48からの反射を感知し
矢印60方向に対象を見る。同様に他のカメラは矢印6
2,64,66方向に、夫々が角錐の異なる反射面方向
を向くように、かつ各カメラの光学的中心が角錐の頂点
70を通るライン上でカメラに関連する反射面のベース
ラインに垂直な直線上の距離Xの所に配置する。(例え
ばカメラ54は72ライン上)その結果、各カメラは反
射視線の交点に共通の仮想光学中心90を持ち90°の
視野を有し、全体総合して連続360°の視野を形成す
る。カメラを仮想光学中心が相互に変位するよう配置し
て反射面画像の歪を除去し、狭いブラインド領域の形成
も可能である。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画面表示システム
に関し、特にパノラマ画面表示システムに関する。
【0002】
【従来の技術、及び、発明が解決しようとする課題】<
関連発明への相互参照>本出願は、下記の共通に譲渡さ
れた米国特許出願に関する。すなわち、米国特許5,7
45,305となった、「パノラマ画面表示装置」とい
う名称の特許出願第08/431,356号;特許出願
番号が08/431,354である、1995年4月2
8日付けの「パノラマ画面表示装置およびシステム」;
米国特許5,793,527となった、特許出願番号が
08/497673の「高解像度画面表示システム」;
米国特許5,539,483となった、特許出願番号が
08/497341の「パノラマ映写装置」;特許出願
番号が08/565501の、1995年11月30日
付けの「球形画面表示/映写装置」;特許出願番号が0
8/946443の、1997年10月7日付けの「オ
フセット仮想光学的中心を持つパノラマ画面表示システ
ム」;「立体パノラマ画面表示システム」という名称の
共通に譲渡された共存出願の米国特許出願;「支持スタ
ンドを含むパノラマ画面表示システム」という名称の共
通に譲渡された共存出願の米国特許出願に関する。
【0003】もっと効率的に動作させるためには、テレ
プレゼンスにより、いくつかのタスクを実行することが
望ましい。テレプレゼンスという用語は、遠隔地からユ
ーザに、ユーザがあたかもその遠隔地にいるかのような
感じを与える、視覚的またはその他のタイプの感覚的情
報を供給することを意味する。例えば、現在、多くの企
業は、テレプレゼンスを利用して会議を行っている。テ
レプレゼンスは、また遠隔地にいて学習したり、コンサ
ートおよびスポーツ・イベントのようなイベントを遠隔
地にいながら見たりする場合にも役に立つ。ユーザがい
ろいろな画面を切り換えることができるようにし、それ
により例えば、会議室をぐるりと見回したりするような
感じを与えれば、ユーザはもっと現実的なテレプレゼン
スを体験する。
【0004】従来は、ユーザにいくつかの画面を見せる
ために、異なる光学的中心を持つ数台のカメラが使用さ
れた。図1はそのような状況を示す。図1は、光学的中
心を、それぞれ、10、12、14および16に持つ、
カメラ2、4、6および8を示す。ユーザが画面を変え
たいと思った場合、そのユーザは、単にカメラを切り換
えるだけでよい。もっと複雑なシステムの場合には、ユ
ーザが画面を切り換えたいと思った場合、そのユーザ
は、光学的中心10、12、14または16からばかり
ではなく、別の光学的中心18、20、22、24また
は26からも画面を入手することができた。18、2
0、22、24および26のような光学的中心に関連す
る場面は、選択した光学的中心に最も近い二つのカメラ
からの画面を使用して、入手することができる。例え
ば、光学的中心18からの画面は、カメラ2および4か
らの画面を使用し、光学的中心18からの画面をシミュ
ーレートするために、上記二つの画面の間で補間を行う
ことにより入手された。このような手順を使用した場合
には、画面が不均一になった。その上、このような補間
画面を形成するには、大量の計算能力と時間が必要にな
り、そのため、この技術はコストが高いし、ユーザのコ
マンドに対する応答も遅かった。このような計算上の間
接費がかさむので、そのシステムを同時に使用すること
ができるユーザの数は制限された。
【0005】
【課題を解決するための手段】本発明の一実施形態は、
その内部において、数台のカメラが、共通の光学的中心
を効果的に持つ、全方向、すなわち、パノラマ画面表示
装置を提供する。この場合、上記カメラの中の少なくと
も一台の視野の方向は、平面ミラーにより変えられる。
各カメラの視野は、全体として、360度の連続した一
つの視野を構成するように配置される。ユーザは360
度の視野をぐるりと見渡すことができる。その場合、従
来の技術で使用した補間の計算上の諸経費を使わなくて
も、単に一台のカメラ、一台以上のカメラ、または複数
のカメラの組合せの出力を使用するだけで、各視野は同
じか殆ど同じ光学的中心を持つ。上記配置は、一人の参
加者が、より自然な形で、会議室を見ることができるよ
うにすることにより、仮想の会議室の使用状態を改善す
るのに使用することができる。この自然な形は、ある特
定の時間に、画面を変えるために単に自分の頭の向きを
変える、実際の会議室に座っている参加者に密接に対応
する。
【0006】本発明の他の実施形態の場合には、複数の
カメラは、各カメラが、中空でないか、中空の角錐のよ
うな、中空でないか、中空の多面体の、異なる反射面の
方を向くように位置されている。そのため、各カメラ
は、角錐内に位置する仮想の光学的中心を持つことにな
る。上記複数のカメラは、その仮想の光学的中心が相互
に変位するように位置している。上記の変位により、角
錐の反射面の縁部から受ける画像の歪を除去する、狭い
ブラインド領域が形成される。
【0007】本発明のさらに他の実施形態の場合には、
複数の仮想の光学的中心を使用することにより、立体パ
ノラマ画面が形成される。角錘のような、一つの反射多
面体素子は、角錐内の第一の位置に、ほぼ同じ位置の仮
想の光学的中心の一つのグループを形成するために、第
一の組の複数のカメラの各カメラの視野の方向を変え
る。角錘は、また、角錐内の第二の位置に、ほぼ同じ位
置の仮想の光学的中心の一つのグループを形成するため
に、第二の組の複数のカメラの各カメラの視野の方向を
変える。一方のパノラマ画像が、ユーザの左目に映り、
他方のパノラマ画像が、ユーザの右目に映った場合、上
記第一および第二の仮想の光学的中心からのパノラマ画
像は、立体パノラマ画像を形成する。
【0008】本発明のさらに他の実施形態の場合には、
反射面を持つ角錐のような多面体は、コンパクトなパノ
ラマ画面表示装置を形成するために、相互に底面を接す
るように、すなわち、入れ子状に積み重ねられる。同じ
またはほぼ同じ仮想の光学的中心を持つ、多くのカメラ
を使用することができるような方法で、複数の反射多面
体が使用される。多くのカメラを使用すると、大きな画
面が多くのより小さい領域に分割される。この場合、個
々のカメラは、それぞれのより小さな領域を写す。各カ
メラは、より小さい領域を映すので、ユーザは、解像度
が改善された画面を見ることになる。
【0009】本発明のさらに他の実施形態の場合には、
角錐のような反射多面体は、角錐の頂点を通過するポス
トにより支持される。その後、複数のカメラが上記ポス
トに装着され、装着用構造体と、個々のカメラを支持す
るための構造体を持つパノラマ画面表示装置が形成され
る。
【0010】本発明のさらに他の実施形態の場合には、
上記パノラマ画面表示装置の共通の仮想の光学的中心に
カメラを設置することにより、ユーザは、ほぼ球形の画
面を見ることができる。球形の画面を改善するために、
共通の仮想の光学的中心のところのカメラを広角レンズ
として使用することができる。
【0011】本発明のさらに他の実施形態の場合には、
画面表示装置は、任意のタイプの画像処理装置を含むこ
とができる。上記画像処理装置が、カメラまたは他のタ
イプの画像捕捉装置である場合には、ユーザに対してパ
ノラマ画像が捕捉され、画像処理装置が、プロジェクタ
または他のタイプの画像処理装置である場合には、ユー
ザはパノラマ画像を見ることになる。
【0012】
【発明の実施の形態】図2は、ユーザに対して360度
の画面を供給するための、四台のカメラ・システムであ
る。この場合、上記カメラは、それぞれ、共通または殆
ど共通の仮想光学的中心を持つ。角錐40は、反射面4
2、44、46および48を持ち、中空であっても、中
空でなくてもよいし、または角錐台であってもよい。好
適な実施形態の場合には、各反射面は、底面50に平行
な平面に対して45度の角度を持ち、錐40の頂点を通
る。カメラ52、54、56および58は、角錐の反射
面48、42、44および46にそれぞれ関連する。上
記カメラとしては、光学的スキャナのような画像収集装
置を使用することができる。その結果、カメラ52は、
面48からの反射を感知して、矢印60の方向に対象物
を見ることができる。カメラ54は、面42からの反射
を感知して、矢印62の方向に対象物を見る。カメラ5
6は、面44からの反射を感知して、矢印64の方向に
対象物を見る。また、カメラ58は、面46からの反射
を感知して、矢印66の方向に対象物を見る。各カメラ
は、90度の視野を持つ。しかし、もっと広い視野を使
用することができ、重畳している画面に関連するピクセ
ルを削除または組合せることにより、画像の重畳する部
分を除去することができる。角錐40上のその関連する
反射面からの反射を感知する四台のカメラの組合せによ
り、角錐40の周囲に360度の画面領域が形成され
る。ミラーが角錐の底面に対して45度の角度を持って
いる場合には、各カメラの光学的中心を、底面50に平
行で、角錐40の頂点70と交差する平面上に位置させ
ることが望ましい。各カメラの光学的中心は、また頂点
70を通るラインの上に位置していなければならない
し、またカメラに関連する反射面のベースラインに垂直
でなければならない。例えば、カメラ54の光学的中心
は、ライン72上に位置する。ライン72は、反射面4
2のベースライン74に垂直である。ライン72は、頂
点70を通る平面内にあり、底面50に平行である。同
様に、カメラ56の光学的中心は、ベースライン82に
垂直なライン80上に位置していて、カメラ52の光学
的中心は、ベースライン86に垂直なベースライン84
上に位置している。
【0013】各カメラの光学的中心は、頂点70から距
離Xのところの、上記ラインの一つの上に位置してい
て、各カメラは、底面50へ垂直な方向を指している光
学軸、または視線の方向を持つ。(上記距離Xは、反射
面が、上記カメラの視野の分だけを反射するような、長
さでなければならない。しかし、カメラが移動して反射
面に接近すると、反射面の欠陥がよりハッキリと見える
ようになる。)光学的中心をこのような位置に設置する
と、各カメラは、位置90のところ、またはほぼこの位
置に位置する仮想光学的中心を共有することになる。仮
想の光学的中心90は、頂点70を通るライン上の頂点
70から距離Xのところに位置していて、ベース50に
垂直である。
【0014】この実施形態の場合、角錐の構成について
説明してきたが、カメラがほぼ同じ位置にある仮想の光
学的中心を持つように視野の方向を曲げるために、異な
る形状の平面ミラーの幾何学的配置を使用することがで
きる。例えば、中空でない、中空のまたは部分的多面体
を使用することができる。さらに、角錐構成の場合に
は、底面および頂点は物理的に存在していなくてもよい
し、底平面または端部および頂点または端部のような概
念上の補助手段であると見なすことができる。
【0015】図3は、角錐40の他の図である。この場
合、図面を簡単にするために、カメラ54だけを図示し
てある。仮想の光学的中心を角錐40内の位置90また
はその付近に位置させるために、カメラ54はライン7
2上に位置する。カメラ54が、ベース50に垂直な方
向に90度の視野を持っている場合には、またカメラ5
4の光学的中心が、ライン72に沿って頂点70から距
離Xだけ離れている場合には、カメラ54は、矢印62
の方向に90度の視野を持つ。同じように、カメラ5
6、58および52は、矢印64、66および60の方
向に、それぞれ90度の視野を持つ。この配置は、安い
コストで、360度の視野領域を形成する。何故なら、
90度の視野を持つカメラは、比較的安い光学系を持つ
からである。
【0016】図4は、角錐40の平面図である。図4
は、ライン72沿いのカメラ54の光学的中心の位置を
示す。ライン72は、頂点70を通る平面内にあり、底
面50に平行でなければならない。ライン72は、ま
た、角錐40のベースライン74に垂直でなければなら
ない。カメラの光学的中心は、ライン72に沿って頂点
70から距離X、またはほぼXだけ離れた位置に位置し
ていなければならない。点100は、頂点70からのラ
インが、ベース50に垂直に交差するある位置のベース
50上に位置する。同様に、カメラの光学的中心56、
58および52は、それぞれ、ライン76、80および
84に沿って、距離XまたはXにほぼ等しい距離だけ離
れた位置に位置している。
【0017】図5は八つの側面を持つ角錐120であ
る。角錐120は、各面122が、頂点130を通り、
ベース124に平行な平面と45度の角度を形成する反
射面122を持つ。図2の四つの面を持つ角錐の場合と
同様に、図5の各反射面はそれに関連するカメラを持つ
ことができる。各カメラの光学的中心は、頂点130を
通る平面内にあり、ベース124に平行である。上記ラ
インは、位置決めをするカメラに関連する反射面のベー
スライン132に垂直である。八つの面を持つ角錐を使
用すると、360度の視野を得るのに、45度の水平視
野しか持たないカメラを使用することができるという利
点がある。45度の視野しか持たないカメラは、安いコ
ストの光学系を持ち、比較的安価な部材を使用して、3
60度の視野を形成することができる。
【0018】図6は、角錐120の平面図である。図5
のところで説明したように、各カメラの光学的中心は、
頂点130を通り、ベース124に平行な平面内にある
ライン134に沿って位置する。上記光学的中心は、適
当なベースライン132に垂直なライン134に沿っ
て、距離X、またはほぼXに等しい距離だけ離れた位置
に位置している。点140は、ベース124と 頂点1
30を通り、ベース124に垂直なラインとの交点のと
ころのベース124上に位置する。
【0019】もっと多くの、またはもっと少ない反射面
を持つ多面体または角錐を使用することができる。もっ
と多くの面を持つ角錐を使用する際に得られる利点は、
中程度から狭い視野を持つカメラを使用することができ
るということである。中程度の視野を持つカメラは、比
較的安価な光学系を持つ。角錐で使用される面の数は、
多数のカメラを供給するためのコストにより幾分制限さ
れる。三つの反射面を持つ角錐により、360度の視野
を供給することができる。360度の視野を供給するた
めに、三つの面を持つ角錐だけを使用すると、コストが
高くなる恐れがある。本発明のこの実施形態は、それぞ
れが120度の視野を持つ、三つのカメラを使用する
が、上記の広い視野を持つカメラは、比較的高価な光学
的部材を使用する。
【0020】360度視野を必要としない用途の場合に
は、角錐の各反射面に関連するカメラを持たない画面表
示装置を組み立てることができる。不必要なカメラを除
去することができる他に、部分的角錐または部分的多面
体である反射素子を使用することにより、不必要な角錐
多面体を除去することができる。
【0021】この実施形態の場合、角錐の構成について
説明してきたが、カメラがほぼ同じ位置にある仮想光学
的中心を持つように視野の方向を変化させるために、異
なる形状の平面ミラーの幾何学的配置を使用することが
できる。例えば、中空でない、中空のまたは部分的多面
体を使用することができる。さらに、角錐構成の場合に
は、ベースおよび頂点が物理的に存在していなくてもよ
いし、底平面または端部および頂点または端部のような
概念上の補助手段であると見なすことができる。
【0022】図7は、図2−図4の画面表示装置のよう
な、画面表示装置のカメラにより入手したデータを制御
するためのシステムのブロック図である。カメラ52、
54、56および58は、角錐40のその関連反射面に
より、360度の視野を入手する。カメラ52、54、
56および58の画像信号、または出力信号は、それぞ
れ、アナログ−デジタル(A/D)変換器160、16
2、164および166を通る。上記カメラの出力は、
ピクセルのストリームと見なすことができ、上記A/D
変換器の出力は、カメラからのピクセルを表わすデータ
であると見なすことができる。上記A/D変換器の出力
は、マルチプレクサ170を通過する。マルチプレクサ
170により、各A/D変換器からのピクセル・データ
は、メモリ172に到着することができる。コントロー
ラ174は、A/D変換器の出力をメモリ172に記憶
するようにマルチプレクサ170の選択ラインを循環さ
せる。マルチプレクサ170は、カメラのピクセル速度
の四倍の速度で切り換えられる。もっと多くの、または
もっと少ないカメラを使用する場合には、マルチプレク
サ170が切り換えられる速度は、それに応じて速くな
ったり、遅くなったりする。マルチプレクサ170を使
用しないで、各A/D変換器の出力を別のメモリに記憶
することもできる。コントローラ174は、マルチプレ
クサ170の切り換えを制御するカウンタ、およびメモ
リ172にアドレスするために使用されるカウンタに、
制御信号を送るマイクロプロセッサにより実行される。
上記カウンタへの上記制御信号は、リセット、イネーブ
ルおよび始動オフセットを含む。
【0023】ピクセル情報がメモリ172に送られるの
で、メモリ172は、あるシーンの360度の視野を含
む。メモリ172に記憶されたピクセル情報は、デジタ
ル−アナログ(D/A)変換器176およびビデオ・デ
ィスプレイ178に送られる。D/A変換器176を通
して、ビデオ・ディスプレイ178に送られる、メモリ
172の実際の部分は、ユーザ入力装置180により制
御される。ユーザ入力装置180としては、マウス、ジ
ョイスティックまたはキーボードのような通常の装置を
使用することができる。ユーザは、自分の視野を右に移
動したい場合には、ジョイスティックを右に傾けるだけ
でよいし、自分の視野を左に移動したい場合には、ジョ
イスティックを左に傾けるだけでよいし、また視野をそ
のままにしておきたい場合には、ジョイスティックを中
央に維持しておけばよい。ユーザ装置180の入力に従
って、コントローラ174は、メモリ172へアドレス
するために使用されるオフセットおよび始動アドレスを
変化させる。
【0024】図8は、カメラが供給するデータと、ユー
ザが見る画面との間の関係を示す。複数のカメラが仮想
の光学的中心を共有しているので、画面はシリンダ状の
画面であると見なすことができる。セクター200は、
カメラ52が供給する情報を表わすものと見なすことが
できるし、セクター202は、カメラ54が供給する情
報を表わすものと見なすことができるし、セクター20
4は、カメラ56が供給する情報を表わすものと見なす
ことができるし、セクター206は、カメラ58が供給
する情報を表わすものと見なすことができる。各セクタ
ーのシリンダの表面は、コラムの集合体を見なすことが
できる。各コラムはピクセルからなる。例えば、セクタ
ー200は、コラム210、212、214および21
6を含む複数のコラムの集合体と見なすことができる。
同様に、カメラ54の出力は、セクター202のコラム
218を含む複数のコラムの集合体と見なすことができ
るし、カメラ58の出力は、セクター206のコラム2
20のような複数のコラムを含むことができる。
【0025】図9は、ユーザ入力装置180からの信号
に基づいて、異なる画面に容易にアクセスするために、
メモリ172がどのように分割されるのかを示す。セク
ション230、232、234および236は、それぞ
れ、セクター206、200、202および204に対
応する。各セクション230、232、234および2
36は、メモリ172の一つのブロックであると見なす
ことができる。メモリ172の上記ブロックは、シーケ
ンシャルなアドレスを持つ複数のコラムに分割される。
メモリ・セグメント230の第一のコラムは、セクター
206のピクセルの第一のコラムに対応する。一つのコ
ラムに関連するメモリ位置の数は、特定のコラムの各ピ
クセルに対して一つの位置を持つのに、少なくとも十分
なものでなければならない。例えば、図8の複数のピク
セルからなる一つのコラムが、1、000のピクセルを
持っている場合には、図9のメモリ・セグメントに関連
する各コラムは、少なくとも1、000の位置を持って
いなければならない。特定のメモリ・セグメントに関連
するコラムの数は、図8のシリンダの特定のセクション
に関連するコラムの数に、少なくとも等しいものでなけ
ればならない。
【0026】あるカメラが水平方向に走査した場合に
は、カウンタが発生したアドレスへのオフセットを単に
変化させるだけで、シーケンシャルなピクセルが、特定
のメモリの隣接コラムの、恐らく異なる列に描かれる。
全体の書き込みアドレスは、カウンタの出力に、上記オ
フセットを加算することにより発生する。このオフセッ
トは、水平方向に走査したピクセルの受信速度で変化す
る。水平方向の走査が終了した後で、カウンタは増大
し、再びオフセットが水平方向の走査速度で変化する。
その結果、書き込みサイクル中に、メモリの特定のセグ
メントをアドレスした場合には、水平方向のピクセル走
査速度でオフセットを変化させることにより、また垂直
方向の走査速度でカウンタを増大することにより、コラ
ムがアドレスされる。このタイプのアドレス・スキーム
は、各メモリ・セグメント内のコラムをアクセスするた
めに使用される。書き込みサイクル中に、異なるメモリ
・セグメントをアドレスする場合には、書き込みセグメ
ントのオフセットが、カウンタ出力およびコラム・オフ
セットの合計値に加算される。この書き込みセグメント
のオフセットにより、メモリ・セグメント230、23
2、234および236にアドレスすることができる。
上記セグメント・オフセットは、マルチプレクサ170
が、切り換えられる速度と同じ速度で変化する。
【0027】類似の方法で、メモリ172からピクセル
・データが読み出される。カウンタ出力および二組のオ
フセットの合計値は、読み出しアドレスを発生するのに
使用される。最初のスタート・コラムが取り出される
と、ビデオ・ディスプレイの水平方向の走査速度と同じ
速度で読み出しコラム・オフセットを切り換えることに
より、読み出しアドレスが発生する。一回の水平方向の
走査分のデータの読み出しが行われた後で、読み出しカ
ウンタが増大し、読み出しコラム・オフセットが、上記
ディスプレイの水平方向の走査速度に等しい速度で変化
する。その結果、オフセット・アドレスが、ディスプレ
イの水平方向の表示速度で変化し、カウンタが、ディス
プレイの垂直方向の走査速度に等しい速度で増大する。
ビデオ・ディスプレイが要求する速度より、速い速度で
も、遅い速度でも、データを読み出すことができる。し
かし、より速い速度で読み出した場合には、バッファ・
メモリを使用する必要があり、より遅い速度で読み出し
た場合には、見ている人には、ビデオ・ディスプレイが
揺れ動くように見える場合がある。
【0028】図8のピクセルのシリンダ上の配置は、通
常、平らなディスプレイか、またはほぼ平らなディスプ
レイ上に表示されることに留意されたい。その結果、画
像は、シリンダ状の面と平らな面との間での変換を補償
して表示される。このような表示は、普通のデジタル信
号処理集積回路の簡単な変換アルゴリズムを使用して行
われる。このようなタイプの変換方法は、当業者にとっ
ては周知であり、1993年マサチューセッツ州、リー
ディング所在の、アディソン−ウェズリー社の、ビシュ
ビット(Vishvjit) S.ナルワ(Nalw
a)著の「コンピュータ・ビジョンの案内ツアー」に記
載されている。上記変換は非常に解像度の高いディスプ
レイによっても行うことができる。
【0029】ユーザが選択した画面が、カメラ52のよ
うな特定のカメラの画面に正確に一致している場合に
は、コラム240−248が、メモリ170から読み出
されることに留意されたい。コラム240はセグメント
232の最初のコラムであり、コラム248はセグメン
ト232の最後のコラムである。ユーザが反時計方向に
視野を移動しようと考えた場合には、スタート・コラム
は右に向かって移動し、その結果、読み出し動作はコラ
ム246から開始し、コラム250で終了する。コラム
246は、カメラ52からのピクセル・データを含むメ
モリ・セグメント232に関連する第二のコラムであ
り、コラム250は、カメラ56に関連するピクセル・
データの最初のコラムであることに留意されたい。ユー
ザが視野を移動するにつれて、スタート・コラムはユー
ザのコマンドに従って移動する。例えば、ユーザが視野
を反時計方向に移動するように指示した場合には、図9
のスタート・コラムは、右方向に移動し、同様に、ユー
ザが視野を時計方向に移動するように指示した場合に
は、スタート・コラムは左方向に移動する。今までと同
様に、コラムはオフセットによりアドレスされ、オフセ
ットがメモリ・セグメント間の移動を含んでいる場合に
は、読み出しセグメントのオフセットが、コラム・オフ
セットとカウンタ出力との合計値に加算される。
【0030】図10は、コントローラ174のブロック
図である。コントローラ174は、マイクロプロセッサ
270およびメモリ272を含む。メモリ272は、R
AMおよびROMを含む。プロセッサ270は、ライン
274上で、ユーザ入力装置180からのコマンドを受
信する。マイクロプロセッサ270は、カウンタ276
のスタート、ストップおよびリセットを制御する。カウ
ンタ276は、マルチプレクサ170の選択ラインを制
御する。カウンタ276は、カメラの水平方向の走査速
度の四倍である速度をカウントする。書き込みアドレス
・ゼネレータ278は、メモリ172に対して書き込み
アドレスを行う。書き込みアドレス・ゼネレータ278
は、カウンタ、オフセットを記憶するためのレジスタ、
およびオフセットとカウンタ出力とを加算するための加
算装置を含む。マイクロプロセッサ270は、書き込み
アドレス・ゼネレータ278が使用するオフセット選択
およびカウンタを制御する。書き込みアドレスは、図9
のところで説明したように形成される。読み出しアドレ
ス・ゼネレータ280は、メモリ172に読み出しアド
レスを供給する。読み出しアドレス・ゼネレータ280
は、カウンタ、オフセットを記憶するためのレジスタ、
およびオフセットとカウンタ出力とを加算するための加
算装置を含む。書き込みアドレス・ゼネレータ278の
場合のように、マイクロプロセッサ270は、読み出し
アドレス・ゼネレータ280のオフセット選択およびカ
ウンタを制御する。マイクロプロセッサ270は、また
ユーザ入力180からライン274上に供給された入力
に基づいて、カウンタが使用するスタート・コラムを制
御する。
【0031】メモリ172が、ポートを二つ持つメモリ
である場合には、書き込みアドレスおよび読み出しアド
レスは、別々にメモリ172に送られる。メモリ172
が、ポートを一つしか持たないメモリである場合には、
書き込みアドレスおよび読み出しアドレスは、メモリ1
72に対して多重化される。
【0032】図11は、5番目のカメラを含む、図2の
画面表示システムである。カメラまたは画像収集装置4
00は角錐内に位置するが、カメラ400の光学的中心
は仮想の光学的中心90のところ、またはそれに近い位
置に位置している。カメラ400は、矢印410の方向
で対象物を感知する。残りの4台のカメラの画面と結合
している、結果として得られる画面は、ほぼ球形の画面
である。図11の複数のカメラの代わりに画像収集装置
を使用した場合には、ほぼ球形の画面表示システムは、
ほぼ球形の投影システムになる。カメラまたは映写装置
は、三つ、四つまたはそれ以上の面を持つ角錐を備え
る、画面表示/映写装置の仮想の光学的中心に置くこと
ができることに留意されたい。また、カメラ400の視
野内の不必要な障害物を避けるために、反射面のベース
の縁部420を斜めにする必要があることにも留意され
たい。カメラまたは画像処理装置400を移動させるこ
とにより、ベースの縁部420による不必要な画像のア
ーティファクトを避けることもできる。装置400は、
その光学的中心が矢印410の方向に、仮想の光学的中
心90から離れた位置に、位置するように移動させなけ
ればならない。装置400の光学的中心は、この装置の
使用した視野が縁部420を含まないように位置させな
ければならない。
【0033】図12は、図2の角錐の平面図である。図
2の場合には、カメラ52、54、56および58は、
ベース50の方向へ上方へ移動している。その結果、カ
メラ52、54、56および58に対応する仮想の光学
的中心500、502、504および506は、それぞ
れ、仮想の光学的中心90から離れる方向に移動する。
カメラ52が、角錐の縁部により影響を受けないライン
508および510の間の画像を捕捉するように、また
カメラ54が、角錐の縁部により影響を受けないライン
512および514の間の画像を捕捉するように、また
カメラ56が、角錐の縁部により影響を受けないライン
516および518の間の画像を捕捉するように、また
カメラ58が、角錐の縁部により影響を受けないライン
520および522の間の画像を捕捉するように、仮想
の光学的中心に移動させることが望ましい。そうするこ
とにより、カメラは、狭い平らな領域から角錐により歪
んだ画像を捕捉しない。より詳細に説明すると、平らな
領域524、526、528および530は使用されな
いし、ブラインド領域が形成される。これにより、反射
角錐の縁部により歪んだ画像領域を除去するという利点
が得られる。視野の上記部分を除去することにより、縁
部のところの画像のアーティファクトを補償する画像処
理をそれほど行わなくてもすむようになる。平面52
4、526、528および530を縁部のアーティファ
クトを避けるのに十分薄くなるように、仮想の光学的中
心500、502、504および506を接近して位置
させることが望ましい。上記の薄い平面を維持すること
により、その共通の境界のところの画像を処理する必要
がなくなり、一方、ユーザが目で見ることができる影響
が最小限度まで軽減する。
【0034】図13は、平面領域524、526、52
8および530にそれぞれ位置する、影の部分560、
562、564および566を含む、図12の角錐であ
る。上記影の部分により、カメラに入る不必要な光の量
が少なくなる。類似の影の部分を、装置400と一つま
たはそれ以上の他の画像処理装置との間のブラインド領
域内に置くことができる。また、ベース50の後ろの光
源から、カメラ52、54、56および58に入る不必
要な光の量を減らすために、影の部分の縁部が、ベース
の縁部を越えて延びる状態で、ベース50上に影の部分
を置くことができる。
【0035】図14は、ベースとベースとが接するよう
に配置された、反射角錐602および604である。ベ
ースは、相互に接することもできるが、間に間隔を置く
こともできる。反射角錐602および604は、それぞ
れ、四つのファセットを含む。角錐602は、反射ファ
セット608、610、612および614を含む。反
射角錐604は、反射面616、618、620および
622を含む。角錐602は頂点624を含み、角錐6
04は頂点626を含む。頂点624および626は、
各角錐のベースに垂直なライン628上に位置する。各
角錐は、反射面によりその視野の方向が変えられてカメ
ラのような四つの画像処理装置を含む。角錐602の場
合には、その光学的中心が点630に位置する第一のカ
メラは、矢印632の方向に視野を持つ。この場合、視
野の方向は反射面608により変えられる。光学的中心
が点634に位置する第二のカメラは、矢印636の方
向に視野を持つが、その視野の方向は、反射面610に
より変えられる、光学的中心が点638に位置する第三
のカメラは、矢印640の方向に視野を持つが、その視
野の方向は反射面612により変えられる。光学的中心
が点642に位置する第四のカメラは、矢印644の方
向に視野を持つが、その視野の方向は反射面614によ
り変えられる。反射性角錐604の場合には、その光学
的中心が点646に位置する第一のカメラは、矢印64
8の方向に視野を持つ。この場合、上記視野の方向は面
616により変えられる。光学的中心が点650に位置
する第二のカメラは、矢印652の方向に視野を持つ
が、その視野の方向は面618により変えられる。光学
的中心が点654に位置する第三のカメラは、矢印65
6の方向に視野を持つが、その視野の方向は面620に
より変えられる。光学的中心が点658に位置する第四
のカメラは、矢印660の方向に視野を持つが、その視
野の方向は面622により変えられる。各角錐に関連す
るカメラは、図2、図3、図4、図11および図12に
示すカメラの位置に類似した位置に設置されていて、そ
のため、四つのカメラからなる各組は、共通の仮想の光
学的中心を共有するか、その関連角錐に近接して位置す
る仮想の光学的中心を持つ。カメラの各組は、またその
関連角錐内にオフセット仮想光学的中心を持つことがで
きる。カメラは、各角錐に関連するカメラが、二つの角
錐のベースが合流するライン628に沿って、共通の仮
想の光学的中心を共有するように配置させることができ
る。また、そのオフセット仮想光学的中心が、二つの角
錐のベースが合流するライン628上の一点の周囲に集
まるようにカメラを配置することもできる。
【0036】図14の構造体は、図2、図3および図4
のところで説明した画面表示装置と比較すると、垂直方
向の視野が広くなっている。図14の画面表示装置は、
同じまたは殆ど同じ垂直方向の視野に対して、一台のカ
メラではなく、二台のカメラにより、垂直方向の視野を
広げている。カメラの代わりに画像処理装置を使用し
て、プロジェクタを作ることもできることに留意された
い。また反射角錐602および604を回転させて相互
に変位させることもできることに留意されたい。この変
位した関係は、両方の角錐の頂点を通る軸を中心にし
て、角錐の一方または両方を回転させることにより得ら
れる。例えば、上記軸はライン628と重なっていても
よい。上記のように回転させると、角錐602の反射フ
ァセットの側部の縁部は、角錐604の反射ファセット
の側部の縁部から変位する。
【0037】この実施形態においては、角錐の構成につ
いて説明したが、カメラがほぼ同じ位置を占める仮想の
光学的中心を持つように、視野の方向を変えるために異
なる平面ミラーの幾何学的配置を使用することもでき
る。例えば、中空でない、中空のまたは部分的多面体を
使用することができる。さらに、角錐構成の場合には、
ベースおよび頂点が物理的に存在しなくてもよいし、底
平面または端部および頂点または端部のような概念上の
補助手段であると見なすことができる。
【0038】図15は、二つの反射角錐である。反射角
錐702は、反射角錐704内に入れ子状に収容されて
いる。二つ以上の反射性角錐を入れ子状にすることがで
きることに留意されたい。例えば、もう一つの反射角錐
を反射角錐702内に入れ子状に入れて、さらにもう一
つの反射角錐を、角錐702内に入れ子状に入っている
角錐内に入れ子状に入れることができる。角錐702の
頂点706、および角錐704の頂点708は、両方の
角錐のベースに垂直なライン710上に位置する。ここ
でもまた、各角錐は、それぞれがその関連角錐の反射面
により方向が変えられる視野を持つ、カメラのような四
台の画像処理装置を含む。角錐702は、反射ファセッ
ト712、714、716および718を含む。反射角
錐704は、反射ファセット720、722、724お
よび726を含む。四台のカメラは、その視野の方向が
角錐702の反射面により変えられるように配置されて
いる。その光学的中心が点703に位置し、その視野が
矢印732の方向を向いている第一のカメラは、反射面
712により方向を変えられた視野を持つ。その光学的
中心が点734に位置し、その視野が矢印736の方向
を向いている第二のカメラは、反射面714により方向
を変えられた視野を持つ。その光学的中心が点738に
位置し、その視野が矢印740の方向を向いている第三
のカメラは、反射面716により方向を変えられた視野
を持つ。その光学的中心が点742に位置し、その視野
が矢印744の方向を向いている第四のカメラは、反射
面718により方向を変えられた視野を持つ。
【0039】角錐702およびその関連カメラは、上記
カメラの視野が、角錐704により妨げられないように
位置していることに留意されたい。このような配置は、
角錐702を、角錐704のベースを越えて延びること
ができるようにすることにより可能になる。角錐704
の場合には、光学的中心を点750に持ち、視野が矢印
752の方向を向いている第一のカメラは、その視野の
方向が反射面720により変えられる。光学的中心を点
754に持ち、視野が矢印756の方向を向いている第
二のカメラは、その視野の方向が反射面722により変
えられる。光学的中心を点758に持ち、視野が矢印7
60の方向を向いている第三のカメラは、その視野の方
向が反射面724により変えられる。光学的中心を点7
62に持ち、視野が矢印764の方向を向いている第四
のカメラは、その視野の方向が反射面726により変え
られる。各角錐に関連するカメラは、図2、図3、図
4、図11および図12に示す位置に位置し、そのた
め、八台のカメラは仮想の光学的中心770を共有する
か、または角錐702内に近接した複数の仮想の光学的
中心を持つ。カメラの各組も、角錐702内にオフセッ
ト仮想光学的中心を持つことができる。
【0040】図15のパノラマ画面表示装置は、それ自
身に部分的な球形の視野を与えるために、光学的中心を
点770に持ち、視野が矢印772の方向を向いてい
る、九番目のカメラを備えることができる。光学的中心
を位置770に持つカメラは、視野をもっと広くするた
めに広角レンズを使用することができる。
【0041】図16は、光学的中心を点780に持ち、
平面ミラー784により視野の方向が変えられ、視野が
矢印782の方向を向いている、追加のカメラを含む、
図15の部分的に球形の画面表示装置である。光学的中
心780が、角錐702および704の頂点、および仮
想の光学的中心770を通る、ライン710上に位置し
ていることに留意されたい。また、点780が、平面ミ
ラー784と仮想の光学的中心770との間の距離に等
しいか、ほぼ等しい距離だけ、平面ミラー784から離
れた位置に位置していることに留意されたい。光学的中
心を点780に持ち、平面ミラー784により方向が変
えられた視野を持つカメラを設置することにより、図1
5の部分的に球形の画面表示装置は、球形の画面表示装
置になる。光学的中心を点780に持つように設置され
たカメラの視野を広くするために、カメラは広角レンズ
を備えることができる。点780に光学的中心を持つよ
うに設置されたカメラの視野を広くするために、また広
角レンズの使用をできるだけ避けるために、平面ミラー
784の代わりに曲面ミラーを使用することができる。
【0042】この実施形態においては、角錐の構成につ
いて説明したが、カメラがほぼ同じ位置を占める仮想の
光学的中心を持つように、視野の方向を変えるために異
なる平面ミラーの幾何学的配置を使用することもでき
る。例えば、中空でない、中空のまたは部分的多面体を
使用することができる。さらに、角錐構成の場合には、
ベースおよび頂点が物理的に存在していなくてもよい
し、ベース平面または端部および頂点または端部のよう
な概念上の補助手段であると見なすことができる。
【0043】図15および図16について説明すると、
カメラの代わりに画像処理装置を使用してプロジェクタ
を作ることができることに留意されたい。また反射角錐
702および704を回転させて相互に変位させること
もできることに留意されたい。この変位した関係は、両
方の角錐の頂点を通る軸を中心にして、角錐の一方また
は両方を回転させることにより得られる。例えば、上記
軸はライン710と重なっていてもよい。上記のように
回転させると、角錐702の反射ファセットの側部の縁
部は、角錐704の反射ファセットの側部の縁部と整合
しない。
【0044】図17は、パノラマ画面表示装置を指示す
るためのスタンドである。反射角錐800は、中空のチ
ューブ804のような支持部材を使用して、スタンドま
たはポスト802上に装着される。角錐は、頂点端部8
06のところで、中空のチューブ804に固定される。
中空のチューブは、角ブラケット808によりスタンド
802に固定される。中空のチューブ804は、頂点端
部806を越えて延びていて、そのため、カメラ810
をチューブ804により支持することができる。カメラ
は、カメラ810をスペーサ814に対して押しつける
ための、ストラップまたはベルト812によりチューブ
804に固定される。クランプまたはストラップ812
の圧力により、カメラ810、スペーサ814およびチ
ューブ804の外表面の間に摩擦が発生し、この摩擦に
よりカメラ810は、チューブ804にしっかりと装着
される。また、カメラ810の端部816のところに、
第二のストラップおよび関連スペーサを設置することも
できる。カメラ810に対するビデオ接続および電力接
続は、中空のチューブ804を通り、ポスト802と角
錐800のベースの間に位置する空間を通る、ケーブル
818により行われる。中空のチューブ804の代わり
に、中空でない支持部材を使用することができることに
留意されたい。しかし、中空の支持部材は、ケーブルを
通すための好都合な経路を形成する。ケーブルをチュー
ブ804内を通すことにより、ケーブルがカメラ810
の視野内に入り込むことが防止される。角錐800のベ
ース端部のところに、ゴムのスタンドまたは脚部824
が設置される。ユーザがポスト802を使用したがらな
い場合に、柔軟に使用できるように、ポスト802の代
わりに、これらのスタンドを使用することができる。
【0045】画面表示装置をチューブ804の端部83
0のところで支持するために、図17の画面表示装置を
倒置することもできる。この構成の場合、ケーブル81
8は、チューブ804の端部830を通して、単に通す
ことができる。この構成の場合、チューブ804は、角
部ブラッケト808類似の角ブラッケトにより、端部8
30のところのポスト802に装着される。また、パノ
ラマ画面表示装置を支持するために、端部830を任意
の便利な構造体に装着することもできる。
【0046】図17のスタンドは、図14、図15およ
び図16の画面表示装置に使用することができる。図1
7のところで説明したように、画面表示装置は、両方の
角錐の頂点または頂点端部を通る中空のチューブに装着
される。
【0047】<校正>カメラ・システムを校正すること
により、より高品質の画像を形成することができる。異
なるタイプの画像の歪を補償する(参照用テーブルとし
て実行することができる)画像マッピング関数を決定す
るために校正を使用することができる。例えば、マッピ
ング関数は、広角レンズにより生じるたる形歪を修正す
るために使用することができる。マッピング関数は、ま
たカメラの整合していない電荷結合素子による回転歪の
ような、他のタイプの歪を修正するのにも使用すること
ができる。図18は、たる形歪と回転歪の組合せを示
す。この場合、上記歪により長方形の対象物900は歪
んで画像902になる。歪んだ画像902は、歪んでい
ない対象物900に対して回転し、たる形歪が、長方形
の対象物900の、縁部904および906画像902
の、縁部908および910として表れ、縁部912お
よび914が、それぞれ、縁部916および918とし
て現われる。この歪は、カメラ・システムを校正するこ
とにより決定される、マッピング関数により修正され
る。
【0048】図19は、カメラ・システムを校正するた
めのプロセスである。間隔が等しい楕円形の点930の
垂直コラムが固定位置に置かれる。上記点は黒い背景上
の白い点であり、背景上においては、楕円形の点は垂直
方向を向いている。パノラマ・カメラ940は、それ自
身の仮想の光学的中心を通る、軸942を中心にして一
回に少しのステップずつ回転する。各ステップにおい
て、楕円形の点のコラムの歪んだ画像が現れ、上記歪を
除去するために、このデータに対するマッピング関数が
決定される。この関数により、間隔の等しい点の垂直な
各コラムの歪んだ画像が、マッピングされた画像の等間
隔の点の垂直なコラムとなるように画像をマッピングす
る。白い点の画像はその間に黒い部分を持っているが、
補間により(白い点の間のピクセルを含む)各画像ピク
セルに適用するために、マッピング関数が計算されるこ
とに留意されたい。カメラが回転すると、画像マッピン
グ関数は、個々の各ステップ毎に決定され、これらのマ
ッピング関数の集まりを、等間隔の点の垂直な各コラム
画面、画像の等間隔の点の垂直なコラムとして確実に表
わすことができるばかりではなく、これらコラムが、そ
の画像捕捉の間の角回転に比例する、水平方向に間隔を
確実に持つことができる、2D−2Dマッピングに結合
することができる。後者により、そのシーンの(平らで
はなく)シリンダ状の画像ができる。
【0049】図20および図21は、楕円形の点の垂直
なコラムを表わすデータをどのようにして歪の結果とし
て表わすことができるのかを示す。図20は、この図
は、カメラが供給するデータと、ユーザが見る画面との
間の関係を示しているという点で、図8に類似してい
る。点の垂直なコラムは、歪の結果として、図20の一
本のコラムでないことに留意されたい。この歪の場合、
点は一本のコラム内だけではなく、複数のコラム96
0、962、964および966内に存在している。図
21は、この図が、画像データの記憶方法を示している
という点で、図9に類似している。歪んだ画像データ
が、図21に示すように、メモリに記憶されると、点を
表わすデータは、数本のコラムを占める。この場合コラ
ム980、982、984および986は、それぞれ、
図20のコラム960、962、964および966に
対応する。校正段階で決定された画像マッピング関数
は、データが図21のメモリから読み出される時に、こ
の歪を修正するのに使用される。修正した画像データま
たは歪を含んでいない画像データは、ユーザに表示する
こともできるし、または歪を含んでいない画像を表わす
データを記憶するのに使用したメモリに書き込むことが
できる。
【0050】図22は、図21のメモリから読み出した
データと、ユーザが見ることができる歪を含んでいない
画面との間の関係を示す。例えば、コラム1、000に
関連するマッピング関数は、コラム1、000の一番上
の部分で使用するための、データを読み出した場合に、
データをコラム980から読み出すことを指定し、すぐ
下のコラム1、000の部分で使用するためにデータを
読み出す時、コラム982からデータを読み出すことを
指定する。マッピング関数は、またコラム1、000の
中央部分で使用するためにデータを読み出す場合には、
コラム984からデータを読み出すように指定する。コ
ラム1、000をさらに下方に移動した場合、データは
コラム982から読み出され、その後で、コラム980
から読み出され、最後に、コラム1、000の底部で使
用するためにデータの検索が行われると、コラム986
から読み出される。マッピング関数の指定に従って、デ
ータを読み出した結果、ディスプレイを見ているユーザ
に対して、データのコラムは垂直になる。図22は、図
21のメモリから検索したデータが、垂直なコラムとし
て表示されていることを示す。この場合には、歪はもは
やはっきりとは認められない。校正中に決定された類似
のマッピング関数は、表示のための歪を含まない画像を
形成するために、図22の各コラムに対して使用され
る。パノラマ・カメラを校正するために使用した複数の
各回転ステップの代わりに、図22のいくつかのコラム
の一つのグループを使用することができることに留意さ
れたい。
【0051】カラー校正および輝度校正も、同様に、図
19の手順に類似の手順により、行うことができる。こ
の場合、楕円形の点のコラム930の代わりに、周知の
カラー・パターンが使用される。パノラマ・カメラが回
転し、その結果、各カメラはカラー・パターンの画像を
捕捉する。(赤、緑、青およびグレイのいくつかの色調
のような)いくつかのカラー・パターンを一つずつ使用
することができる。その後、ピクセル毎に、各カメラか
らのデータは、任意の赤、緑または青の歪を修正するた
めに調整され、その結果、作成された画像は、校正カラ
ー・パターンに非常によく似たカラー・パターンを持
つ。さらに、各カメラからの各ピクセルの輝度が調整さ
れ、その結果、一定のカラーおよび輝度のあるシーンを
見ている場合には、一つのカメラの画像、および複数の
カメラの画像間の輝度およびカラーは比較的均一にな
る。マッピング関数のところですでに説明したように、
ピクセル毎の調整は表に記憶することができる。正確さ
では劣るが、もっと簡単な方法をカラーおよび輝度の計
算に使用することができる。この方法の場合は、特定の
カラーと輝度を持つあるシーンを見る場合に、正しいカ
ラーおよび輝度を入手するために、各カメラのカメラお
よび輝度の制御を手動で調整する。この方法を使用した
場合には、特定のカメラのすべてのピクセルは同じよう
に調整されることに留意されたい。
【0052】図23は、校正に基づく画像マッピング修
正を使用する、パノラマ・カメラ・システムである。図
23は図7に類似の図である。しかし、フレーム・バッ
ファ・メモリおよび追加マイクロプロセッサを使用して
いることに留意されたい。カメラ52、54、56およ
び58は、画像データを収集して、そのデータをアナロ
グ−デジタル変換器160、162、164および16
6に、それぞれ送信する。その後、上記アナログ−デジ
タル変換器の出力は、赤、緑、青および輝度調整ユニッ
ト1010、1012、1014および1018を通
る。上記調整ユニットがアナログ・ユニットである場合
には、上記調整ユニットを、アナログ−デジタル変換器
の前に設置することができる。さらに、調整ユニットを
内蔵するカメラを使用することもできる。いずれの場合
も、上記調整ユニットは、計算手順による決定に従って
カラーおよび輝度を調整するためにプログラムすること
もできるし、または設定することもできる。上記各ユニ
ットは、赤、緑および青のレベル、および上記アナログ
−デジタル変換器からの信号のレベルを調整する。カメ
ラ52−58がカラー・カメラである場合には、アナロ
グ−デジタル変換器160−166は、通常、三つの信
号を受信し、三つの信号を出力することに留意された
い。この場合、入力信号および出力信号の各組は、赤、
緑および青の中の一つに対応する。ユニット1010−
1016は、単に、全体の輝度校正設定に従って、赤、
緑および青信号の全体の振幅を調整する。赤、緑および
青輝度調整の出力は、その後、図7のところで説明した
ように、マルチプレクサを通り、フレーム・バッファ・
メモリ1030に送られる。フレーム・バッファ・メモ
リ1030の代わりに、各赤、緑、青および輝度調整ユ
ニット1010、1012、1014および1018用
の個々のフレーム・バッファを使用することもできる。
個々の各フレーム・バッファの出力は、その後、マルチ
プレクサ170を通してマイクロプロセッサ1030に
送られる。
【0053】フレーム・バッファ・メモリ1030は、
図7のメモリ172と同じ方法で動作し、図21のとこ
ろで説明したように、歪んだ画像を表わすデータを記憶
する。その後、マイクロプロセッサ1040は、校正手
順中に決定したマッピング関数を使用して、フレーム・
バッファ・メモリ1030からデータを読み出し、その
後で、表示メモリ1050に上記データを書き込む。図
22のところでの説明を思いだして欲しいのだが、歪ん
でいない画像を表わすデータは、その後、ユーザが検索
できるようにメモリ1050に記憶される。ユーザは、
図7のところで説明したように、データを検索すること
がでくる。その場合、データの読み出しは、ユーザ入力
に基づいて決定される。各ユーザは、表示メモリの全部
の内容を使用することができる。電話ネットワークまた
はデータ・ネットワークのような通信ネットワークを通
して、上記データを各ユーザに送ることもできるし、専
用の有線または無線通信経路を通して、直接ユーザに送
ることもできる。その後、ユーザは、上記データをユー
ザに表示することができるアナログ形式に変換するため
に、デジタル−アナログ変換器を使用することもできる
し、またはデジタル・データを直接使用し、デジタル−
アナログ変換器を使用しないですます方法もある。
【図面の簡単な説明】
【図1】従来技術の複数のカメラを含む画面表示システ
ムである。
【図2】反射面を含む四面角錐を使用する四つのカメラ
からなる全方向またはパノラマ画面表示システムであ
る。
【図3】各カメラに共通の光学的中心を供給するため
に、角錐の反射面がどのように使用されるのかを示す。
【図4】角錐の平面図であり、カメラの位置を示す。
【図5】反射側面を持つ、八面角錐である。
【図6】図5の角錐の平面図である。
【図7】カメラが発生したデータを制御するためのシス
テムの、ブロック図である。
【図8】カメラから受けとったデータと、ユーザが見る
画面との間の関連を示す。
【図9】図7のメモリに対するアドレス・スキームであ
る。
【図10】図7のコントローラのブロック図である。
【図11】5番目のカメラを含む、図2の画面表示シス
テムである。
【図12】仮想の光学的中心が変位している、図2の角
錐の平面図である。
【図13】ブラインド領域内に位置する影の部分を含
む、図12の角錐である。
【図14】底部と底部とが接している複数の角錐を使用
するパノラマ画面表示装置である。
【図15】入れ子状の角錐を使用するパノラマ画面表示
装置である。
【図16】入れ子状の角錐を使用する球形画面表示装置
である。
【図17】パノラマ画面表示装置を支持するのに使用さ
れるスタンドである。
【図18】二つのタイプの歪である。
【図19】校正プロセスである。
【図20】カメラから受けとったデータと、ユーザが見
る歪を含む画面との間の関連を示す。
【図21】歪んだ画像データの記憶方法である。
【図22】マッピングした画像データの記憶方法であ
る。
【図23】画像マッピングを使用する場合の、パノラマ
・カメラ・システムのブロック図である。
【手続補正書】
【提出日】平成12年11月28日(2000.11.
28)
【手続補正1】
【補正対象書類名】明細書
【補正対象項目名】請求項1
【補正方法】変更
【補正内容】

Claims (18)

    【特許請求の範囲】
  1. 【請求項1】 パノラマ画像表示装置であって、 各々が一つの光学的中心と一つの視野を持つ、複数の画
    像処理装置と、 なる方向を向いている複数の反射ファセットを備えた多
    面体を少なくとも一部に有する反射素子であって、前記
    複数の反射ファセットの中の少なくとも二つの各ファセ
    ットが前記複数の画像処理装置の中の一つの視野の方向
    を変更することにより複数の仮想の光学的中心を形成す
    る反射素子と、 反射素子内部の空間と交差し、前記反射素子を固定する
    とともに前記複数の画像処理装置を固定する支持部材と
    を備えたパノラマ画像表示装置。
  2. 【請求項2】 請求項1に記載のパノラマ画面表示装置
    において、前記複数の画像装置が、前記反射素子から延
    出した支持部材の部分に固定されたことを特徴とするパ
    ノラマ画面表示装置。
  3. 【請求項3】 請求項1に記載のパノラマ画面表示装置
    において、前記支持部材が空洞であることを特徴とする
    パノラマ画面表示装置。
  4. 【請求項4】 パノラマ画面表示装置であって、 各々が一つの光学的中心と一つの視野を持つ、複数の第
    一の画像処理装置と、 各々が一つの光学的中心と一つの視野を持つ、複数の第
    二の画像処理装置と、 各々が相互に隣接するように配置され、少なくともその
    一部が多面体である第一および第二の反射素子であっ
    て、前記第一の反射素子が、異なる方向を向いている複
    数の第一の反射ファセットを持ち、前記複数の第一の反
    射ファセットの中の少なくとも二つの各ファセットが、
    前記複数の画像処理装置の中の一つの視野の方向を変更
    することにより複数の第一の仮想の光学的中心を形成
    し、前記第二の反射素子が、異なる方向を向いている複
    数の第二の反射ファセットを持ち、前記複数の第二の反
    射ファセットの中の少なくとも二つの各ファセットが、
    前記複数の第二の画像処理装置の中の一つの視野の方向
    を変更することにより複数の第二の仮想の光学的中心を
    形成する、第一および第二の反射素子と、 少なくとも一つの反射素子内部の空間と交差し、少なく
    とも一つの反射素子を固定するとともに、前記複数の第
    一または第二の画像処理装置を固定する固定部材とを備
    えたパノラマ画面表示装置。
  5. 【請求項5】 請求項4に記載のパノラマ画面表示装置
    において、前記複数の第一の画像処理装置が、前記第一
    の反射素子から延出した支持部材の第一の部分に固定さ
    れ、前記複数の第二の画像処理装置が、前記第二の反射
    素子から延出した支持部材の第二の部分に固定されたこ
    とを特徴とするパノラマ画面表示装置。
  6. 【請求項6】 請求項4に記載のパノラマ画面表示装置
    において、前記支持部材が空洞であることを特徴とする
    パノラマ画面表示装置。
  7. 【請求項7】 パノラマ画面表示装置であって、 各々が一つの光学的中心と一つの視野を持つ、複数の第
    一の画像処理装置と、 各々が一つの光学的中心と一つの視野を持つ、複数の第
    二の画像処理装置と、 少なくとも一部が多面体である第一の反射素子と、 少なくとも一部が多面体である第二の反射素子であっ
    て、当該第二の反射素子の少なくとも一部が前記第一の
    反射素子内に配置され、前記第一の反射素子が、異なる
    方向を向いている複数の第一の反射ファセットを持ち、
    前記複数の第一の反射ファセットの中の少なくとも二つ
    の各ファセットが、前記複数の画像処理装置の中の一つ
    の視野の方向を変更することにより複数の第一の仮想の
    光学的中心を形成し、前記第二の反射素子が、異なる方
    向を向いている複数の第二の反射ファセットを持ち、前
    記複数の第二の反射ファセットの中の少なくとも二つの
    各ファセットが、前記複数の第二の画像処理装置の中の
    一つの視野の方向を変更することにより複数の第二の仮
    想の光学的中心を形成する、第一および第二の反射素子
    と、 少なくとも一つの反射素子内部の空間と交差し、少なく
    とも一つの反射素子を固定するとともに、前記複数の第
    一または第二の画像処理装置を固定する固定部材とを備
    えたパノラマ画面表示装置。
  8. 【請求項8】 請求項7に記載のパノラマ画面表示装置
    において、前記複数の第一の画像処理装置が前記反射素
    子から延出した第一の部分に固定され、前記複数の画像
    処理装置が前記反射素子から延出した第二の部分に固定
    されたことを特徴とするパノラマ画面表示装置。
  9. 【請求項9】 請求項8に記載のパノラマ画面表示装置
    において、前記支持部材が空洞であることを特徴とする
    パノラマ画面表示装置。
  10. 【請求項10】 パノラマ画面表示装置であって、 各々が一つの光学的中心と一つの視野を持つ複数の画像
    処理装置と、 異なる方向を向いている複数の側部反射ファセットを有
    する角錐素子であって、前記複数の側部反射ファセット
    の中の少なくとも二つが前記複数の画像処理装置の中の
    一つの視野の方向を変更することにより複数の仮想光学
    的中心を形成する角錐素子と、 角錐素子内部の空間と交差し、前記角錐素子を固定する
    とともに、前記複数の画像処理装置を固定する支持部材
    とを備えたパノラマ画面表示装置。
  11. 【請求項11】 請求項10に記載のパノラマ画面表示
    装置において、前記複数の画像処理装置が、前記角錐素
    子から延出した支持部材の一部に固定されたことを特徴
    とするパノラマ画面表示装置。
  12. 【請求項12】 請求項10に記載のパノラマ画面表示
    装置において、支持部材が空洞であることを特徴とする
    パノラマ画面表示装置。
  13. 【請求項13】 パノラマ画面表示装置であって、 各々が一つの光学的中心と一つの視野を持つ複数の第一
    の画像処理装置と、 各々が一つの光学的中心と一つの視野を持つ複数の第二
    の画像処理装置と、 底部と底部とが対向して設けられた第一および第二の角
    錐素子であって、第一の角錐素子が、異なる方向を向い
    ている複数の第一の側部反射ファセットを有し、複数の
    第一の側部反射ファセットの中の少なくとも二つの各々
    が、前記複数の第一の画像処理装置の中の一つの視野の
    方向を変更することにより複数の第一の仮想の光学的中
    心を形成し、第二の角錐素子が、異なる方向を向いてい
    る複数の第二の側部反射ファセットを有し、複数の第二
    の側部反射ファセットの中の少なくとも二つの各々が、
    前記複数の第二の画像処理装置の中の一つの視野の方向
    を変更することにより複数の第二の仮想の光学的中心を
    形成する、第一および第二の角錐素子と、 少なくとも一つの角錐素子内部の空間と交差し、少なく
    とも一つの角錐素子を固定するとともに、前記複数の第
    一および第二の画像処理装置の中の少なくとも一つを固
    定する固定部材とを備えたパノラマ画面表示装置。
  14. 【請求項14】 請求項13に記載のパノラマ画面表示
    装置において、前記複数の第一の画像処理装置が前記第
    一の角錐素子から延出した前記支持部材の第一の部分に
    固定され、前記第二の画像処理装置が前記第二の角錐素
    子から延出した前記支持部材の第二の部分に固定された
    ことを特徴とするパノラマ画面表示装置。
  15. 【請求項15】 請求項13に記載のパノラマ画面表示
    装置において、前記支持部材が空洞であることを特徴と
    するパノラマ画面表示装置。
  16. 【請求項16】 パノラマ画面表示装置であって、 各々が一つの光学的中心と一つの視野を有する複数の第
    一の画像処理装置と、 各々が一つの光学的中心と一つの視野を有する複数の第
    二の画像処理装置と、 第一の頂点と第一の底部とを有する第一の角錐素子と、 第二の頂点と第二の底部とを有する第二の角錐素子とを
    備え、前記第一の頂点と第二の頂点とが同じ方向を向く
    ように、第二の角錐素子の少なくとも一部が前記第一の
    角錐素子内に位置し、前記第一の角錐素子が異なる方向
    を向いている複数の第一の側部反射ファセットを有し、
    前記複数の第一の側部反射ファセットの中の少なくとも
    二つの各々が前記複数の第一の画像処理装置の中の一つ
    の視野の方向を変更することにより複数の第一の仮想の
    光学的中心を形成し、前記第二の角錐素子が、異なる方
    向を向いている複数の第二の側部反射ファセットを有
    し、複数の第二の側部反射ファセットの中の少なくとも
    二つの各々が前記複数の第二の画像処理装置の中の一つ
    の視野の方向を変更することにより複数の第二の仮想の
    光学的中心を形成し、 少なくとも一つの角錐内部の空間と交差し、少なくとも
    一つの角錐を固定するとともに、前記第一および第二の
    画像処理装置の少なくとも一つを固定する支持部材とを
    備えたパノラマ画面表示装置。
  17. 【請求項17】 請求項16に記載のパノラマ画面表示
    装置において、前記複数の第一の画像処理装置が、前記
    第一の角錐から延出した前記支持部材の第一の部分に固
    定され、前記複数の第二の画像処理装置が前記第二の角
    錐素子から延出した前記支持部材の第二の部分に固定さ
    れたことを特徴とするパノラマ画面表示装置。
  18. 【請求項18】 請求項16に記載のパノラマ画面表示
    装置において、前記支持部材が空洞であることを特徴と
    するパノラマ画面表示装置。
JP2000266655A 1998-08-28 2000-09-04 コンパクト形高解像度パノラマ画面表示システム Pending JP2001136518A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/141,885 US6195204B1 (en) 1998-08-28 1998-08-28 Compact high resolution panoramic viewing system
US09/141885 1998-08-28

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP11240681A Division JP2000089395A (ja) 1998-08-28 1999-08-27 コンパクト形高解像度パノラマ画面表示システム

Publications (1)

Publication Number Publication Date
JP2001136518A true JP2001136518A (ja) 2001-05-18

Family

ID=22497674

Family Applications (2)

Application Number Title Priority Date Filing Date
JP11240681A Withdrawn JP2000089395A (ja) 1998-08-28 1999-08-27 コンパクト形高解像度パノラマ画面表示システム
JP2000266655A Pending JP2001136518A (ja) 1998-08-28 2000-09-04 コンパクト形高解像度パノラマ画面表示システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP11240681A Withdrawn JP2000089395A (ja) 1998-08-28 1999-08-27 コンパクト形高解像度パノラマ画面表示システム

Country Status (8)

Country Link
US (1) US6195204B1 (ja)
EP (2) EP1056292A3 (ja)
JP (2) JP2000089395A (ja)
KR (2) KR100385826B1 (ja)
CN (1) CN1247995A (ja)
CA (1) CA2277002C (ja)
DE (1) DE69912905D1 (ja)
TW (1) TW437237B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10474228B2 (en) 2014-11-17 2019-11-12 Yanmar Co., Ltd. Display system for remote control of working machine

Families Citing this family (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6961066B2 (en) * 1999-04-13 2005-11-01 Athentech Technologies, Inc. Automatic color adjustment for digital images
US6677959B1 (en) * 1999-04-13 2004-01-13 Athentech Technologies Inc. Virtual true color light amplification
US20040075738A1 (en) * 1999-05-12 2004-04-22 Sean Burke Spherical surveillance system architecture
US7050085B1 (en) * 2000-10-26 2006-05-23 Imove, Inc. System and method for camera calibration
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
FR2807527B1 (fr) * 2000-04-07 2003-06-20 Bernard Mallet Dispositif de restitution visuelle grands champs trois fenetres
JP2001333303A (ja) 2000-05-23 2001-11-30 Sharp Corp 全方位視覚システム
KR100343836B1 (ko) * 2000-06-27 2002-07-20 이성환 파노라마 영상 감시 시스템 및 그 제어방법
DE10034601B4 (de) * 2000-07-14 2013-05-23 Leica Geosystems Ag Kamerasystem mit mindestens zwei ersten und zweiten Kameras
WO2002019009A2 (en) * 2000-08-31 2002-03-07 Lee Scott Friend Omnidirectional imaging attachment
JP2002214726A (ja) * 2001-01-19 2002-07-31 Mixed Reality Systems Laboratory Inc 撮像装置及びその方法
US7349005B2 (en) * 2001-06-14 2008-03-25 Microsoft Corporation Automated video production system and method using expert video production rules for online publishing of lectures
US6937266B2 (en) * 2001-06-14 2005-08-30 Microsoft Corporation Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network
US6768598B2 (en) * 2002-04-02 2004-07-27 Sony Corporation Image pickup system
US7260257B2 (en) 2002-06-19 2007-08-21 Microsoft Corp. System and method for whiteboard and audio capture
US7298392B2 (en) * 2003-06-26 2007-11-20 Microsoft Corp. Omni-directional camera design for video conferencing
US7259784B2 (en) 2002-06-21 2007-08-21 Microsoft Corporation System and method for camera color calibration and image stitching
US7782357B2 (en) * 2002-06-21 2010-08-24 Microsoft Corporation Minimizing dead zones in panoramic images
US7602412B2 (en) * 2002-06-21 2009-10-13 Microsoft Corporation Temperature compensation in multi-camera photographic devices
US20050046703A1 (en) * 2002-06-21 2005-03-03 Cutler Ross G. Color calibration in photographic devices
US7598975B2 (en) * 2002-06-21 2009-10-06 Microsoft Corporation Automatic face extraction for use in recorded meetings timelines
US7852369B2 (en) * 2002-06-27 2010-12-14 Microsoft Corp. Integrated design for omni-directional camera and microphone array
US7184609B2 (en) * 2002-06-28 2007-02-27 Microsoft Corp. System and method for head size equalization in 360 degree panoramic images
US7149367B2 (en) * 2002-06-28 2006-12-12 Microsoft Corp. User interface for a system and method for head size equalization in 360 degree panoramic images
SE524141C2 (sv) * 2002-11-11 2004-07-06 Elinnova Hb Anordning för konvertering av ljus
US20040254424A1 (en) * 2003-04-15 2004-12-16 Interscience, Inc. Integrated panoramic and forward view endoscope
US6809887B1 (en) 2003-06-13 2004-10-26 Vision Technologies, Inc Apparatus and method for acquiring uniform-resolution panoramic images
US7525928B2 (en) * 2003-06-16 2009-04-28 Microsoft Corporation System and process for discovery of network-connected devices at remote sites using audio-based discovery techniques
US7443807B2 (en) * 2003-06-16 2008-10-28 Microsoft Corporation System and process for discovery of network-connected devices
US7397504B2 (en) * 2003-06-24 2008-07-08 Microsoft Corp. Whiteboard view camera
US7343289B2 (en) * 2003-06-25 2008-03-11 Microsoft Corp. System and method for audio/video speaker detection
US7495694B2 (en) * 2004-07-28 2009-02-24 Microsoft Corp. Omni-directional camera with calibration and up look angle improvements
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
US20050117015A1 (en) * 2003-06-26 2005-06-02 Microsoft Corp. Foveated panoramic camera system
US7355622B2 (en) * 2004-04-30 2008-04-08 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video using delta frames
US7362350B2 (en) 2004-04-30 2008-04-22 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video
US7355623B2 (en) * 2004-04-30 2008-04-08 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video using audio watermarking techniques
IL162512A (en) * 2004-06-14 2010-02-17 Rafael Advanced Defense Sys Panoramic field of view acquiring and displaying system
US7593057B2 (en) * 2004-07-28 2009-09-22 Microsoft Corp. Multi-view integrated camera system with housing
US7812882B2 (en) * 2004-12-30 2010-10-12 Microsoft Corporation Camera lens shuttering mechanism
US7768544B2 (en) * 2005-01-21 2010-08-03 Cutler Ross G Embedding a panoramic image in a video stream
GB0507869D0 (en) * 2005-04-19 2005-05-25 Wqs Ltd Automated surveillance system
DE102005029612A1 (de) * 2005-06-23 2007-01-04 Hochschule Bremen Vorrichtung zum Erzeugen eines Panoramabildes
US7573868B2 (en) * 2005-06-24 2009-08-11 Microsoft Corporation Audio/video synchronization using audio hashing
US7424218B2 (en) * 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
US7630571B2 (en) * 2005-09-15 2009-12-08 Microsoft Corporation Automatic detection of panoramic camera position and orientation table parameters
US8572183B2 (en) * 2006-06-26 2013-10-29 Microsoft Corp. Panoramic video in a live meeting client
US20070299710A1 (en) * 2006-06-26 2007-12-27 Microsoft Corporation Full collaboration breakout rooms for conferencing
US20070300165A1 (en) * 2006-06-26 2007-12-27 Microsoft Corporation, Corporation In The State Of Washington User interface for sub-conferencing
US7653705B2 (en) * 2006-06-26 2010-01-26 Microsoft Corp. Interactive recording and playback for network conferencing
US20080117288A1 (en) * 2006-11-16 2008-05-22 Imove, Inc. Distributed Video Sensor Panoramic Imaging System
US8094182B2 (en) 2006-11-16 2012-01-10 Imove, Inc. Distributed video sensor panoramic imaging system
US20090033882A1 (en) * 2007-07-31 2009-02-05 Solomon Mark C Projection device
US20110141223A1 (en) * 2008-06-13 2011-06-16 Raytheon Company Multiple Operating Mode Optical Instrument
TW201024902A (en) * 2008-12-18 2010-07-01 Coretronic Corp Projection display system
KR101011704B1 (ko) * 2009-09-04 2011-01-31 씨엠아이텍주식회사 광각의 이미지를 생성하는 영상 처리 장치 및 방법
JP5362639B2 (ja) * 2010-04-12 2013-12-11 住友重機械工業株式会社 画像生成装置及び操作支援システム
US9485495B2 (en) 2010-08-09 2016-11-01 Qualcomm Incorporated Autofocus for stereo images
DE102010063924A1 (de) * 2010-12-22 2012-06-28 Hilti Aktiengesellschaft Optisches System zur Strahlformung eines Laserstrahls sowie Lasersystem mit einem solchen optischen System
CN102096280B (zh) * 2010-12-30 2012-05-30 广州创孚检测电子设备有限公司 双向摄影的装置
US9438889B2 (en) 2011-09-21 2016-09-06 Qualcomm Incorporated System and method for improving methods of manufacturing stereoscopic image sensors
US9036025B2 (en) 2012-01-11 2015-05-19 International Business Macines Corporation System and method for inexpensive railroad track imaging for inspection
US20130250040A1 (en) * 2012-03-23 2013-09-26 Broadcom Corporation Capturing and Displaying Stereoscopic Panoramic Images
NL2008639C2 (en) * 2012-04-13 2013-10-16 Cyclomedia Technology B V Device, system and vehicle for recording panoramic images, and a device and method for panoramic projection thereof.
US9398264B2 (en) 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
US9503638B1 (en) 2013-02-04 2016-11-22 UtopiaCompression Corporation High-resolution single-viewpoint panoramic camera and method of obtaining high-resolution panoramic images with a single viewpoint
CA2909493C (en) 2013-04-16 2018-01-23 Christian Weissig Alignment of a camera system, camera system and alignment aid
JP6302624B2 (ja) * 2013-04-24 2018-03-28 住友重機械工業株式会社 画像生成装置
KR102248161B1 (ko) 2013-08-09 2021-05-04 써멀 이미징 레이다 엘엘씨 복수의 가상 장치를 이용하여 열 이미지 데이터를 분석하기 위한 방법들 및 깊이 값들을 이미지 픽셀들에 상관시키기 위한 방법들
US10178373B2 (en) 2013-08-16 2019-01-08 Qualcomm Incorporated Stereo yaw correction using autofocus feedback
US9383550B2 (en) 2014-04-04 2016-07-05 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US9374516B2 (en) 2014-04-04 2016-06-21 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US10013764B2 (en) 2014-06-19 2018-07-03 Qualcomm Incorporated Local adaptive histogram equalization
US9294672B2 (en) 2014-06-20 2016-03-22 Qualcomm Incorporated Multi-camera system using folded optics free from parallax and tilt artifacts
US9386222B2 (en) 2014-06-20 2016-07-05 Qualcomm Incorporated Multi-camera system using folded optics free from parallax artifacts
US9819863B2 (en) 2014-06-20 2017-11-14 Qualcomm Incorporated Wide field of view array camera for hemispheric and spherical imaging
US9549107B2 (en) 2014-06-20 2017-01-17 Qualcomm Incorporated Autofocus for folded optic array cameras
BR112016029776A2 (pt) * 2014-06-20 2017-08-22 Qualcomm Inc sistema multicâmeras fino livre de paralaxe capaz de capturar campo amplo total de imagens de visão
US9541740B2 (en) 2014-06-20 2017-01-10 Qualcomm Incorporated Folded optic array camera using refractive prisms
US10057542B2 (en) 2014-08-15 2018-08-21 Thereo LLC System for immersive telepresence
US9832381B2 (en) 2014-10-31 2017-11-28 Qualcomm Incorporated Optical image stabilization for thin cameras
US9979885B2 (en) * 2015-02-09 2018-05-22 Steven Christopher Sparks Apparatus and method for capture of 360° panoramic video image and simultaneous assembly of 360° panoramic zoetropic video image
US10319071B2 (en) * 2016-03-23 2019-06-11 Qualcomm Incorporated Truncated square pyramid geometry and frame packing structure for representing virtual reality video content
EP3482256A1 (en) * 2016-07-05 2019-05-15 Zero Parallax Technologies Ab Spherical camera lens system, camera system and lens assembly
US10672367B2 (en) * 2017-07-03 2020-06-02 Arm Limited Providing data to a display in data processing systems
US10574886B2 (en) 2017-11-02 2020-02-25 Thermal Imaging Radar, LLC Generating panoramic video for video management systems
US10951859B2 (en) 2018-05-30 2021-03-16 Microsoft Technology Licensing, Llc Videoconferencing device and method
US11601605B2 (en) 2019-11-22 2023-03-07 Thermal Imaging Radar, LLC Thermal imaging camera device
CN117761888B (zh) * 2022-10-13 2024-07-19 中科昊瀚(西安)智能科技有限责任公司 一种飞摆高速红外全景扫描***

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2304434A (en) 1928-09-03 1942-12-08 Ibm Projecting device
US2267813A (en) 1938-11-05 1941-12-30 Gen Electric Multicathode ray electrode assembly
DE1206316B (de) 1962-01-19 1965-12-02 Boulton Aircraft Ltd Druckmittelbetaetigter Stellmotor
US3144806A (en) 1962-09-28 1964-08-18 Rowe E Carney Jr Projection system
US3286590A (en) 1963-02-21 1966-11-22 Conductron Corp Full circumferential viewing system
US3420605A (en) 1965-06-14 1969-01-07 Vernon L Kipping Wide field photography and projection
FR1528819A (fr) 1967-04-27 1968-06-14 Precitronic Récepteur omni-directionnel de signaux lumineux
US3506344A (en) 1968-07-08 1970-04-14 Joseph T Petit Jr Optical projection system
US3740469A (en) 1972-04-19 1973-06-19 Us Navy Reflective panoramic t.v. projection system
US4982092A (en) 1973-07-05 1991-01-01 The United States Of America As Represented By The Secretary Of The Navy 360 Degree optical surveillance system
US3998532A (en) 1974-04-08 1976-12-21 The United States Of America As Represented By The Secretary Of The Navy Wide angle single channel projection apparatus
US4078860A (en) 1976-10-27 1978-03-14 Globus Ronald P Cycloramic image projection system
NL7900865A (nl) 1979-02-02 1980-08-05 Tno Projektor voor het projekteren van een panoramabeeld en camera voor het vervaardigen van films voor zulk een projektor.
DE2926731C2 (de) * 1979-07-03 1982-03-11 Axel 4937 Lage Helmold Panorama-Kamera
US4355328A (en) 1981-02-23 1982-10-19 The United States Of America As Represented By The Secretary Of The Navy 360 Degree closed circuit television system
US4429957A (en) 1981-07-30 1984-02-07 King-Bell Optics, Inc. Panoramic zoom lens assembly
JPS6020692A (ja) 1983-07-15 1985-02-01 Hitachi Ltd 広視野装置
US4589030A (en) 1983-07-25 1986-05-13 Kley Victor B Solid state camera
US4859046A (en) 1988-05-20 1989-08-22 Traynor Rodney P Lane viewer mirror apparatus for vehicles
US4890314A (en) 1988-08-26 1989-12-26 Bell Communications Research, Inc. Teleconference facility with high resolution video display
NL8802933A (nl) 1988-11-28 1990-06-18 Heuft Qualiplus Bv Werkwijze en inrichting voor het inspekteren van de binnenwand van een lichaam.
JPH04503440A (ja) * 1988-12-14 1992-06-18 ウエイナー、デブラ、シー 相互作用するパノラマ装置
GB8829135D0 (en) 1988-12-14 1989-01-25 Smith Graham T Panoramic interactive system
US5040055A (en) 1988-12-14 1991-08-13 Horizonscan Inc. Panoramic interactive system
US5023725A (en) 1989-10-23 1991-06-11 Mccutchen David Method and apparatus for dodecahedral imaging system
JP2942344B2 (ja) 1989-11-22 1999-08-30 旭光学工業株式会社 プロジェクター
US5194959A (en) 1989-12-21 1993-03-16 Ricoh Company, Ltd. and Nippon Telegraph and Telephone Corporation Image forming apparatus for forming image corresponding to subject, by dividing optical image corresponding to the subject into plural adjacent optical image parts
US5245175A (en) 1989-12-28 1993-09-14 Olympus Optical Co., Ltd. Focus detecting optical system including a plurality of focus blocks composed of an integrally molded prism member
US5130794A (en) 1990-03-29 1992-07-14 Ritchey Kurtis J Panoramic display system
US5016109A (en) 1990-07-02 1991-05-14 Bell South Corporation Apparatus and method for segmenting a field of view into contiguous, non-overlapping, vertical and horizontal sub-fields
DE4032387A1 (de) 1990-10-12 1992-04-16 Liesk Ingrid Wc - kippdosimat
DE4035145A1 (de) 1990-11-06 1992-05-07 Bio Photonics Gmbh Optisches system zur aufteilung einer reellen abbildung
US5187571A (en) 1991-02-01 1993-02-16 Bell Communications Research, Inc. Television system for displaying multiple views of a remote location
US5179440A (en) 1991-05-13 1993-01-12 Hughes Aircraft Company Rear projection facetted dome
JP3158484B2 (ja) 1991-05-23 2001-04-23 日本電信電話株式会社 投射型表示装置
US5236199A (en) 1991-06-13 1993-08-17 Thompson Jr John W Interactive media system and telecomputing method using telephone keypad signalling
US5264945A (en) 1991-10-16 1993-11-23 Eastman Kodak Company Contact array scanners with circulating memory
JP3092276B2 (ja) 1991-12-24 2000-09-25 ソニー株式会社 全方向受光装置
US5264881A (en) 1992-06-03 1993-11-23 Hughes Training, Inc. Split static surround display system
FR2692368B1 (fr) 1992-06-12 1994-07-29 Thomson Csf Dispositif de veille panoramique infrarouge a grande portee et couverture angulaire elevee, notamment en site.
US5495576A (en) 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
US5526133A (en) 1994-06-28 1996-06-11 Sensormatic Electronics Corporation System and method for logging and retrieving information on video cassettes in a computer controlled surveillance system
US5619255A (en) 1994-08-19 1997-04-08 Cornell Research Foundation, Inc. Wide-screen video system
US5684626A (en) 1994-10-25 1997-11-04 Edge Scientific Instrument Company Llc Center masking illumination system and method
US5990934A (en) * 1995-04-28 1999-11-23 Lucent Technologies, Inc. Method and system for panoramic viewing
US5745305A (en) 1995-04-28 1998-04-28 Lucent Technologies Inc. Panoramic viewing apparatus
US5539483A (en) 1995-06-30 1996-07-23 At&T Corp. Panoramic projection apparatus
JPH09230517A (ja) * 1996-02-27 1997-09-05 Agency Of Ind Science & Technol パノラマ画像撮影方法および装置
DE19608067A1 (de) 1996-03-02 1997-09-04 Philips Patentverwaltung Verfahren und Anordnung zum Darstellen einer Landkarte
US5708469A (en) 1996-05-03 1998-01-13 International Business Machines Corporation Multiple view telepresence camera system using a wire cage which surroundss a plurality of movable cameras and identifies fields of view
US5760826A (en) 1996-05-10 1998-06-02 The Trustees Of Columbia University Omnidirectional imaging apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10474228B2 (en) 2014-11-17 2019-11-12 Yanmar Co., Ltd. Display system for remote control of working machine

Also Published As

Publication number Publication date
KR100385826B1 (ko) 2003-06-02
KR20000017552A (ko) 2000-03-25
EP1056292A2 (en) 2000-11-29
DE69912905D1 (de) 2003-12-24
TW437237B (en) 2001-05-28
KR20000071888A (ko) 2000-11-25
EP0982946A1 (en) 2000-03-01
CN1247995A (zh) 2000-03-22
JP2000089395A (ja) 2000-03-31
EP1056292A3 (en) 2003-07-16
CA2277002C (en) 2002-07-23
EP0982946B1 (en) 2003-11-19
CA2277002A1 (en) 2000-02-28
US6195204B1 (en) 2001-02-27

Similar Documents

Publication Publication Date Title
JP3862895B2 (ja) パノラマ画像形成器
JP2001136518A (ja) コンパクト形高解像度パノラマ画面表示システム
US6128143A (en) Panoramic viewing system with support stand
US6700711B2 (en) Panoramic viewing system with a composite field of view
CA2178358C (en) Panoramic projection apparatus
CA2187834C (en) Spherical viewing/projection apparatus
CA2174574C (en) Method and system for panoramic viewing
EP0757273A1 (en) Combination of several viewing devices with common point of vision
US6963355B2 (en) Method and apparatus for eliminating unwanted mirror support images from photographic images
CA2310956A1 (en) Compact high resolution panoramic viewing system
CA2308028C (en) Spherical viewing/projection apparatus
CA2304439A1 (en) Panoramic viewing system with offset virtual optical centers

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20031215