JPH07333522A - Remote observation device for microscopic image - Google Patents
Remote observation device for microscopic imageInfo
- Publication number
- JPH07333522A JPH07333522A JP6126357A JP12635794A JPH07333522A JP H07333522 A JPH07333522 A JP H07333522A JP 6126357 A JP6126357 A JP 6126357A JP 12635794 A JP12635794 A JP 12635794A JP H07333522 A JPH07333522 A JP H07333522A
- Authority
- JP
- Japan
- Prior art keywords
- image
- microscope
- still
- magnification
- still image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は病院等の現場に設置して
ある顕微鏡を、遠方のセンタ（大学病院等）より遠隔操
作してその顕微鏡画像をセンタにて受けて観察する顕微
鏡画像遠隔観察装置に関するものである。The present invention relates to a microscope image remote observation in which a microscope installed in a site such as a hospital is remotely operated from a distant center (university hospital, etc.) and the microscope image is received at the center for observation. It relates to the device.
【０００２】[0002]
【従来の技術】コンピュータ制御によりステージ位置や
対物レンズの倍率を可変制御でき、そして、焦点調整で
きるようにした光学式電動型顕微鏡装置がある。この顕
微鏡装置は遠隔地より通信回線で結び、操作指令情報を
伝送することでステージ位置や対物レンズの倍率を可変
制御でき、また、焦点調整できるので、この顕微鏡装置
にテレビカメラなどの撮像装置を取り付けて標本像を撮
像し、これを伝送路を介して伝送することで、遠隔操作
しながら得られた標本像の観察を遠方において居ながら
にして行える顕微鏡遠隔観察システムが構築できる。2. Description of the Related Art There is an optical motorized microscope apparatus in which the stage position and the magnification of an objective lens can be variably controlled by computer control and the focus can be adjusted. This microscope device can be variably controlled by adjusting the stage position and the magnification of the objective lens by connecting operation command information from a remote location, and the focus can be adjusted.Therefore, an imaging device such as a television camera can be attached to this microscope device. By attaching and picking up a sample image and transmitting it via a transmission path, a microscope remote observation system can be constructed which allows observation of the sample image obtained while performing remote control while being at a distance.
【０００３】ところで、医療現場では患者から採取した
生体組織を観察して診断を行うことが多いが、これには
病理医による診断が必要となる。しかし、中央の大病院
には病理医が常駐していても、地方の病院などでは病理
医が在席していないケースも多々ある。また、権威に診
断を仰ぐ必要のあるケースなども生じるが、そのような
場合に、中央（センタ；病理医や権威の常駐する大病院
や大学、研究機関など）と現場（地方病院や中小病院な
ど）との間を通信回線で結び、顕微鏡遠隔観察システム
を設置してこの顕微鏡遠隔観察システムにより生体組織
の顕微鏡画像を観察して診断を下すと云ったことが行わ
れる。By the way, in a medical field, a living tissue collected from a patient is often observed to make a diagnosis, which requires a diagnosis by a pathologist. However, there are many cases where pathologists are not present at local hospitals even if pathologists are resident at the central large hospitals. In addition, there are cases where it is necessary to ask authorities to make a diagnosis. In such cases, the center (center; large hospitals, universities, research institutes where pathologists and authorities are resident) and the field (regional hospitals, small and medium-sized hospitals) It is said that a microscope remote observation system is installed and a microscope image of living tissue is observed by this microscope remote observation system to make a diagnosis.
【０００４】このように病理医のいない病院と、病理医
のいる病院とを通信回線で接続し、病理医のいない病院
にある顕微鏡を、病理医のいる病院から遠隔操作し、得
られた顕微鏡画像を病理医のもとに伝送し、診断に供す
るというシステムが従来より知られているが、具体的に
は特開平４‐３０７０２８号公報、特開平５‐１１１０
２９号公報に示されるようなものである。In this way, a hospital without a pathologist and a hospital with a pathologist are connected by a communication line, and the microscope in the hospital without a pathologist is remotely operated from the hospital with a pathologist to obtain a microscope. A system for transmitting an image to a pathologist and using it for diagnosis is conventionally known, but specifically, it is disclosed in Japanese Patent Laid-Open Nos. 4-307028 and 5-1110.
This is as shown in Japanese Patent Publication No. 29.
【０００５】しかし、これらのシステムでは、いずれも
現在顕微鏡で覗いている画像を静止画として伝送する方
式であり、それのみを表示する方式であることから、顕
微鏡の拡大率を増倍してゆくと注目領域の画像は得るこ
とができるものの、その周囲の状況は顕微鏡視野から外
れてしまうために、観察できず、従って注目している領
域の画像のみの表示となってしまい、その周辺を観察す
ることができなかった。病理診断する場合、見つけた注
目領域の状態はもとより、周辺状況も含めて観察し、そ
れらの状況から総合的に判断して初めて正確な診断が可
能になる。従って、標本の画像を注目領域についてのみ
観察できるような従来のシステムでは、機能として不十
分である。However, in all of these systems, the image currently viewed by the microscope is transmitted as a still image, and only that image is displayed. Therefore, the magnification of the microscope is increased. Although the image of the area of interest can be obtained, the surroundings are out of the field of view of the microscope, so it cannot be observed, and therefore only the image of the area of interest is displayed and the surrounding area is observed. I couldn't. When making a pathological diagnosis, an accurate diagnosis can be made only by observing not only the state of the area of interest that has been found, but also the surrounding situation and making a comprehensive judgment from these situations. Therefore, the conventional system in which the image of the sample can be observed only in the attention area is insufficient in function.
【０００６】また、これらいずれの従来システムも、伝
送される画像は静止画であり、リアルタイムでの観察が
困難であった。これは画像の場合、データ容量が多いこ
とと、伝送路のデータ伝送速度が画像をリアルタイムで
伝送できる程、高速でないことに起因する。そのため、
静止画として送らざるを得ないことによる。しかも、静
止画の場合、動画のように顕微鏡がとらえた像をリアル
タイムに表示するという訳にいかない。そのため、ピン
トの調整等が必要な場合に、画像入力し直し、再度伝送
することになり、操作性が悪いと云う欠点が残る。Also, in any of these conventional systems, the transmitted image is a still image, which makes it difficult to observe in real time. This is because in the case of an image, the data capacity is large and the data transmission speed of the transmission path is not so high as to transmit the image in real time. for that reason,
Because I have to send it as a still image. Moreover, in the case of a still image, the image captured by the microscope cannot be displayed in real time like a moving image. Therefore, when the focus adjustment or the like is required, the image is input again and the image is transmitted again, and the operability is poor.
【０００７】そこで、動画像を観察できるようにするシ
ステムが必要となる。動画像観察の要請に応えることの
できるシステムとして、特開昭６４‐２０４４９号公報
に開示された技術がある。この公報に開示されたシステ
ムは注目領域を動画として表示することができるので、
顕微鏡がとらえた像をリアルタイムに表示して観察を進
めることができ、また、ピントの調整等が必要な場合に
も画像がリアルタイム像であるので操作し易い。Therefore, there is a need for a system that allows a moving image to be observed. As a system capable of responding to the request for moving image observation, there is a technique disclosed in Japanese Patent Laid-Open No. 64-20449. Since the system disclosed in this publication can display the attention area as a moving image,
The image captured by the microscope can be displayed in real time for observation, and the image is a real-time image even when focus adjustment or the like is necessary, so that it is easy to operate.
【０００８】しかし、注目領域の画像をリアルタイムに
表示して観察できるものの、診断に必要な注目領域の周
辺画像を参照できるようなシステムには、依然、なって
いない。However, there is still no system capable of displaying the image of the attention area in real time and observing it, but referring to the peripheral image of the attention area necessary for diagnosis.
【０００９】この公報に開示されたシステムは注目領域
を動画として表示し、標本の全体を静止画として表示す
ることができるシステムではある。しかしながら、この
技術は動画像と並列に、標本の全体を静止画として表示
するものの、標本の全体を示す静止画は現在の注目領域
が標本上のどこであるかを観察者に知らせるマップ程度
の意味合いしかなく、注目領域の周辺を、診断の参考に
なる程度に詳細に観察するには余りにも不十分な精細度
の像である。故に、システムとしては不十分であり、診
断に必要な注目領域およびその周辺画像を合わせて提供
できるシステムが必要である。The system disclosed in this publication is a system capable of displaying a region of interest as a moving image and displaying the entire specimen as a still image. However, although this technique displays the entire sample as a still image in parallel with the moving image, the still image showing the entire sample has a meaning of a map level that informs the observer of where the current region of interest is on the sample. However, the image is too fine to observe the surroundings of the region of interest in detail enough to be a reference for diagnosis. Therefore, the system is insufficient, and a system capable of providing the attention area necessary for diagnosis and its peripheral image together is required.
【００１０】[0010]
【発明が解決しようとする課題】遠隔地の現場（病院）
とセンタとを通信回線で繋ぎ、現場にある顕微鏡を、セ
ンタより遠隔操作して顕微鏡画像をセンタに送り、セン
タではこの顕微鏡画像を観察して診断に供すると云った
システムが従来よりあり、このようなシステムとして特
開平４‐３０７０２８号公報、特開平５‐１１１０２９
号公報に示されるような観察画像として静止画を用いる
システムと、特開昭６４‐２０４４９号公報に開示され
るような動画が観察できるシステムとが知られている。[Problems to be Solved by the Invention] Remote site (hospital)
There is a system that connects the center and the center with a communication line, remotely operates the microscope at the site and sends a microscope image to the center, and the center observes the microscope image for diagnosis. As such a system, JP-A-4-307028 and JP-A-5-111029
There is known a system that uses a still image as an observation image as disclosed in Japanese Patent Laid-Open Publication No. 64-20449 and a system that can observe a moving image as disclosed in Japanese Patent Laid-Open Publication No. 64-20449.
【００１１】そして、静止画を使用するシステムでは、
顕微鏡の拡大率を増倍してゆくと注目領域の画像は得る
ことができるが、その周囲の状況は顕微鏡視野から外れ
てしまうために、観察できず、従って注目している領域
の画像のみの表示となってしまい、その周辺を観察する
ことができないという不便があり、更にはリアルタイム
での観察が困難であるために、例えば、ピントの調整等
が必要となるような場合に、更新された画像が表示して
から１歩遅れてその調整を遠隔操作により行うことにな
り、操作性が悪いと云う欠点が残る。In a system using still images,
When the magnification of the microscope is increased, the image of the region of interest can be obtained, but the surrounding conditions are out of the microscope's field of view, so it cannot be observed, and therefore only the image of the region of interest can be observed. It is displayed and it is inconvenient that you can not observe the surrounding area. Furthermore, it is difficult to observe in real time. For example, it has been updated when it is necessary to adjust the focus. The adjustment is performed by remote control one step after the image is displayed, and the operability remains poor.
【００１２】そこで、動画像を観察できると共に、注目
画像とその周辺画像を合わせて観察できるようにするシ
ステムが必要となる。しかし、動画像を観察できる上記
従来のシステムでは注目領域を動画として表示すること
ができるものの、相変わらず注目領域の周辺画像を観察
できる構成とはなっていない。すなわち、注目領域を動
画として表示し、標本の全体を静止画として表示するも
のの、この静止画は現在の注目領域が標本上のどこであ
るかを観察者に知らせるマップ程度の意味合いしかな
く、注目領域の周辺を、診断の参考になる程度に詳細に
観察するには余りにも不十分な精細度の像である。Therefore, there is a need for a system that allows the user to observe the moving image and the image of interest and its peripheral images together. However, although the above-described conventional system capable of observing a moving image can display the attention area as a moving image, it is still not configured to observe the peripheral image of the attention area. That is, although the region of interest is displayed as a moving image and the entire sample is displayed as a still image, this still image has only the meaning of a map that informs the observer where the current region of interest is on the sample. This is an image with a definition that is too insufficient to observe the surrounding area in detail enough to be a reference for diagnosis.
【００１３】そこで、本発明の目的とするところは、注
目領域を動画像として表示し、この動画像に関連する像
を静止画として表示することにより、操作性の良い顕微
鏡画像遠隔観察装置を提供することにある。Therefore, an object of the present invention is to provide a microscope image remote observation apparatus with good operability by displaying a region of interest as a moving image and displaying an image related to this moving image as a still image. To do.
【００１４】[0014]
【課題を解決するための手段】上記目的を達成するた
め、本発明はつぎのように構成する。すなわち、第１に
は、顕微鏡と、前記顕微鏡の観察像を撮像し、電気信号
に変換して出力する撮像手段と、前記撮像手段からの出
力画像信号を送信する送信側（送信手段）と、前記送信
側から送信された前記出力画像を受信する受信側とを有
し、受信側において前記出力画像を観察する顕微鏡画像
遠隔観察装置において、前記受信側は、前記送信側から
送信される静止画像信号を受けて格納するための記憶手
段と、前記記憶手段に格納された静止画像から所定の静
止画像を選択する選択手段と、前記選択手段によって選
択された静止画像を表示するための第１の表示手段と、
前記送信側から送信される動画像を受け、動画像として
表示するための第２の表示手段とを有する構成とする。In order to achieve the above object, the present invention is configured as follows. That is, firstly, a microscope, an image pickup unit that picks up an observation image of the microscope, converts the image into an electric signal, and outputs the electric signal, and a transmission side (transmission unit) that transmits the output image signal from the image pickup unit. In a microscope image remote observation device having a receiving side for receiving the output image transmitted from the transmitting side and observing the output image on the receiving side, the receiving side is a still image transmitted from the transmitting side. A storage unit for receiving and storing a signal, a selection unit for selecting a predetermined still image from the still images stored in the storage unit, and a first unit for displaying the still image selected by the selection unit. Display means,
A second display unit for receiving a moving image transmitted from the transmitting side and displaying it as a moving image is provided.
【００１５】また、第２には、ステージ移動およびレン
ズ倍率が制御可能な顕微鏡と、前記顕微鏡の観察像を撮
像し、電気信号に変換して出力する撮像手段と、前記撮
像手段からの出力画像信号を送信する送信手段とを有す
る送信側と、前記送信側から送信された前記出力画像信
号を受信する受信側とを有し、受信側において前記出力
画像を観察する顕微鏡画像遠隔観察装置において、前記
受信側は、前記送信側から送信される静止画像信号を受
けて格納するための記憶手段と、前記記憶手段に格納さ
れた静止画像から所定の静止画像を選択する選択手段
と、前記選択手段によって選択された静止画像を表示す
るための第１の表示手段と、前記選択された静止画像の
所定の領域を指示する指示手段と、前記指示手段によっ
て指示された領域の位置と大きさに応じて前記送信側の
顕微鏡のステージ位置とレンズの倍率を制御する制御信
号を送信側に伝送する制御信号伝送手段と、前記制御信
号に応じた位置と倍率の動画像信号を前記送信側から受
信し、動画像として表示するための第２の表示手段とを
有する構成とする。Secondly, a microscope whose stage movement and lens magnification can be controlled, an image pickup means for picking up an observation image of the microscope, converting it into an electric signal and outputting the electric signal, and an output image from the image pickup means. In a microscope image remote observation device having a transmitting side having a transmitting means for transmitting a signal and a receiving side receiving the output image signal transmitted from the transmitting side, and observing the output image at the receiving side, The receiving side has storage means for receiving and storing a still image signal transmitted from the transmitting side, selecting means for selecting a predetermined still image from the still images stored in the storing means, and the selecting means. A first display means for displaying the still image selected by, an instruction means for instructing a predetermined area of the selected still image, and an area for the area instructed by the instructing means. A control signal transmitting means for transmitting to the transmitting side a control signal for controlling the stage position of the microscope on the transmitting side and the magnification of the lens according to the position and size, and a moving image signal of the position and the magnification according to the control signal. A second display unit for receiving from the transmitting side and displaying as a moving image is provided.
【００１６】第３には、レンズ倍率が制御可能な顕微鏡
と、前記顕微鏡の観察像を撮像し、電気信号に変換して
出力する撮像手段と、前記撮像手段からの出力画像信号
を送信する送信手段とを有する送信側と、前記送信側か
ら送信された前記出力画像信号を受信する受信側とを有
し、受信側において前記出力画像を観察する顕微鏡画像
遠隔観察装置において、前記受信側は、前記送信側から
送信される静止画像信号を受けて格納するための記憶手
段と、前記記憶手段に格納された静止画像から所定の静
止画像を選択する選択手段と、前記選択手段によって選
択された静止画像を表示するための第１の表示手段と、
前記選択された静止画像の所定の領域を指示する指示手
段と、前記指示手段によって指示された領域の位置と大
きさに応じて前記送信側の顕微鏡のレンズ倍率を制御す
る制御信号を送信側に伝送する制御信号伝送手段と、前
記制御信号に応じた位置と倍率の動画像信号を前記送信
側から受信し、動画像として表示するための第２の表示
手段とを有し、前記選択手段は前記動画像の倍率より小
さく、かつ、最も近い倍率を有する静止画像を選択する
構成とする。Thirdly, a microscope having a controllable lens magnification, an image pickup means for picking up an observation image of the microscope, converting it into an electric signal and outputting the electric signal, and a transmission for transmitting an output image signal from the image pickup means. In a microscope image remote observation device that has a transmission side having means and a reception side that receives the output image signal transmitted from the transmission side, and that observes the output image at the reception side, the reception side is Storage means for receiving and storing a still image signal transmitted from the transmitting side, selection means for selecting a predetermined still image from the still images stored in the storage means, and stillness selected by the selection means. First display means for displaying an image,
Instructing means for instructing a predetermined area of the selected still image, and a control signal for controlling the lens magnification of the microscope on the transmitting side to the transmitting side according to the position and size of the area instructed by the instructing means. And a second display unit for receiving a moving image signal having a position and a magnification corresponding to the control signal from the transmitting side and displaying the moving image signal as a moving image. A still image having a magnification that is smaller and closer to the magnification of the moving image is selected.
【００１７】[0017]
【作用】第１の構成の場合、送信側から送信された顕微
鏡の画像のうち、静止画像信号を受信側では記憶手段に
格納し、この格納された静止画像から選択手段により所
定の静止画像を選択すると、この選択された静止画像を
第１の表示手段に表示する。そして、更に受信側では前
記送信手段から送信される動画像を第２の表示手段に動
画像として表示する。In the case of the first configuration, among the images of the microscope transmitted from the transmitting side, a still image signal is stored in the storage means on the receiving side, and a predetermined still image is selected from the stored still image by the selecting means. When selected, the selected still image is displayed on the first display means. Then, on the receiving side, the moving image transmitted from the transmitting means is displayed on the second display means as a moving image.
【００１８】従って、以上の構成によれば、動画像とと
もに、選択された静止画像を併せて表示手段に表示して
観察することが可能となり、これによって、動画と所望
の静止画を同時に観察できるので、静止画を動画像より
低い倍率の画像としておくことで、注目領域の画像は動
画像で観察でき、注目領域を含むその周辺領域の画像は
静止画で観察することにより、周辺の状況を把握しなが
ら標本の観察ができるようになって、理想的な観察が可
能になり、しかも、操作性にも優れると云った効果を有
する顕微鏡画像遠隔観察装置を提供できる。Therefore, according to the above configuration, it is possible to display the selected still image together with the moving image on the display means for observation and thereby observe the moving image and the desired still image at the same time. Therefore, by setting the still image as an image with a lower magnification than the moving image, the image of the attention area can be observed with the moving image, and the image of the peripheral area including the attention area can be observed with the still image to show the surrounding situation. It is possible to provide a microscope image remote observation device having an effect that it is possible to observe a sample while grasping it, which enables ideal observation and is excellent in operability.
【００１９】また、第２の構成においては、顕微鏡はス
テージ移動およびレンズ倍率が制御可能なものを用いて
おり、送信側から送信された顕微鏡の画像のうち、静止
画像信号を受信側では記憶手段に格納し、この格納され
た静止画像から選択手段により所定の静止画像を選択す
ると、この選択された静止画像を第１の表示手段に表示
する。そして、更に受信側では前記送信手段から送信さ
れる動画像を第２の表示手段に動画像として表示する。Further, in the second configuration, the microscope is one in which the stage movement and the lens magnification can be controlled, and a still image signal of the image of the microscope transmitted from the transmitting side is stored in the receiving side. When a predetermined still image is selected from the stored still images by the selecting means, the selected still image is displayed on the first display means. Then, on the receiving side, the moving image transmitted from the transmitting means is displayed on the second display means as a moving image.
【００２０】そして、指示手段により前記選択された静
止画像の所定の領域を指示すると、制御信号伝送手段は
前記指示手段によって指示された領域の位置と大きさに
応じて前記送信側の顕微鏡のステージ位置とレンズの倍
率を制御する制御信号を送信側に伝送し、送信側ではこ
の伝送された制御信号をもとに、顕微鏡のステージ移動
およびレンズ倍率の制御が実施される。その結果、撮像
手段から得られる画像は前記制御信号に応じた顕微鏡ス
テージ位置と倍率の動画像信号となり、これが受信側へ
と送信されることから、第２の表示手段にはこの前記送
信側から受信した前記制御信号に対応の顕微鏡ステージ
位置と倍率の動画像が表示される。When the instructing means instructs the predetermined area of the selected still image, the control signal transmitting means causes the stage of the microscope on the transmitting side according to the position and size of the area instructed by the instructing means. A control signal for controlling the position and the magnification of the lens is transmitted to the transmission side, and the transmission side controls the stage movement of the microscope and the lens magnification based on the transmitted control signal. As a result, the image obtained from the image pickup means becomes a moving image signal of the microscope stage position and the magnification according to the control signal, and this is transmitted to the receiving side. Therefore, the second display means receives the moving image signal from the transmitting side. A moving image of the microscope stage position and magnification corresponding to the received control signal is displayed.
【００２１】従って、以上の第２の構成によれば、第１
の構成の効果に加えて、選択手段によって選択された所
定の静止画像とともに、この静止画像の所定の領域の拡
大された動画像を表示するので、静止画像で動画像の周
辺領域を観察することができると云った効果を有する顕
微鏡画像遠隔観察装置を提供できる。Therefore, according to the above second structure, the first
In addition to the effect of the configuration of (1), the predetermined still image selected by the selection unit and the enlarged moving image of the predetermined region of the still image are displayed, so that the peripheral region of the moving image can be observed in the still image. It is possible to provide a microscope image remote observation device having the effect of being able to do so.
【００２２】また、第３の構成においては、顕微鏡はレ
ンズ倍率が制御可能なものを用いており、送信側から送
信された顕微鏡の画像のうち、静止画像信号を受信側で
は記憶手段に格納し、この格納された静止画像から選択
手段により所定の静止画像を選択すると、この選択され
た静止画像を第１の表示手段に表示する。そして、また
受信側では前記送信手段から送信される動画像を第２の
表示手段に動画像として表示する。Further, in the third configuration, the microscope has a controllable lens magnification, and among the images of the microscope transmitted from the transmitting side, the still image signal is stored in the storing means on the receiving side. When a predetermined still image is selected by the selecting means from the stored still images, the selected still image is displayed on the first display means. Then, on the receiving side, the moving image transmitted from the transmitting means is displayed on the second display means as a moving image.
【００２３】そして、指示手段により前記選択された静
止画像の所定の領域を指示すると、制御信号伝送手段は
前記指示手段によって指示された領域の位置と大きさに
応じて前記送信側の顕微鏡のレンズの倍率を制御する制
御信号を送信側に伝送し、送信側ではこの伝送された制
御信号をもとに、顕微鏡のレンズ倍率の制御が実施され
る。その結果、撮像手段から得られる画像は前記制御信
号に応じた顕微鏡倍率の動画像信号となり、これが受信
側へと送信されることから、第２の表示手段にはこの前
記送信側から受信した前記制御信号に対応の顕微鏡倍率
の動画像が表示される。Then, when the instructing means instructs the predetermined area of the selected still image, the control signal transmitting means causes the lens of the microscope on the transmitting side according to the position and size of the area instructed by the instructing means. The control signal for controlling the magnification is transmitted to the transmission side, and the transmission side controls the lens magnification of the microscope based on the transmitted control signal. As a result, the image obtained from the image pickup means becomes a moving image signal having a microscope magnification corresponding to the control signal, and this is transmitted to the receiving side. Therefore, the second display means receives the moving image signal from the transmitting side. A moving image with a microscope magnification corresponding to the control signal is displayed.
【００２４】従って、以上の第３の構成によれば、第１
の構成の効果に加えて、選択手段によって動画像の領域
を含んだ最も大きい倍率の静止画が自動的に選択、表示
されることになるので、さらに操作性の向上を図ること
ができると云った効果を有する顕微鏡画像遠隔観察装置
を提供できる。Therefore, according to the above third configuration, the first
In addition to the effect of the configuration described above, the still image having the largest magnification including the moving image area is automatically selected and displayed by the selecting means, which can further improve the operability. It is possible to provide a microscope image remote observation device having the above effect.
【００２５】[0025]
【実施例】以下、本発明の実施例について、図面を参照
して説明する。本発明では、顕微鏡画像の観察時に、モ
ニタに標本全体像または低倍率画像と拡大像の２枚の画
像を表示するようにする（このとき、参照のために上記
以外の複数の画像を表示することも、可能とする）。本
発明では、標本全体像または低倍率画像（画像Ａ）はす
でに取り込まれた静止画像であり、拡大像（画像Ｂ）は
動画像である。画像Ａ上には画像Ｂがどの部分の映像で
あるかを示す矩形マーカを表示する。Embodiments of the present invention will be described below with reference to the drawings. In the present invention, when observing a microscope image, the monitor displays the entire image of the specimen or two images of a low-magnification image and an enlarged image (at this time, a plurality of images other than the above are displayed for reference. That is also possible). In the present invention, the whole image of the specimen or the low-magnification image (image A) is a still image already captured, and the magnified image (image B) is a moving image. On the image A, a rectangular marker indicating which part of the image B is the video is displayed.
【００２６】画像Ｂを動画または静止画として記録する
ときには、そのときの顕微鏡ステージの座標の記録さ
れ、画像Ａ上の、同一座標の部分と関連付けられるよう
にする。画像Ｂを再生するときには、画像Ａの上で示さ
れている、画像Ｂに相当する部分の矩形マーカを選択す
れば済むようにする。When the image B is recorded as a moving image or a still image, the coordinates of the microscope stage at that time are recorded so as to be associated with the part of the same coordinates on the image A. When the image B is reproduced, it suffices to select the rectangular marker in the portion corresponding to the image B shown on the image A.
【００２７】このようにすることによって、従来十分で
なかった、全体像上での拡大像の観察、記録を行えるよ
うに、観察経過対応に静止画像、動画像を再生すること
を可能にする。By doing so, it becomes possible to reproduce a still image and a moving image corresponding to the observation progress so that an enlarged image can be observed and recorded on the whole image, which has been insufficient in the past.
【００２８】以下、詳細を説明する （第１実施例）この実施例は、少なくともステージを自
動制御することのできる顕微鏡と、顕微鏡標本像を撮像
するための撮像手段と、撮像された画像情報を受け、画
像を表示、記録、伝送し、また顕微鏡を制御するための
制御手段を送信側と受信側が有し、動画像及び静止画像
を表示する表示手段を少なくとも受信側が有し、動画像
情報および静止画像情報を送信側の制御手段から受信側
の制御手段に伝送する通信手段によって接続された、顕
微鏡遠隔観察記録システムにおいて、表示された顕微鏡
標本の全体像または低倍率像の静止画像上で、拡大像の
表示範囲を示す領域を、マウス等のポインテンィングデ
バイスの操作で受信側の操作者が動かすことによって、
画像上に示された表示領域の位置へ顕微鏡のステージを
動かすことができ、その時の動画像を受信側に表示させ
ることができ、表示中の動画像、表示動画像と同じ顕微
鏡像の静止画像を、受信側で記録・保存することがで
き、すでに記録された低倍率静止画像または動画像上で
表示領域を指定した、拡大像の静止画像または動画像を
記録するときに、顕微鏡標本の観察部位の座標によっ
て、低倍率画像と拡大像とを関連付け、再生時にこの関
連付けを追って、静止画像と動画像、また静止画像同
士、動画像同士による画像再生を可能とするシステムで
あり、以下、詳細を説明する。The details will be described below. (First Embodiment) In this embodiment, at least a microscope capable of automatically controlling a stage, an image pickup means for picking up a microscope specimen image, and imaged image information are shown. The transmitting side and the receiving side have control means for receiving, displaying, recording, transmitting images, and controlling the microscope, and at least the receiving side has display means for displaying moving images and still images. Connected by communication means for transmitting still image information from the control means on the transmission side to the control means on the reception side, in the microscope remote observation recording system, on the still image of the entire image or low magnification image of the displayed microscope specimen, When the operator on the receiving side moves the area indicating the display range of the magnified image by operating a pointing device such as a mouse,
The microscope stage can be moved to the position of the display area shown on the image, and the moving image at that time can be displayed on the receiving side, and the moving image being displayed and the still image of the same microscope image as the displayed moving image can be displayed. Can be recorded and saved on the receiving side, and when observing a microscope image when recording a magnified still image or moving image with a display area specified on the already recorded low-magnification still image or moving image. It is a system that associates a low-magnification image with a magnified image according to the coordinates of a part and follows this association at the time of reproduction to reproduce images between still images and moving images, or between still images, and between moving images. Will be explained.
【００２９】図１に第１実施例のシステムのハードウェ
ア構成をブロック図で示す。図において、１０１は画像
送信側の制御部、１０２は画像送信側の表示部、１０３
は撮像部、１０４は顕微鏡、１０５は画像送信側の通信
部でこれらは画像送信側システムを構成している。FIG. 1 is a block diagram showing the hardware configuration of the system of the first embodiment. In the figure, 101 is a control unit on the image transmission side, 102 is a display unit on the image transmission side, 103
Is an imaging unit, 104 is a microscope, 105 is a communication unit on the image transmission side, and these constitute an image transmission side system.
【００３０】また、１０６は画像受信側の制御部、１０
７は画像受信側の表示部、１０８は通信部であり、これ
らはセンタ側システムを構成している。Reference numeral 106 denotes a control unit on the image receiving side, 10
7 is a display unit on the image receiving side, and 108 is a communication unit, which constitute a center side system.
【００３１】ここで、上記撮像部１０３は、顕微鏡１０
４の画像を撮像してビデオ信号化して出力するものであ
り、制御部１０１は受信した指令に基づいて顕微鏡１０
４の遠隔操作を行ったり、撮像部１０３の出力するビデ
オ信号を画像データ化し、これを圧縮して圧縮画像デー
タとして出力したり、静止画として低い圧縮率で圧縮し
て出力したりする等の制御を司るものであり、表示部１
０２はこの制御部１０１の出力する圧縮画像データをビ
デオ信号化してモニタするモニタ装置である。モニタす
るために圧縮画像データをビデオ信号化する必要がある
が、これはモニタ装置側に持たせても良いし、制御部１
０１側に持たせても良い。Here, the image pickup unit 103 is the microscope 10
No. 4 image is picked up and converted into a video signal for output, and the control unit 101 controls the microscope 10 based on the received command.
4 is performed by remote control, the video signal output from the image pickup unit 103 is converted into image data, and this is compressed and output as compressed image data, or a still image is output after being compressed at a low compression rate. It controls the display, and the display unit 1
Reference numeral 02 denotes a monitor device that converts the compressed image data output by the control unit 101 into a video signal and monitors the video signal. It is necessary to convert the compressed image data into a video signal for monitoring, but this may be provided on the monitor device side, or the control unit 1
It may be provided on the 01 side.
【００３２】通信部１０５は通信網を介してセンタ側と
通信するための装置であり、制御部１０１の出力する圧
縮画像データをセンタ側に送信すると共に、センタ側か
らの命令を受信して制御部１０１に渡す機能を有する。The communication unit 105 is a device for communicating with the center side via a communication network, and transmits the compressed image data output from the control unit 101 to the center side and receives and controls a command from the center side. It has a function of passing to the unit 101.
【００３３】上記撮像部１０３としては標準のカラーテ
レビジョン放送方式の一つであるＮＴＳＣ方式用、高品
位テレビジョン方式の一つであるＨＤＴＶ用などのビデ
オカメラ、表示部１０２および１０７としてはブラウン
管式あるいは液晶ディスプレイ式、プラズマディスプレ
イ式、投射式等のＴＶモニタ、通信部１０５および１０
８としては、ＩＳＤＮ（サービス総合ディジタル網）、
光ファイバ通信網、衛星通信網などを用いたディジタル
通信方式の送受信装置を用いることができる。The image pickup unit 103 is a video camera for the NTSC system which is one of the standard color television broadcasting systems and the HDTV which is one of the high definition television systems, and the display units 102 and 107 are CRT tubes. Type or liquid crystal display type, plasma display type, projection type TV monitor, communication units 105 and 10
8, ISDN (Integrated Services Digital Network),
A transmitter / receiver of a digital communication system using an optical fiber communication network, a satellite communication network, or the like can be used.
【００３４】また、画像送信側に設置する顕微鏡１０４
は、標本を載置するステージの移動を駆動操作用のモー
タにより、Ｘ軸およびＹ軸方向に制御することができ、
画像送信側の制御部１０１からの命令に従って、ステー
ジをＸ軸およびＹ軸方向に移動させることができる。The microscope 104 installed on the image transmission side
Is capable of controlling the movement of the stage on which the sample is placed in the X-axis and Y-axis directions by a driving motor.
The stage can be moved in the X-axis and Y-axis directions according to an instruction from the control unit 101 on the image transmission side.
【００３５】センタ側システムを構成する画像受信側の
制御部１０６は画像の取り込みの制御や、取り込んだ画
像の外部記憶装置への記憶、圧縮画像データの伸長処理
と、この伸長された静止画の画面表示、伸長処理された
動画の画面表示、静止画上での指定領域が動画の全画面
となるような拡大率に顕微鏡画像の拡大率に制御する制
御命令を発生して通信部８に送り出す機能、静止画の切
り替え命令を発生する機能、外部記憶装置に記憶された
画像の再生機能等を有する。The control unit 106 on the image receiving side, which constitutes the center side system, controls the capturing of images, stores the captured images in an external storage device, decompresses compressed image data, and decompresses the decompressed still image. A control command for controlling the magnification of the microscope image is generated and sent to the communication unit 8 such that the magnification of the screen display, the display of the expanded video, and the specified area on the still image become the full screen of the video. It has a function, a function of issuing a still image switching command, a function of reproducing an image stored in an external storage device, and the like.
【００３６】画像受信側の表示部１０７はこの制御部１
０６により伸長された静止画や動画を表示したり、外部
記憶装置から読み出されて再生された画像を表示する等
の画像表示用のモニタであり、通信部１０８は通信網を
介して受信した画像データを制御部１０６に送ったり、
制御部１０６からの命令を通信網を介して画像送信側に
送ったりするための送受信装置である。The display unit 107 on the image receiving side is the control unit 1.
The monitor is an image display monitor for displaying a still image or a moving image expanded by 06, or displaying an image read from an external storage device and reproduced, and the communication unit 108 receives it via a communication network. Send the image data to the control unit 106,
It is a transmission / reception device for transmitting a command from the control unit 106 to the image transmission side via a communication network.
【００３７】通信網としてはＩＳＤＮ（サービス総合デ
ィジタル網のＩＮＳネット１５００，ＩＮＳネット６
４，Ｂ‐ＩＳＤＮなど）を用いる。As the communication network, ISDN (INS net 1500, INS net 6 of integrated service digital network)
4, B-ISDN, etc.) is used.
【００３８】画像送信側の制御部１０１と画像受信側端
末１０６は通信部１０５および１０８で接続され、遠隔
観察中は同期操作によって同じ画像が常に表示される。The control unit 101 on the image transmission side and the terminal 106 on the image reception side are connected by the communication units 105 and 108, and the same image is always displayed by the synchronous operation during the remote observation.
【００３９】顕微鏡１０４は上述したように標本を載置
したステージの位置を、制御部１０１の制御によって制
御されるが、また、顕微鏡によってはそれ以外の部分、
例えば、対物レンズや絞り等も制御部１０１によって制
御される。In the microscope 104, the position of the stage on which the sample is placed is controlled by the control of the control unit 101 as described above.
For example, the objective lens and the diaphragm are also controlled by the control unit 101.
【００４０】顕微鏡標本の画像は撮像部１０３に入力さ
れ、制御部１０１を介して表示部１０２へ表示される。
また通信部１０５および１０８を介してセンタ側制御部
１０６にもその画像データは伝送され、センタ側の表示
部１０７に表示される。このとき伝送される画像データ
は、通信部の伝送速度によるが、一般に圧縮されてい
る。The image of the microscope sample is input to the image pickup section 103 and displayed on the display section 102 via the control section 101.
The image data is also transmitted to the center-side control unit 106 via the communication units 105 and 108 and displayed on the display unit 107 on the center side. The image data transmitted at this time is generally compressed, although it depends on the transmission speed of the communication unit.
【００４１】受信側で観察したい画像を指示することが
可能であり、そのための命令が、受信側端末１０６から
画像送信側の制御部１０１へと伝送される。その命令に
よって、前述のように送信側制御部１０１が顕微鏡１０
４を制御する。An image to be observed can be designated on the receiving side, and a command therefor is transmitted from the receiving terminal 106 to the control unit 101 on the image transmitting side. By the command, the transmission side control unit 101 causes the microscope 10 to operate as described above.
Control 4
【００４２】図２に制御部１０１，１０６の構成の詳細
を示す。FIG. 2 shows the details of the configuration of the control units 101 and 106.
【００４３】制御部１０１，１０６としてはパーソナル
コンピュータまたはワークステーション等とその周辺機
器から構成できる。図２において、２０１はＣＰＵであ
り、各種制御や演算処理等を実施するもので、本システ
ムで必要とする各種制御の中枢を担う。２０２はメイン
のメモリであり、ＣＰＵ２０１が実行するプログラムを
格納したり、プログラム実行にあたり必要なデータの一
時保持等に使用される。Each of the control units 101 and 106 can be composed of a personal computer, a workstation or the like and its peripheral equipment. In FIG. 2, reference numeral 201 denotes a CPU, which executes various types of control and arithmetic processing, and plays a central role in various types of control required in this system. A main memory 202 is used for storing a program executed by the CPU 201 and temporarily holding data necessary for executing the program.
【００４４】２０３はフレームメモリであり、表示部１
０２，１０７に表示するための少なくとも一画面分のデ
ータを保持するためのものである。フレームメモリ２０
３にはＣＰＵ２０１により表示画面の画像データが書き
込まれる。Reference numeral 203 denotes a frame memory, which is a display unit 1.
This is for holding data for at least one screen to be displayed on 02 and 107. Frame memory 20
The image data of the display screen is written in 3 by the CPU 201.
【００４５】２０４は通信制御装置であり、外部とのデ
ータ授受を行うためのものであって、例えば、シリアル
通信を実施してデータ授受を行う。２０５は大容量の外
部記憶装置であり、ハードディスクや光磁気ディスクな
どが用いられる。この外部記憶装置２０５はＣＰＵ２０
１によりアクセスされ、前記静止画や動画のデータが逐
次記憶される。これら静止画や動画のデータはその時の
顕微鏡ステージの位置データや顕微鏡拡大率、静止画と
動画の対応関係の情報、画像の受信時刻情報等、後刻、
対応関係を再現しながらトレースをするにあたり、必要
となる各種情報と共に格納されるようにしてある。これ
らの情報はＣＰＵ２０１により作成され、画像データと
共に外部記憶装置２０５にファイルされる。Reference numeral 204 denotes a communication control device for exchanging data with the outside. For example, serial communication is performed to exchange data. Reference numeral 205 denotes a large-capacity external storage device such as a hard disk or a magneto-optical disk. The external storage device 205 is the CPU 20
The data of the still image and the moving image are sequentially stored. The data of these still images and moving images is the position data of the microscope stage at that time, the magnification of the microscope, information on the correspondence between still images and moving images, image reception time information, etc.
It is stored together with various kinds of information necessary for tracing while reproducing the correspondence. These pieces of information are created by the CPU 201 and filed in the external storage device 205 together with the image data.
【００４６】２０６はキーボードであり、ＣＰＵ２０１
に対してデータやコマンドを入力するためのものであ
る。また、２０７はマウスであり、ＣＰＵ２０１に対し
て表示部２０８の表示画面上の所望の座標位置の情報を
入力するためのものであって、ＣＰＵ２０１はこのマウ
ス２０７により与えられる座標位置情報をもとに、画面
上にマーカ（印し）を描いたり、そのマーカの示す領域
が全体図となるような拡大率になるように顕微鏡に対す
る拡大率制御の命令を与えたり、その領域が画面に入る
ように顕微鏡のステージの位置制御命令を与えたりする
機能を有する。Reference numeral 206 denotes a keyboard, which is the CPU 201.
For entering data and commands. Further, 207 is a mouse for inputting information of a desired coordinate position on the display screen of the display unit 208 to the CPU 201, and the CPU 201 uses the coordinate position information given by the mouse 207 as a basis. , Draw a marker on the screen, give a command to the microscope to control the magnification so that the area indicated by the marker has a magnification that gives the overall view, It has the function of giving the position control command of the stage of the microscope.
【００４７】また、画像送信側の場合、受信した命令を
顕微鏡に与えて必要な制御を行い、顕微鏡のステージ位
置情報や、対物レンズの情報等を取り込んで画像受信側
に送ると云った機能も持たせてある。また、画像送信側
の場合、撮像部１０３の撮像したビデオ信号を動画で送
る場合は高圧縮率で画像を圧縮し、静止画で送る場合は
低圧縮率で画像を圧縮して通信制御装置に出力し、画像
受信側の場合、この圧縮処理された画像データを顕微鏡
のステージ位置情報や、対物レンズの情報等を含めて外
部記憶装置２０５に逐次記憶し、また、圧縮画像データ
を伸長処理して静止画と動画を対比して観察できるよう
に同時に表示部１０７に表示させるように画面構成して
フレームメモリ２０３上に表示データを描画すると云っ
た機能を有する。フレームメモリ２０３上に表示データ
は表示部１０７の走査に同期して順次走査して読出し、
表示部１０７がアナログ信号入力による画像表示方式の
場合はビデオ信号化して表示部１０７与え、ディジタル
信号入力による画像表示方式の場合はそのまま表示部１
０７与えて画像表示に供する。Further, on the image transmitting side, there is also a function that the received command is given to the microscope to perform necessary control, and stage position information of the microscope, objective lens information and the like are fetched and sent to the image receiving side. I have it. In the case of the image transmitting side, the image is compressed at a high compression rate when the video signal captured by the image capturing unit 103 is transmitted as a moving image, and the image is compressed at a low compression rate when the still image is transmitted to the communication control device. In the case of the output side and the image receiving side, this compressed image data is sequentially stored in the external storage device 205 including the stage position information of the microscope, the information of the objective lens and the like, and the compressed image data is expanded. It has a function of drawing a display data on the frame memory 203 by constructing a screen so that the display unit 107 simultaneously displays a still image and a moving image for comparison. Display data is sequentially scanned and read on the frame memory 203 in synchronization with the scanning of the display unit 107.
When the display unit 107 is an image display system by analog signal input, it is converted into a video signal and given to the display unit 107, and when it is an image display system by digital signal input, the display unit 1 is used as it is.
07 is provided for image display.
【００４８】つぎに上記構成の本装置の作用を説明す
る。Next, the operation of the present apparatus having the above configuration will be described.
【００４９】このような構成において、画像送信側で
は、顕微鏡１０４の画像は撮像部１０３により撮像さ
れ、画像信号として出力される。この画像信号はディジ
タルデータ化され、制御部１０１へ送られる。撮像部１
０３から制御部１０１へ送られた画像データは、制御部
１０１を構成要素であるフレームメモリ２０３に入力さ
れる。In such a structure, on the image transmitting side, the image of the microscope 104 is picked up by the image pickup section 103 and output as an image signal. This image signal is converted into digital data and sent to the control unit 101. Imaging unit 1
The image data sent from 03 to the control unit 101 is input to the frame memory 203, which is a component of the control unit 101.
【００５０】画像送信側では、ＣＰＵ２０１の制御のも
とに、フレームメモリ２０３の画像データが読出されて
モニタ装置２０８（＝表示部１０２）へ与えられ、ここ
に表示される。On the image transmitting side, under the control of the CPU 201, the image data in the frame memory 203 is read out, given to the monitor device 208 (= display unit 102), and displayed here.
【００５１】さらにフレームメモリ２０３に入力された
データは、制御部１０１内のＣＰＵ２０１の制御のもと
に、外部記憶装置２０５からメインメモリ２０２へ読み
込まれ、メインメモリ２０２からフレームメモリ２０３
へと入力されることもある。このときの画像は、すでに
観察に供され、記憶装置２０５に記録された画像であ
る。モニタ装置２０８は画像の表示とパーソナルコンピ
ュータのディスプレイの役割を兼ねる。Further, the data input to the frame memory 203 is read from the external storage device 205 to the main memory 202 under the control of the CPU 201 in the control unit 101, and the data is input from the main memory 202 to the frame memory 203.
It may be input to. The image at this time is an image that has already been subjected to observation and recorded in the storage device 205. The monitor device 208 serves both as an image display and a display of a personal computer.
【００５２】画像送信側では、さらにフレームメモリ２
０３に入力されたデータは、制御部１０１内のＣＰＵ２
０１の制御のもとに、外部記憶装置２０５に記憶させる
一方、画像圧縮処理をして通信制御装置２０４に送り出
す。そして、通信制御装置２０４はこれをシリアルデー
タ化して通信部１０５を通し、相手側つまり、画像受信
側の装置へと送り出す。On the image transmission side, the frame memory 2
The data input to the CPU 03 is stored in the CPU 2 in the control unit 101.
Under the control of 01, the image data is stored in the external storage device 205 while being subjected to image compression processing and sent to the communication control device 204. Then, the communication control device 204 converts this into serial data and sends it to the other party, that is, the image receiving side device through the communication unit 105.
【００５３】図３にモニタ装置２０８上に表示された顕
微鏡画像と、顕微鏡ステージ上の標本の関係を示す。こ
の画像はセンタ側の表示部１０７に表示させる像である
が、画像送信側においても同じものが表示されるように
することもできる。FIG. 3 shows the relationship between the microscope image displayed on the monitor device 208 and the sample on the microscope stage. This image is an image displayed on the display unit 107 on the center side, but the same image may be displayed on the image transmission side.
【００５４】図３において、４０１はモニタ装置であ
り、４０２はモニタ装置４０１の画面の左半分の表示領
域に表示された低倍率像、４０３はモニタ装置４０１の
画面の右半分の表示領域に表示された高倍率・拡大像で
ある。低倍率像４０２は静止画像（画像Ａ）であり、高
倍率・拡大像４０３は動画像（画像Ｂ）である。また、
４０４は画像Ｂの位置および領域を示す矩形のマーカで
ある。４０５は顕微鏡ステージであり、４０６はこの顕
微鏡ステージ４０５上の顕微鏡標本、４０７は顕微鏡標
本４０６の観察位置をそれぞれ示す。In FIG. 3, 401 is a monitor device, 402 is a low-magnification image displayed in the left half display area of the monitor device 401 screen, and 403 is displayed in the right half display area of the monitor device 401 screen. It is a magnified image with high magnification. The low-magnification image 402 is a still image (image A), and the high-magnification / enlarged image 403 is a moving image (image B). Also,
Reference numeral 404 is a rectangular marker indicating the position and area of the image B. 405 is a microscope stage, 406 is a microscope sample on the microscope stage 405, and 407 is an observation position of the microscope sample 406.
【００５５】なお、表示される画像の数は、低倍率像４
０２である画像Ａおよび高倍率・拡大像４０３である画
像Ｂだけでなく、以前に記録された複数の画像を表示す
ることも可能とする。It should be noted that the number of images to be displayed is the low-magnification image 4
It is possible to display not only the image A that is 02 and the image B that is the high-magnification / enlarged image 403 but also a plurality of previously recorded images.
【００５６】低倍率像４０２はすでにファイルとして記
録された静止画像であり、高倍率・拡大像４０３は現在
顕微鏡１０４に取り付けられた撮像部（ＴＶカメラ）１
０３から入力されている動画像である。ここで、低倍率
像４０２の静止画を取り込んだときの対物レンズの倍率
に比べ、高倍率・拡大像４０３の動画像を取り込んでい
る対物レンズの倍率はより高倍である。通常は静止画像
の画面上で所望の領域に所望の大きさの枠（矩形マーカ
４０４）をマウス２０７などのポインティングデバイス
で入力することで、制御部を構成するＣＰＵ２０１が表
示中の静止画像上のこの枠の大きさに見合う拡大率で高
倍率・拡大像の表示領域を埋めるだけの高倍率・拡大像
４０３が得られるような顕微鏡１０４の対物レンズの倍
率を選ぶように、自動制御する構成としてある。The low-magnification image 402 is a still image already recorded as a file, and the high-magnification / magnification image 403 is the image pickup unit (TV camera) 1 currently attached to the microscope 104.
It is a moving image input from 03. Here, the magnification of the objective lens that has captured the moving image of the high-magnification image 403 is higher than the magnification of the objective lens that has captured the still image of the low-magnification image 402. Normally, by inputting a frame (rectangular marker 404) of a desired size in a desired area on the screen of the still image with a pointing device such as a mouse 207, the CPU 201 constituting the control unit displays the still image on the still image. As a configuration for automatically controlling so as to select the magnification of the objective lens of the microscope 104 so that a high-magnification / magnified image 403 can be obtained by filling the display area of the high-magnification / magnified image with a magnification ratio corresponding to the size of this frame. is there.
【００５７】また、矩形マーカ４０４の位置をマウス２
０７などのポインティングデバイスで移動させることが
でき、これにより、矩形マーカ４０４の位置が観察領域
になるようにステージをＸ軸Ｙ軸移動する制御データを
発生して顕微鏡を自動制御する機能を持たせてある。The position of the rectangular marker 404 is set to the mouse 2
It can be moved with a pointing device such as 07, thereby providing a function of automatically controlling the microscope by generating control data for moving the stage in the X-axis and Y-axis so that the position of the rectangular marker 404 becomes the observation region. There is.
【００５８】従って、矩形マーカ４０４は、高倍率・拡
大像４０３として入力されている画像の低倍率像４０２
上での画像領域を表わし、また、現在表示されている画
像の位置をあらわすことになる。すなわち、矩形マーカ
４０４の枠の内部が４０３に表示されている動画像と等
しい領域である。Therefore, the rectangular marker 404 is the low-magnification image 402 of the image input as the high-magnification / enlarged image 403.
It represents the image area above and also represents the position of the image currently being displayed. That is, the inside of the frame of the rectangular marker 404 is an area equal to the moving image displayed on 403.
【００５９】このように、本システムでは、静止画上に
矩形マーカ４０４を表示することによりその領域の高倍
率・拡大像を動画としてリアルタイムに表示して観察で
き、矩形マーカ４０４の位置をマウス２０７によって移
動操作することにより、その動きに合わせて高倍率・拡
大像４０３として表示される動画も移動して操作性良く
観察を進めることができるようにしている。そして、矩
形マーカ４０４のマウス操作による移動は、移動後の低
倍率像（画像Ａ）４０２上の座標から顕微鏡ステージの
座標へと変換される。そして、そのステージ座標へ顕微
鏡ステージ４０５を動かすように制御手段１０１から顕
微鏡１０４へ命令が送られる。その結果、顕微鏡標本４
０６上の観察位置４０７の位置が動く。その時、撮像部
１０３によって撮像された動画像が、高倍率・拡大像
（画像Ｂ）４０３である。As described above, in the present system, by displaying the rectangular marker 404 on the still image, a high-magnification / enlarged image of the area can be displayed as a moving image in real time for observation, and the position of the rectangular marker 404 can be determined by the mouse 207. When the moving operation is performed, the moving image displayed as the high-magnification / enlarged image 403 is also moved according to the movement, and the observation can be advanced with good operability. Then, the movement of the rectangular marker 404 by the mouse operation is converted from the coordinate on the low-magnification image (image A) 402 after the movement to the coordinate of the microscope stage. Then, the control unit 101 sends a command to the microscope 104 to move the microscope stage 405 to the stage coordinates. As a result, microscope specimen 4
The position of the observation position 407 on 06 moves. At that time, the moving image captured by the image capturing unit 103 is the high-magnification / enlarged image (image B) 403.
【００６０】画像送信側と画像受信側の通信中の関係を
図４に示す。FIG. 4 shows the relationship during communication between the image transmitting side and the image receiving side.
【００６１】通信中の操作は、基本的には受信側が行
う。よって、受信側から送信側へと制御命令が送られ
る。制御命令は顕微鏡ステージの移動、画像の保存、倍
率の変換などがある。顕微鏡ステージの移動は図３で説
明したように低倍率像上において拡大像の位置を示す矩
形マーカ４０４の位置をマウスで動かす操作を行うこと
によって行われる。この間、画像送信側から画像受信側
へは顕微鏡１０４の標本像を撮像部１０３で取り込んだ
画像データが送られ続ける。The operation during communication is basically performed by the receiving side. Therefore, the control command is sent from the receiving side to the transmitting side. The control commands include movement of the microscope stage, image storage, and magnification conversion. The movement of the microscope stage is performed by moving the position of the rectangular marker 404 indicating the position of the magnified image on the low-magnification image with the mouse as described in FIG. During this time, the image data obtained by capturing the sample image of the microscope 104 by the imaging unit 103 continues to be transmitted from the image transmitting side to the image receiving side.
【００６２】本システムにおけるセンタ側（画像受信
側）での操作全体の流れを、図６のフローチャートに示
す。The flow of the entire operation on the center side (image receiving side) in this system is shown in the flowchart of FIG.
【００６３】センタ側（画像受信側）においては、まず
初めに標本の全体像が取り込まれる（Ｓ１０１）。すな
わち、顕微鏡画像の送信側である画像送信側システムに
おいて顕微鏡装着の撮像装置により取り込まれた標本全
体像は画像受信側であるセンタ側へと伝送される。セン
タ側においては、標本の全体像を取り込むと次にこの全
体像を図３の静止画像（画像Ａ）４０２として画像受信
側のモニタ（表示部）に表示する（Ｓ１０２）。On the center side (image receiving side), first, the entire image of the sample is captured (S101). That is, the entire image of the sample taken in by the image pickup device mounted on the microscope in the image transmission side system which is the transmission side of the microscope image is transmitted to the center side which is the image reception side. On the center side, when the whole image of the sample is captured, this whole image is displayed as a still image (image A) 402 in FIG. 3 on the monitor (display unit) on the image receiving side (S102).
【００６４】次にセンタ側においては、観察する顕微鏡
像の対物レンズの倍率を入力する（Ｓ１０３）。これに
より、この入力された倍率は当該倍率制御のための制御
情報としてセンタ側から画像送信側へと送られる。画像
送信側にある遠隔操作顕微鏡１０４にはレンズ切り替え
を自動で行う機能が備わっており、この切り替え制御は
センタ側から送られてきた制御情報に基づいて画像送信
側の制御部１０１が実施する。Next, on the center side, the magnification of the objective lens of the microscope image to be observed is input (S103). As a result, the input magnification is sent from the center side to the image transmission side as control information for the magnification control. The remote control microscope 104 on the image transmitting side has a function of automatically changing lenses, and this switching control is performed by the control unit 101 on the image transmitting side based on control information sent from the center side.
【００６５】すなわち、制御情報を受けた画像送信側の
制御部１０１はこの制御情報が対物レンズの倍率の指定
情報であることを認識してその倍率となるように、遠隔
操作顕微鏡１０４の対物レンズの切り替え駆動部を制御
する。That is, the control section 101 on the image transmitting side which has received the control information recognizes that the control information is the designation information of the magnification of the objective lens and sets the magnification so that the magnification becomes the objective lens. Control the switching drive unit.
【００６６】このようにして制御情報を受けた画像送信
側の制御部１０１の制御のもとに自動的に遠隔操作顕微
鏡１０４のレンズ倍率切り替え制御が行われる。In this way, the lens magnification switching control of the remote control microscope 104 is automatically performed under the control of the control unit 101 on the image transmission side which has received the control information.
【００６７】画像送信側の撮像部（カメラ）１０３でと
らえた標本の顕微鏡像が伝送されて受信されており、こ
れは顕微鏡の倍率が調整済みとなれば拡大像に相当する
ことになり、従って、センタ側（画像受信側）において
は、画像送信側から伝送されたこの拡大像を高倍率・拡
大像（画像Ｂ）４０３として表示する（Ｓ１０４）。The microscope image of the sample captured by the image capturing unit (camera) 103 on the image transmitting side is transmitted and received, and this corresponds to a magnified image when the magnification of the microscope is adjusted, therefore On the center side (image receiving side), this magnified image transmitted from the image transmitting side is displayed as a high-magnification / magnified image (image B) 403 (S104).
【００６８】センタ側においては、顕微鏡像を観察する
ためにオペレータ（この場合は病理医など）がマウス２
０７を操作して静止画像（画像Ａ）４０２上の矩形マー
カ４０４の表示位置を動かして標本上の所望の部分の拡
大像が表示されるように表示位置調整操作しているの
で、センタ側においては、静止画像（画像Ａ）４０２上
で矩形マーカ４０４を動かしているマウス２０７の位置
を検出する（Ｓ１０５）。On the center side, an operator (in this case, a pathologist, etc.) uses the mouse 2 to observe the microscope image.
07, the display position of the rectangular marker 404 on the still image (image A) 402 is moved to adjust the display position so that an enlarged image of a desired portion on the sample is displayed. Detects the position of the mouse 207 moving the rectangular marker 404 on the still image (image A) 402 (S105).
【００６９】マウス２０７の位置を検出すると次にこの
マウス２０７の位置情報を元にして顕微鏡１０４のステ
ージのとるべき座標位置を計算する。すなわち、マウス
２０７の位置により静止画像（画像Ａ）４０２上の矩形
マーカ４０４の位置（観察指定領域）が決められるの
で、当該矩形マーカ４０４の位置に相当する領域の画像
が観察できるように、顕微鏡１０４のステージ座標を計
算する（Ｓ１０６）。そして、ステージ座標が求まる
と、その求めたステージ座標を画像送信側に伝送する
（Ｓ１０７）。画像送信側では、受け取ったステージ座
標対応に顕微鏡ステージを移動させる。When the position of the mouse 207 is detected, the coordinate position to be taken by the stage of the microscope 104 is calculated based on the position information of the mouse 207. That is, since the position of the rectangular marker 404 (observation designated region) on the still image (image A) 402 is determined by the position of the mouse 207, the microscope is used so that the image of the region corresponding to the position of the rectangular marker 404 can be observed. The stage coordinates of 104 are calculated (S106). Then, when the stage coordinates are obtained, the obtained stage coordinates are transmitted to the image transmission side (S107). On the image transmitting side, the microscope stage is moved according to the received stage coordinates.
【００７０】つぎにセンタ側においては、静止画像の取
り込みの指示の有無を判断した上で静止画取り込み（現
在の拡大像である画像Ｂ（動画）をフリーズして、これ
を静止画の画像データとして画像送信側より伝送させ
る）処理、または、低倍率画像へ戻る処理に移る（現在
の拡大像である画像Ｂ（動画）を取り出すもととなった
静止画像（画像Ａ）が拡大像である画像Ｂ（動画）であ
ったときの静止画像を静止画像として取り出す処理に移
る）（Ｓ１０８）。Next, on the center side, it is determined whether or not there is an instruction to capture a still image, and then a still image is captured (the image B (moving image) that is the current enlarged image is frozen and this is used as image data of the still image. The image is transmitted from the image transmitting side as the above), or the process returns to the low-magnification image (the still image (image A) from which the current enlarged image B (moving image) is extracted is the enlarged image). The process moves to the process of extracting the still image when it is the image B (moving image) (S108).
【００７１】すなわち、Ｓ１０８〜Ｓ１１０ではそれぞ
れ静止画取り込み、または、低倍率画像へ戻り、終了か
否かの選択をする。それぞれの処理の選択は画面上のメ
ニューの選択によって行われる。これらの処理のいずれ
をも選択しなかった場合には、動画観察を続行する状態
になり、この場合には受信した動画像の記録、すなわ
ち、外部記憶装置２０５への保存を行う（Ｓ１１１）。
この記録は観察中は自動的に行われ、動画像データとと
もにその時の顕微鏡ステージ座標も合わせて記録され
る。That is, in S108 to S110, a still image is captured or a low-magnification image is returned to select whether or not to end. Selection of each processing is performed by selecting a menu on the screen. When none of these processes is selected, the moving image observation is continued, and in this case, the received moving image is recorded, that is, stored in the external storage device 205 (S111).
This recording is automatically performed during observation, and the microscope stage coordinates at that time are also recorded together with the moving image data.
【００７２】Ｓ１１２〜Ｓ１１４は静止画像を取り込む
ときの処理である。すなわち、Ｓ１０８において静止画
像取り込みであった場合には、まず初めに動画像表示を
フリーズする（Ｓ１１２）。このとき、画像送信側シス
テムでは静止画像を取り込み、保存している。そして、
静止画像が送信側から受信側へと伝送され、受信側でそ
のデータを保存する（Ｓ１１３）。このとき、受信し、
保存するデータは画像のみではなく、その時のステージ
座標等低倍率像と拡大像のリンクを管理するためのデー
タも含まれる。Steps S112 to S114 are the processing when capturing a still image. That is, when the still image is captured in S108, first, the moving image display is frozen (S112). At this time, the image transmission side system captures and stores the still image. And
The still image is transmitted from the transmitting side to the receiving side, and the receiving side stores the data (S113). At this time, receive
The data to be stored includes not only the image but also data for managing the link between the low-magnification image and the magnified image such as the stage coordinates at that time.
【００７３】取り込んだ画像、すなわち、今まで動画像
として観察していた倍率の静止画像を、新たな低倍率像
（画像Ａ）として表示する（Ｓ１１４）。以上の操作の
後、Ｓ１０３に戻り、新たな拡大像の観察を続ける。The captured image, that is, a still image with a magnification that has been observed as a moving image up to now is displayed as a new low-magnification image (image A) (S114). After the above operation, the process returns to S103 to continue observing a new magnified image.
【００７４】低倍率像の観察に戻るときは、Ｓ１０９で
低倍率像の観察を選択する。すると、センタ側システム
においては画像Ｂを現在の低倍率像に切り替える（Ｓ１
１５）。ただし、現在の低倍率像がはじめの拡大像であ
れば、切り替えは行わない。そして次にその画像の低倍
率静止画像を再生・表示し（Ｓ１１６）、Ｓ１０３以下
の処理に戻る。これにより、高倍率の動画像観察状態か
ら低倍率の動画像観察に移行して観察を続けることがで
きる。When returning to the observation of the low-magnification image, the observation of the low-magnification image is selected in S109. Then, in the system on the center side, the image B is switched to the current low-magnification image (S1).
15). However, if the current low-magnification image is the first magnified image, switching is not performed. Then, the low-magnification still image of the image is reproduced and displayed (S116), and the process returns to S103 and the subsequent steps. As a result, it is possible to shift from a high-magnification moving image observation state to a low-magnification moving image observation and continue the observation.
【００７５】以上がセンタ側システムを中心とする観察
時でのシステムの操作と動作例を順を追って説明したも
のである。The above is a step-by-step description of the operation and operation example of the system during observation centering on the center-side system.
【００７６】このような動作を行わせるには、画像送信
側システムの制御部１０１とセンタ側（画像受信側）シ
ステムの制御部１０６につぎのような処理機能を持たせ
れば良い。図７は動画像受信中の画像受信側の処理を、
図８は同じく動画像受信中の画像送信側の処理を示すフ
ローチャートであり、前者（図７）はセンタ側システム
の制御部１０６の、そして、後者（図８）は画像送信側
システムの制御部１０１の処理および制御機能に対応す
る。In order to perform such an operation, the control unit 101 of the image transmitting side system and the control unit 106 of the center side (image receiving side) system may have the following processing functions. FIG. 7 shows the processing on the image receiving side during the reception of a moving image
FIG. 8 is a flow chart showing the processing of the image transmitting side during the reception of the moving image. The former (FIG. 7) is the control unit 106 of the center side system, and the latter (FIG. 8) is the control unit of the image transmission side system. Corresponding to the processing and control functions of 101.
【００７７】順を追って説明する。Description will be made step by step.
【００７８】センタ側（画像受信側）の制御部１０６で
は通信回線を介して、画像送信側からの動画像データを
受信する（Ｓ２０１）。このとき、受信するものは圧縮
処理された動画像デ−タと、動画像入力時の顕微鏡ステ
ージの座標データである。The control unit 106 on the center side (image receiving side) receives the moving image data from the image transmitting side via the communication line (S201). At this time, what is received is the compressed moving image data and the coordinate data of the microscope stage when the moving image is input.
【００７９】センタ側の制御部１０６では、この受信し
た動画像データと座標データは制御部１０６の内蔵する
外部記憶装置２０５に保存する（Ｓ２０２）。The control unit 106 on the center side stores the received moving image data and coordinate data in the external storage device 205 built in the control unit 106 (S202).
【００８０】受信した動画像データは画像圧縮処理され
ているので、制御部１０６ではＣＰＵ２０１によりこの
圧縮されている動画像データを伸長処理し、制御部１０
６を構成する図２のフレームメモリ２０３へ転送する
（Ｓ２０３）。Since the received moving image data has been subjected to image compression processing, the control unit 106 causes the CPU 201 to decompress this compressed moving image data, and the control unit 10
The data is transferred to the frame memory 203 of FIG.
【００８１】つぎにセンタ側の制御部１０６ではＣＰＵ
２０１によりＳ２０４で伸長した画像データをフレーム
メモリ２０３に書き込み、さらにテレビ走査（掃引）に
同期させながらフレームメモリ２０３からこれを読出し
てビデオ信号化した後、ビデオ出力からモニタ装置２０
８（＝表示部１０７）に与えて当該モニタ装置２０８に
表示させる。Next, in the control unit 106 on the center side, the CPU
The image data decompressed in S204 by 201 is written in the frame memory 203, and is read from the frame memory 203 in synchronization with the television scanning (sweep) to be converted into a video signal.
8 (= display unit 107) to display on the monitor device 208.
【００８２】表示を行うとつぎにマウス２０７およびキ
ーボード２０６からの入力を取り込む（Ｓ２０５）。こ
れらの入力は制御部１０６のＣＰＵ２０１の制御によっ
て、顕微鏡ステージの移動、静止画像取込命令、観察の
終了命令などとして処理される。After the display, the input from the mouse 207 and the keyboard 206 is taken in (S205). Under the control of the CPU 201 of the control unit 106, these inputs are processed as a movement of the microscope stage, a still image capture command, an observation end command, and the like.
【００８３】取り込んだ情報からマウス２０７の移動が
あったことが判明した場合には（Ｓ２０６）、Ｓ２０
７，Ｓ２０８の処理を行う。ここでマウスが移動する
と、マウスの移動方向とその移動量対応に静止画像上の
矩形４０４を画面上で移動させる（Ｓ２０７）。これに
より、図３で説明したように、拡大領域を示す矩形マー
カ４０４が静止画像（画像Ａ）上で移動する。If it is found from the information that has been taken in that the mouse 207 has moved (S206), S20
7, the process of S208 is performed. When the mouse is moved here, the rectangle 404 on the still image is moved on the screen in correspondence with the moving direction of the mouse and the moving amount thereof (S207). As a result, the rectangular marker 404 indicating the enlarged area moves on the still image (image A) as described with reference to FIG.
【００８４】つぎにセンタ側の制御部１０６は低倍率静
止画像（画像Ａ）４０２上での矩形マーカ４０４の座標
をステージ座標へと変換処理し、これをこの座標へのス
テージ移動命令として通信制御装置２０４から通信部１
０８を介して画像送信側システムに伝達する（Ｓ２０
８）。そして、画面上のメニューの選択によって終了が
指示されなければＳ２０１からの処理に戻り、終了が指
示されていれば処理を終了する（Ｓ２１３）。Next, the control unit 106 on the center side converts the coordinates of the rectangular marker 404 on the low-magnification still image (image A) 402 into stage coordinates, and performs communication control as a stage movement command to these coordinates. Device 204 to communication unit 1
08 to the image transmission side system (S20
8). Then, if the end is not instructed by the selection of the menu on the screen, the process returns to S201, and if the end is instructed, the process is ended (S213).
【００８５】Ｓ２１０〜Ｓ２１２は静止画像を取り込む
ときの処理である。すなわち、センタ側の制御部１０６
は静止画取込命令があった場合（Ｓ１０９）、静止画取
込命令を画像送信側に伝える（Ｓ２１０）。そして、静
止画像データの受信待ちとなる（Ｓ２１１）。画像送信
側から静止画像データが送られて来ると、この送られて
来た画像データを通信制御装置２０４を介して取り込
み、ＣＰＵ２０１の制御のもとに外部記憶装置２０５に
書き込む（Ｓ２１２）。Steps S210 to S212 are the processing when capturing a still image. That is, the control unit 106 on the center side
If there is a still image capture command (S109), the still image capture command is transmitted to the image transmission side (S210). Then, it waits for the reception of the still image data (S211). When still image data is sent from the image sending side, the sent image data is fetched through the communication control device 204 and written in the external storage device 205 under the control of the CPU 201 (S212).
【００８６】このようにして、指定したマクロ領域の像
を静止画像として、そして、このマクロ領域上での所望
のミクロ領域（注目領域）の拡大像（高倍率像）を動画
像として表示することと、マウス操作等による注目領域
の設定と移動、現在の注目領域をマクロ領域としてさら
にそのマクロ領域中の所望のミクロ領域を観察するため
の倍率切り替え、これらの画像収集、マクロ領域画像と
このマクロ領域上のミクロ領域画像の関係等の情報収集
を実施できる。In this way, the image of the designated macro region is displayed as a still image, and the enlarged image (high-magnification image) of the desired micro region (region of interest) on this macro region is displayed as a moving image. Setting and moving the attention area by mouse operation, etc., switching the magnification for observing the desired micro area in the macro area with the current attention area as the macro area, collecting these images, macro area image and this macro It is possible to collect information such as the relationship between micro region images on a region.
【００８７】次に画像送信側システムの制御部１０１の
処理および制御機能を説明する。画像送信側の制御部１
０１では顕微鏡１０４にセットされたテレビカメラによ
る撮像部１０３から出力される画像データ（顕微鏡画像
の画像データ）を、自己の内蔵するフレームメモリ２０
３へ取り込む（Ｓ３０１）。Next, the processing and control functions of the control unit 101 of the image transmitting side system will be described. Image transmission side control unit 1
In 01, the image data (image data of a microscope image) output from the image pickup unit 103 by the television camera set in the microscope 104 is stored in the frame memory 20 included in itself.
3 is taken in (S301).
【００８８】また、一方、この画像データを圧縮処理し
て自己の内蔵する外部記憶装置２０５に保存する（Ｓ３
０２）。このとき保存するのは、画像データだけでな
く、この画像を取り込んだ際の顕微鏡ステージ座標も含
まれるものとする。On the other hand, this image data is compressed and stored in the external storage device 205 incorporated therein (S3).
02). At this time, not only the image data but also the microscope stage coordinates when the image is captured are stored.
【００８９】フレームメモリ２０３上の画像データはテ
レビ走査に同期して、読み出されてビデオ信号化され、
画像送信側システムのモニタ装置（＝表示部１０２）に
表示される（Ｓ３０３）。The image data on the frame memory 203 is read out and converted into a video signal in synchronization with television scanning,
It is displayed on the monitor device (= display unit 102) of the image transmitting side system (S303).
【００９０】画像送信側の制御部１０１は画像圧縮処理
したこの画像データを、自己の内蔵する通信制御装置２
０４を介して通信部１０５に出力し、画像受信側である
センタ側へと送信する（Ｓ３０４）。この結果、送信す
るデータは、保存したものと同様、圧縮されているので
データ量が少なくて済み、従って、伝送時間を短くでき
る。また、送信するのは画像データとステージ座標のデ
ータである。The control unit 101 on the image transmission side stores the image data subjected to the image compression processing in the communication control device 2 incorporated therein.
It is output to the communication unit 105 via 04 and transmitted to the center side which is the image receiving side (S304). As a result, the data to be transmitted is compressed, like the stored data, so that the amount of data is small and therefore the transmission time can be shortened. Also, what is transmitted is image data and stage coordinate data.
【００９１】次に画像送信側の制御部１０１は画像受信
側であるセンタ側からの命令の受信の有無を調べ（Ｓ３
０５）、センタ側から命令があった時にはＳ３０６，Ｓ
３０８で命令の種類による処理の選択をする。Next, the control unit 101 on the image transmitting side checks whether or not a command is received from the center side which is the image receiving side (S3
05), when there is a command from the center side, S306, S
At 308, processing is selected according to the type of instruction.
【００９２】まず、センタ側から受けた命令が顕微鏡ス
テージの移動命令であった場合には、制御部１０１はＳ
３０６からＳ３０７の処理に移る。このＳ３０７の処理
では、移動命令とともにセンタ側システムから送られて
来たステージ座標へと、顕微鏡１０４のステージを移動
させるべく駆動制御する。First, when the command received from the center side is a microscope stage movement command, the control unit 101 performs S
The process moves from S306 to S307. In the processing of S307, drive control is performed to move the stage of the microscope 104 to the stage coordinates sent from the center side system together with the move command.
【００９３】センタ側システムから受けた命令がステー
ジ移動でなかった場合は、制御部１０１は受けた命令が
静止画像取込命令か否かを判断する（Ｓ３０８）。その
結果、静止画像取込命令であった時は、撮像部１０３か
ら制御部１０１内蔵のフレームメモリ２０３への画像入
力を中止する（Ｓ３０９）。When the command received from the center side system is not the stage movement, the control unit 101 determines whether the received command is a still image capture command (S308). As a result, when the command is a still image capture command, image input from the image capturing unit 103 to the frame memory 203 built in the control unit 101 is stopped (S309).
【００９４】このとき、制御部１０１内蔵のフレームメ
モリ２０３上には、入力中止直前の画像データが残って
いることになる。画像送信側の制御部１０１はこのフレ
ームメモリ２０３上のデータを自己内蔵の外部記憶装置
２０５に書き込む（Ｓ３１０）。そして、この画像デー
タをセンタ側システムへ伝送すべく制御する（Ｓ３１
１）。このときの外部記憶装置２０５に書き込む画像デ
ータは非圧縮であるか、圧縮処理されたものであって
も、動画像の圧縮よりも圧縮率が低く画質の良いもので
ある。At this time, the image data immediately before the input is stopped remains in the frame memory 203 built in the control unit 101. The control unit 101 on the image transmission side writes the data in the frame memory 203 to the external storage device 205 built therein (S310). Then, the image data is controlled to be transmitted to the center side system (S31).
1). At this time, the image data written in the external storage device 205 is uncompressed, or even if it is compressed, it has a lower compression rate than the compression of the moving image and good image quality.
【００９５】それぞれの処理が終了した後に、画像送信
側の制御部１０１は処理を終了させるか否かを決める
（Ｓ３１２）。終了しなければ、はじめに戻り、撮像部
１０３からの画像入力を続ける。終了であれば、ここで
画像送信側システムの処理を終わる。After the respective processes are completed, the control unit 101 on the image transmitting side determines whether or not the processes are completed (S312). If not ended, the process returns to the beginning and the image input from the image pickup unit 103 is continued. If it is finished, the processing of the image transmitting side system is finished here.
【００９６】図９（ａ）にこのとき記録された静止画像
４０２・動画像４０３の関係を示す。FIG. 9A shows the relationship between the still image 402 and the moving image 403 recorded at this time.
【００９７】図９（ａ）を説明すると、低倍率像（静止
画像）４０２上の矩形マーカ４０４で、動画像４０３と
して得る拡大像（注目領域）の場所が示される。この拡
大像の動画ファイル（例えば、１秒あたり３０コマ分）
は、低倍率静止画像４０２または隣接する他のコマの動
画像４０３とリンクしており、低倍率像４０２上に表示
される矩形マーカ４０４の情報によってその画像の位置
が示される。Explaining FIG. 9A, a rectangular marker 404 on the low-magnification image (still image) 402 shows the location of the enlarged image (region of interest) obtained as the moving image 403. Movie file of this enlarged image (for example, 30 frames per second)
Is linked to the low-magnification still image 402 or the moving image 403 of another adjacent frame, and the position of the image is indicated by the information of the rectangular marker 404 displayed on the low-magnification image 402.
【００９８】静止画像４０２、および動画像４０３の各
フレーム（コマ）はそれぞれの顕微鏡ステージ座標デー
タを持っている。このデータは画像ファイル内に記録さ
れている。画像ファイル内に記録されるデータの構成は
図１１に示す如きであり、画像ファイルはヘッダと画像
データ部分の領域からなる。ヘッダには静止画の場合、
拡大画像矩形領域座標、拡大動画像ファイル名、動画の
場合、低倍率静止画像、同倍率静止画像の情報が入る。Each frame (frame) of the still image 402 and the moving image 403 has respective microscope stage coordinate data. This data is recorded in the image file. The structure of the data recorded in the image file is as shown in FIG. 11, and the image file is composed of a header and an area of an image data portion. In the case of a still image in the header,
In the case of a magnified image rectangular area coordinate, a magnified moving image file name, and a moving image, low magnification still image information and same magnification still image information are entered.
【００９９】本システムにおいては、低倍率画像上でマ
ウス２０７の位置情報に基づいて表示されるマウスカー
ソルを矩形マーカ４０４内の領域に移動させてマウス２
０７の操作ボタンをクリックすると、矩形マーカ４０４
内を全領域とする拡大像を呼び出すことができる。ある
倍率で観察した動画像ファイルは、以下の３種類の条件
で終了する。In this system, the mouse cursor displayed based on the position information of the mouse 207 on the low-magnification image is moved to the area within the rectangular marker 404 and the mouse 2 is moved.
Clicking the operation button of 07, rectangular marker 404
You can call up a magnified image that covers the entire area. A moving image file observed at a certain magnification ends under the following three types of conditions.
【０１００】その条件とは、(i) 静止画像取込のため
にフリーズしたとき、(ii) 低倍率画像での観察に戻っ
たとき、(iii) より高倍率の拡大像での観察に移った
ときの３種類である。The conditions are (i) when frozen for capturing a still image, (ii) when returning to observation with a low-magnification image, and (iii) when observing with a magnified image with a higher magnification. There are three types when
【０１０１】高倍率の拡大像での観察から低倍率の拡大
像に移る場合、すなわち、動画像を高倍率の像からそれ
より低倍率の像に戻す時は、現在の静止画像より低倍率
の静止画を画像ファイルから呼び出せばよい。また、図
９（ａ）の４０３ｈに示すように、動画像中に矩形マー
カ４０４を指定することで、拡大像からさらにその中の
指定領域の拡大像を得ることも可能である。When moving from a high-magnification magnified image to a low-magnification magnified image, that is, when a moving image is changed from a high-magnification image to a lower-magnification image, the magnification is lower than that of the current still image. You can call a still image from an image file. Further, as shown by 403h in FIG. 9A, by designating the rectangular marker 404 in the moving image, it is possible to obtain a magnified image of the designated region in the magnified image.
【０１０２】静止画像を取り込んだときは、そのときの
動画像と静止画ファイルがリンクしており、静止画像か
らさらに拡大した高倍率の画像があれば、その画像もま
た静止画像とリンクされる。動画像の観察から直接、高
倍率への拡大を行ったときには、動画像同士がリンクさ
れる。When a still image is captured, the moving image at that time and the still image file are linked, and if there is a high-magnification image further enlarged from the still image, that image is also linked to the still image. . When the images are enlarged to a high magnification directly from the observation of the moving images, the moving images are linked to each other.
【０１０３】以上のような動画像ファイルおよび静止画
像ファイルのリンクによって、観察中の記録が残され
る。また、このリンクを辿ることによって、観察の手順
を再現することができる。By linking the moving image file and the still image file as described above, a record during observation is left. Also, by following this link, the observation procedure can be reproduced.
【０１０４】また、図９（ｂ）のように、低倍率静止画
像４０２と、その拡大動画像４０３上で指定した静止画
像、あるいは低倍率動画像と、その静止画から拡大指定
した動画像を関連付ける。この関連付けによって、静止
画のみ、あるいは動画のみ、による低倍率画像から拡大
像へ、また逆に低倍率像へと画像のリンクを追った再生
すなわち、観察の変遷をトレースができる。As shown in FIG. 9B, the low-magnification still image 402, the still image specified on the enlarged moving image 403, or the low-magnification moving image and the moving image enlarged and specified from the still image are displayed. Associate. By this association, it is possible to trace the transition of the observation, that is, the transition of the observation from the low-magnification image to the magnified image only by the still image or only the moving image, and vice versa.
【０１０５】つぎに、リンクの方法の詳細を説明する。Next, details of the linking method will be described.
【０１０６】図１０にリンク情報を記録したデータファ
イルのデータ構成を示す。FIG. 10 shows the data structure of the data file in which the link information is recorded.
【０１０７】データファイルのデータ構成は図１０に示
すように、一つのレコードは画像ファイル名と、その画
像の低倍率像ファイルの情報、その画像から拡大した動
画像または静止画像ファイルの情報、同倍率のリンクし
ているファイル、すなわち静止画像ファイルに対する動
画像、または動画像に対する静止画像の情報からなる。As shown in FIG. 10, the data structure of the data file is such that one record includes an image file name, information about a low-magnification image file of the image, information about a moving image or a still image file enlarged from the image, It is composed of a file in which magnifications are linked, that is, information of a moving image for a still image file or a still image for a moving image.
【０１０８】それぞれの画像に対する情報は、“ファイ
ル名”、“静止画・動画の区別”、拡大像に対しては
“拡大像の位置する矩形領域の座標”からなる。The information for each image consists of "file name", "discrimination of still image / moving image", and for an enlarged image, "coordinates of the rectangular area where the enlarged image is located".
【０１０９】例えば、図９（ｂ）における動画Ｂであれ
ば、低倍率画像は静止画Ａ、同倍率の画像は静止画Ｃ、
拡大像として動画Ｄが記録される。また、動画Ｂ上での
動画Ｄの領域を示す矩形は両画像データのステージ座標
から計算される。For example, in the case of the moving image B in FIG. 9B, the low-magnification image is still image A, the image of the same magnification is still image C,
The moving image D is recorded as an enlarged image. Further, the rectangle indicating the area of the moving image D on the moving image B is calculated from the stage coordinates of both image data.
【０１１０】画像再生時には、このリンクデータファイ
ルをアクセスすることによって、低倍率像から拡大像へ
の観察の流れを追うことができ（トレース機能）、また
遡ってゆく、つまり、逆に辿ってゆくこともできる。At the time of image reproduction, by accessing this link data file, it is possible to follow the flow of observation from a low-magnification image to a magnified image (trace function), and trace back, that is, trace backward. You can also
【０１１１】現在表示中の画像の観察を止め、既に取り
込まれ、観察している低倍率画像を表示するには、モニ
タ装置（表示部）に操作メニューを表示し、この操作メ
ニュー上で低倍率像の表示を指定すれば良い。すると、
図６のフローチャートＳ１１５，Ｓ１１６のように、モ
ニタ装置上での画像表示が切り替わる。In order to stop the observation of the image currently displayed and display the low-magnification image that has already been captured and is being observed, the operation menu is displayed on the monitor device (display section), and the low-magnification image is displayed on this operation menu. You can specify the display of the image. Then,
The image display on the monitor device is switched as in the flowcharts S115 and S116 of FIG.
【０１１２】また、画像再生時のメニュー選択で、静止
画のみの表示を選択すると、図９（ｂ）で示したような
静止画同士の関連付けを追って、静止画のみの再生を行
う。このときは図１０のデータファイルの中で、表示画
像の低倍率像を表示するときは低倍率静止画像を検索
し、拡大像静止画像を表示するときは同様に拡大静止画
像を検索して、表示する。When the display of only still images is selected in the menu selection during image reproduction, only still images are reproduced following the association of still images as shown in FIG. 9B. At this time, in the data file of FIG. 10, when displaying a low-magnification image of the display image, a low-magnification still image is searched, and when displaying a magnified image still image, a magnified still image is similarly searched, indicate.
【０１１３】つぎに再生時の軌跡表示機能（トレース機
能）について説明する。再生時の軌跡表示機能とは低倍
率画像上に設定した注目領域をどの位置を辿って観察し
ていったか観察ルートを示す軌跡を表示するものであ
る。Next, the locus display function (trace function) during reproduction will be described. The locus display function at the time of reproduction is to display a locus indicating an observation route as to which position the region of interest set on the low-magnification image is observed.
【０１１４】その表示画面の例を図５に示す。図５に示
すように、低倍率画像上に拡大動画像を観察したときの
軌跡を表示する。An example of the display screen is shown in FIG. As shown in FIG. 5, the locus when the enlarged moving image is observed is displayed on the low-magnification image.
【０１１５】低倍率画像上に描かれた軌跡は、以下のよ
うにして求める。The locus drawn on the low-magnification image is obtained as follows.
【０１１６】まず図１０のデータファイルを検索し、表
示中の低倍率画像に対する、拡大動画像ファイルを検索
する。次にその動画像ファイルから、各フレーム毎のス
テージ座標を検索する。このステージ座標と、低倍率画
像のステージ座標から、画像上での観察位置の座標を求
め、求めた座標をプロットして軌跡を描くようにする。First, the data file shown in FIG. 10 is searched for an enlarged moving image file for the low-magnification image being displayed. Then, the stage coordinates for each frame are searched from the moving image file. From the stage coordinates and the stage coordinates of the low-magnification image, the coordinates of the observation position on the image are obtained, and the obtained coordinates are plotted to draw a locus.
【０１１７】以上、説明したように、第１実施例は、与
えられる操作情報対応にステージ移動およびレンズ倍率
の可変制御が可能な遠隔操作顕微鏡と、この顕微鏡でと
らえた標本像を逐次撮像し、画像情報として出力する撮
像手段と、この撮像手段により撮像された画像情報を所
定の標準圧縮率で画像圧縮処理して出力すると共に、静
止画取り込みの指令を受けるとその時点で得られる１画
面分の画像情報については標準圧縮率より低い圧縮率で
画像圧縮処理し出力する画像送信側制御手段と、この画
像送信側制御手段に対する静止画取り込みの指令および
前記遠隔操作顕微鏡に対する操作情報の授受および前記
撮像手段により撮像された画像情報を伝送する通信手段
と、画像受信側に設けられ、静止画取り込みの指令およ
び少なくとも静止画面上の任意領域の指定と静止画取得
の指示を与えるための操作手段と、画像受信側に設けら
れ、画像を表示するための表示手段と、受信した画像情
報を個別に逐次記録する画像情報記憶再生手段と、静止
画取得の指示が発生されると前記記憶再生手段の記憶し
た当該変更前の最新静止画像もしくは受信される最新静
止画像を取り込んで復元し、前記表示手段に表示するた
めの静止画表示機能、前記通信手段を介して受信される
画像情報を復元し、前記表示手段に画像（動画像）表示
するための動画表示機能、前記操作手段により指示され
る前記静止画表示機能による画像（静止画）上の任意領
域対応の位置に撮像画像の中心位置を移動するためのス
テージ移動用の操作情報と前記静止画表示機能による画
像（静止画）上の任意領域が前記動画像の表示領域に当
て嵌まる（フィットする）ようなレンズ倍率を与えるた
めの操作情報とを発生して通信手段に与える機能とを有
する制御手段とより構成したものであり、静止画上に設
定した所望領域の画像を動画像として表示し、静止画像
と動画像を観察できるようにすると共に、動画像は静止
画像の一部領域の像とするよう顕微鏡を制御することか
ら、静止画像は低拡大率の顕微鏡像となってこれによ
り、動画像の周辺領域を含めた観察が可能になり、ま
た、動画像は静止画像の一部領域が顕微鏡全視野内に収
まるように拡大率を高めて得た像であることから、注目
領域の拡大像として観察できるようになるものである。As described above, in the first embodiment, the remote operation microscope capable of variably controlling the stage movement and the lens magnification according to the given operation information, and the sample images captured by this microscope are sequentially captured, Image pickup means for outputting as image information, image compression processing of the image information picked up by this image pickup means at a predetermined standard compression ratio, and output, and when a command to capture a still image is received, one screen is obtained at that time. The image information of the image transmission side control means for performing image compression processing at a compression rate lower than the standard compression rate and outputting the image information, a command for capturing a still image to the image transmission side control means, and exchange of operation information for the remote control microscope and A communication means for transmitting image information captured by the image capturing means, and a still image capturing command provided at the image receiving side and at least a still image Operation means for designating an arbitrary area on the surface and giving an instruction to obtain a still image, display means provided on the image receiving side for displaying an image, and image information for sequentially recording received image information individually A storage / playback unit, and when a still image acquisition instruction is generated, the latest still image before the change stored by the storage / playback unit or the latest still image received is restored to be displayed on the display unit. A still image display function, a moving image display function for restoring image information received via the communication unit and displaying an image (moving image) on the display unit, and a still image display function instructed by the operation unit. The operation information for moving the stage for moving the center position of the captured image to the position corresponding to the arbitrary area on the image (still image) and the arbitrary area on the image (still image) by the still image display function are the moving information. It is configured by a control unit having a function of generating operation information for giving a lens magnification that fits (fits) to the image display area and giving it to the communication unit, which is set on the still image. The image of the desired area is displayed as a moving image so that the still image and the moving image can be observed, and the microscope is controlled so that the moving image is an image of a partial area of the still image. This makes it possible to observe the surrounding area of the moving image, and the moving image can be obtained by increasing the magnification so that a partial area of the still image fits within the entire field of view of the microscope. Since the image is an enlarged image, it can be observed as an enlarged image of the region of interest.
【０１１８】しかも、画像送信側制御手段は、撮像手段
により撮像された画像情報を所定の標準圧縮率で画像圧
縮処理して出力すると共に、静止画取り込みの指令を受
けるとその時点で得られる１画面分の画像情報について
は標準圧縮率より低い圧縮率で画像圧縮処理し出力する
から、拡大像である注目領域の画像のさらにまた細部を
詳しく観察する必要が生じた時に、静止画取り込みの指
令を与えることで、この時点における変更前の拡大像を
静止画像とし、この静止画像中の所望の領域を指定する
ことでその領域の拡大像を動画像として観察できるもの
で、従って、操作性が良く、注目領域とその周辺の状態
を関連付けて観察を進めることができるようになるもの
である。Moreover, the image transmission side control means outputs the image information imaged by the image pickup means by image compression processing at a predetermined standard compression rate, and at the same time when it receives a still image fetching command 1 The image information for the screen is compressed and output at a compression rate lower than the standard compression rate, so when it becomes necessary to observe the details of the image of the region of interest, which is a magnified image, in detail, a command to capture a still image is issued. By giving a magnified image before this change as a still image, and by designating a desired area in this still image, the magnified image of that area can be observed as a moving image, and therefore operability is improved. Good, it becomes possible to proceed with the observation by associating the region of interest with the state of the periphery thereof.
【０１１９】また、本実施例では、動画像と静止画像と
を関連付けて記録することにより、診断の経過を容易に
トレースすることができると云った効果が得られるよう
になり、また、静止画同士を関連付けて記録するように
すれば、静止画だけで診断経過を観察することができる
ようになる。そして、静止画同士を関連付けて記録する
ことにより、診断経過を早くレビューできるようになる
と云った効果も得られる。更には、動画像の各フレーム
に、顕微鏡ステージの座標を記録しておくことにより、
静止画像上に動画で観察した軌跡を表示させることが可
能となり、これによれば、観察部分の確認が容易となる
と云う効果が得られる。Further, in this embodiment, by recording the moving image and the still image in association with each other, the effect that the progress of diagnosis can be easily traced can be obtained, and the still image can be obtained. If they are recorded in association with each other, the progress of diagnosis can be observed only with a still image. By recording still images in association with each other, it is possible to obtain an effect that the diagnosis progress can be reviewed quickly. Furthermore, by recording the coordinates of the microscope stage in each frame of the moving image,
It is possible to display the locus of observation as a moving image on a still image, which has the effect of facilitating confirmation of the observed portion.
【０１２０】また、撮像手段により撮像された画像情報
を所定の標準圧縮率で画像圧縮処理して出力すると共
に、静止画取り込みの指令を受けるとその時点で得られ
る１画面分の画像情報については標準圧縮率より低い圧
縮率で画像圧縮処理し出力する送信側制御手段と、この
送信側制御手段に対する静止画取り込みの指令および前
記遠隔操作顕微鏡に対する操作情報の授受および前記撮
像手段により撮像された画像情報を伝送する通信手段
と、受信側に設けられ、静止画取り込みの指令および少
なくとも静止画面上の任意領域の指定と静止画取得の指
示を与えるための操作手段と、受信側に設けられ、画像
を表示するための表示手段と、受信した画像情報を標本
全体像における座標位置対応の画像位置情報および対応
する静止画とその静止画中の対応領域情報とともに個別
に逐次記録する画像情報記憶再生手段と、静止画取得の
指示が発生されると前記記憶再生手段の記憶した当該変
更前の最新静止画像もしくは受信される最新静止画像を
取り込んで復元し、前記表示手段に表示するための静止
画表示機能（第１の画像表示機能）、前記通信手段を介
して受信される画像情報を復元し、前記表示手段に画像
（動画像）表示するための動画表示機能（第２の画像表
示機能）、前記操作手段により指示される静止画表示機
能（第１の画像表示機能）による画像（静止画）上の任
意領域対応の位置に撮像画像の中心位置を移動するため
のステージ移動用の操作情報と前記静止画表示機能（第
１の画像表示機能）による画像（静止画）上の任意領域
が前記第２の所定画素数に収まる画素構成の動画像とな
るに要する対物レンズ倍率を与えるための操作情報とを
発生して通信手段に与える機能、画像情報記憶再生手段
に記憶されている静止画とその静止画中の注目領域の動
画とを得て、前記表示手段に対応表示する再生制御機能
とを有する制御手段とより構成するようにすると、静止
画上に設定した所望領域の画像を動画像として表示し、
静止画像と動画像を観察できるようにすると共に、動画
像は静止画像の一部領域の像とするよう顕微鏡を制御す
ることから、静止画像は低拡大率の顕微鏡像となってこ
れにより、動画像の周辺領域を含めた観察が可能にな
り、また、動画像は静止画像の一部領域が顕微鏡全視野
内に収まるように拡大率を高めて得た像であることか
ら、注目領域の拡大像として観察できるようになる。Further, the image information obtained by the image pickup means is subjected to the image compression processing at a predetermined standard compression ratio and is outputted, and when the instruction to fetch the still image is received, the image information for one screen obtained at that time is as follows. Transmitting side control means for compressing and outputting an image at a compression rate lower than the standard compression rate, a command for capturing a still image to the transmitting side control means, exchanging operation information for the remote control microscope, and an image captured by the image capturing means. Communication means for transmitting information, operation means provided on the receiving side for giving a command to capture a still image and at least specifying an arbitrary area on the still screen and instruction to acquire a still image, and an operation means provided on the receiving side Means for displaying the received image information, image position information corresponding to the coordinate position in the whole image of the specimen, corresponding still image and its still image Image information storing / reproducing means for sequentially recording together with corresponding area information in the inside, and the latest still image before the change stored or the latest still image received by the storing / reproducing means when a still image acquisition instruction is issued. A still image display function (first image display function) for capturing, restoring, and displaying on the display unit, image information received via the communication unit is restored, and an image (moving image) is displayed on the display unit. A moving image display function for displaying (second image display function), a still image display function (first image display function) instructed by the operating means, and an image is picked up at a position corresponding to an arbitrary area on an image (still image). Pixels in which operation information for moving the stage for moving the central position of the image and an arbitrary area on the image (still image) by the still image display function (first image display function) fall within the second predetermined number of pixels Structure A function of generating operation information for giving the objective lens magnification required to become a moving image of the above and giving it to the communication means, a still image stored in the image information storing and reproducing means, and a moving image of the attention area in the still image. If it is configured with a control unit having a reproduction control function for displaying corresponding to the display unit, the image of the desired area set on the still image is displayed as a moving image,
In addition to making it possible to observe still and moving images, the microscope is controlled so that the moving image is an image of a partial area of the still image. It is possible to observe the peripheral area of the image, and the moving image is an image obtained by increasing the magnification so that a partial area of the still image fits within the entire field of view of the microscope. It becomes possible to observe it as an image.
【０１２１】しかも、送信側制御手段は、撮像手段によ
り撮像された画像情報を所定の標準圧縮率で画像圧縮処
理して出力すると共に、静止画取り込みの指令を受ける
とその時点で得られる１画面分の画像情報については標
準圧縮率より低い圧縮率で画像圧縮処理し出力するか
ら、拡大像である注目領域の画像のさらにまた細部を詳
しく観察する必要が生じた時に、静止画取り込みの指令
を与えることで、この時点における変更前の拡大像を静
止画像とし、この静止画像中の所望の領域を指定するこ
とでその領域の拡大像を動画像として観察できる。Moreover, the transmitting side control means performs image compression processing of the image information picked up by the image pickup means at a predetermined standard compression ratio and outputs it, and when receiving a still image taking command, one screen obtained at that time is displayed. The minute image information is compressed and output at a compression rate lower than the standard compression rate, so when it becomes necessary to observe the details of the image in the region of interest, which is a magnified image, in detail, a command to capture a still image is issued. By giving it, the magnified image before the change at this point is made a still image, and by designating a desired area in this still image, the magnified image of the area can be observed as a moving image.
【０１２２】従って、操作性が良く、注目領域とその周
辺の状態を関連付けて観察を進めることができるように
なる。Therefore, the operability is good, and the observation can be advanced by associating the state of interest with the surrounding state.
【０１２３】そして、更には画像記憶再生手段には遠隔
操作時点での静止画とその静止画中の指定領域の動画を
記憶させてあることにより、遠隔操作時点での表示手段
に表示される静止画と動画を対応付けて再生表示するこ
とができる。そのため、後日の再観察の際には遠隔操作
時点での状況を注目領域とその周辺領域の関係を含め
て、わかり易く再現できると共に、また、ベテランが標
本観察する状況をそのまま再現できるので、初学者など
に対する教育実習効果も得られるようになる。Furthermore, since the still image at the time of remote operation and the moving image in the designated area in the still image are stored in the image storing / reproducing means, the still image displayed on the display means at the time of remote operation is displayed. Images and moving images can be associated and reproduced and displayed. Therefore, at the time of re-observation at a later date, the situation at the time of remote control can be easily reproduced, including the relationship between the attention area and its surrounding area, and the situation observed by the veteran can be reproduced as it is. The educational practice effect for such things will also be obtained.
【０１２４】ここで、第１実施例ではＮＴＳＣ方式等の
ような標準テレビ方式のカメラを用いて顕微鏡像を撮像
し、ディジタル通信回線であるＩＳＤＮ（サービス総合
ディジタル網）を利用してセンタ側に伝送して観察する
方式であるが、本発明は静止画は注目領域の周辺の状況
を観察し、注目領域はその注目領域が全視野となるよう
な倍率に対物レンズの倍率を切り替え制御し、その倍率
での顕微鏡像をカメラで撮像して拡大像（動画像）とし
てセンタ側に送るようにしたものであり、顕微鏡像の画
像データをディジタル通信回線を利用してセンタ側に伝
送して観察する方式であるために、精細画像を動画とし
て伝送することは現状では難しい面が残されている。そ
こで、拡大像（動画像）は画質は落ちるがデータ量を小
さくできるように圧縮率を高くして伝送することにより
リアルタイムで動画像を伝送し、静止画は１枚だけ送る
ので多少時間を要しても構わないものとして画質重視を
第１とした低圧縮率（もしくは非圧縮）で伝送するよう
にしたものである。Here, in the first embodiment, a microscope image is picked up by using a camera of a standard television system such as the NTSC system, and is sent to the center side by using ISDN (Integrated Service Digital Network) which is a digital communication line. Although it is a method of transmitting and observing, the present invention observes the situation around the attention area for the still image, and the attention area is controlled to switch the magnification of the objective lens to a magnification such that the attention area becomes the entire visual field, The microscope image at that magnification is taken by the camera and sent as an enlarged image (moving image) to the center side. The image data of the microscope image is transmitted to the center side using a digital communication line for observation. However, in the present situation, it is difficult to transmit a fine image as a moving image. Therefore, although the image quality of the enlarged image (moving image) is reduced, the moving image is transmitted in real time by transmitting at a high compression rate so that the data amount can be reduced, and it takes some time because only one still image is sent. As a matter of course, transmission is performed at a low compression rate (or non-compression) with the first priority being image quality.
【０１２５】しかし、画像は顕微鏡による標本観察にお
いて極めて重要であり、カメラで撮像して得た画像の画
質を最大限維持した画像データを伝送したいところであ
る。そこで、データ伝送速度のより高速な通信網である
例えば、ＩＳＤＮのＩＮＳネット１５００等を使用でき
るシステムであれば、一層画質のよいテレビカメラを使
用し、かつ、画質をできるだけ維持して画像伝送するこ
とが可能になる。However, the image is extremely important in observing a sample with a microscope, and it is desired to transmit image data in which the image quality of the image obtained by the camera is maintained at the maximum. Therefore, in a system capable of using a communication network having a higher data transmission rate, for example, ISDN INS net 1500, a television camera with a higher image quality is used and image transmission is performed while maintaining the image quality as much as possible. It will be possible.
【０１２６】つぎにこのような高速伝送可能な通信網を
使用し、高画質画像を伝送してより良い画像の観察を可
能にする実施例を第２実施例として説明する。Next, an example in which a high-quality image is transmitted and a better image can be observed by using such a communication network capable of high-speed transmission will be described as a second example.
【０１２７】（第２実施例）本システムでは通信回線は
ＮＴＴ（日本電信電話株式会社）のサービスするディジ
タル通信網である例えばＩＮＳネット１５００を使用
し、また、顕微鏡像を撮像する撮像部としてＮＴＳＣ方
式のカメラとＨＤＴＶ（高品位テレビ）方式のカメラの
双方を使用できるようにする。そして、ＮＴＳＣ方式の
カメラによる画像を拡大像（動画像）として用い、ＨＤ
ＴＶ方式のカメラによる像を静止画として使用するよう
にし、できるだけリアルタイムで高画質像を伝送できる
ようにする。(Second Embodiment) In this system, a communication line uses, for example, INS Net 1500 which is a digital communication network serviced by NTT (Nippon Telegraph and Telephone Corporation), and NTSC is used as an image pickup unit for picking up a microscope image. Allows both system cameras and HDTV (High Definition Television) cameras to be used. Then, an image taken by an NTSC camera is used as a magnified image (moving image), and HD
An image captured by a TV camera is used as a still image so that a high quality image can be transmitted in real time as much as possible.
【０１２８】拡大像（動画像）は標本の注目領域を拡大
したものであり、より精細に観察するために用いるもの
であるが、拡大像であるために、画面上の精細度はＮＴ
ＳＣ方式の画像でも十分である。一方、静止画像は拡大
像（動画像）より倍率の低い画面を表示するものである
から、ＮＴＳＣ方式の画像では細部が余り良く分からな
い。そこで、ＨＤＴＶ用のカメラで撮像した画像を静止
画用として利用する構成とする。The magnified image (moving image) is a magnified image of the region of interest of the sample and is used for more detailed observation. However, since it is a magnified image, the definition on the screen is NT.
SC type images are also sufficient. On the other hand, since a still image displays a screen having a lower magnification than that of a magnified image (moving image), details of the image of the NTSC system cannot be understood very well. Therefore, the image captured by the HDTV camera is used as a still image.
【０１２９】ディジタル通信網であるＩＮＳネット１５
００を使用した場合、ＮＴＳＣ方式の画像品位を保てる
程度の画像データを４０分の１程度に圧縮して得たデー
タ容量の画像ならば、動画像としてリアルタイム伝送す
ることができる。そして、４０分の１程度の圧縮なら
ば、伸長した場合に、元の画質に十分再現できる。INS Net 15 which is a digital communication network
When 00 is used, an image having a data capacity obtained by compressing the image data of an image quality of NTSC system to about 1/40 can be transmitted in real time as a moving image. If the compression is about 1/40, the original image quality can be sufficiently reproduced when expanded.
【０１３０】一方、ＨＤＴＶ画像もその品位を保てる程
度の画像データを基準に、それを２０分の１程度に圧縮
処理した場合のデータ量を１．６秒程度の時間で伝送す
ることができ、静止画像伝送の待ち時間としては、十分
実用的な範囲である。そして、２０分の１程度の圧縮な
らば、伸長した場合に、元の画質を再現できる。On the other hand, the HDTV image can be transmitted in a time of about 1.6 seconds when the data amount when the HDTV image is compressed to about 1/20 based on the image data which can maintain its quality, The waiting time for still image transmission is within a sufficiently practical range. If the compression is about 1/20, the original image quality can be reproduced when expanded.
【０１３１】そこで本実施例では通信網としてＩＮＳネ
ット１５００を使用し、画像送信側の顕微鏡像を得るた
めの撮像部として、ＨＤＴＶ方式のカメラとＮＴＳＣ方
式のカメラを使用し、ＨＤＴＶ方式の画像を静止画像と
して使用し、ＮＴＳＣ方式の画像を動画像として使用す
る構成とする。Therefore, in this embodiment, the INS net 1500 is used as a communication network, and an HDTV system camera and an NTSC system camera are used as an image pickup unit for obtaining a microscope image on the image transmitting side. It is configured to be used as a still image and an NTSC image as a moving image.
【０１３２】本実施例のハードウェア構成を、図１２に
ブロック図で示す。FIG. 12 is a block diagram showing the hardware structure of this embodiment.
【０１３３】基本構成としては、第１実施例と変りな
い。図１２において、３０１は画像送信側の制御部であ
るＰＣ（パーソナルコンピュータ）であり、３０２は顕
微鏡画像を表示するモニタ装置、３０３はポインティン
グデバイスであるマウス、３０４はキーボードである。
３０５は撮像手段となるＨＤＴＶ用のカメラ、３０６は
当該ＨＤＴＶ用のカメラ３０５のコントロールユニット
（ＣＣＵ）、３０７は撮像手段となるＮＴＳＣ用のカメ
ラ、３０８は当該ＮＴＳＣ用のカメラ３０７のコントロ
ールユニット（ＣＣＵ）である。The basic structure is the same as that of the first embodiment. In FIG. 12, reference numeral 301 is a PC (personal computer) that is a control unit on the image transmission side, 302 is a monitor device that displays a microscope image, 303 is a mouse that is a pointing device, and 304 is a keyboard.
Reference numeral 305 denotes an HDTV camera serving as an imaging unit, 306 a control unit (CCU) of the HDTV camera 305, 307 an NTSC camera serving as an imaging unit, and 308 a control unit (CCU) of the NTSC camera 307. ).
【０１３４】顕微鏡３０９はステージおよび対物レンズ
のレボルバをモータにより駆動移動制御することがで
き、従って、ステージのＸ軸、Ｙ軸方向移動制御と対物
レンズの切り替え制御を行うことができる。The microscope 309 can drive and control the revolver of the stage and the objective lens by a motor, and therefore can control the movement of the stage in the X-axis and Y-axis directions and the switching of the objective lens.
【０１３５】ＮＴＳＣ用のカメラ３０７とＨＤＴＶ用の
カメラ３０５は共に顕微鏡３０９の標本像を写すように
顕微鏡３０９に接続されている。顕微鏡標本像を、２系
統の撮像手段であるＮＴＳＣ用のカメラ３０７と、ＨＤ
ＴＶ用のカメラ３０５で得られる画像出力のどちらをＰ
Ｃ３０１に取り込み、画像表示と画像伝送に供するか
は、ＰＣ３０１からのカメラ切替命令による。ＰＣ３０
１はまた、顕微鏡３０９ステージおよび対物レンズのレ
ボルバを制御する。The NTSC camera 307 and the HDTV camera 305 are both connected to the microscope 309 so as to capture a sample image of the microscope 309. The image of the microscope sample is taken by a camera 307 for NTSC, which is an imaging means of two systems, and an HD.
Which of the image outputs obtained by the TV camera 305 is P
Whether the image is taken into C301 and used for image display and image transmission depends on a camera switching command from the PC301. PC30
1 also controls the microscope 309 stage and the revolver of the objective lens.
【０１３６】画像受信側の制御部であるＰＣ（パーソナ
ルコンピュータ）３１１と画像送信側を結んでいる通信
回線はＮＴＴ（日本電信電話株式会社）のサービスする
ディジタル通信網であるＩＮＳネット１５００である。
この回線によって伝送された画像は画像受信側のモニタ
装置（＝表示部）３１２に表示される。画像受信側の操
作は画像受信側の制御部であるＰＣ３１１に接続された
マウス３１２とキーボード３１３によって行われる。The communication line connecting the PC (personal computer) 311 which is the control unit on the image receiving side and the image transmitting side is the INS net 1500 which is a digital communication network serviced by NTT (Nippon Telegraph and Telephone Corporation).
The image transmitted through this line is displayed on the monitor device (= display unit) 312 on the image receiving side. The operation on the image receiving side is performed by the mouse 312 and the keyboard 313 connected to the PC 311 which is the control unit on the image receiving side.
【０１３７】ＩＮＳネット１５００を通信回線として用
いれば、ＮＴＳＣ方式の画像品位を保てる程度の画像デ
ータを４０分の１程度に圧縮して得たデータ容量の画像
ならば、動画像としてリアルタイム伝送することができ
る。If the INS Net 1500 is used as a communication line, if the image data has a data capacity obtained by compressing the image data of an image quality of the NTSC system to about 1/40, the image is transmitted in real time as a moving image. You can
【０１３８】一方、ＨＤＴＶ画像もその品位を保てる程
度の画像データを基準に、それを２０分の１程度に圧縮
処理した場合のデータ量を１．６秒程度の時間で伝送す
ることができ、静止画像伝送の待ち時間としては、十分
実用的な範囲である。On the other hand, the HDTV image can be transmitted in a time of about 1.6 seconds when the HDTV image is compressed to about 1/20 based on the image data which can maintain its quality. The waiting time for still image transmission is within a sufficiently practical range.
【０１３９】そこで本実施例ではＨＤＴＶ方式の画像を
静止画像として使用し、ＮＴＳＣ方式の画像を動画像と
して使用する構成とする。Therefore, in this embodiment, an image of the HDTV system is used as a still image and an image of the NTSC system is used as a moving image.
【０１４０】このステムの処理内容は、実施例１の場合
とほとんど変わりはない。異なる点は、画像入力を行う
カメラの切り替えのみである。The processing contents of this stem are almost the same as those in the first embodiment. The only difference is the switching of cameras for image input.
【０１４１】図１３は画像送信側の処理で、第１実施例
と異なる部分、すなわち、静止画像取込処理（図８のＳ
３０９〜Ｓ３１１）に対応する部分のフローチャートで
ある。FIG. 13 shows the processing on the image transmitting side, which is different from the first embodiment, that is, the still image capturing processing (S in FIG. 8).
309 to S311) is a flowchart of a portion corresponding to.
【０１４２】図１３の処理を説明すると、まずＳ４０１
で、画像入力をＮＴＳＣ方式のカメラから、ＨＤＴＶ
（高品位テレビ）のカメラへと切り替える。この時点で
フレームメモリにはＮＴＳＣサイズの画像でなく、ＨＤ
ＴＶの画像が入力される。The processing of FIG. 13 will be described. First, S401.
Then, image input from an NTSC camera to an HDTV
Switch to a (high-definition TV) camera. At this point, the frame memory is not an NTSC size image, but an HD
The TV image is input.
【０１４３】Ｓ４０２からＳ４０４までは、図８のＳ３
０９からＳ３１１の処理に該当する。From S402 to S404, S3 in FIG.
This corresponds to the processing from 09 to S311.
【０１４４】Ｓ４０２ではＨＤＴＶカメラからフレーム
メモリへの入力を停止する。Ｓ４０３ではこのフリーズ
したＨＤＴＶによる静止画像を外部記憶装置に書き込
む。そしてＳ４０４では、静止画像データを画像受信側
へ伝送する。In S402, the input from the HDTV camera to the frame memory is stopped. In step S403, the frozen still image by the HDTV is written in the external storage device. Then, in S404, the still image data is transmitted to the image receiving side.
【０１４５】静止画像の取り込と伝送が終わったら、Ｓ
４０５で、カメラの入力をＨＤＴＶの側からＮＴＳＣの
側へ戻す。When the still image is captured and transmitted, S
At 405, the camera input is returned from the HDTV side to the NTSC side.
【０１４６】以上の第２実施例は、通信回線としてはＮ
ＴＴのサービスする高速なディジタル通信網である例え
ばＩＮＳネット１５００を使用し、また、顕微鏡像を撮
像する撮像部としてＮＴＳＣ方式のカメラとＨＤＴＶ
（高品位テレビ）方式のカメラの双方を使用できるよう
にすると共に、ＮＴＳＣ方式のカメラによる画像を拡大
像（動画像）として用い、ＨＤＴＶ方式のカメラによる
像を静止画として使用するようにして、できるだけリア
ルタイムで高画質像を伝送できるようにしたものであっ
た。In the above second embodiment, the communication line is N
A high-speed digital communication network provided by TT, for example, INS Net 1500 is used, and an NTSC camera and an HDTV are used as an image pickup unit for picking up a microscope image.
Both of the (high-definition television) type cameras can be used, and the image of the NTSC type camera is used as an enlarged image (moving image), and the image of the HDTV type camera is used as a still image. It was made possible to transmit a high quality image in real time as much as possible.
【０１４７】しかし、これは伝送する画像データの量が
多いので、ＩＮＳネット１５００より伝送速度の遅いＩ
ＮＳネット６４上では実用的でない。しかも、ＩＮＳネ
ット６４上で使用できる従来のシステムは静止画を用い
る方式であり、静止画像上で、顕微鏡の対物レンズを変
えて拡大像を取り込む領域を指定すると、画像受信側は
画像が送信されてくるまで、どのような画像が送られて
くるか、全くわからなかった。However, since the amount of image data to be transmitted is large, I, which has a slower transmission speed than the INS Net 1500, transmits.
It is not practical on the NS Net 64. Moreover, the conventional system that can be used on the INS net 64 is a method that uses a still image, and if the objective lens of the microscope is changed and the area for capturing the enlarged image is designated on the still image, the image receiving side transmits the image. Until I came, I didn't know what kind of image was sent.
【０１４８】従って、ＩＮＳネット６４上で動作可能で
あり、これらの欠点を解消して低倍率像の静止画と高倍
率像の動画の同時観察を可能にするシステムの実施例を
第３実施例としてつぎに説明する。Therefore, the third embodiment of the system capable of operating on the INS net 64 and eliminating these drawbacks and enabling simultaneous observation of a still image of a low-magnification image and a moving image of a high-magnification image Will be explained below.
【０１４９】ＩＮＳネット６４上での伝送速度は公衆網
に比べれば遥かに速いが、データ量の多い高画質画像デ
ータを動画像レベルで伝送するには荷が重い。そこで、
第２実施例のシステムにおける画像データの画素数を減
らして画像のデータ量を少なくし、これを動画用とし、
高画質データは静止画で送るようにすることで解決する
ようにした実施例を第３実施例として説明する。The transmission speed on the INS net 64 is much faster than that on the public network, but it is a heavy load for transmitting high quality image data having a large amount of data at the moving image level. Therefore,
In the system of the second embodiment, the number of pixels of image data is reduced to reduce the amount of image data, which is used for moving images.
A third embodiment will be described as an embodiment in which high-quality image data is transmitted by sending a still image.
【０１５０】（第３実施例）図１４に第３実施例のハー
ドウェアの構成を示す。(Third Embodiment) FIG. 14 shows the hardware configuration of the third embodiment.
【０１５１】画像送信側の制御部であるパーソナル・コ
ンピュータ（ＰＣ）１３０１は顕微鏡１３０６により得
られる顕微鏡画像の撮像部であるカメラ１３０５から入
力された画像をモニタ１３０２に表示する。またパーソ
ナル・コンピュータ１３０１は画像受信側からの命令に
より顕微鏡１３０６を制御し、ステージ移動、対物レン
ズ切り替え、ピント、絞り調節制御などができる。画像
受信側のパーソナル・コンピュータ１３１０と画像送信
側パーソナル・コンピュータ１３０１は、画像送信側・
画像受信側それぞれの通信部（ＤＳＵ）１３０７と１３
０８でＮＴＴのサービスするディジタル網であるＩＮＳ
ネット６４の回線１３０９と接続している。A personal computer (PC) 1301 which is a control unit on the image transmitting side displays an image input from a camera 1305 which is an image pickup unit of a microscope image obtained by the microscope 1306 on a monitor 1302. Further, the personal computer 1301 controls the microscope 1306 according to a command from the image receiving side, and can perform stage movement, objective lens switching, focus, aperture adjustment control, and the like. The personal computer 1310 on the image receiving side and the personal computer 1301 on the image transmitting side are
Communication units (DSU) 1307 and 13 on the image receiving side
08 INS, a digital network serviced by NTT
It is connected to the line 1309 of the net 64.
【０１５２】画像受信側のモニタ（表示部）１３１１に
は画像送信側から送られてきた顕微鏡静止画像又は動画
像が表示される。The still image or moving image of the microscope sent from the image transmitting side is displayed on the monitor (display unit) 1311 on the image receiving side.
【０１５３】操作は画像送信側ではキーボード１３０３
とマウス１３０４を、また、画像受信側ではキーボード
１３１２とマウス１３１３を使い、画像受信側のパーソ
ナル・コンピュータからはこの操作入力に応じて画像取
込命令と顕微鏡制御命令が送信側へ送られる。On the image transmitting side, the operation is a keyboard 1303.
A mouse 1304 is used, and a keyboard 1312 and a mouse 1313 are used on the image receiving side, and a personal computer on the image receiving side sends an image capturing command and a microscope control command to the transmitting side in response to the operation input.
【０１５４】ＩＮＳネット６４の伝送速度では、診断に
耐えるような高画質の動画像をリアルタイムで伝送する
ことはできない。そこで、ＩＮＳネット６４上で使用す
るシステムとしては、従来より静止画を用いる顕微鏡遠
隔観察システムが実用化されている。静止画伝送のシス
テムでは、静止画像上で、顕微鏡の対物レンズを変えて
拡大像を取り込む領域を指定すると、画像受信側は画像
が送信されてくるまで、どのような画像が送られてくる
か、全くわからなかった。With the transmission speed of the INS net 64, it is not possible to transmit a high-quality moving image that can withstand diagnosis in real time. Therefore, as a system used on the INS net 64, a microscope remote observation system using a still image has been put into practical use. In the still image transmission system, if you change the objective lens of the microscope and specify the area to capture the enlarged image on the still image, what kind of image will be sent until the image receiving side sends the image? I didn't understand at all.
【０１５５】しかし低解像度の画像であれば、ＩＮＳネ
ット６４の回線でも動画像の伝送が可能であり、高画質
の静止画を伝送する前に、動画像で観察部分の確認を画
像受信側でできれば、送られてきた画像を見て、ピント
等の問題があって取り直しになるようなことはない。However, if the image has a low resolution, the moving image can be transmitted even through the line of the INS net 64. Before transmitting a high-quality still image, the image receiving side can confirm the observed portion in the moving image. If possible, there will be no problem of looking at the sent image and refocusing due to problems such as focus.
【０１５６】本実施例で拡大静止画像を取り込むときの
手順を以下に示す。The procedure for capturing an enlarged still image in this embodiment is shown below.
【０１５７】図１５は画像受信側の処理である。FIG. 15 shows the processing on the image receiving side.
【０１５８】Ｓ５０１で、拡大静止画像を取り込むとき
の対物レンズの倍率を指定する。これは、画像受信側の
制御部にキーボードやマウスにより操作入力を与える事
で行う。Ｓ５０２ではモニタに表示されている画像上
に、取込領域を示す矩形マーカを表示する。In S501, the magnification of the objective lens at the time of capturing the enlarged still image is designated. This is done by giving an operation input to the control unit on the image receiving side with a keyboard or a mouse. In S502, a rectangular marker indicating the capture area is displayed on the image displayed on the monitor.
【０１５９】このときの矩形マーカの大きさは、Ｓ５０
１で指定した画像の倍率と、表示画像の倍率との比によ
って決められる。例えば対物レンズ１０倍で取り込んだ
静止画像上で４０倍の取り込み指定をすれば、 取り込み指定倍率／静止画像倍率＝１／４ となり、画像の４分の１のサイズの矩形マーカが表示さ
れることになる。この矩形マーカの位置は画像受信側で
マウスによって動かすことができる。この矩形マーカが
次に取り込む画像の位置を示す取込領域枠となる。The size of the rectangular marker at this time is S50.
It is determined by the ratio between the magnification of the image designated by 1 and the magnification of the display image. For example, if you specify a 40x capture on a still image captured with an objective lens of 10x, the capture specification magnification / still image magnification = 1/4, and a rectangular marker with a size of 1/4 of the image is displayed. become. The position of this rectangular marker can be moved by the mouse on the image receiving side. This rectangular marker becomes a capture area frame indicating the position of the image to be captured next.
【０１６０】Ｓ５０３では動画像の受信を開始し、Ｓ５
０４で画像送信側から伝送されてくる動画像データを受
信する。この動画像は、この第３の実施例のシステムで
は静止画像に比べて、サイズ（構成画素数）が半分以下
となるように設定してある。例えば、縦横の画素数がそ
れぞれ半分に設定してあったとすれば、そのデータ量は
非圧縮状態にある１フレームの画像データのデータ量に
対して、 ０．５×０．５＝０．２５ となり、１／４のデータ量である。また、画像送信側で
の動画像データの圧縮率は高く設定する。このように、
画像送信側ではその動画像データは圧縮率を高くして送
信するのに加え、画像サイズを小さくしているので、１
フレーム当たりのデータ量は動画伝送が可能となる量に
抑えることができる。In S503, the reception of the moving image is started, and in S5
At 04, the moving image data transmitted from the image transmitting side is received. In the system of the third embodiment, this moving image is set so that the size (the number of constituent pixels) is half or less as compared with the still image. For example, if the number of vertical and horizontal pixels is set to half, the data amount is 0.5 × 0.5 = 0.25 with respect to the data amount of one frame of image data in the uncompressed state. Therefore, the amount of data is 1/4. Further, the compression rate of the moving image data on the image transmitting side is set high. in this way,
On the image transmitting side, the moving image data is transmitted at a high compression rate, and the image size is reduced.
The amount of data per frame can be suppressed to the amount that enables moving image transmission.
【０１６１】Ｓ５０５では、マウスおよびキーボードか
らの入力を取得する。これらの、画像受信側システムの
操作者による操作は、顕微鏡制御または画像取込命令で
あり、それぞれ画像送信側にその命令が伝送される。In S505, the inputs from the mouse and the keyboard are acquired. These operations by the operator of the image receiving side system are microscope control or image capturing commands, and the commands are transmitted to the image transmitting side, respectively.
【０１６２】画像受信側の制御部では、まずＳ５０６
で、ステージ移動命令か否かの判断をする。ステージ移
動はマウスを動かすことによって、行われる。マウスが
動かされている場合には画像受信側の制御部では、Ｓ５
０７でマウスの移動にあわせ、静止画像上の矩形マーカ
の表示を移動させる。そしてＳ５０８では、矩形マーカ
の移動した部分の画像が伝送されるように、ステージ移
動命令を画像送信側に送る。In the control unit on the image receiving side, first, in S506.
Then, it is judged whether or not it is a stage movement command. The stage is moved by moving the mouse. When the mouse is moved, the control unit on the image receiving side performs S5.
At 07, the display of the rectangular marker on the still image is moved according to the movement of the mouse. Then, in step S508, a stage movement command is sent to the image transmission side so that the image of the moved portion of the rectangular marker is transmitted.
【０１６３】Ｓ５０９では画像受信側の制御部は顕微鏡
操作の命令の判断をする。顕微鏡操作とはピント合わ
せ、絞りの調節等である。これらの命令が入力された場
合には画像受信側の制御部は、Ｓ５１０でその命令を画
像送信側に伝送する。In step S509, the control unit on the image receiving side determines a microscope operation command. The microscope operation is focusing, adjusting the diaphragm, and the like. When these commands are input, the control unit on the image receiving side transmits the commands to the image transmitting side in S510.
【０１６４】Ｓ５１１は静止画像を取り込むか否かの判
断である。ここで表示されている動画像を見て、取り込
みを行わないと判断すれば、Ｓ５０４に戻り、動画像の
受信を続ける。In step S511, it is determined whether or not a still image is taken in. If it is determined that the moving image displayed here is not to be captured, the process returns to step S504 to continue receiving the moving image.
【０１６５】静止画像の取り込を実行するならば、まず
Ｓ５１２で動画像の受信を終了させる。続いてＳ５１３
で、取込時のパラメータを入力する。パラメータとして
は画像データのサイズ（構成画素数）および圧縮率があ
る。If the still image is to be taken in, first, in step S512, the reception of the moving image is ended. Then S513
Enter the parameters at the time of import. The parameters include the image data size (the number of constituent pixels) and the compression rate.
【０１６６】Ｓ５１４で、画像受信側の制御部は、取り
込みパラメータとともに、静止画像取込命令を画像送信
側に送る。In step S514, the control unit on the image receiving side sends a still image capturing command to the image transmitting side together with the capturing parameters.
【０１６７】Ｓ５１５で画像受信側の制御部は、画像が
送られてくるまで、受信待ちに入り、Ｓ５１６で静止画
像を受信し、ハードディスク等の外部記録装置に記録・
保存する。そして、Ｓ５１７でその画像をモニタ装置に
表示して、画像取込処理は終了する。In S515, the control unit on the image receiving side waits for reception until the image is sent, receives the still image in S516, and records it in an external recording device such as a hard disk.
save. Then, in step S517, the image is displayed on the monitor device, and the image capturing process ends.
【０１６８】図１６は画像送信側の処理である。FIG. 16 shows the processing on the image transmitting side.
【０１６９】画像送信側の制御部はＳ６０１で画像受信
側からの静止画取り込み命令を受けると静止画取り込み
と伝送の実施をする。この静止画取り込み命令には対物
レンズの倍率がパラメータとして含まれており、指示に
あわせて対物レンズの倍率を変更する。画像送信側の制
御部はＳ６０２で、受信側端末のモニタと同様に、静止
画像上に取り込み領域の矩形マーカを表示する。When the control unit on the image transmitting side receives a still image capturing command from the image receiving side in S601, the control unit on the image transmitting side carries out still image capturing and transmission. This still-image taking command includes the magnification of the objective lens as a parameter, and the magnification of the objective lens is changed according to the instruction. In step S602, the control unit on the image transmission side displays the rectangular marker of the capture area on the still image, similarly to the monitor of the reception side terminal.
【０１７０】そして、画像送信側の制御部はＳ６０３
で、画像受信側への動画送信を開始する。このときの画
像サイズは静止画取り込み時よりも小さい。通常、ＮＴ
ＳＣ方式のカメラからの得られる画像データの画素構成
は、例えば、縦横６４０×４８０ドットであるが、この
ときは半分の３２０×２４０ドットで入力する。Then, the control unit on the image transmitting side executes S603.
Then, the transmission of the moving image to the image receiving side is started. The image size at this time is smaller than that at the time of capturing a still image. Usually NT
The pixel configuration of the image data obtained from the SC system camera is, for example, 640 × 480 dots in the vertical and horizontal directions. In this case, half of the pixels are input, 320 × 240 dots.
【０１７１】Ｓ６０４で動画像のデータを送信し、Ｓ６
０５で画像送信側からの命令を待つ。画像送信側からの
命令が、ステージの移動であれば、Ｓ６０６の分岐処理
で、Ｓ６０７へと移る。Ｓ６０７では送信側モニタに表
示されている静止画像上の動画像表示領域を示す矩形マ
ーカの位置を変更する。そしてＳ６０８で顕微鏡ステー
ジを指定された座標に移動させる。In S604, the moving image data is transmitted, and in S6
At 05, the image transmission side waits for a command. If the instruction from the image transmitting side is the movement of the stage, the process proceeds to S607 in the branch process of S606. In step S607, the position of the rectangular marker indicating the moving image display area on the still image displayed on the monitor on the transmission side is changed. Then, in step S608, the microscope stage is moved to the designated coordinates.
【０１７２】ステップＳ６０６での判定結果がＮＯであ
った場合、すなわち、命令がステージの移動でなかった
場合にはＳ６０９でその他の顕微鏡操作命令か否かを判
断する。その結果、ＹＥＳであれば（その他の顕微鏡操
作命令であれば）、Ｓ６１０で命令に合わせ顕微鏡を制
御する。このときの命令はピントの調節、絞り、コンデ
ンサの調節などである。If the determination result in step S606 is NO, that is, if the instruction is not stage movement, it is determined in step S609 whether or not there is another microscope operation instruction. As a result, if YES (if there is another microscope operation command), the microscope is controlled according to the command in S610. The commands at this time are adjustment of focus, aperture, adjustment of condenser, and the like.
【０１７３】Ｓ６１１では静止画像を取り込むか否かの
判断をする。センタ側（画像受信側）から取り込み命令
が出ていなければ、Ｓ６０４に戻って、動画像の送信を
続ける。In S611, it is determined whether or not a still image is taken in. If no capture command has been issued from the center side (image receiving side), the process returns to S604 and transmission of moving images is continued.
【０１７４】取り込み命令が出たときは、画像送信側の
制御部はＳ６１２で動画像送信を終了させる。When the fetch command is issued, the control unit on the image transmission side terminates the moving image transmission in S612.
【０１７５】次に画像送信側の制御部はＳ６１３で、取
り込みパラメータとともに、取り込み実行命令を再度受
ける。Ｓ６１４でその取り込みパラメータ、すなわち画
像圧縮率、画像サイズを設定する。Next, in S613, the control unit on the image transmitting side receives the capture execution command again together with the capture parameters. In step S614, the capture parameters, that is, the image compression rate and the image size are set.
【０１７６】Ｓ６１５で設定したパラメータに従って静
止画像を取り込み、Ｓ６１６で静止画像をモニタ装置
（＝表示部）に表示する。そしてＳ６１７で静止画像を
画像受信側の制御部（ＰＣ）へと伝送する。The still image is taken in according to the parameters set in S615, and the still image is displayed on the monitor device (= display section) in S616. Then, in step S617, the still image is transmitted to the control unit (PC) on the image receiving side.
【０１７７】このように、第３実施例は第２実施例のシ
ステムにおける画像データの画素数を減らして画像のデ
ータ量を少なくし、これを動画用とし、高画質データは
静止画で送るようにすることで伝送速度の問題を解決す
るようにし、これによって、ＩＮＳネット６４上でも動
作可能であり、低倍率像の静止画と高倍率像の動画の同
時観察を可能にするという効果が得られる。As described above, in the third embodiment, the number of pixels of the image data in the system of the second embodiment is reduced to reduce the data amount of the image, which is used for a moving image, and the high quality data is sent as a still image. This solves the problem of transmission speed, which enables the operation on the INS net 64 and the simultaneous observation of low-magnification still images and high-magnification images. To be
【０１７８】本発明を纏めると、つぎの通りである。The present invention can be summarized as follows.
【０１７９】［１］． 少なくともステージを自動制御
することのできる顕微鏡と、顕微鏡標本像を撮像するた
めの撮像手段と、撮像された画像情報を受け、画像を表
示、記録、伝送し、また顕微鏡を制御するための制御手
段を送信側と受信側が有し、動画像及び静止画像を表示
する表示手段を少なくとも受信側が有し、動画像情報お
よび静止画像情報を送信側の制御手段から受信側の制御
手段に伝送する通信手段によって接続された、顕微鏡遠
隔観察記録システムにおいて、表示された顕微鏡標本の
全体像または低倍率像の静止画像上で、拡大像の表示範
囲を示す領域を、マウス等の操作で受信側の操作者が動
かすことによって、画像上に示された表示領域の位置へ
顕微鏡のステージを動かすことができ、その時の動画像
を受信側に表示させることができ、表示中の動画像、表
示動画像と同じ顕微鏡像の静止画像を、受信側で記録・
保存することができ、すでに記録された低倍率静止画像
または動画像上で表示領域を指定した、拡大像の静止画
像または動画像を記録するときに、顕微鏡標本の観察部
位の座標によって、低倍率画像と拡大像とを関連付け、
再生時にこの関連付けを追って、静止画像と動画像、ま
た静止画像同士、動画像同士による画像再生を可能とし
たシステムとした。[1]. A microscope capable of automatically controlling at least a stage, an image capturing means for capturing a microscope specimen image, a control means for receiving image information of a captured image, displaying, recording and transmitting the image, and controlling the microscope. A communication means for transmitting and receiving moving image information and still image information from the control means on the transmission side to the control means on the reception side, the transmission side and the reception side having, and at least the display means for displaying the moving image and the still image. In the microscope remote observation recording system connected by, the operator of the receiving side by operating the mouse etc. on the area showing the display range of the enlarged image on the entire image of the displayed microscope specimen or the still image of the low magnification image. Can move the microscope stage to the position of the display area shown on the image, and the moving image at that time can be displayed on the receiving side. Moving image, a still image of the same microscope image and the display moving image, recording and at the receiving side
It can be saved, and when recording a magnified still image or moving image with a display area specified on a low-magnification still image or moving image that has already been recorded, the low-magnification image can be obtained depending on the coordinates of the observation site of the microscope specimen. Associate images with magnified images,
Following this association at the time of playback, a system was created that enabled playback of still images, moving images, still images, and moving images.
【０１８０】画像送信側・画像受信側の制御手段として
は、パーソナルコンピュータ、ワークステーション等が
用いられる。表示手段としてはＴＶモニタ、あるいはＣ
ＲＴディスプレイが用いられる。A personal computer, a workstation or the like is used as the control means on the image transmitting side and the image receiving side. As a display means, a TV monitor or C
An RT display is used.
【０１８１】表示手段は少なくとも遠隔操作側である画
像受信側システムには必要不可欠である。画像送信側シ
ステムの操作者が画像受信側システム同様に顕微鏡像を
見る必要がある場合は、画像送信側システムにも表示手
段が必要となる。The display means is indispensable to at least the image receiving side system which is the remote control side. When the operator of the image transmitting side system needs to see the microscopic image like the image receiving side system, the image transmitting side system also needs a display means.
【０１８２】撮像手段としては、ＴＶカメラが用いられ
る。A TV camera is used as the image pickup means.
【０１８３】通信手段としてはＩＳＤＮ（ＩＮＳネット
６４、ＩＮＳネット１５００、Ｂ‐ＩＳＤＮ）、専用回
線、光ファイバー、衛星通信などが用いられる。As the communication means, ISDN (INS net 64, INS net 1500, B-ISDN), dedicated line, optical fiber, satellite communication, etc. are used.
【０１８４】そして、このような構成において、画像送
信側の制御手段と画像受信側の制御手段は通信手段およ
び通信回線で接続され、画像送信側に設けられる顕微鏡
は画像送信側の制御手段によって、標本の乗るステージ
のＸＹ位置を駆動移動制御される。顕微鏡標本の画像は
顕微鏡に取り付けられた撮像手段によって、画像送信側
の制御手段に入力される。入力された画像データは画像
送信側の通信手段および画像受信側の通信手段を介して
画像受信側の制御手段に伝送され、画像受信側の表示手
段に表示される。In such a structure, the control means on the image transmission side and the control means on the image reception side are connected by the communication means and the communication line, and the microscope provided on the image transmission side is controlled by the control means on the image transmission side. The XY position of the stage on which the sample is placed is driven and controlled. The image of the microscope specimen is input to the control means on the image transmission side by the image pickup means attached to the microscope. The input image data is transmitted to the control means on the image receiving side via the communication means on the image transmitting side and the communication means on the image receiving side, and is displayed on the display means on the image receiving side.
【０１８５】画像受信側で観察したい位置へ顕微鏡を移
動させることが可能であり、そのための命令が、画像受
信側の制御手段から送信側制御手段へと伝送される。そ
の命令に従って、画像送信側の制御手段が顕微鏡を制御
する。The microscope can be moved to a position to be observed on the image receiving side, and a command therefor is transmitted from the control means on the image receiving side to the control means on the transmitting side. According to the instruction, the control means on the image transmission side controls the microscope.
【０１８６】そのため、効果として低倍率画像と、それ
を拡大した高倍率画像を同時に表示することによって、
両者の比較が簡単に行えるようになり、観察が、より行
い易くなる。また、動画像および静止画同士の観察上の
繋がりが記録される。そのため、観察の流れが再現でき
るようになる。Therefore, as an effect, by simultaneously displaying a low-magnification image and a high-magnification image obtained by enlarging the low-magnification image,
Both can be easily compared, and the observation becomes easier. Also, the observing connection between the moving image and the still image is recorded. Therefore, the flow of observation can be reproduced.
【０１８７】遠隔操作による顕微鏡の顕微鏡画像を撮像
手段により撮像して動画像として送り、この動画像をモ
ニタしながら注目領域を観察するシステムにおいては、
目的の画像が表示できたとしても、それが標本全体像上
でのどこの像であるかは全体像上の現在の観察位置のマ
ーク表示を行うことで従来システムにおいても分かるよ
うにはなっていたが、高倍率画像の周辺の状態がどのよ
うになっているかを把握できるような画像表示ができな
い。そのため、より高倍率の対物レンズでの観察中は、
標本中の座標位置のみはわかるが、観察部位の周辺の画
像を見ることはできなかった。またその観察経過を記録
し、低倍率から高倍率へと倍率をあげていく観察の流れ
を後から追うことはできなかった。[0187] In a system for observing a region of interest while monitoring the moving image, a microscope image of a microscope operated by remote control is picked up by an image pickup means and sent as a moving image.
Even if the target image can be displayed, the position of the image on the whole image of the specimen can be known in the conventional system by displaying the mark of the current observation position on the whole image. However, it is not possible to display an image so that the state around the high-magnification image can be understood. Therefore, during observation with a higher magnification objective lens,
Only the coordinate position in the specimen was known, but the image around the observation site could not be seen. In addition, it was not possible to follow the flow of observation, in which the observation progress was recorded and the magnification was increased from low magnification to high magnification.
【０１８８】そこで、このシステムのように拡大倍率の
高い顕微鏡像を動画として与え、これより拡大倍率の低
い像を静止画として与えてそれぞれ表示し、静止画と動
画を対比して観察できるようにすると共に、この低倍率
画像による静止画上で、領域を指定してその指定領域の
画像を顕微鏡でとらえ、高倍率画像として動画表示する
ようにしたことにより、注目領域とその周辺の状態をそ
れぞれ観察することができるようになる。また、静止画
像と動画像とを関連付けて記憶することにより、観察経
過を記録し、低倍率から高倍率へと倍率をあげていく観
察の流れを後から追うことができるようになる。Therefore, as in this system, a microscope image having a high magnifying power is given as a moving image, and an image having a lower magnifying power is given as a still image to be displayed so that the still image and the moving image can be compared and observed. In addition, by specifying the area on the still image by this low-magnification image and capturing the image of the specified area with a microscope and displaying it as a high-magnification image as a moving image, the state of the attention area and its surroundings are respectively displayed. You will be able to observe. Further, by storing the still image and the moving image in association with each other, it is possible to record the observation process and follow the flow of the observation in which the magnification is increased from low magnification to high magnification.
【０１８９】［２］． 上記［１］において、表示され
記録される画像の解像度、画素数が静止画像と、動画像
とで異なること、または静止画像同士、動画像同士でも
異なることを可能とするシステムとした。[2]. In the above [1], the system is such that the resolution and the number of pixels of the displayed and recorded images can be different between the still image and the moving image, or between the still images and between the moving images.
【０１９０】具体的には、顕微鏡像を撮像する撮像装置
として、画素数の異なる２種類以上のカメラを用い、制
御手段には顕微鏡画像を得るカメラの選択切り替えを行
える機能を持たせてある。Specifically, as an image pickup device for picking up a microscope image, two or more types of cameras having different numbers of pixels are used, and the control means is provided with a function of selectively switching the cameras for obtaining the microscope image.
【０１９１】または、画像送信側の制御手段に、撮像手
段から入力された画像データの画素数を変更して記録
し、伝送する機能を持たせる。Alternatively, the control means on the image transmission side is provided with the function of changing the number of pixels of the image data input from the image pickup means, recording and transmitting the same.
【０１９２】これによれば、画素数の異なる２種類以上
のカメラを用いた場合、［１］の作用に加え、更にはつ
ぎのような作用がある。すなわち、画像の大きさを変え
るために、制御手段には顕微鏡画像を入力するカメラの
切り替えを行う機能を持たせてある。そして、動画像を
伝送する場合は画素数の少ない方のカメラの画像を取り
込み、これを送出し、静止画像を伝送する場合は画素数
の多い方のカメラの画像を取り込み、これを送出する。According to this, when two or more types of cameras having different numbers of pixels are used, in addition to the effect of [1], there is the following effect. That is, in order to change the size of the image, the control means is provided with the function of switching the camera for inputting the microscope image. Then, when transmitting a moving image, the image of the camera with the smaller number of pixels is captured and transmitted, and when transmitting the still image, the image of the camera with the larger number of pixels is captured and transmitted.
【０１９３】画像送信側の制御手段において画素数を変
更させる場合には、入力時に制御手段がその構成画素サ
イズを変更処理する。そして、動画像を伝送する場合は
画素数を少なくして送出し、静止画像を伝送する場合は
画素数を多くして送出する。When the number of pixels is changed by the control means on the image transmission side, the control means changes the constituent pixel size at the time of input. Then, when transmitting a moving image, the number of pixels is reduced and transmitted, and when transmitting a still image, the number of pixels is increased and transmitted.
【０１９４】従来のシステムでは画像の取込時に、画像
の解像度は常に一定であったため、転送速度を速くした
い場合や、画質を高めたい場合などでは画像の圧縮率を
変更することによってのみ可能であった。In the conventional system, since the resolution of the image is always constant at the time of capturing the image, it is possible only by changing the compression rate of the image when the transfer speed is desired to be high or the image quality is desired to be improved. there were.
【０１９５】しかし、このシステムによれば、動画像の
みの観察では得られない、高画質の顕微鏡画像を、静止
画によってみることができるようになるという効果が得
られる。そして、観察する画像に対して、観察過程にお
ける画像の重要度に応じて、解像度を変更することを可
能となる。However, according to this system, it is possible to obtain a high-quality microscopic image, which cannot be obtained by observing only a moving image, as a still image. The resolution of the image to be observed can be changed according to the importance of the image in the observation process.
【０１９６】［３］． 更には上記［１］および［２］
において、通信手段の伝送速度が、診断可能な画質の動
画像伝送に十分な速度を持たない場合に、静止画像を得
るための補助手段として、静止画像取り込み前にその部
分の動画像を伝送して、静止画像の確認をできるように
するシステムとした。[3]. Furthermore, the above [1] and [2]
When the transmission speed of the communication means is not high enough to transmit a moving image with a diagnostic image quality, the moving image of that portion is transmitted before capturing the still image as an auxiliary means for obtaining a still image. As a result, a system that enables confirmation of still images was created.
【０１９７】静止画タイプの顕微鏡遠隔観察システムで
は、低倍率の静止画像上で、高倍率の画像の取り込み位
置を指定するが、このとき観察側では、画像取込が終了
し、伝送されてくるまではどのような画像が送られてく
るかわからないという欠点があり、これを解決する手段
はいままではなかった。In the still image type microscope remote observation system, the capturing position of the high-magnification image is designated on the low-magnification still image. At this time, the image capturing is completed and transmitted on the observation side. However, there is a drawback that you do not know what kind of image is sent, and there has been no means for solving this.
【０１９８】一方、本発明システムでは、標本全体像ま
たは低倍率画像はすでに取り込まれた静止画像であり、
拡大像はこれから静止画を取り込む位置の動画像として
ある。そのため、静止画像を受けてから取り込む静止画
像の位置、ピント、照明（コンデンサ、カメラの露出
等）に問題があると知ってもそれ以後にこれらを調整し
なければならず、施行錯誤となって操作性が悪い。そこ
で事前に受信側で新たに取り込む静止画像の位置、ピン
ト、照明などを決定できるようにする必要がある。On the other hand, in the system of the present invention, the whole image of the specimen or the low-magnification image is a still image already captured,
The magnified image is a moving image at a position where a still image is to be captured. Therefore, even if you know that there is a problem with the position, focus, and lighting (condenser, exposure of the camera, etc.) of the still image that is captured after receiving the still image, you have to adjust these after that, and it becomes an implementation error. Operability is poor. Therefore, it is necessary for the receiving side to be able to determine in advance the position, focus, lighting, etc. of a still image to be newly captured.
【０１９９】本システムでは、静止画像取り込み前にそ
の部分の動画像を伝送して、静止画像の確認をできるよ
うにしたことにより、低倍率の静止画像の画像がどのよ
うな状態になるかを事前に知ることができるようにな
る。静止画像は１枚送れば継続して利用できる画像であ
るから、度動画像より高画質の像となるように圧縮率等
を低くしたり、画素数を多く保つ等、画像データの容量
を大きくするのが普通であるから、勢い画像伝送量も多
くなり、伝送時間がかかる。そのため、静止画像の状態
が事前に確認できれば、顕微鏡のピント調整など、必要
な調整を予め施してから伝送することができるようにな
り、無駄が抑制される。In this system, the moving image of the part is transmitted before the still image is captured so that the still image can be confirmed, so that the state of the low-magnification still image can be determined. You will be able to know in advance. Since a still image is an image that can be continuously used by sending one image, the image data capacity can be increased by lowering the compression rate and maintaining a large number of pixels so that the image has a higher image quality than the moving image. Since it is usual to do so, the amount of momentum image transmission also increases, and it takes time to transmit. Therefore, if the state of the still image can be confirmed in advance, necessary adjustments such as the focus adjustment of the microscope can be performed in advance before transmission, and waste is suppressed.
【０２００】［４］． また、［２］において、静止画
像を得るための撮像手段としてＨＤＴＶ方式のカメラを
用い、動画像を得るための撮像手段としてＮＴＳＣ方式
のカメラを用いたシステムとした。[4]. Further, in [2], a system is used in which an HDTV camera is used as an image pickup unit for obtaining a still image and an NTSC camera is used as an image pickup unit for obtaining a moving image.
【０２０１】従来のシステムでは画像の取込時に、画像
の解像度は常に一定であったため、転送速度を速くした
い場合や、画質を高めたい場合などでは画像の圧縮率を
変更することによってのみ可能であった。In the conventional system, since the resolution of the image is always constant at the time of capturing the image, it is possible only by changing the compression rate of the image when the transfer rate is desired to be high or the image quality is desired to be improved. there were.
【０２０２】しかしながら、［４］の構成とすることに
より、［１］の作用に加え、制御手段は、画像を入力す
る撮像手段をＮＴＳＣ方式のカメラとＨＤＴＶ方式のカ
メラのどちらかに選択することができる。However, by adopting the configuration of [4], in addition to the action of [1], the control means selects either the NTSC system camera or the HDTV system camera as the image capturing means for inputting an image. You can
【０２０３】そのため、効果としては静止画像、動画像
それぞれの同一容量の通信手段を使ったときの、最大画
素数の差をカメラを変えることによって埋めることがで
きる。また、観察する画像に対して、観察過程における
画像の重要度に応じて、解像度を変更することを可能と
し、また、通信回線の伝送速度によって、高解像度では
動画像の伝送が不可能な場合に、静止画を高解像度、動
画を低解像度に切り替えることを可能とする。Therefore, as an effect, the difference in the maximum number of pixels when communication means of the same capacity for still images and moving images are used can be filled by changing the camera. In addition, it is possible to change the resolution of the image to be observed according to the importance of the image in the observation process. Also, if the transmission speed of the communication line makes it impossible to transmit a moving image at high resolution. In addition, it is possible to switch still images to high resolution and moving images to low resolution.
【０２０４】［５］． ［２］において、静止画像を得
るための撮像手段と動画像を得るための撮像手段として
同じ解像度カメラを用いながら、制御手段へと画像を取
り込むときに画像のサイズを変更することができるシス
テムとした。[5]. In [2], a system capable of changing the size of an image when capturing an image into the control unit while using the same resolution camera as the image capturing unit for obtaining a still image and the image capturing unit for obtaining a moving image. did.
【０２０５】従来のシステムでは画像の取込時に、画像
の解像度は常に一定であったため、転送速度を速くした
い場合や、画質を高めたい場合などでは画像の圧縮率を
変更することによってのみ可能であった。しかし、これ
ではデータ量が多すぎたり、画質が劣化し過ぎたりして
問題である。In the conventional system, since the resolution of the image is always constant at the time of capturing the image, it is possible only by changing the compression rate of the image when the transfer speed is desired to be high or the image quality is desired to be improved. there were. However, this is a problem because the amount of data is too large and the image quality is deteriorated too much.
【０２０６】そこで、観察する画像に対して、観察過程
における画像の重要度に応じて、解像度を変更すること
を可能とする必要があり、また、通信回線の伝送速度に
よって、高解像度では動画像の伝送が不可能な場合に、
静止画を高解像度、動画を低解像度に切り替えることを
可能とする必要が生じる。Therefore, it is necessary to change the resolution of the image to be observed according to the degree of importance of the image in the observation process. In addition, depending on the transmission speed of the communication line, the moving image can be displayed at high resolution. Is impossible to transmit,
It is necessary to be able to switch a still image to a high resolution and a moving image to a low resolution.
【０２０７】この構成によれば、画像取込時に、撮像手
段から制御手段内のフレームメモリに入力される画像の
サイズを、カメラ本来の画素数と別の値にすることによ
り、その効果として、［４］と同等の効果を、カメラを
１台しか使用せずに実現することができる。そのため、
ＨＤＴＶやＮＴＳＣの画素数にとらわれずに画像のサイ
ズを自由に決定できるようになる。According to this structure, when the image is captured, the size of the image input from the image pickup means to the frame memory in the control means is set to a value different from the original pixel number of the camera. The effect equivalent to [4] can be realized by using only one camera. for that reason,
The size of the image can be freely determined regardless of the number of pixels of HDTV or NTSC.
【０２０８】［６］． ［３］における通信手段をＩＮ
Ｓネット６４とし、撮像手段としてＮＴＳＣ方式のカメ
ラを用いたシステムとした。[6]. IN the communication means in [3]
The S-net 64 is used, and a system using an NTSC camera as an image pickup means is used.
【０２０９】この構成によれば、画像送信側の制御手段
と画像受信側の制御手段とを、ＩＮＳネット６４で結び
画像データを送信側から受信側へと伝送するので、その
効果としては、従来の基本的な静止画像顕微鏡遠隔シス
テムと、ほぼ同じ構成で、動画を利用することができる
ようなるものである。According to this configuration, the control means on the image transmission side and the control means on the image reception side are connected by the INS net 64 and the image data is transmitted from the transmission side to the reception side. With the same configuration as that of the basic still image microscope remote system, it is possible to use moving images.
【０２１０】［７］． ［３］において、通信手段がＩ
ＮＳネット１５００であり、撮像手段として［４］また
は［５］と同構成のものを用いたシステムとした。[7]. In [3], the communication means is I
The system is the NS net 1500 and uses the same configuration as [4] or [5] as the imaging means.
【０２１１】画像送信側の制御手段と画像受信側の制御
手段とを、ＩＮＳネット１５００で結び、画像データを
画像送信側から画像受信側へと伝送する構成としたか
ら、その効果としてはＩＮＳネット１５００を用いるこ
とによって、［６］の構成と比較して、高精細の静止画
像を無理なく送ることができるようになり、また、圧縮
率の低い、従って、画質の良い動画像を伝送して動画像
表示することができるようになる。Since the control means on the image transmitting side and the control means on the image receiving side are connected by the INS net 1500 and the image data is transmitted from the image transmitting side to the image receiving side, the effect thereof is the INS net. By using 1500, compared to the configuration of [6], it becomes possible to send high-definition still images without difficulty, and it is possible to transmit a moving image with a low compression rate and therefore with high image quality. A moving image can be displayed.
【０２１２】［８］． ［１］において観察後に、記録
された画像を再生するときに、低倍率画像に拡大動画像
観察中のステージ移動の軌跡を表示させることができる
システムとした。[8]. In [1], when the recorded image is reproduced after the observation, the system can display the locus of the stage movement during the observation of the enlarged moving image on the low-magnification image.
【０２１３】これによれば、低倍率画像上で、拡大像に
よる観察を行った領域を示すことにより、実際に観察し
た領域とそうでない領域がはっきりとわかるようにな
る。また、観察後の画像再生時に、低倍率画像上の領域
を拡大画像で観察した経緯がわかるようになる。According to this, by showing the region observed by the magnified image on the low-magnification image, the region actually observed and the region not observed can be clearly seen. Further, when the image is reproduced after the observation, the background of observing the region on the low-magnification image with the enlarged image can be understood.
【０２１４】なお、本発明は上述した実施例に限定され
るものではなく、その要旨を変更しない範囲内で適宜変
形して実施し得るものである。例えば、上記実施例で
は、ポインティングデバイスとしてマウスを使用した
が、トラックボールやジョイスティックを使用すること
もでき、また、タッチペンなどを使用する方式とするこ
とも可能である。The present invention is not limited to the above-described embodiments, but can be modified and implemented as appropriate without departing from the scope of the invention. For example, although the mouse is used as the pointing device in the above-described embodiments, a trackball or a joystick may be used, or a touch pen or the like may be used.
【０２１５】[0215]
【発明の効果】以上、本発明によれば、動画像ととも
に、選択された静止画像を併せて表示手段に表示して観
察することが可能となり、これによって、動画と所望の
静止画を同時に観察できるので、静止画を動画像より低
い倍率の画像としておくことで、注目領域の画像は動画
像で観察でき、注目領域を含むその周辺領域の画像は静
止画で観察することにより、周辺の状況を把握しながら
標本の観察ができるようになって、理想的な観察が可能
になり、しかも、操作性にも優れると云った効果を有す
る顕微鏡画像遠隔観察装置を提供できる。As described above, according to the present invention, it is possible to display the selected still image together with the moving image on the display means for observation and thereby observe the moving image and the desired still image at the same time. Therefore, by setting the still image as an image with a lower magnification than the moving image, the image of the attention area can be observed with the moving image, and the image of the surrounding area including the attention area can be observed with the still image, so that the surrounding situation can be improved. It becomes possible to observe the sample while grasping the above, and it is possible to provide a microscope image remote observation device having the effect that ideal observation is possible and the operability is excellent.
【図１】本発明の第１実施例の全体構成を示すブロック
図。FIG. 1 is a block diagram showing the overall configuration of a first embodiment of the present invention.
【図２】図１のシステムにおける制御部１０１，１０６
の構成例を示すブロック図。FIG. 2 is a block diagram of control units 101 and 106 in the system of FIG.
FIG. 3 is a block diagram showing a configuration example of FIG.
【図３】本発明の実施例を説明するための図であって、
モニタ装置２０８上に表示された顕微鏡画像と、顕微鏡
ステージ上の標本の関係を示す図。FIG. 3 is a diagram for explaining an embodiment of the present invention,
FIG. 6 is a diagram showing a relationship between a microscope image displayed on a monitor device 208 and a sample on a microscope stage.
【図４】本発明の実施例を説明するための図であって、
画像送信側と画像受信側の通信中の関係を示す図。FIG. 4 is a diagram for explaining an embodiment of the present invention,
The figure which shows the relationship during communication of the image transmission side and the image reception side.
【図５】本発明の実施例を説明するための図であって、
再生時の軌跡表示機能（トレース機能）について説明す
るための図。FIG. 5 is a diagram for explaining an embodiment of the present invention,
The figure for demonstrating the locus | trajectory display function (trace function) at the time of reproduction | regeneration.
【図６】本発明の実施例を説明するための図であって、
第１実施例におけるセンタ側（画像受信側）での操作全
体の流れを説明するフローチャート。FIG. 6 is a diagram for explaining an embodiment of the present invention,
6 is a flowchart illustrating the flow of the entire operation on the center side (image receiving side) in the first embodiment.
【図７】本発明の実施例を説明するための図であって、
第１実施例における動画像受信中の画像受信側の処理を
説明するフローチャート。FIG. 7 is a diagram for explaining an embodiment of the present invention,
6 is a flowchart illustrating processing on the image receiving side during receiving a moving image in the first embodiment.
【図８】本発明の実施例を説明するための図であって、
第１実施例における動画像受信中の画像送信側の処理を
説明するフローチャート。FIG. 8 is a diagram for explaining an embodiment of the present invention,
6 is a flowchart illustrating processing on the image transmission side during reception of a moving image in the first embodiment.
【図９】本発明の実施例を説明するための図であって、
静止画像４０２と動画像４０３の関係、および低倍率静
止画像４０２と、その拡大動画像４０３上で指定した静
止画像、あるいは低倍率動画像と、その静止画から拡大
指定した動画像を関連を示す図。FIG. 9 is a view for explaining the embodiment of the present invention,
The relationship between the still image 402 and the moving image 403, the low-magnification still image 402, the still image specified on the enlarged moving image 403, or the low-magnification moving image, and the moving image enlarged and specified from the still image are shown. Fig.
【図１０】本発明の実施例を説明するための図であっ
て、リンク情報を記録したデータファイルのデータ構成
を示す図。FIG. 10 is a diagram for explaining the embodiment of the present invention and is a diagram showing a data structure of a data file in which link information is recorded.
【図１１】本発明の実施例を説明するための図であっ
て、画像ファイルの構成例を示す図。FIG. 11 is a diagram for explaining the embodiment of the present invention and is a diagram showing a configuration example of an image file.
【図１２】本発明の第２実施例の全体構成を示すブロッ
ク図。FIG. 12 is a block diagram showing the overall configuration of a second embodiment of the present invention.
【図１３】本発明の第２実施例を説明するための図であ
って、画像送信側の処理における第１実施例と異なる部
分（静止画像取込処理；図８のＳ３０９〜Ｓ３１１）に
対応する部分のフローチャートを示す図。FIG. 13 is a diagram for explaining the second embodiment of the present invention, and corresponds to the portion (still image capture processing; S309 to S311 in FIG. 8) in the processing on the image transmission side that is different from the first embodiment. The figure which shows the flowchart of the part to do.
【図１４】本発明の第３実施例を説明するための図であ
って、第３実施例のハードウェアの構成を示すブロック
図。FIG. 14 is a diagram for explaining the third embodiment of the present invention and is a block diagram showing a hardware configuration of the third embodiment.
【図１５】本発明の第３実施例を説明するための図であ
って、第３実施例における画像受信側の処理を説明する
ためのフローチャート。FIG. 15 is a diagram for explaining the third embodiment of the present invention and is a flowchart for explaining processing on the image receiving side in the third embodiment.
【図１６】本発明の第３実施例を説明するための図であ
って、第３実施例における画像送信側の処理を説明する
ためのフローチャート。FIG. 16 is a diagram for explaining the third embodiment of the present invention and is a flowchart for explaining processing on the image transmission side in the third embodiment.
１０１，１０６…制御部（パーソナルコンピュータ，ワ
ークステーション） １０２，１０７…表示部 １０５，１０８…通信部 ２０１…ＣＰＵ ２０２…メモリ ２０３…フレームメモリ ２０４…通信制御装置 ２０５…外部記憶装置（ハードディスク、光磁気ディス
クなど） ２０６，３０４…キーボード ２０７，３０３…マウス ３０１…ＰＣ（パーソナルコンピュータ） ３０２…モニタ装置 ３０５…ＨＤＴＶ用のカメラ ３０６…ＨＤＴＶ用のカメラ３０５のコントロールユニ
ット（ＣＣＵ） ３０７…ＮＴＳＣ用のカメラ ３０８…ＮＴＳＣ用のカメラ３０７のコントロールユニ
ット（ＣＣＵ） ３０９…顕微鏡 ４０１…モニタ ４０２…低倍率像、静止画像（画像Ａ） ４０３…高倍率・拡大像、動画像（画像Ｂ） ４０４…画像Ｂの位置を示す矩形のマーカ ４０５…顕微鏡ステージ ４０６…顕微鏡標本 ４０７…観察位置101, 106 ... Control unit (personal computer, workstation) 102, 107 ... Display unit 105, 108 ... Communication unit 201 ... CPU 202 ... Memory 203 ... Frame memory 204 ... Communication control device 205 ... External storage device (hard disk, magneto-optical device) Disks etc.) 206, 304 ... Keyboard 207, 303 ... Mouse 301 ... PC (personal computer) 302 ... Monitor device 305 ... HDTV camera 306 ... HDTV camera 305 control unit (CCU) 307 ... NTSC camera 308 Control unit (CCU) 309 of camera 307 for NTSC ... Microscope 401 ... Monitor 402 ... Low magnification image, still image (image A) 403 ... High magnification / enlarged image, moving image (image B) 404 ... Position of image B Shows Rectangular markers 405 ... microscope stage 406 ... microscope specimen 407 ... viewing position
Claims (3)
する撮像手段と、前記撮像手段からの出力画像信号を送
信する送信側と、前記送信側から送信された前記出力画
像を受信する受信側とを有し、受信側において前記出力
画像を観察する顕微鏡画像遠隔観察装置において、 前記受信側は、 前記送信側から送信される静止画像信号を受けて格納す
るための記憶手段と、前記記憶手段に格納された静止画
像から所定の静止画像を選択する選択手段と、前記選択
手段によって選択された静止画像を表示するための第１
の表示手段と、前記送信側から送信される動画像を受
け、動画像として表示するための第２の表示手段と、を
有することを特徴とする顕微鏡画像遠隔観察装置。1. A microscope, an image pickup means for picking up an observation image of the microscope, converting it into an electric signal and outputting the electric signal, a transmitting side for transmitting an output image signal from the image pickup means, and a transmitting side for transmitting the image signal. And a receiving side for receiving the output image, wherein the receiving side observes the output image, the receiving side receives and stores a still image signal transmitted from the transmitting side. Storage means for selecting, a selection means for selecting a predetermined still image from the still images stored in the storage means, and a first image for displaying the still image selected by the selection means.
And a second display unit for receiving a moving image transmitted from the transmitting side and displaying the moving image as a moving image.
能な顕微鏡と、 前記顕微鏡の観察像を撮像し、電気信号に変換して出力
する撮像手段と、前記撮像手段からの出力画像信号を送
信する送信手段とを有する送信側と、前記送信側から送
信された前記出力画像信号を受信する受信側とを有し、
受信側において前記出力画像を観察する顕微鏡画像遠隔
観察装置において、 前記受信側は、 前記送信側から送信される静止画像信号を受けて格納す
るための記憶手段と、前記記憶手段に格納された静止画
像から所定の静止画像を選択する選択手段と、前記選択
手段によって選択された静止画像を表示するための第１
の表示手段と、前記選択された静止画像の所定の領域を
指示する指示手段と、前記指示手段によって指示された
領域の位置と大きさに応じて前記送信側の顕微鏡のステ
ージ位置とレンズの倍率を制御する制御信号を送信側に
伝送する制御信号伝送手段と、前記制御信号に応じた位
置と倍率の動画像信号を前記送信側から受信し、動画像
として表示するための第２の表示手段と、を有すること
を特徴とする顕微鏡画像遠隔観察装置。2. A microscope in which stage movement and lens magnification can be controlled, imaging means for imaging an observation image of the microscope, converting it into an electric signal and outputting the electric signal, and transmission for transmitting an output image signal from the imaging means. A transmitting side having means, and a receiving side for receiving the output image signal transmitted from the transmitting side,
In a microscope image remote observation device for observing the output image on a receiving side, the receiving side includes a storage unit for receiving and storing a still image signal transmitted from the transmitting side, and a static unit stored in the storage unit. Selecting means for selecting a predetermined still image from the image; and a first for displaying the still image selected by the selecting means.
Display means, instructing means for instructing a predetermined area of the selected still image, stage position of the microscope on the transmitting side and lens magnification according to the position and size of the area instructed by the instructing means. And a second display means for receiving a moving image signal having a position and magnification corresponding to the control signal from the transmitting side and displaying it as a moving image. And a microscope image remote observation device having:
する撮像手段と、前記撮像手段からの出力画像信号を送
信する送信手段とを有する送信側と、前記送信側から送
信された前記出力画像信号を受信する受信側とを有し、
受信側において前記出力画像を観察する顕微鏡画像遠隔
観察装置において、 前記受信側は、 前記送信側から送信される静止画像信号を受けて格納す
るための記憶手段と、前記記憶手段に格納された静止画
像から所定の静止画像を選択する選択手段と、前記選択
手段によって選択された静止画像を表示するための第１
の表示手段と、前記選択された静止画像の所定の領域を
指示する指示手段と、前記指示手段によって指示された
領域の位置と大きさに応じて前記送信側の顕微鏡のレン
ズ倍率を制御する制御信号を送信側に伝送する制御信号
伝送手段と、前記制御信号に応じた位置と倍率の動画像
信号を前記送信側から受信し、動画像として表示するた
めの第２の表示手段とを有し、 前記選択手段は前記動画像の倍率より小さく、かつ、最
も近い倍率を有する静止画像を選択することを特徴とす
る顕微鏡画像遠隔観察装置。3. A microscope having a controllable lens magnification, an image pickup means for picking up an observation image of the microscope, converting it into an electric signal and outputting the electric signal, and a transmitting means for transmitting an output image signal from the image pickup means. A transmitting side having, and a receiving side for receiving the output image signal transmitted from the transmitting side,
In a microscope image remote observation device for observing the output image on a receiving side, the receiving side includes a storage unit for receiving and storing a still image signal transmitted from the transmitting side, and a static unit stored in the storage unit. Selecting means for selecting a predetermined still image from the image; and a first for displaying the still image selected by the selecting means.
Display means, instructing means for instructing a predetermined area of the selected still image, and control for controlling the lens magnification of the microscope on the transmitting side in accordance with the position and size of the area instructed by the instructing means. It has a control signal transmitting means for transmitting a signal to a transmitting side, and a second display means for receiving a moving image signal of a position and a magnification corresponding to the control signal from the transmitting side and displaying it as a moving image. The microscopic image remote observation apparatus, wherein the selecting unit selects a still image having a magnification that is smaller than and is closest to the magnification of the moving image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP12635794A JP3557246B2 (en) | 1994-06-08 | 1994-06-08 | Microscope image remote observation device and microscope image remote observation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP12635794A JP3557246B2 (en) | 1994-06-08 | 1994-06-08 | Microscope image remote observation device and microscope image remote observation method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07333522A true JPH07333522A (en) | 1995-12-22 |
| JP3557246B2 JP3557246B2 (en) | 2004-08-25 |
Family
ID=14933186
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP12635794A Expired - Fee Related JP3557246B2 (en) | 1994-06-08 | 1994-06-08 | Microscope image remote observation device and microscope image remote observation method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3557246B2 (en) |
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR970053255A (en) * | 1995-12-27 | 1997-07-31 | 김광호 | Image processor of electron microscope and its usage |
| JP2001091840A (en) * | 1999-09-20 | 2001-04-06 | Olympus Optical Co Ltd | Microscope system |
| US6445459B1 (en) * | 1997-10-30 | 2002-09-03 | Mitsubishi Denki Kabushiki Kaisha | Image communication system |
| JP2006072109A (en) * | 2004-09-03 | 2006-03-16 | Olympus Corp | Observation method and apparatus |
| EP1860481A1 (en) * | 2006-05-24 | 2007-11-28 | Olympus Corporation | Micropscope system and method for synthesiing microscopic images |
| JP2007316259A (en) * | 2006-05-24 | 2007-12-06 | Olympus Corp | Microscope system, method for recording microscopic image, and program |
| JP2008107645A (en) * | 2006-10-26 | 2008-05-08 | Fuji Electric Holdings Co Ltd | Image display device |
| JP2009037250A (en) * | 1997-03-03 | 2009-02-19 | Bacus Lab Inc | Method and apparatus for acquiring and reconstructing magnified specimen images from computer-controlled microscope |
| JP2009042462A (en) * | 2007-08-08 | 2009-02-26 | Nikon Corp | Microscope apparatus, observation method, and observed image processing method |
| JP2009053701A (en) * | 1997-03-03 | 2009-03-12 | Bacus Lab Inc | Method and apparatus for creating virtual microscope slide |
| JP2009152894A (en) * | 2007-12-20 | 2009-07-09 | Canon Inc | Image processing device and its control method |
| JP2009169236A (en) * | 2008-01-18 | 2009-07-30 | Olympus Corp | Imaging device for microscope |
| JP2009211031A (en) * | 2007-09-04 | 2009-09-17 | Nsk Ltd | Manipulator system |
| US7596249B2 (en) | 2002-02-22 | 2009-09-29 | Olympus America Inc. | Focusable virtual microscopy apparatus and method |
| JP2010134460A (en) * | 2008-11-06 | 2010-06-17 | Seiko Epson Corp | Visual simulator for spectacle lens, visual simulation method for spectacle lens, and visual simulation program for spectacle lens |
| US7792338B2 (en) | 2004-08-16 | 2010-09-07 | Olympus America Inc. | Method and apparatus of mechanical stage positioning in virtual microscopy image capture |
| US7804642B2 (en) | 2005-05-16 | 2010-09-28 | Olympus Corporation | Scanning examination apparatus |
| JP2011034626A (en) * | 2009-07-31 | 2011-02-17 | Sony Corp | Method for manufacturing recording medium, recording medium and apparatus for playing back the same |
| JP2011112523A (en) * | 2009-11-27 | 2011-06-09 | Sony Corp | Information processor, information processing method, and program of the same |
| JP2015057659A (en) * | 2014-10-24 | 2015-03-26 | ソニー株式会社 | Display device, display method, and program |
| JP2018163698A (en) * | 2018-06-27 | 2018-10-18 | ソニー株式会社 | Information processing method and information processing apparatus |
| JP2019532352A (en) * | 2016-08-28 | 2019-11-07 | オーグメンティクス メディカル リミテッド | System for histological examination of tissue specimens |
| JP2020516926A (en) * | 2017-04-13 | 2020-06-11 | カール ツァイス マイクロスコピー ゲーエムベーハーＣａｒｌ Ｚｅｉｓｓ Ｍｉｃｒｏｓｃｏｐｙ Ｇｍｂｈ | Microscope system and method of operating a microscope system |
| JP2022506170A (en) * | 2018-10-30 | 2022-01-17 | ライカ マイクロシステムズ シーエムエス ゲゼルシャフト ミット ベシュレンクテル ハフツング | Microscopy system for imaging sample areas and corresponding methods |
| US11487412B2 (en) | 2011-07-13 | 2022-11-01 | Sony Corporation | Information processing method and information processing system |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6420449A (en) * | 1987-04-30 | 1989-01-24 | Korabi Internatl Teremetoritsu | Remote physiological diagnosis circuit network |
| JPH05111029A (en) * | 1991-10-18 | 1993-04-30 | Nikon Corp | Method of transmitting image |
| JPH063597A (en) * | 1992-06-22 | 1994-01-14 | Olympus Optical Co Ltd | Microscope still picture observing system |
| JPH06222281A (en) * | 1993-01-22 | 1994-08-12 | Olympus Optical Co Ltd | Microscopic remote observation system |
-
1994
- 1994-06-08 JP JP12635794A patent/JP3557246B2/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6420449A (en) * | 1987-04-30 | 1989-01-24 | Korabi Internatl Teremetoritsu | Remote physiological diagnosis circuit network |
| JPH05111029A (en) * | 1991-10-18 | 1993-04-30 | Nikon Corp | Method of transmitting image |
| JPH063597A (en) * | 1992-06-22 | 1994-01-14 | Olympus Optical Co Ltd | Microscope still picture observing system |
| JPH06222281A (en) * | 1993-01-22 | 1994-08-12 | Olympus Optical Co Ltd | Microscopic remote observation system |
Cited By (33)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR970053255A (en) * | 1995-12-27 | 1997-07-31 | 김광호 | Image processor of electron microscope and its usage |
| JP2009037250A (en) * | 1997-03-03 | 2009-02-19 | Bacus Lab Inc | Method and apparatus for acquiring and reconstructing magnified specimen images from computer-controlled microscope |
| JP2009053701A (en) * | 1997-03-03 | 2009-03-12 | Bacus Lab Inc | Method and apparatus for creating virtual microscope slide |
| US6445459B1 (en) * | 1997-10-30 | 2002-09-03 | Mitsubishi Denki Kabushiki Kaisha | Image communication system |
| JP2001091840A (en) * | 1999-09-20 | 2001-04-06 | Olympus Optical Co Ltd | Microscope system |
| US8306300B2 (en) | 2002-02-22 | 2012-11-06 | Olympus America Inc. | Focusable virtual microscopy apparatus and method |
| US7925067B2 (en) | 2002-02-22 | 2011-04-12 | Olympus America Inc. | Focusable virtual microscopy apparatus and method |
| US7596249B2 (en) | 2002-02-22 | 2009-09-29 | Olympus America Inc. | Focusable virtual microscopy apparatus and method |
| US7792338B2 (en) | 2004-08-16 | 2010-09-07 | Olympus America Inc. | Method and apparatus of mechanical stage positioning in virtual microscopy image capture |
| JP2006072109A (en) * | 2004-09-03 | 2006-03-16 | Olympus Corp | Observation method and apparatus |
| US7804642B2 (en) | 2005-05-16 | 2010-09-28 | Olympus Corporation | Scanning examination apparatus |
| JP2007316258A (en) * | 2006-05-24 | 2007-12-06 | Olympus Corp | Microscope system, microscope image composition method, and program |
| JP2007316259A (en) * | 2006-05-24 | 2007-12-06 | Olympus Corp | Microscope system, method for recording microscopic image, and program |
| US8014579B2 (en) | 2006-05-24 | 2011-09-06 | Olympus Corporation | Microscope system and method for synthesizing microscopic images |
| EP1860481A1 (en) * | 2006-05-24 | 2007-11-28 | Olympus Corporation | Micropscope system and method for synthesiing microscopic images |
| US7949161B2 (en) | 2006-05-24 | 2011-05-24 | Olympus Corporation | Microscope system and method for synthesizing microscopic images |
| JP2008107645A (en) * | 2006-10-26 | 2008-05-08 | Fuji Electric Holdings Co Ltd | Image display device |
| JP2009042462A (en) * | 2007-08-08 | 2009-02-26 | Nikon Corp | Microscope apparatus, observation method, and observed image processing method |
| JP2009211031A (en) * | 2007-09-04 | 2009-09-17 | Nsk Ltd | Manipulator system |
| JP2009152894A (en) * | 2007-12-20 | 2009-07-09 | Canon Inc | Image processing device and its control method |
| JP2009169236A (en) * | 2008-01-18 | 2009-07-30 | Olympus Corp | Imaging device for microscope |
| JP2010134460A (en) * | 2008-11-06 | 2010-06-17 | Seiko Epson Corp | Visual simulator for spectacle lens, visual simulation method for spectacle lens, and visual simulation program for spectacle lens |
| US8583406B2 (en) | 2008-11-06 | 2013-11-12 | Hoya Lens Manufacturing Philippines Inc. | Visual simulator for spectacle lens, visual simulation method for spectacle lens, and computer readable recording medium recording computer readable visual simulation program for spectacle lens |
| JP2011034626A (en) * | 2009-07-31 | 2011-02-17 | Sony Corp | Method for manufacturing recording medium, recording medium and apparatus for playing back the same |
| JP2011112523A (en) * | 2009-11-27 | 2011-06-09 | Sony Corp | Information processor, information processing method, and program of the same |
| US11487412B2 (en) | 2011-07-13 | 2022-11-01 | Sony Corporation | Information processing method and information processing system |
| JP2015057659A (en) * | 2014-10-24 | 2015-03-26 | ソニー株式会社 | Display device, display method, and program |
| JP2019532352A (en) * | 2016-08-28 | 2019-11-07 | オーグメンティクス メディカル リミテッド | System for histological examination of tissue specimens |
| US11636627B2 (en) | 2016-08-28 | 2023-04-25 | Augmentiqs Medical Ltd. | System for histological examination of tissue specimens |
| JP2020516926A (en) * | 2017-04-13 | 2020-06-11 | カール ツァイス マイクロスコピー ゲーエムベーハーＣａｒｌ Ｚｅｉｓｓ Ｍｉｃｒｏｓｃｏｐｙ Ｇｍｂｈ | Microscope system and method of operating a microscope system |
| JP2018163698A (en) * | 2018-06-27 | 2018-10-18 | ソニー株式会社 | Information processing method and information processing apparatus |
| JP2022506170A (en) * | 2018-10-30 | 2022-01-17 | ライカ マイクロシステムズ シーエムエス ゲゼルシャフト ミット ベシュレンクテル ハフツング | Microscopy system for imaging sample areas and corresponding methods |
| US11914134B2 (en) | 2018-10-30 | 2024-02-27 | Leica Microsystems Cms Gmbh | Microscope system for imaging a sample region and corresponding method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3557246B2 (en) | 2004-08-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3557246B2 (en) | Microscope image remote observation device and microscope image remote observation method | |
| JP4937457B2 (en) | Microscope control apparatus, microscope control system, microscope control method, program, and recording medium | |
| JP4878913B2 (en) | Microscope system, microscope image synthesis method, and program | |
| JP2000516784A (en) | Image transmission remote object inspection device | |
| US7071969B1 (en) | Parameterized preview array for iterative image optimization in remote applications | |
| JP4637337B2 (en) | Microscope image observation system and control method thereof | |
| JP2000295462A (en) | Transmission system for microscope image | |
| JP4434376B2 (en) | Microscope image transfer system | |
| US20140063072A1 (en) | Information processing apparatus, information processing method, and information processing program | |
| JP3018733B2 (en) | Still image transmission device | |
| JP3321197B2 (en) | Microscope still image transmission system | |
| JP3448847B2 (en) | Microscope still image observation system | |
| JP3321198B2 (en) | Microscope still image observation system | |
| JP3698737B2 (en) | Microscope remote observation system and remote observation method | |
| JP3325064B2 (en) | Microscope remote observation system and its control method | |
| JP3377548B2 (en) | Microscope image observation system | |
| JP3704529B2 (en) | Microscope observation system and display method of microscope image | |
| JP2016038542A (en) | Image processing method and image processing apparatus | |
| JPH09117417A (en) | Phthologic image telediagnosis system | |
| JPH05241075A (en) | Microscope system | |
| JPH09120031A (en) | Image pickup device and microscope image transmission system | |
| KR20000057920A (en) | Microscope image transmitting system, method of processing microscope images, and recording medium for use in processing microscope images | |
| JP3432851B2 (en) | Microscope remote observation system | |
| JP3226336B2 (en) | Image remote observation system | |
| JP2002122792A (en) | Method and equipment for matching temporal resolution in lateral direction of microscope image |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040203 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040405 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040407 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040511 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040517 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080521 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080521 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090521 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100521 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110521 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |