JP7466431B2 - 口腔画像取得装置 - Google Patents

口腔画像取得装置 Download PDF

Info

Publication number
JP7466431B2
JP7466431B2 JP2020187842A JP2020187842A JP7466431B2 JP 7466431 B2 JP7466431 B2 JP 7466431B2 JP 2020187842 A JP2020187842 A JP 2020187842A JP 2020187842 A JP2020187842 A JP 2020187842A JP 7466431 B2 JP7466431 B2 JP 7466431B2
Authority
JP
Japan
Prior art keywords
oral cavity
image acquisition
image
visibility
air
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020187842A
Other languages
English (en)
Other versions
JP2022077149A (ja
Inventor
継泰 豊岡
聡 檜山
千章 土井
尊士 荒木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Priority to JP2020187842A priority Critical patent/JP7466431B2/ja
Publication of JP2022077149A publication Critical patent/JP2022077149A/ja
Application granted granted Critical
Publication of JP7466431B2 publication Critical patent/JP7466431B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)

Description

本発明は、口腔画像取得装置に関する。
ユーザの口腔内を撮像した口腔画像に基づいて、歯及び歯茎等における口腔疾患等の診断が行われている。また、既存の携帯端末により撮影対象(ユーザ)の異変部を撮影するための装置が知られている(例えば、特許文献1参照)。
国際公開第2015/016377号公報
口腔画像に基づく診断のためには、診断対象である口腔内の歯及び歯茎等が口腔画像に明確に表されていることが好ましい。口腔内の診断のために、口を開けた状態に保つための開口器といった器具が存在するが、撮像装置及び開口器に唾液が付着すること等の衛生面の問題、及び、使い捨ての消耗品であるというコスト面の問題がある。
そこで、本発明は、上記問題点に鑑みてなされたものであり、歯及び歯茎等の視認性が良好な口腔画像を取得することを目的とする。
上記課題を解決するために、本発明の一形態に係る口腔画像取得装置は、ユーザに向けて空気を噴射するように構成された送風装置と、ユーザの顔を撮像するように構成された撮像装置とを制御し、撮像装置によりユーザの口腔画像を取得する口腔画像取得装置であって、撮像装置により撮像されたユーザの顔画像を取得する第1画像取得部と、顔画像から口腔の位置を推定する認識部と、顔画像の口腔の内部における歯及び歯茎の視認性を判断する視認性判断部であって、視認されない歯及び歯茎の位置並びに視認性の程度の少なくともいずれか一方を判断する、視認性判断部と、認識部により認識された口腔の位置に空気が噴射されるように、送風装置の噴射位置を制御する送風装置制御部であって、視認性が向上されるように、送風装置から空気を噴射する力である風力及び噴射位置の少なくともいずれか一方を制御する、送風装置制御部と、視認性判断部により視認性が所定の程度以上であることが判断されたときに、顔画像のうちの少なくとも口腔の部分を含む口腔画像を取得する第2画像取得部と、を備える。
上記の形態によれば、顔画像の認識により得られた口腔の位置の情報に基づいて、口腔の位置に空気が噴射されるように、送風装置の噴射位置が制御される。そして、顔画像に基づいて判断された歯及び歯茎の視認性に基づいて、視認性が向上されるように、ユーザの口腔に向けて噴射される空気の風力及び噴射位置の少なくとも一方が制御され、視認性が所定の程度以上になったときに、口腔画像が取得される。従って、歯及び歯茎等の視認性が良好な口腔画像の取得が可能となる。
本発明の一形態によれば、歯及び歯茎等の視認性が良好な口腔画像を取得することが可能となる。
本実施形態の口腔画像取得システムの装置構成を示す図である。 本実施形態の口腔画像取得装置の機能的構成を示すブロック図である。 口腔画像取得装置のハードブロック図である。 顔画像の例を示す図である。 顔画像の一部の口腔部分の例を示す図である。 口腔部分の一部の視認性が良好ではない顔画像の例を示す図である。 口腔部分の視認性が良好ではない顔画像の例を示す図である。 口腔画像取得装置における口腔画像取得方法の処理内容を示すフローチャートである。 口腔画像取得プログラムの構成を示す図である。
本発明に係る口腔画像取得装置の実施形態について図面を参照して説明する。なお、可能な場合には、同一の部分には同一の符号を付して、重複する説明を省略する。
図1は、本実施形態に係る口腔画像取得装置を含む口腔画像取得システムの装置構成を示す図である。図1に示されるように、口腔画像取得システム1は、口腔画像取得装置10、撮像装置C、送風装置Fを含む。口腔画像取得装置10は、口腔画像記憶部20といった記憶手段にアクセス可能に構成されている。
口腔画像取得装置10は、撮像装置Cによりユーザの口腔画像を取得する装置である。口腔画像は、ユーザの口腔疾患の診断等に供される画像であって、歯及び歯茎等の視認性が良好であることが求められる。
撮像装置Cは、例えば光学センサ等により画像を取得する装置であって、口腔画像取得装置10により制御される。具体的には、撮像装置Cは、撮像のタイミング、被写体の撮像位置及び焦点調整等を口腔画像取得装置10により制御される。
送風装置Fは、被写体であるユーザに向けて空気を噴射するように構成された装置である。具体的には、本実施形態の送風装置Fは、ユーザの口を開かせるためにユーザの口の部分に空気を噴射することにより、口腔内の視認性を向上させる。送風装置Fは、被写体における空気が吹きつけられる噴射位置を調整するために、口腔画像取得装置10の制御に基づいて噴射方向を変更できる。また、送風装置Fは、各々が異なる噴射位置に対応付けられた複数の噴射口を備えていてもよい。
口腔画像記憶部20は、口腔画像取得装置10により取得された口腔画像を記憶させるための記憶手段である。
図2は、本実施形態に係る口腔画像取得装置10の機能的構成を示す図である。図2に示すように、口腔画像取得装置10は、機能的には、第1画像取得部11、認識部12、視認性判断部13、反射判断部14、送風装置制御部15及び第2画像取得部16を備える。口腔画像取得装置10の各機能部11~16は、一つの装置に構成されてもよいし、複数の装置に分散されて構成されてもよい。
なお、図2に示したブロック図は、機能単位のブロックを示している。これらの機能ブロック(構成部)は、ハードウェア及びソフトウェアの少なくとも一方の任意の組み合わせによって実現される。また、各機能ブロックの実現方法は特に限定されない。すなわち、各機能ブロックは、物理的又は論理的に結合した1つの装置を用いて実現されてもよいし、物理的又は論理的に分離した2つ以上の装置を直接的又は間接的に(例えば、有線、無線などを用いて)接続し、これら複数の装置を用いて実現されてもよい。機能ブロックは、上記1つの装置又は上記複数の装置にソフトウェアを組み合わせて実現されてもよい。
機能には、判断、決定、判定、計算、算出、処理、導出、調査、探索、確認、受信、送信、出力、アクセス、解決、選択、選定、確立、比較、想定、期待、見做し、報知(broadcasting)、通知(notifying)、通信(communicating)、転送(forwarding)、構成(configuring)、再構成(reconfiguring)、割り当て(allocating、mapping)、割り振り(assigning)などがあるが、これらに限られない。たとえば、送信を機能させる機能ブロック(構成部)は、送信部(transmitting unit)や送信機(transmitter)と呼称される。いずれも、上述したとおり、実現方法は特に限定されない。
例えば、本発明の一実施の形態における口腔画像取得装置10は、コンピュータとして機能してもよい。図3は、本実施形態に係る口腔画像取得装置10のハードウェア構成の一例を示す図である。口腔画像取得装置10は、物理的には、プロセッサ1001、メモリ1002、ストレージ1003、通信装置1004、入力装置1005、出力装置1006、バス1007などを含むコンピュータ装置として構成されてもよい。
なお、以下の説明では、「装置」という文言は、回路、デバイス、ユニットなどに読み替えることができる。口腔画像取得装置10のハードウェア構成は、図3に示した各装置を1つ又は複数含むように構成されてもよいし、一部の装置を含まずに構成されてもよい。
口腔画像取得装置10における各機能は、プロセッサ1001、メモリ1002などのハードウェア上に所定のソフトウェア(プログラム)を読み込ませることで、プロセッサ1001が演算を行い、通信装置1004による通信や、メモリ1002及びストレージ1003におけるデータの読み出し及び/又は書き込みを制御することで実現される。
プロセッサ1001は、例えば、オペレーティングシステムを動作させてコンピュータ全体を制御する。プロセッサ1001は、周辺装置とのインターフェース、制御装置、演算装置、レジスタなどを含む中央処理装置(CPU:Central Processing Unit)で構成されてもよい。例えば、図2に示した各機能部11~16などは、プロセッサ1001で実現されてもよい。
また、プロセッサ1001は、プログラム(プログラムコード)、ソフトウェアモジュールやデータを、ストレージ1003及び/又は通信装置1004からメモリ1002に読み出し、これらに従って各種の処理を実行する。プログラムとしては、上述の実施の形態で説明した動作の少なくとも一部をコンピュータに実行させるプログラムが用いられる。例えば、口腔画像取得装置10の各機能部11~16は、メモリ1002に格納され、プロセッサ1001で動作する制御プログラムによって実現されてもよい。上述の各種処理は、1つのプロセッサ1001で実行される旨を説明してきたが、2以上のプロセッサ1001により同時又は逐次に実行されてもよい。プロセッサ1001は、1以上のチップで実装されてもよい。なお、プログラムは、電気通信回線を介してネットワークから送信されても良い。
メモリ1002は、コンピュータ読み取り可能な記録媒体であり、例えば、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、EEPROM(Electrically Erasable Programmable ROM)、RAM(Random Access Memory)などの少なくとも1つで構成されてもよい。メモリ1002は、レジスタ、キャッシュ、メインメモリ(主記憶装置)などと呼ばれてもよい。メモリ1002は、本発明の一実施の形態に係る口腔画像取得方法を実施するために実行可能なプログラム(プログラムコード)、ソフトウェアモジュールなどを保存することができる。
ストレージ1003は、コンピュータ読み取り可能な記録媒体であり、例えば、CD-ROM(Compact Disc ROM)などの光ディスク、ハードディスクドライブ、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Blu-ray(登録商標)ディスク)、スマートカード、フラッシュメモリ(例えば、カード、スティック、キードライブ)、フロッピー(登録商標)ディスク、磁気ストリップなどの少なくとも1つで構成されてもよい。ストレージ1003は、補助記憶装置と呼ばれてもよい。上述の記憶媒体は、例えば、メモリ1002及び/又はストレージ1003を含むデータベース、サーバその他の適切な媒体であってもよい。
通信装置1004は、有線及び/又は無線ネットワークを介してコンピュータ間の通信を行うためのハードウェア(送受信デバイス)であり、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュールなどともいう。
入力装置1005は、外部からの入力を受け付ける入力デバイス(例えば、キーボード、マウス、マイクロフォン、スイッチ、ボタン、センサなど)である。出力装置1006は、外部への出力を実施する出力デバイス(例えば、ディスプレイ、スピーカー、LEDランプなど)である。なお、入力装置1005及び出力装置1006は、一体となった構成(例えば、タッチパネル)であってもよい。
また、プロセッサ1001やメモリ1002などの各装置は、情報を通信するためのバス1007で接続される。バス1007は、単一のバスで構成されてもよいし、装置間で異なるバスで構成されてもよい。
また、口腔画像取得装置10は、マイクロプロセッサ、デジタル信号プロセッサ(DSP:Digital Signal Processor)、ASIC(Application Specific Integrated Circuit)、PLD(Programmable Logic Device)、FPGA(Field Programmable Gate Array)などのハードウェアを含んで構成されてもよく、当該ハードウェアにより、各機能ブロックの一部又は全てが実現されてもよい。例えば、プロセッサ1001は、これらのハードウェアの少なくとも1つで実装されてもよい。
次に、口腔画像取得装置10の各機能部について説明する。第1画像取得部11は、撮像装置Cにより撮像されたユーザの顔画像を取得する。図4は、撮像装置Cにより取得され、第1画像取得部11により取得された顔画像の例を示す図である。
図4に示すように、顔画像Aは、口腔疾患の診断の対象であるユーザを被写体として撮像された画像であって、後述されるように、口腔の内部の視認性の判断に供される。時間の経過と共に変化する視認性の判断のために、顔画像Aは、動画像として撮像及び取得されてもよい。また、顔画像Aは、所定の時間間隔で撮像及び取得された静止画であってもよい。
認識部12は、顔画像Aから、口腔の位置を推定する。具体的には、認識部12は、周知の画像認識技術により、顔画像Aから顔を認識する。周知の画像認識技術は限定されないが、例えば、予め記憶されている顔画像データとの照合により顔を認識するパターンマッチング技術であってもよい。また、認識部12は、顔画像を教師データとして機械学習により構築された学習済みの認識モデルを用いて、顔画像Aから顔を認識及び抽出してもよい。
認識部12は、さらに、顔画像Aから認識された顔の中の口腔の位置を推定する。具体的には、認識部12は、周知の推定技術により、顔画像Aから認識された顔の中の口腔(口)の位置を推定するが、その推定手法は限定されない。例えば、認識部12は、予め記憶されている口の画像データとの照合により、口腔の位置を推定してもよい。認識部12は、顔画像Aから認識された顔の中の口腔の位置を示す情報を出力してもよい。例えば、認識部12は、顔画像Aに対してローカルに設定された位置を示す情報(例えば、2次元座標)により、口腔の位置を示す情報を出力してもよい。
視認性判断部13は、顔画像Aの口腔の内部における歯及び歯茎の視認性を判断する。具体的には、視認性判断部13は、顔画像Aに基づいて、視認されない歯及び歯茎の位置及び視認の程度の少なくともいずれか一方を判断する。
視認性判断部13は、例えば、顔画像Aから抽出された口腔の部分の画像を、歯及び歯茎が十分に表され予め有している口腔部分の画像と照合することにより、歯及び歯茎等が視認されない箇所を判断してもよい。視認性判断部13は、顔画像A中における、歯及び歯茎等が視認されない箇所の位置を示す情報を出力する。
例えば、視認性判断部13は、顔画像Aにおける、歯及び歯茎等が視認されない箇所を示す位置情報を、顔画像Aに対してローカルに設定された位置を示す情報(例えば、2次元座標)として出力してもよい。
図5は、口腔部分が拡大された顔画像の例を示す図である。図5に示される例では、顔画像B1の口腔部分には、各位置に対応付けられた複数(4×4)の部分領域Lが設定されている。このように部分領域Lが設定されている場合には、視認性判断部13は、歯及び歯茎等が視認されない箇所に対応する部分領域Lを識別する情報を、歯及び歯茎等が視認されない位置を示す情報として出力してもよい。
反射判断部14は、口腔の内部における光の反射の有無を判定する。口腔の内部において唾液等の存在に起因する光の反射が発生すると、口腔画像における歯及び歯茎等の視認性が低下するので、本実施形態の口腔画像取得装置10では、診断のための口腔画像の取得に先立って、口腔内部の光の反射の有無及び程度が判断される。
具体的には、反射判断部14は、顔画像Aに表された口腔部分を構成する画素の輝度値に基づいて、光の反射の有無及び程度を判断してもよい。即ち、反射判断部14は、輝度値が所定値以上である場合には、光の反射が発生していると判断し、輝度値が所定値未満である場合には、光の反射が発生していないと判断してもよい。
送風装置制御部15は、認識部12により認識されたユーザの口腔の位置に空気が噴射されるように、送風装置Fの噴射位置を制御する。本実施形態の口腔画像取得装置10においては、撮像装置Cの画角と送風装置Fが設けられている位置とが相対的に固定されていてもよい。そして、口腔画像取得装置10は、撮像装置Cにより取得された顔画像A中の位置(座標)と、送風装置Fからの空気の噴射位置とを予め関連付けておき、設定情報として有することができる。顔画像A中の位置を示す情報は、顔画像Aに対してローカルに設定された座標であってもよいし、図5に例示したような部分領域Lを識別する情報であってもよい。
送風装置制御部15は、認識部12から口腔の位置を示す情報を取得し、顔画像中の位置と噴射位置とを関連付けた設定情報を参照し、口腔の位置に対応する噴射位置の情報に基づいて、送風装置Fの噴射位置を制御する。噴射位置の制御は、前述のとおり、例えば、噴射方向の調整及び複数の噴射口のうちの1または複数の噴射口の選択であってもよい。
送風装置制御部15は、さらに、視認性判断部13による歯及び歯茎等の視認性の判断に基づいて、視認性が向上されるように、送風装置Fから空気を噴射する力である風力及び噴射位置の少なくともいずれか一方を制御する。具体的には、送風装置制御部15は、口腔の内部における視認されていない位置に空気が噴射されるように噴射位置を設定する。また、送風装置制御部15は、視認性の程度が所定の程度未満である場合に、風力を上げるように制御する。
図6は、口腔部分が拡大された顔画像の例を示す図である。図6に示される顔画像B2では、部分V1の口の開き方が十分ではなく、部分V1近傍における歯及び歯茎が視認されない。このような場合において、視認性判断部13は、部分V1近傍における歯及び歯茎の視認性が所定の程度未満であることを判断すると共に、顔画像B2における部分V1の位置を示す情報を出力する。視認性判断部13は、部分V1が対応する部分領域Lを識別する情報を出力してもよい。
送風装置制御部15は、視認性判断部13からの部分V1の位置を示す情報に基づいて、部分V1に空気が噴射されるように、送風装置Fの噴射位置を制御する。具体的には、送風装置制御部15は、顔画像中の位置と噴射位置とを関連付けた設定情報を参照して、部分V1の位置を示す情報に対応する噴射位置を取得し、取得した噴射位置に基づいて、送風装置Fの噴射方向を調整したり、複数の噴射口のうちの1または複数の噴射口を選択したりする。
図7は、口腔部分が拡大された顔画像の例を示す図である。図7に示される顔画像B3では、口全体に相当する部分V2の口の開き方が十分ではなく、部分V2近傍における歯及び歯茎の視認性の程度が十分ではない。このような場合において、視認性判断部13は、歯及び歯茎の視認性の程度が所定の程度未満であることを示す情報を出力する。送風装置制御部15は、視認性判断部13からの視認性の程度を示す情報に基づいて、送風装置Fにおける空気を噴射する風力を上げるように制御する。
また、送風装置制御部15は、反射判断部14による光の反射の有無の判断の結果に基づいて、送風装置Fを制御してもよい。具体的には、送風装置制御部15は、反射判断部14により光の反射が発生していると判断された場合には、送風装置Fに空気の噴射を継続させる。また、送風装置制御部15は、反射判断部14により光の反射が発生していると判断された場合には、送風装置Fに風力を上げさせる。このような送風装置Fの制御により、唾液の蒸発が促進される。
第2画像取得部16は、視認性判断部13により口腔内の歯及び歯茎の視認性が所定の程度以上であることが判断されたときに、口腔画像を取得する。口腔画像は、顔画像のうちの少なくとも口腔の部分を含む画像である。
本実施形態では、前述のとおり、撮像装置Cにより動画像または時系列の複数の静止画が撮像されているので、第2画像取得部16は、視認性に関する条件が充足された時に撮像装置Cにより撮像された動画像または静止画を、口腔画像として記録してもよい。
さらに、第2画像取得部16は、取得した口腔画像を口腔画像記憶部20に記憶させてもよい。視認性が所定の程度以上になったときに口腔画像が取得されるので、歯及び歯茎等の視認性が良好な口腔画像の取得が可能となる。
また、第2画像取得部16は、反射判断部14により光の反射が所定の程度未満になったと判定された場合に、口腔画像を取得することとしてもよい。このように口腔画像が取得されることにより、視認性の良好な口腔画像の取得が可能となる。
図8は、口腔画像取得装置10における口腔画像取得方法の処理内容を示すフローチャートである。
ステップS1において、第1画像取得部11は、撮像装置Cにより撮像されたユーザの顔画像を取得する。ステップS2において、認識部12は、ステップS1において取得された顔画像からユーザの顔を認識する。さらに、認識部12は、顔画像から認識された顔の中の口腔の位置を推定及び認識する。
ステップS3において、視認性判断部13は、顔画像の口腔の内部における歯及び歯茎の視認性を判断する。具体的には、視認性判断部13は、顔画像に基づいて、視認されない歯及び歯茎の位置及び視認の程度の少なくともいずれか一方を判断する。
ステップS4において、視認性判断部13は、歯及び歯茎の視認性が所定の程度以上であるか否かを判定する。視認性が所定の程度以上であると判定された場合には、処理はステップS6に進む。一方、視認性が所定の程度以上であると判定されなかった場合には、処理はステップS5に進む。
ステップS5において、送風装置制御部15は、口腔の内部における視認されていない位置に空気が噴射されるように噴射位置を設定する。また、送風装置制御部15は、視認性の程度が所定の程度未満である場合に、送風装置Fの風力を上げるように制御する。送風装置Fの制御の後に処理はステップS3に戻り、再び視認性の判断が実施される。
ステップS6において、反射判断部14は、口腔の内部における唾液の存在に起因する光の反射の有無を判定する。ステップS7において、反射判断部14は、反射の有無を判定する。反射があると判定された場合には、処理はステップS8に進む。一方、反射があると判定されなかった場合には、処理はステップS9に進む。
ステップS8において、送風装置制御部15は、空気の噴射を継続し、処理はステップS6の反射の有無の判定に戻る。
ステップS9において、第2画像取得部16は、歯及び歯茎の視認性が所定の程度以上であり且つ光の反射が所定の程度未満になったことをもって、口腔画像を取得する。
次に、コンピュータを、本実施形態の口腔画像取得装置10として機能させるための口腔画像取得プログラムについて説明する。図9は、口腔画像取得プログラムの構成を示す図である。
口腔画像取得プログラムP1は、口腔画像取得装置10における口腔画像取得処理を統括的に制御するメインモジュールm10、第1画像取得モジュールm11、認識モジュールm12、視認性判断モジュールm13、反射判断モジュールm14、送風装置制御モジュールm15及び第2画像取得モジュールm16を備えて構成される。そして、各モジュールm11~m16により、第1画像取得部11、認識部12、視認性判断部13、反射判断部14、送風装置制御部15及び第2画像取得部16のための各機能が実現される。
なお、口腔画像取得プログラムP1は、通信回線等の伝送媒体を介して伝送される態様であってもよいし、図9に示されるように、記録媒体M1に記憶される態様であってもよい。
以上説明した本実施形態の口腔画像取得装置10、口腔画像取得方法及び口腔画像取得プログラムP1では、顔画像の認識により得られた口腔の位置の情報に基づいて、口腔の位置に空気が噴射されるように、送風装置の噴射位置が制御される。そして、顔画像に基づいて判断された歯及び歯茎の視認性に基づいて、視認性が向上されるように、ユーザの口腔に向けて噴射される空気の風力及び噴射位置の少なくとも一方が制御され、視認性が所定の程度以上になったときに、口腔画像が取得される。従って、歯及び歯茎等の視認性が良好な口腔画像の取得が可能となる。
また、別の形態に係る口腔画像取得装置では、送風装置制御部は、口腔の内部における視認されていない位置に空気が噴射されるように噴射位置を設定することとしてもよい。
上記形態によれば、口腔内部における視認されていない位置に空気が噴射されるので、口腔内に歯及び歯茎の視認性を向上させることが可能となる。
また、別の形態に係る口腔画像取得装置では、送風装置制御部は、視認性の程度が所定の程度未満である場合に、風力を上げることとしてもよい。
上記形態によれば、視認性の程度が不十分である場合に、風力が上げられるので、ユーザの口の開口が促され、視認性をより向上させることが可能となる。
また、別の形態に係る口腔画像取得装置は、口腔の内部における光の反射の有無を判定する反射判断部、を更に備え、送風装置制御部は、反射判断部により光の反射があると判定された場合に、送風装置に空気の噴射を継続させ又は風力を上げさせ、第2画像取得部は、反射判断部により光の反射が所定の程度未満になったと判定された場合に、口腔画像を取得することとしてもよい。
上記形態によれば、主に唾液に起因する光の反射が有ると判定された場合に、送風装置による空気の噴射が継続されたり送風装置の風力が上げられたりすることにより唾液の蒸発が促進される。そして、光の反射が所定の程度未満になったときに口腔画像が取得されるので、視認性の良好な口腔画像の取得が可能となる。
また、別の形態に係る口腔画像取得装置では、反射判断部は、顔画像を構成する画素の輝度値に基づいて反射の有無を判断することとしてもよい。
上記形態によれば、顔画像中の画素の輝度値が光の反射の判定に用いられるので、光の反射の有無及び程度が適切に判断される。
以上、本実施形態について詳細に説明したが、当業者にとっては、本実施形態が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本実施形態は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本明細書の記載は、例示説明を目的とするものであり、本実施形態に対して何ら制限的な意味を有するものではない。
本明細書で説明した各態様/実施形態は、LTE(Long Term Evolution)、LTE-A(LTE-Advanced)、SUPER 3G、IMT-Advanced、4G、5G、FRA(Future Radio Access)、W-CDMA(登録商標)、GSM(登録商標)、CDMA2000、UMB(Ultra Mobile Broadband)、IEEE 802.11(Wi-Fi)、IEEE 802.16(WiMAX)、IEEE 802.20、UWB(Ultra-WideBand)、Bluetooth(登録商標)、その他の適切なシステムを利用するシステム及び/又はこれらに基づいて拡張された次世代システムに適用されてもよい。
本明細書で説明した各態様/実施形態の処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。
入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルで管理してもよい。入出力される情報等は、上書き、更新、または追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。
判定は、1ビットで表される値(0か1か)によって行われてもよいし、真偽値(Boolean:trueまたはfalse)によって行われてもよいし、数値の比較(例えば、所定の値との比較)によって行われてもよい。
本明細書で説明した各態様/実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知(例えば、「Xであること」の通知)は、明示的に行うものに限られず、暗黙的(例えば、当該所定の情報の通知を行わない)ことによって行われてもよい。
以上、本開示について詳細に説明したが、当業者にとっては、本開示が本開示中に説明した実施形態に限定されるものではないということは明らかである。本開示は、請求の範囲の記載により定まる本開示の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本開示の記載は、例示説明を目的とするものであり、本開示に対して何ら制限的な意味を有するものではない。
ソフトウェアは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語と呼ばれるか、他の名称で呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順、機能などを意味するよう広く解釈されるべきである。
また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線(DSL)などの有線技術及び/又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び/又は無線技術は、伝送媒体の定義内に含まれる。
本開示において説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
なお、本開示において説明した用語及び/又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。
本明細書で使用する「システム」および「ネットワーク」という用語は、互換的に使用される。
また、本明細書で説明した情報、パラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。
本開示で使用する「判断(determining)」、「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「判断」、「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking up、search、inquiry)(例えば、テーブル、データベース又は別のデータ構造での探索)、確認(ascertaining)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、受信(receiving)(例えば、情報を受信すること)、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)(例えば、メモリ中のデータにアクセスすること)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「判断」「決定」したとみなす事を含み得る。つまり、「判断」「決定」は、何らかの動作を「判断」「決定」したとみなす事を含み得る。また、「判断(決定)」は、「想定する(assuming)」、「期待する(expecting)」、「みなす(considering)」などで読み替えられてもよい。
本開示で使用する「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。
本明細書で「第1の」、「第2の」などの呼称を使用した場合においては、その要素へのいかなる参照も、それらの要素の量または順序を全般的に限定するものではない。これらの呼称は、2つ以上の要素間を区別する便利な方法として本明細書で使用され得る。したがって、第1および第2の要素への参照は、2つの要素のみがそこで採用され得ること、または何らかの形で第1の要素が第2の要素に先行しなければならないことを意味しない。
「含む(include)」、「含んでいる(including)」、およびそれらの変形が、本明細書あるいは特許請求の範囲で使用されている限り、これら用語は、用語「備える(comprising)」と同様に、包括的であることが意図される。さらに、本明細書あるいは特許請求の範囲において使用されている用語「または(or)」は、排他的論理和ではないことが意図される。
本明細書において、文脈または技術的に明らかに1つのみしか存在しない装置である場合以外は、複数の装置をも含むものとする。
本開示の全体において、文脈から明らかに単数を示したものではなければ、複数のものを含むものとする。
1…口腔画像取得システム、10…口腔画像取得装置、11…第1画像取得部、12…認識部、13…視認性判断部、14…反射判断部、15…送風装置制御部、16…第2画像取得部、20…口腔画像記憶部、C…撮像装置、F…送風装置、M1…記録媒体、m10…メインモジュール、m11…第1画像取得モジュール、m12…認識モジュール、m13…視認性判断モジュール、m14…反射判断モジュール、m15…送風装置制御モジュール、m16…第2画像取得モジュール、P1…口腔画像取得プログラム。

Claims (5)

  1. ユーザに向けて空気を噴射するように構成された送風装置と、前記ユーザの顔を撮像するように構成された撮像装置とを制御し、前記撮像装置によりユーザの口腔画像を取得する口腔画像取得装置であって、
    前記撮像装置により撮像されたユーザの顔画像を取得する第1画像取得部と、
    前記顔画像から口腔の位置を推定する認識部と、
    前記顔画像の前記口腔の内部における歯及び歯茎の視認性を判断する視認性判断部であって、視認されない歯及び歯茎の位置並びに視認性の程度の少なくともいずれか一方を判断する、視認性判断部と、
    前記認識部により認識された口腔の位置に空気が噴射されるように、前記送風装置の噴射位置を制御する送風装置制御部であって、前記視認性が向上されるように、前記送風装置から空気を噴射する力である風力及び前記噴射位置の少なくともいずれか一方を制御する、送風装置制御部と、
    前記視認性判断部により前記視認性が所定の程度以上であることが判断されたときに、前記顔画像のうちの少なくとも口腔の部分を含む口腔画像を取得する第2画像取得部と、
    を備える口腔画像取得装置。
  2. 前記送風装置制御部は、口腔の内部における視認されていない位置に空気が噴射されるように前記噴射位置を設定する、
    請求項1に記載の口腔画像取得装置。
  3. 前記送風装置制御部は、前記視認性の程度が所定の程度未満である場合に、前記風力を上げる、
    請求項1または2に記載の口腔画像取得装置。
  4. 前記口腔の内部における光の反射の有無を判定する反射判断部、を更に備え、
    前記送風装置制御部は、前記反射判断部により光の反射があると判定された場合に、前記送風装置に空気の噴射を継続させ又は前記風力を上げさせ、
    前記第2画像取得部は、前記反射判断部により光の反射が所定の程度未満になったと判定された場合に、前記口腔画像を取得する、
    請求項1~3のいずれか一項に記載の口腔画像取得装置。
  5. 前記反射判断部は、前記顔画像を構成する画素の輝度値に基づいて反射の有無を判断する、
    請求項4に記載の口腔画像取得装置。
JP2020187842A 2020-11-11 2020-11-11 口腔画像取得装置 Active JP7466431B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020187842A JP7466431B2 (ja) 2020-11-11 2020-11-11 口腔画像取得装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020187842A JP7466431B2 (ja) 2020-11-11 2020-11-11 口腔画像取得装置

Publications (2)

Publication Number Publication Date
JP2022077149A JP2022077149A (ja) 2022-05-23
JP7466431B2 true JP7466431B2 (ja) 2024-04-12

Family

ID=81653995

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020187842A Active JP7466431B2 (ja) 2020-11-11 2020-11-11 口腔画像取得装置

Country Status (1)

Country Link
JP (1) JP7466431B2 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009231879A (ja) 2008-03-19 2009-10-08 Seiko Epson Corp 画像処理装置および画像処理方法
WO2015016377A1 (ja) 2013-08-02 2015-02-05 Kanbara Masaki 撮影評価・検出ユニット及び遠隔診断システム
JP2016151584A (ja) 2015-02-16 2016-08-22 コニカミノルタ株式会社 器官画像撮影装置
WO2018061412A1 (ja) 2016-09-29 2018-04-05 修 元山 空気噴射装置、及び歯科ハンドピースシステム
JP2018134418A (ja) 2017-02-23 2018-08-30 正樹 神原 撮影評価・検出ユニット及び光学装置
JP2020179173A (ja) 2019-04-25 2020-11-05 サンスター株式会社 情報処理システム、情報処理方法、及び制御プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009231879A (ja) 2008-03-19 2009-10-08 Seiko Epson Corp 画像処理装置および画像処理方法
WO2015016377A1 (ja) 2013-08-02 2015-02-05 Kanbara Masaki 撮影評価・検出ユニット及び遠隔診断システム
JP2016151584A (ja) 2015-02-16 2016-08-22 コニカミノルタ株式会社 器官画像撮影装置
WO2018061412A1 (ja) 2016-09-29 2018-04-05 修 元山 空気噴射装置、及び歯科ハンドピースシステム
JP2018134418A (ja) 2017-02-23 2018-08-30 正樹 神原 撮影評価・検出ユニット及び光学装置
JP2020179173A (ja) 2019-04-25 2020-11-05 サンスター株式会社 情報処理システム、情報処理方法、及び制御プログラム

Also Published As

Publication number Publication date
JP2022077149A (ja) 2022-05-23

Similar Documents

Publication Publication Date Title
WO2019080797A1 (zh) 一种活体检测方法、终端和存储介质
JP6094903B2 (ja) 受信装置及び受信側画像処理方法
CN105245683A (zh) 一种终端应用的自适应显示方法及装置
JP5997601B2 (ja) 撮像システム
KR101972331B1 (ko) 영상 얼라인먼트 방법 및 그 장치
KR20160072782A (ko) 인증 장치, 방법 및 기록 매체
KR20210074792A (ko) 공기 조화 장치 및 그 제어 방법
CN111325058A (zh) 驾驶行为检测方法、装置、***及存储介质
KR20230069892A (ko) 이상 온도를 나타내는 객체를 식별하는 방법 및 장치
CN108509944A (zh) 指纹识别方法及装置
KR102267739B1 (ko) 치아 진단 방법 및 이를 수행하기 위한 컴퓨팅 장치
JP7466431B2 (ja) 口腔画像取得装置
CN112656441A (zh) 一种具有指纹识别超声探头的超声诊断方法及***
CN108542332A (zh) 语音控制洗碗机碗篮的方法、装置、洗碗机和电子设备
JP7067743B2 (ja) 口腔癌診断システム及び口腔癌診断プログラム
WO2024066375A1 (zh) 用于空调器监控的方法及装置、空调器、存储介质
JP4390487B2 (ja) 頭部領域抽出装置
JP7410735B2 (ja) 端末装置、機能提案方法、プログラム及びサーバ装置
JP6905849B2 (ja) 画像処理システム、情報処理装置、プログラム
JP6797009B2 (ja) 人物識別装置、方法及びプログラム
TWI590036B (zh) 裝置與喚醒裝置的方法
JP7530594B2 (ja) 歯科医院予約装置
CN108268861B (zh) 一种人体卧姿状态识别方法及装置
CN111767829A (zh) 一种活体检测方法、装置、***及存储介质
JP7473133B2 (ja) 情報提供装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230807

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240402

R150 Certificate of patent or registration of utility model

Ref document number: 7466431

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150