JP6471986B2 - Portable electronic device and program for photography and management - Google Patents

Portable electronic device and program for photography and management Download PDF

Info

Publication number
JP6471986B2
JP6471986B2 JP2016159483A JP2016159483A JP6471986B2 JP 6471986 B2 JP6471986 B2 JP 6471986B2 JP 2016159483 A JP2016159483 A JP 2016159483A JP 2016159483 A JP2016159483 A JP 2016159483A JP 6471986 B2 JP6471986 B2 JP 6471986B2
Authority
JP
Japan
Prior art keywords
image
screen
survey
shooting
list
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016159483A
Other languages
Japanese (ja)
Other versions
JP2018029239A (en
Inventor
博明 大野
博明 大野
Original Assignee
株式会社 零Ｓｐａｃｅ
株式会社 零Ｓｐａｃｅ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社 零Ｓｐａｃｅ, 株式会社 零Ｓｐａｃｅ filed Critical 株式会社 零Ｓｐａｃｅ
Priority to JP2016159483A priority Critical patent/JP6471986B2/en
Publication of JP2018029239A publication Critical patent/JP2018029239A/en
Application granted granted Critical
Publication of JP6471986B2 publication Critical patent/JP6471986B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Camera Data Copying Or Recording (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Description

本発明は、写真の撮影及び管理を行うための携帯式電子デバイス技術に関し、特に、定点経時変化調査などにおいて同一地点の事前・事後の写真を撮影・管理する用途で用いられる携帯式電子デバイス技術に関する。   The present invention relates to a portable electronic device technology for taking and managing photographs, and in particular, a portable electronic device technology used for taking and managing photographs before and after the same spot in a fixed point temporal change survey or the like. About.

同一地点の事前・事後の写真を撮影するのに用いられる携帯式電子デバイスとしては、特許文献１−５に記載のものが公知である。特許文献１−５に記載の携帯式電子デバイスは、同一地点を複数回撮影する場合に於いて、以前に撮影した画像を電子ビューファインダ画像に下敷画像として重畳表示することにより、撮影アングルが前回の撮影と一致しているか否かを判定できるように構成したものである。   As a portable electronic device used for taking pre- and post-photographs of the same spot, those described in Patent Documents 1-5 are known. In the portable electronic device described in Patent Documents 1-5, in the case where the same spot is shot a plurality of times, the previously taken image is displayed as an underlay image on the electronic viewfinder image so that the shooting angle is the previous time. It is configured so that it can be determined whether or not it is coincident with the shooting.

特許文献１に記載の電子カメラは、カメラ内の保存記憶手段（フラッシュメモリ）に、撮影画像とその撮影画像が定点撮影モードである旨を示す情報とを関連づけて保存しておき、定点撮影時には定点撮影モードの撮影画像を表示手段（液晶表示装置）に表示させてユーザによる選択を促し、選択された撮影画像を構図画像（下敷画像）として、撮影待機時に、被写体画像（電子ビューファインダ画像）と選択された構図画像とを表示手段に重畳表示するようにしたものである。この場合、構図画像は、元の撮影画像の輪郭抽出画像、単色化画像、淡色化画像等が用いられる。これにより、被写体画像が構図画像に一致するように撮影アングルを決めて撮影を行うことで、前回の撮影と同じ撮影アングルで撮影を行うことができる。   In the electronic camera described in Patent Document 1, a captured image and information indicating that the captured image is in the fixed point shooting mode are stored in a storage unit (flash memory) in the camera in association with each other. The photographed image in the fixed point photographing mode is displayed on the display means (liquid crystal display device) to prompt the user to select it, and the selected photographed image is used as a composition image (underlay image), and the subject image (electronic viewfinder image) during standby for photographing. And the selected composition image are superimposed on the display means. In this case, as the composition image, an outline extraction image, a monochromatic image, a light color image, or the like of the original photographed image is used. Thereby, it is possible to shoot at the same shooting angle as the previous shooting by determining the shooting angle so that the subject image matches the composition image.

特許文献２に記載の撮像装置も、同様に、「すかし撮影モード」としたときに、電子ビューファインダ画像と、以前に撮影した撮影済画像から選択されたテンプレート画像を淡色化処理して重畳表示させるように構成している。特許文献３，４に記載の撮像装置も同様である。   Similarly, the imaging apparatus described in Patent Document 2 also superimposes an electronic viewfinder image and a template image selected from a previously captured image by performing a light color process when the “watermark shooting mode” is set. It is configured to display. The same applies to the imaging devices described in Patent Documents 3 and 4.

特開２００２−９４８５４号公報JP 2002-94854 A 特開２０１６−４６６７６号公報JP 2016-46676 A 米国特許公開２００５／０２６４６６８号明細書US Patent Publication No. 2005/0264668 米国特許公開２００９／００１５７０２号明細書US Patent Publication No. 2009/0015702 特開２００８−１９９４１１号公報JP 2008-199411 A

西田佳史，中嶋信生，服部聖彦，「歩行者用自律航法のための高精度絶対方位取得法の研究」，電子情報通信学会 2010年ソサイエティ大会講演論文集，一般社団法人電子情報通信学会，2010年8月31日，B-20-5．Yoshifumi Nishida, Nobuo Nakajima, Seiko Hattori, “Study on High-Accuracy Absolute Direction Acquisition Method for Autonomous Navigation for Pedestrians”, IEICE 2010 Society Conference Proceedings, The Institute of Electronics, Information and Communication Engineers, 2010 August 31, 2012, B-20-5. 鵜沼宗利，倉田謙一郎，外山敦也，堀江武，「人の歩行動作認識技術を応用した自律的位置検出手法」，電子情報通信学会論文誌. A, 基礎・境界，一般社団法人電子情報通信学会，2004年1月1日，J87-A(1), pp.78-86．Munetoshi Suganuma, Kenichiro Kurata, Shinya Toyama, Takeshi Horie, “Autonomous Location Detection Method Applying Human Walking Motion Recognition Technology”, IEICE Transactions, Fundamentals / Boundaries, The Institute of Electronics, Information and Communication Engineers, January 1, 2004, J87-A (1), pp.78-86. 興梠正克，蔵田武志，「組み込み型GPS・自蔵式センサシステムによる屋内外歩行者ナビ(一般セッション(3), 人の検出・計測・認識) 」，電子情報通信学会技術研究報告. PRMU，パターン認識・メディア理解，一般社団法人電子情報通信学会，2006年5月19日，Vol.106，No.73，pp.7580．Masakatsu Oki, Takeshi Kurata, “Indoor / Outdoor Pedestrian Navigation with Built-in GPS / Self-contained Sensor System (General Session (3), Human Detection / Measurement / Recognition)”, IEICE Technical Report. PRMU, Pattern recognition and media understanding, The Institute of Electronics, Information and Communication Engineers, May 19, 2006, Vol.106, No.73, pp.7580. 古舘達也，豊瀬冬実，堀川三好，菅原光政，「受信電波強度を用いた位置測定手法の提案」，情報処理学会 第76回全国大会講演論文集，一般社団法人情報処理学会，Vol.76，No.3, pp.3.207-3.208．Tatsuya Furudate, Fuyumi Toyose, Miyoshi Horikawa, Mitsumasa Sugawara, “Proposal of Location Measurement Method Using Received Signal Strength”, Information Processing Society of Japan 76th Annual Conference, Information Processing Society of Japan, Vol.76, No.3, pp.3.207-3.208. 佐藤智美，小宮山哲，下田雅彦，劉渤江，横田一正，「Bluetoothの電波強度を用いた位置推定方式の検討」，DEIM Forum 2011，B9-4，2011年，＜URL：http://db-event.jpn.org/deim2011/proceedings/pdf/b9-4.pdf＞．Tomomi Sato, Satoshi Komiyama, Masahiko Shimoda, Liu Sabae, Kazumasa Yokota, “Examination of location estimation using Bluetooth radio field strength”, DEIM Forum 2011, B9-4, 2011, <URL: http: // db -event.jpn.org/deim2011/proceedings/pdf/b9-4.pdf>. 重松史哉・川村祐介・島村和典，「RFIDとGPSを利用したロケーション情報統合方式の一提案」，電子情報通信学会技術研究報告 (ISSN: 0913-5685)，一般社団法人電子情報通信学会，vol.109, no.382, pp.51-55.Shigematsu Fumiya, Kawamura Yusuke, Shimamura Kazunori, “A Proposal of Location Information Integration Method Using RFID and GPS”, IEICE Technical Report (ISSN: 0913-5685), The Institute of Electronics, Information and Communication Engineers, vol. 109, no.382, pp.51-55. 興梠正克・蔵田武志，「慣性センサ群とウェアラブルカメラを用いた歩行動作解析に基づくパーソナルポジショニング手法」，電子情報通信学会技術研究報告. PRMU, パターン認識・メディア理解，一般社団法人電子情報通信学会，2004年3月11日，vol.103, no.737, pp.25-30.Masakatsu Oki and Takeshi Kurata, “Personal Positioning Method Based on Walking Motion Analysis Using Inertial Sensors and Wearable Cameras”, IEICE Technical Report. PRMU, Pattern Recognition / Media Understanding, The Institute of Electronics, Information and Communication Engineers , March 11, 2004, vol.103, no.737, pp.25-30. 藤吉弘亘，「電子情報通信学会・知識ベース 知識の森・２群・２編・４章 動画解析」，［online］，２０１０年９月，一般社団法人電子情報通信学会，［２０１６年８月１０日検索］，インターネット，＜URL：http://www.ieice-hbkb.org/portal/doc_208.html＞Hironobu Fujiyoshi, “The Institute of Electronics, Information and Communication Engineers, Knowledge Base, Knowledge Forest, 2 Groups, 2 Volumes, Chapter 4 Video Analysis”, [online], September 2010, The Institute of Electronics, Information and Communication Engineers, [August 2016 10 days search], Internet, <URL: http://www.ieice-hbkb.org/portal/doc_208.html>

工損調査や、ダムやトンネルの亀裂定点調査等に於いては、長期間に亘って同一地点を定期的に撮影し、亀裂等の経時変化を調査・記録する必要がある。この際、同一地点を撮影するときに撮影アングルを同一とする必要があるため、上記背景技術に挙げたような電子ビューファインダ画像に下敷画像として重畳表示する技術を利用すると効果的である。   It is necessary to periodically photograph the same point over a long period of time and to investigate and record changes over time such as cracks in inspections of industrial damage and crack fixed points in dams and tunnels. At this time, since it is necessary to make the shooting angle the same when shooting the same spot, it is effective to use a technique for superimposing and displaying as an underlay image on the electronic viewfinder image as mentioned in the background art.

一方、工損調査や亀裂定点調査においては、一般に撮影する地点数が非常に多く、多数の地点を撮り残しなく撮影していく必要がある。しかし、従来技術に挙げたものは、下敷画像となる撮影済画像（事前画像）のサムネイルをディスプレイに一覧表示し、それらの中から下敷画像を選択して撮影を行うというものであり、どの撮影地点について事後画像の撮影が完了したのかは別途に管理する必要があるため、人為的な失誤による撮り残しが生じやすいという問題がある。また、フィルムや記憶デバイス内に保存された撮影した写真データと調査・撮影地点とを対応付けて別途管理する必要があるなど、管理作業が大変に煩雑であ作業労力も大きいという問題がある。   On the other hand, in the construction inspection and crack fixed point survey, the number of points to be photographed is generally very large, and it is necessary to photograph many points without leaving them. However, in the prior art, thumbnails of captured images (previous images) that will be the base image are displayed in a list on the display, and the base image is selected from these images for shooting. Since it is necessary to manage separately whether or not the post-shooting of the point has been completed, there is a problem in that it is easy to leave behind a shot due to human error. In addition, there is a problem that the management work is very complicated and the work effort is large. For example, it is necessary to separately manage the photographed data stored in the film or the storage device in association with the investigation / shooting point.

そこで、本発明の目的は、工損調査や定点経時変化調査などにおいて同一地点の事前・事後の写真を撮影する際に、人為的な失誤による撮り残しの発生を効果的に防止することが可能な写真撮影・管理用の携帯式電子デバイスを提供することにある。   Therefore, the object of the present invention is to effectively prevent the occurrence of leftovers due to human error when taking pre- and post-photographs of the same point in inspections of construction damage and fixed point aging. Is to provide a portable electronic device for photography and management.

また、本発明の他の目的は、同一地点の事前・事後の写真の管理を行う際に、撮影地点の記録・管理が容易な写真撮影・管理用の携帯式電子デバイスを提供することにある。   Another object of the present invention is to provide a portable electronic device for taking and managing photographs, which is easy to record and manage photographing points when managing pre- and subsequent photographs of the same point. .

また、本発明の他の目的は、同一地点の事前・事後の写真の管理を行う際に、撮影アングルの位置合わせを従来よりもさらに容易とする写真撮影・管理用の携帯式電子デバイスを提供することにある。   Another object of the present invention is to provide a portable electronic device for photography and management that makes it easier to align the shooting angle than before when managing pre- and post-photographs at the same point. There is to do.

本発明に係る携帯式電子デバイスの第１の構成は、タッチスクリーンデバイスと、カメラデバイスと、内部時計とを備えた写真撮影・管理用の携帯式電子デバイスであって、
前記カメラデバイスにより撮影された画像を画像ファイルとして保存する画像記憶手段と、
前記画像記憶手段に保存された画像を、当該画像の撮影日時情報、及び撮影場所情報を含む画像管理情報と関連づけて管理する写真管理データベースと、
前記写真管理データベースに登録された前記各画像管理情報を読み出し、
同じ撮影場所の各撮影日時の画像を、撮影日時が前の画像である事前画像、撮影日時が後の画像である事後画像の順に横並びにして画像組とし、これらの画像組を縦列した撮影画像リストを作成し、当該撮影画像リストを、前記タッチスクリーンデバイスの画面に表示するとともに、
前記撮影画像リストに於いて、前記事後画像が前記画像記憶手段内に保存されていない場合には、前記事後画像に代えて未撮影であることを示す未撮影示教画像を表示する画像リスト表示手段と、
前記撮影画像リストにおいて、前記タッチスクリーンデバイスにより前記撮影画像リスト内の前記未撮影示教画像が選択された場合において、
前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像に、当該撮影ボタン画像が属する画像組の前記事前画像から生成される下敷画像を重畳表示してファインダ重畳画像を生成し、
当該ファインダ重畳画像と、撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像とを含む下敷付ファインダ画面を前記タッチスクリーンデバイスの画面に表示する下敷付ファインダ画面表示手段と、
前記下敷付ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事後画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事後画像の撮影日時情報、及び前記ファインダ重畳画像の下敷画像として用いられた前記事前画像の撮影場所情報を含む画像管理情報と関連づけて当該事後画像を前記写真管理データベースに登録する事後画像取込手段と、を備え、
前記画像リスト表示手段は、前記事後画像取込手段により前記事後画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事後画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする。 A first configuration of a portable electronic device according to the present invention is a portable electronic device for photography / management that includes a touch screen device, a camera device, and an internal clock,
Image storage means for storing an image photographed by the camera device as an image file;
A photo management database for managing images stored in the image storage means in association with image management information including shooting date / time information of the image and shooting location information;
Read each image management information registered in the photo management database,
Images taken at the same shooting location at each shooting date and time are arranged in the order of a prior image whose shooting date and time is the previous image and a subsequent image whose shooting date and time is the later image. Create a list and display the captured image list on the screen of the touch screen device,
In the photographed image list, when the posterior image is not stored in the image storage means, an image that displays an unphotographed instruction image indicating that it has not been photographed instead of the posterior image. List display means;
In the photographed image list, when the unphotographed instructional image in the photographed image list is selected by the touch screen device,
A finder superimposed image is generated by superimposing an underlying image generated from the previous image of the image set to which the shooting button image belongs on an electronic viewfinder image captured in real time from the camera device,
Underlay finder screen display means for displaying an underlay finder screen including the finder superimposed image and a shutter button image indicating a tap operation position for inputting an imaging execution instruction on the screen of the touch screen device;
When the shutter button image is selected by the touch screen device on the underlay finder screen, the electronic viewfinder image at the time of selection is stored in the image storage means as the posterior image, and from the internal clock Post-registration of the posterior image in the photo management database in association with image management information including shooting date / time information of the posterior image to be captured and shooting location information of the pre-image used as the underlying image of the finder superimposed image An image capturing means,
The image list display means, when the posterior image is newly registered in the photo management database by the posterior image capturing means, the touched image list including the newly registered posterior image as the touch list. It is characterized by being redisplayed on the screen of the screen device.

この構成によれば、画像リスト表示手段により表示される撮影画像リストにおいて、事後画像がまだ撮影されていない場合（画像記憶手段内に事後画像がない場合）には、画像組の事後画像表示領域には未撮影示教画像が表示され、事後画像がまだ撮影済の場合には、画像組の事後画像表示領域には事後画像が表示されるため、ユーザは撮影画像リストを一瞥して事後写真がまだ撮影されていない画像組を即座に視認することが可能となる。従って、人為的な失誤による撮り残しの発生を効果的に防止することが可能となる。   According to this configuration, in the captured image list displayed by the image list display unit, when the posterior image has not been captured yet (when there is no posterior image in the image storage unit), the posterior image display area of the image set In the case where an unphotographed teaching image is displayed and the posterior image is still photographed, the posterior image is displayed in the posterior image display area of the image set. It is possible to immediately recognize an image group that has not yet been photographed. Therefore, it is possible to effectively prevent the occurrence of unrecorded images due to human error.

ここで、画像の「撮影日時情報」とは、当該画像の撮影日時の情報をいう。画像の「撮影場所情報」とは、当該画像の撮影場所に関する情報をいう。撮影場所情報としては、例えば、ＧＮＳＳ（Global Navigation Satellite System）デバイス等を用いて取り込まれる緯度・経度・高度の情報や、別に準備された建物等の図面に記入される位置を示す符号などが用いられる。「下敷画像」とは、事前画像から生成される画像であって撮影アングルを決める際の基準として用いられる画像をいい、例えば、事前画像を半透明化した画像、事前画像をエッジ抽出処理により細線化した画像等を用いることができる。「電子ビューファインダ画像」とは電子ビューファインダの画像をいう。「電子ビューファインダ」（electronic viewfinder：ＥＶＦ）とは、通常のデジタルカメラ、携帯電話、スマートフォン等で広く用いられているような、表示装置（この場合、タッチスクリーンデバイスのディスプレイ）の画面上に撮像素子（カメラデバイス）に入力される被写体の映像信号をリアルタイムに映して確認できるようにした方式のファインダをいう。   Here, “photographing date / time information” of an image refers to information on the photographing date / time of the image. The “shooting location information” of an image refers to information regarding the shooting location of the image. As shooting location information, for example, latitude / longitude / altitude information captured using a GNSS (Global Navigation Satellite System) device, a code indicating a position written in a drawing of a separately prepared building, or the like is used. It is done. “Underlay image” refers to an image generated from a prior image and used as a reference for determining a shooting angle. For example, an image obtained by translucent the prior image, or a thin line obtained by performing edge extraction on the prior image. A digitized image or the like can be used. An “electronic viewfinder image” refers to an electronic viewfinder image. An “electronic viewfinder (EVF)” is an image taken on the screen of a display device (in this case, a display of a touch screen device) that is widely used in ordinary digital cameras, mobile phones, smartphones, and the like. A finder of a system that allows a video signal of a subject input to an element (camera device) to be displayed and confirmed in real time.

本発明に係る携帯式電子デバイスの第２の構成は、前記第１の構成に於いて、前記撮影画像リストにおいて、前記タッチスクリーンデバイスにより前記撮影画像リスト内の前記事前画像が選択された場合において、前記画像記憶手段から当該事前画像を読み出して前記タッチスクリーンデバイスに表示するとともに、接写撮影実行指示を入力するためのタップ操作位置を示す接写ボタン画像を前記タッチスクリーンデバイスに表示する撮影済画像表示手段と、
前記タッチスクリーンデバイスにより前記接写ボタン画像が選択された場合、前記タッチスクリーンデバイスに、前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像及び撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像を含む接写ファインダ画面を表示する接写ファインダ画面表示手段と、
前記接写ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事前画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事前画像の撮影日時情報、及び先に前記接写ボタン画像が選択された際に前記タッチスクリーンデバイスに表示されていた前記事前画像の前記撮影場所情報を含む画像管理情報と関連づけて当該事前画像を前記写真管理データベースに登録する接写画像取込手段と、を備え、
前記画像リスト表示手段は、前記接写画像取込手段により前記事前画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事前画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする。 In a second configuration of the portable electronic device according to the present invention, in the first configuration, the pre-image in the captured image list is selected by the touch screen device in the captured image list. In this case, the pre-image is read from the image storage unit and displayed on the touch screen device, and a close-up button image indicating a tap operation position for inputting a close-up shooting execution instruction is displayed on the touch screen device. Display means;
When the close-up button image is selected by the touch screen device, an electronic viewfinder image captured in real time from the camera device and a tap operation position for inputting an imaging execution instruction to the touch screen device are displayed. Close-up viewfinder screen display means for displaying a close-up viewfinder screen including
When the shutter button image is selected by the touch screen device on the close-up viewfinder screen, the electronic viewfinder image at the time of selection is stored in the image storage unit as the pre-image and is taken from the internal clock The pre-image shooting date and time information, and the image management information including the shooting location information of the pre-image displayed on the touch screen device when the close-up button image was previously selected. Close-up image capturing means for registering an image in the photo management database,
When the pre-image is newly registered in the photo management database by the close-up image capturing unit, the image list display unit displays the photographed image list including the pre-registered new image as the touch screen. It is characterized by being redisplayed on the device screen.

この構成によれば、全体撮影のみでは不十分な撮影地点に於いて接写撮影を行う際に、接写画像を記録・整理する作業が容易となり、撮影・記録作業を効率化することができる。   According to this configuration, when close-up shooting is performed at a shooting point where only whole shooting is not sufficient, it is easy to record and organize close-up images, and the efficiency of shooting and recording can be improved.

本発明に係る携帯式電子デバイスの第３の構成は、前記第１又は２の構成に於いて、前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、算出された位置ずれベクトルに応じて、前記カメラデバイスの向きを動かすべき方向を指示する撮影アングル補正指示マークを前記タッチスクリーンデバイスの画面内に表示する撮影アングル補正指示手段を備えていることを特徴とする。   According to a third configuration of the portable electronic device of the present invention, in the first or second configuration, the finder screen display unit with the base is a source of the base image on the finder screen with the base. The touch screen includes a shooting angle correction instruction mark that calculates a displacement vector of the electronic viewfinder image with respect to the pre-article image in real time, and indicates a direction in which the camera device should be moved in accordance with the calculated displacement vector. A photographing angle correction instruction means for displaying on the screen of the device is provided.

このように、撮影アングル補正指示マークを表示することによって、ユーザは、携帯式電子デバイスをどの方向に動かして撮影アングルを合わせればよいのかを一瞥して即座に視認することができ、位置合わせ作業の効率が向上する。   In this way, by displaying the shooting angle correction instruction mark, the user can glance at which direction the portable electronic device should be moved to adjust the shooting angle, and can immediately recognize the position. Increases efficiency.

ここで、位置ずれベクトルの演算については、被写体追跡等の計算で用いられるテンプレートマッチング（ブロックマッチング）法、アクティブ探索法、Mean Shift法、パーティクルフィルタなどの公知の手法を応用して行うことができる（例えば、非特許文献８参照）。   Here, the calculation of the displacement vector can be performed by applying a known method such as a template matching (block matching) method, an active search method, a Mean Shift method, or a particle filter used in calculations such as subject tracking. (For example, refer nonpatent literature 8).

本発明に係る携帯式電子デバイスの第４の構成は、前記第１乃至３の何れか一の構成に於いて、前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、
前記事後画像取込手段は、前記下敷付ファインダ画面表示手段が算出する位置ずれベクトルを参照して、前記下敷画像に対する前記電子ビューファインダ画像の位置ずれ量が所定の閾値を下回ったときに、撮影アングルが合致したことを報知する撮影アングル合致報知手段を備えていることを特徴とする。 A portable electronic device according to a fourth aspect of the present invention is the portable electronic device according to any one of the first to third aspects, wherein the underlay finder screen display means is configured to display the underlay image on the underlay finder screen. Calculating in real time a displacement vector of the electronic viewfinder image with respect to the original prior image;
The posterior image capturing means refers to the displacement vector calculated by the underlay finder screen display means, and when the amount of displacement of the electronic viewfinder image with respect to the underlay image falls below a predetermined threshold, It is characterized in that it is provided with photographing angle match notifying means for notifying that the shooting angles are matched.

これにより、ユーザは、撮影アングルがうまく合致したか否かを一瞥して即座に視認することができ、位置合わせ作業の効率が向上する。   Thereby, the user can glance at whether or not the shooting angles are well matched and can immediately visually recognize it, thereby improving the efficiency of the alignment work.

本発明に係る携帯式電子デバイスの第５の構成は、前記第１乃至３の何れか一の構成に於いて、前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、
前記事後画像取込手段は、前記下敷付ファインダ画面表示手段が算出する位置ずれベクトルを参照して、前記下敷画像に対する前記電子ビューファインダ画像の位置ずれ量が所定の閾値を下回ったときに、その選択時点の前記電子ビューファインダ画像を前記事後画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事後画像の撮影日時情報、及び前記ファインダ重畳画像の下敷画像として用いられた前記事前画像の撮影場所情報を含む画像管理情報と関連づけて当該事後画像を前記写真管理データベースに登録することを特徴とする。 In a fifth configuration of the portable electronic device according to the present invention, in any one of the first to third configurations, the finder screen display unit with the underlay is configured to display the base image on the finder screen with the base. Calculating in real time a displacement vector of the electronic viewfinder image with respect to the original prior image;
The posterior image capturing means refers to the displacement vector calculated by the underlay finder screen display means, and when the amount of displacement of the electronic viewfinder image with respect to the underlay image falls below a predetermined threshold, The electronic viewfinder image at the time of the selection was stored in the image storage means as the posterior image, and was used as the underlying image of the finder superimposed image and the shooting date / time information of the posterior image captured from the internal clock The posterior image is registered in the photo management database in association with image management information including shooting location information of the previous image.

これにより、ユーザは、撮影アングルがうまく合致した場合に自動撮影することができ、位置合わせ撮影作業の効率が向上する。   Thus, the user can automatically shoot when the shooting angles are well matched, and the efficiency of the alignment shooting work is improved.

本発明に係る携帯式電子デバイスの第６の構成は、前記第１乃至５の何れか一の構成に於いて、現在位置の測位を行う測位モジュールと、
近距離無線通信を行う近距離無線通信モジュールと、
現在の方位を検出する方位センサと、
前記測位モジュールにより現在の絶対位置を検出し、
前記近距離無線通信モジュールにより撮影対象の位置に設置されるＲＦタグとの間で無線通信を行い、当該ＲＦタグまでの距離を検出し、
前記方位センサにより前記カメラデバイスの撮影視軸の視軸方位を検出し、
これらの検出された絶対位置、ＲＦタグまでの距離、視軸方位に基づき、前記ＲＦタグの絶対位置を算出する撮影位置演算手段と、を備え、
前記画像リスト表示手段は、前記撮影画像リストに加えて、新規事前画像を追加するリスト追加指示を入力するためのタップ操作位置を示すリスト追加ボタン画像を、前記タッチスクリーンデバイスの画面に表示するものであり、
前記タッチスクリーンデバイスにより前記リスト追加ボタン画像が選択された場合、前記タッチスクリーンデバイスに、前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像及び撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像を含む通常ファインダ画面を表示する通常ファインダ画面表示手段と、
前記通常ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事前画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該撮影画像の撮影日時情報、及び前記撮影位置演算手段により算出された前記ＲＦタグの絶対位置からなる撮影場所情報を含む画像管理情報と関連づけて当該事前画像を前記写真管理データベースに登録する新規追加画像取込手段と、を備え、
前記画像リスト表示手段は、前記新規追加画像取込手段により前記事前画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事前画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする。 A sixth configuration of the portable electronic device according to the present invention includes a positioning module that performs positioning of the current position in any one of the first to fifth configurations,
A short-range wireless communication module for performing short-range wireless communication;
An orientation sensor that detects the current orientation;
The current absolute position is detected by the positioning module,
Wireless communication is performed with an RF tag installed at a position to be imaged by the short-range wireless communication module, and a distance to the RF tag is detected.
Detecting the visual axis direction of the photographing visual axis of the camera device by the orientation sensor,
Photographing position calculation means for calculating the absolute position of the RF tag based on the detected absolute position, the distance to the RF tag, and the visual axis direction,
The image list display means displays, on the screen of the touch screen device, a list addition button image indicating a tap operation position for inputting a list addition instruction for adding a new pre-image in addition to the photographed image list. And
When the list addition button image is selected by the touch screen device, a shutter button indicating a tap operation position for inputting an electronic viewfinder image captured in real time from the camera device and an imaging execution instruction to the touch screen device. Normal finder screen display means for displaying a normal finder screen including an image;
When the shutter button image is selected by the touch screen device on the normal viewfinder screen, the electronic viewfinder image at the time of selection is stored in the image storage unit as the pre-image and is taken from the internal clock The new image is registered in the photo management database in association with the image management information including the shooting date and time information of the shot image and the shooting location information including the absolute position of the RF tag calculated by the shooting position calculation means. An additional image capturing means,
When the previous image is newly registered in the photo management database by the new additional image capturing unit, the image list display unit is configured to touch the captured image list including the newly registered previous image with the touch. It is characterized by being redisplayed on the screen of the screen device.

この構成によれば、撮影位置演算手段によって撮影対象の位置に設置されるＲＦタグの位置を自動的に取得して撮影された画像と関連づけて写真管理データベースに登録されるため、撮影対象の位置を別途用意した図面（例えば、工損調査であれば各調査物件の壁や天井の図面）に記録（スケッチ）していく必要がなくなるため、撮影・記録作業の効率が大幅に向上する。また、例えばダムの壁面の亀裂の定点経過調査のように、調査物件が広大で図面での位置特定作業が困難な場合でも、撮影対象の絶対位置を記録することにより、撮影対象の位置の記録が容易に行うことができる。   According to this configuration, since the position of the RF tag installed at the position of the photographing target is automatically acquired by the photographing position calculating means and is associated with the photographed image and registered in the photograph management database, the position of the photographing target Since it is no longer necessary to record (sketches) on the drawings prepared separately (for example, drawings of walls and ceilings of each surveyed property in the case of a construction damage survey), the efficiency of photographing and recording work is greatly improved. In addition, even if the surveyed property is very large and it is difficult to locate the location on the drawing, such as a fixed point progress survey of a crack on the wall of a dam, the location of the subject is recorded by recording the absolute location of the subject. Can be easily done.

ここで、「測位モジュール」としては、全地球測位システムを用いて現在位置の測位を行うＧＮＳＳモジュールや、Wi-Fi（登録商標）やBluetooth（登録商標）やZigBee（登録商標）等を用いた町中や屋内や地下空間などにおけるローカルポジショニングシステム（local positioning system ：ＬＰＤ）を用いて現在位置の測位を行うＬＰＤモジュール等を用いることができる。「方位センサ」としては、地磁気を検出することにより方位を検出する電子コンパス（地磁気方位センサ）や、地下空間や建物内における地磁気の乱れの補正を行うために地磁気方位センサとジャイロセンサや加速度センサを併用した方位センサ（例えば、非特許文献１，２参照）等を用いることができる。「撮影視軸」とは、カメラデバイスの撮像面の中心と撮影対象の撮影中心点（注視点）とを結ぶ光軸線をいう。「視軸方位」とは、撮影視軸の方位（水平方向の方位角、又は水平方向の方位角及び垂直方向の仰角）をいう。   Here, as the “positioning module”, a GNSS module that measures the current position using the global positioning system, Wi-Fi (registered trademark), Bluetooth (registered trademark), ZigBee (registered trademark), or the like was used. An LPD module that performs positioning of the current position using a local positioning system (LPD) in a town, indoors, underground space, or the like can be used. “Direction sensor” includes an electronic compass (geomagnetic direction sensor) that detects the direction by detecting geomagnetism, and a geomagnetic direction sensor, a gyro sensor, and an acceleration sensor to correct turbulence in the underground space and buildings. Can be used (for example, see Non-Patent Documents 1 and 2). The “photographing visual axis” refers to an optical axis line connecting the center of the imaging surface of the camera device and the photographing center point (gaze point) of the photographing target. “Visual axis azimuth” refers to the azimuth (horizontal azimuth angle, or horizontal azimuth angle and vertical elevation angle) of the imaging visual axis.

本発明に係る携帯式電子デバイスの第７の構成は、前記第１乃至６の何れか一の構成に於いて、前記下敷付ファインダ画面又は前記通常ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、前記タッチスクリーンデバイス上に、その選択時点の前記電子ビューファインダ画像である撮影画像を含む画像編集画面を表示する画像編集手段と、
前記撮影画像において、予め登録されたスケールの基準となるスケール基準画像を探索し、前記スケール基準画像が索出された場合には、前記撮影画像内における前記スケール基準画像のサイズに基づき、前記撮影画像上のサイズに対する実際の被写体のサイズの比であるサイズ換算比を算出するサイズ換算比算出手段と、
前記サイズ換算比算出手段により前記サイズ換算比が算出された場合、前記画像編集画面上の前記撮影画像において前記タッチスクリーンデバイスにより２点が指定された場合に、前記撮影画像上における当該２点間の距離Ｌ１を算出し、当該距離Ｌ１に前記サイズ換算比を乗じて被写体における当該２点間の距離Ｌ２を算出し、前記画像編集画面内に表示するサイズ計測手段と、を備えたことを特徴とする。 According to a seventh configuration of the portable electronic device according to the present invention, in any one of the first to sixth configurations, the shutter button is used by the touch screen device on the underlay finder screen or the normal finder screen. When an image is selected, image editing means for displaying an image editing screen including a captured image that is the electronic viewfinder image at the time of selection on the touch screen device;
In the photographed image, a scale reference image serving as a scale reference registered in advance is searched, and when the scale reference image is searched, the photographing is performed based on the size of the scale reference image in the photographed image. A size conversion ratio calculating means for calculating a size conversion ratio that is a ratio of the size of the actual subject to the size on the image;
When the size conversion ratio is calculated by the size conversion ratio calculation means, when two points are specified by the touch screen device in the captured image on the image editing screen, the two points on the captured image And a size measuring unit that calculates the distance L2 between the two points in the subject by multiplying the distance L1 by the size conversion ratio and displays the distance L2 in the image editing screen. And

この構成によれば、撮影画像内のスケール基準画像を用いて、画像編集画面上の撮影画像の２点をタッチスクリーンデバイスにより指定することで、実際の被写体上の対応する２点間距離を自動測定することができる。これにより、被写体上で実際の測定を行わずとも、画像編集画面上において距離の計測や記録を行うことが可能となり、調査における作業効率が向上する。   According to this configuration, by using the scale reference image in the photographed image and specifying two points of the photographed image on the image editing screen by the touch screen device, the distance between the two corresponding points on the actual subject is automatically set. Can be measured. Thereby, it is possible to measure and record the distance on the image editing screen without actually performing measurement on the subject, and work efficiency in the investigation is improved.

本発明に係る携帯式電子デバイスの写真撮影・管理用プログラムは、タッチスクリーンデバイスと、カメラデバイスと、内部時計と、コンピュータとを備えた携帯式電子デバイスに読み込ませて実行することにより、当該携帯式電子デバイスを前記第１乃至５の何れか一の構成の携帯式電子デバイスとして機能させることを特徴とする。   The portable electronic device photography / management program according to the present invention is read and executed by a portable electronic device including a touch screen device, a camera device, an internal clock, and a computer. The electronic device is made to function as the portable electronic device having any one of the first to fifth configurations.

また、本発明に係る携帯式電子デバイスの写真撮影・管理用プログラムは、タッチスクリーンデバイスと、カメラデバイスと、内部時計と、測位モジュールと、近距離無線通信モジュールと、方位センサと、コンピュータとを備えた携帯式電子デバイスに読み込ませて実行することにより、当該携帯式電子デバイスを前記第６又は７の構成の携帯式電子デバイスとして機能させることを特徴とする。   The portable electronic device photography / management program according to the present invention includes a touch screen device, a camera device, an internal clock, a positioning module, a short-range wireless communication module, an orientation sensor, and a computer. When the portable electronic device is read and executed, the portable electronic device functions as the portable electronic device having the sixth or seventh configuration.

以上のように本発明の携帯式電子デバイスによれば、画像リスト表示手段により表示される撮影画像リストにおいて、事後画像がまだ撮影されていない場合（画像記憶手段内に事後画像がない場合）には、画像組の事後画像表示領域には未撮影示教画像が表示され、事後画像がまだ撮影済の場合には、画像組の事後画像表示領域には事後画像が表示されるため、ユーザは撮影画像リストを一瞥して事後写真がまだ撮影されていない画像組を視認することが可能となる。従って、人為的な失誤による撮り残しの発生を効果的に防止することが可能となる。   As described above, according to the portable electronic device of the present invention, when a posterior image has not yet been captured in the captured image list displayed by the image list display means (when there is no posterior image in the image storage means). In this case, an unphotographed teaching image is displayed in the posterior image display area of the image set, and if the posterior image has already been shot, the posterior image is displayed in the posterior image display area of the image set. It is possible to glance at the photographed image list and view an image group for which a subsequent photograph has not yet been photographed. Therefore, it is possible to effectively prevent the occurrence of unrecorded images due to human error.

本発明の実施例１の携帯式電子デバイスの外観図である。（ａ）正面図、（ｂ）背面図。It is an external view of the portable electronic device of Example 1 of this invention. (A) Front view, (b) Rear view. 本発明の実施例１の携帯式電子デバイスのハードウェア構成を表す図である。It is a figure showing the hardware constitutions of the portable electronic device of Example 1 of this invention. 図１の携帯式電子デバイスにアプリケーション・プログラムをインストールして構成される実施例１の携帯式電子デバイスの機能構成を表すブロック図である。FIG. 2 is a block diagram illustrating a functional configuration of a portable electronic device according to a first embodiment configured by installing an application program in the portable electronic device of FIG. 1. 図３の写真管理データベース３２の構成を表すＥＲ図（Entity Relationship Diagram）である（IDEF1X記法準拠）。FIG. 4 is an ER diagram (Entity Relationship Diagram) representing the configuration of the photo management database 32 of FIG. 3 (based on IDEF1X notation). 実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。It is a figure showing the transition of the screen display in the portable electronic device of Example 1. FIG. 実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。It is a figure showing the transition of the screen display in the portable electronic device of Example 1. FIG. 実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。It is a figure showing the transition of the screen display in the portable electronic device of Example 1. FIG. 実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。It is a figure showing the transition of the screen display in the portable electronic device of Example 1. FIG. 実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。It is a figure showing the transition of the screen display in the portable electronic device of Example 1. FIG. 事前画像の接写撮影時における調査管理テーブルへの登録処理及び撮影画像リスト画面の再表示処理を説明する図である。It is a figure explaining the registration process to the investigation management table at the time of close-up photography of a prior image, and the redisplay process of a picked-up image list screen. 事後画像の接写撮影時における調査管理テーブルへの登録処理及び撮影画像リスト画面の再表示処理を説明する図である。It is a figure explaining the registration process to the investigation management table at the time of close-up photography of a posterior image, and the redisplay process of a picked-up image list screen. 事後撮影時における調査写真追加撮影処理を説明する図である。It is a figure explaining the investigation photography additional photography process at the time of subsequent photography. 実施例２の写真管理データベース３２における調査管理テーブルの構造を表す図である。It is a figure showing the structure of the investigation management table in the photograph management database 32 of Example 2. FIG. 実施例２の携帯式電子デバイス１を用いて被写物件の撮影を行う様子の一例を示す図である。（ａ）ＲＦタグ付きクラックスケールを用いて撮影する例、（ｂ）ＲＦタグ付き指し棒を用いて撮影する例。It is a figure which shows an example of a mode that a to-be-photographed object is image | photographed using the portable electronic device 1 of Example 2. FIG. (A) An example of photographing using a crack scale with an RF tag, (b) An example of photographing using a pointing stick with an RF tag. 実施例３における事後画像撮影時の電子ビューファインダ画面を表す図である。（ａ）位置ずれ量が所定の閾値以上の場合、（ｂ）位置ずれ量が所定の閾値を下回った場合。FIG. 12 is a diagram illustrating an electronic viewfinder screen at the time of subsequent image shooting in the third embodiment. (A) When the positional deviation amount is equal to or greater than a predetermined threshold value, (b) When the positional deviation amount falls below a predetermined threshold value. 実施例４の携帯式電子デバイス１における、写真管理データベース３２の調査管理テーブルの具体的なデータ内容の一例を表す図である。（ａ）調査管理テーブルの内容の具体例、（ｂ）調査管理テーブル内に格納される調査レコードのうち、一つの定点に対する一連の調査レコード間の関係を表した図。FIG. 10 is a diagram illustrating an example of specific data contents of an investigation management table of a photo management database 32 in the portable electronic device 1 according to a fourth embodiment. (A) A specific example of the contents of a survey management table, (b) Of the survey records stored in the survey management table, a diagram showing a relationship between a series of survey records for one fixed point. 実施例４の携帯式電子デバイス１における撮影画像リスト画面の中の定点調査に対する一つの写真欄１１５ａの表示例を表す図である。It is a figure showing the example of a display of the one photograph column 115a with respect to the fixed point investigation in the picked-up image list screen in the portable electronic device 1 of Example 4. FIG. 実施例４の携帯式電子デバイス１における撮影画像リスト画面を表す図である。FIG. 10 is a diagram illustrating a captured image list screen in the portable electronic device 1 according to the fourth embodiment. 図１の携帯式電子デバイスにアプリケーション・プログラムをインストールして構成される実施例５の携帯式電子デバイスの機能構成を表すブロック図である。It is a block diagram showing the function structure of the portable electronic device of Example 5 comprised by installing an application program in the portable electronic device of FIG. 被写物件Ａとともにスケール基準物Ｐを撮影する例を示した図である。It is the figure which showed the example which image | photographs the scale reference | standard thing P with the to-be-photographed object A. FIG. 実施例５におけるポインタ編集モードの画像編集画面を表す図である。FIG. 10 is a diagram illustrating an image editing screen in a pointer editing mode according to a fifth embodiment. 実施例５におけるポインタ編集モードの画像編集画面を表す図である。FIG. 10 is a diagram illustrating an image editing screen in a pointer editing mode according to a fifth embodiment. 実施例６におけるポインタ編集モードの画像編集画面を表す図である。FIG. 10 is a diagram illustrating an image editing screen in a pointer editing mode according to a sixth embodiment.

以下、本発明を実施するための形態について、図面を参照しながら説明する。   Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings.

実施例１では、本発明を、工損調査の写真撮影・管理用のシステムとして応用した例について示す。   In the first embodiment, an example in which the present invention is applied as a system for taking a photograph and managing a work damage investigation is shown.

（１）ハードウェア構成
図１は、本発明の実施例１の携帯式電子デバイスの外観図である。図１において、本実施例の携帯式電子デバイス１は、通常のスマートフォン又はタブレット端末のようにコンピュータを内蔵した携帯端末によって構成されており、正面側にタッチスクリーンデバイス２、背面側にカメラデバイス３を備えている。 (1) Hardware Configuration FIG. 1 is an external view of a portable electronic device according to a first embodiment of the present invention. In FIG. 1, a portable electronic device 1 according to the present embodiment is configured by a portable terminal with a built-in computer, such as a normal smartphone or tablet terminal, and includes a touch screen device 2 on the front side and a camera device 3 on the back side. It has.

図２は、本発明の実施例１の携帯式電子デバイスのハードウェア構成を表す図である。図２において、携帯式電子デバイス１は、タッチスクリーンデバイス２、カメラデバイス３、ＧＮＳＳモジュール４、携帯回線通信モジュール５、近距離無線通信モジュール６、加速度センサ７、方位センサ８、気圧センサ９、ジャイロセンサ１０、入出力バス１９、Ｉ／Ｏサブシステム２０、ストレージ・デバイス２１、ストレージ・コントローラ２２、周辺インタフェース２３、プロセッサ２４、内部時計２５、メモリ２６、及びメモリ・バス２７を備えている。   FIG. 2 is a diagram illustrating a hardware configuration of the portable electronic device according to the first embodiment of the present invention. In FIG. 2, a portable electronic device 1 includes a touch screen device 2, a camera device 3, a GNSS module 4, a mobile line communication module 5, a short-range wireless communication module 6, an acceleration sensor 7, an orientation sensor 8, an atmospheric pressure sensor 9, and a gyro. The sensor 10 includes an input / output bus 19, an I / O subsystem 20, a storage device 21, a storage controller 22, a peripheral interface 23, a processor 24, an internal clock 25, a memory 26, and a memory bus 27.

タッチスクリーンデバイス２は、タッチパネルを備えて画面を指で触れることにより文字の入力やメニューの選択ができるディスプレイである。カメラデバイス３は、撮像素子を備え撮像素子で撮影した画像を出力するデバイスである。ＧＮＳＳモジュール４は、全地球測位システム（Global Positioning System：ＧＰＳ）や準天頂衛星システム（Quasi-Zenith Satellite System：ＱＺＳＳ）のような汎地球航法衛星システム（Global Navigation Satellite System：ＧＮＳＳ）を用いて現在位置の測位を行い経度・緯度・高度の位置情報を出力するデバイスである。携帯回線通信モジュール５は、通常の携帯電話回線を介して外部との通信を行うモジュールである。近距離無線通信モジュール６は、数センチ〜数十メートル程度の近距離で無線通信を行うモジュールである。加速度センサ７は、携帯式電子デバイス１の本体の加速度ベクトルを検出するセンサである。方位センサ８は、地磁気を検出することによりカメラデバイス３の視線方位を検出するセンサである。気圧センサ９は、携帯式電子デバイス１の周囲の気圧を検出するセンサである。   The touch screen device 2 is a display that includes a touch panel and can input characters and select menus by touching the screen with a finger. The camera device 3 is a device that includes an image sensor and outputs an image captured by the image sensor. The GNSS module 4 currently uses a Global Navigation Satellite System (GNSS) such as the Global Positioning System (GPS) and the Quasi-Zenith Satellite System (QZSS). It is a device that measures position and outputs longitude, latitude, and altitude position information. The mobile line communication module 5 is a module that communicates with the outside via a normal mobile phone line. The short-range wireless communication module 6 is a module that performs wireless communication at a short distance of about several centimeters to several tens of meters. The acceleration sensor 7 is a sensor that detects an acceleration vector of the main body of the portable electronic device 1. The direction sensor 8 is a sensor that detects the line-of-sight direction of the camera device 3 by detecting geomagnetism. The atmospheric pressure sensor 9 is a sensor that detects the atmospheric pressure around the portable electronic device 1.

Ｉ／Ｏサブシステム２０は、タッチスクリーンデバイス２、カメラデバイス３、ＧＮＳＳモジュール４、携帯回線通信モジュール５、及び近距離無線通信モジュール６の各デバイス又はモジュールと、周辺インタフェース２３との間の入出力を制御するコントローラである。前記各デバイス又はモジュールは、それぞれ、Ｉ／Ｏサブシステム２０内の、ディスプレイ・コントローラ２０ａ、カメラ入力コントローラ２０ｂ、ＧＮＳＳコントローラ２０ｃ、携帯回線通信コントローラ２０ｄ、及び近距離無線通信コントローラ２０ｅにより制御される。ストレージ・デバイス２１は、ソリッドステートドライブ（ＳＳＤ）や磁気ディスクドライブ（ＨＤＤ）により構成され、画像ファイル等のデータやプログラム等を記憶する記憶装置である。ストレージ・コントローラ２２は、ストレージ・デバイス２１と入出力バス１９との間の入出力制御を行うコントローラである。周辺インタフェース２３は、Ｉ／Ｏサブシステム２０及び各種センサ（加速度センサ７，方位センサ８，気圧センサ９，ジャイロセンサ１０）と入出力バス１９との間の入出力制御を行うコントローラである。プロセッサ２４は、プログラムを実行して装置全体の制御を行う。内部時計２５は、現在時刻を出力する。メモリ２６はＤＲＡＭ等の内部メモリであり、メモリ・バス２７はプロセッサ２４とメモリ２６の間で通信を行うバスである。   The I / O subsystem 20 is an input / output between each device or module of the touch screen device 2, the camera device 3, the GNSS module 4, the mobile line communication module 5, and the short-range wireless communication module 6 and the peripheral interface 23. It is a controller which controls. Each device or module is controlled by a display controller 20a, a camera input controller 20b, a GNSS controller 20c, a mobile line communication controller 20d, and a short-range wireless communication controller 20e in the I / O subsystem 20, respectively. The storage device 21 is configured by a solid state drive (SSD) or a magnetic disk drive (HDD), and is a storage device that stores data such as image files, programs, and the like. The storage controller 22 is a controller that performs input / output control between the storage device 21 and the input / output bus 19. The peripheral interface 23 is a controller that performs input / output control between the I / O subsystem 20 and various sensors (acceleration sensor 7, orientation sensor 8, atmospheric pressure sensor 9, gyro sensor 10) and the input / output bus 19. The processor 24 executes a program to control the entire apparatus. The internal clock 25 outputs the current time. The memory 26 is an internal memory such as a DRAM, and the memory bus 27 is a bus for performing communication between the processor 24 and the memory 26.

（２）機能構成
本実施例の携帯式電子デバイスは、図２のようなコンピュータを内蔵するハードウェアに、アプリケーション・プログラムを読み込ませて実行することによってソフトウェアベースで構成される。図３は、図１の携帯式電子デバイス１にアプリケーション・プログラムをインストールして構成される実施例１の携帯式電子デバイスの機能構成を表すブロック図である。尚、図３には、本発明に関連する機能構成部分のみを示し、それ以外の機能構成に関しては省略している。また、本実施例に於いて、当該アプリケーション・プログラムは、携帯回線通信モジュール５により、携帯回線を介して外部のサーバからダウンロードし、携帯式電子デバイス１にインストールされるものとする。 (2) Functional Configuration The portable electronic device of this embodiment is configured on a software basis by loading and executing an application program on hardware incorporating a computer as shown in FIG. FIG. 3 is a block diagram illustrating a functional configuration of the portable electronic device of the first embodiment configured by installing an application program in the portable electronic device 1 of FIG. FIG. 3 shows only functional components related to the present invention, and other functional components are omitted. In the present embodiment, the application program is downloaded from an external server via the mobile line by the mobile line communication module 5 and installed in the mobile electronic device 1.

図３において、タッチスクリーンデバイス２、カメラデバイス３、ＧＮＳＳモジュール４、近距離無線通信モジュール６、加速度センサ７、方位センサ８、気圧センサ９、ジャイロセンサ１０、及び内部時計２５は、図２において同符号を附した構成部分に対応する。これらの構成部分に加えて、さらに本実施例の携帯式電子デバイスは、機能構成として、画像ファイル記憶部３１、写真管理データベース３２、撮影位置演算部３３、画像リスト表示部３４、撮影済画像表示部３５、下敷付ファインダ画面表示部３６、事後画像取込部３７、新地点レコード追加部３８、通常ファインダ画面表示部３９、新規追加画像取込部４０、接写ファインダ画面表示部４１、接写画像取込部４２、白板表示・編集部４３、画像編集部４４、ログイン部５１、調査一覧表示部５２、新規調査登録部５３、調査選択部５４、及び所有者登録部５５を備える。これらは、Ｉ／Ｏサブシステム２０、ストレージ・デバイス２１、ストレージ・コントローラ２２、周辺インタフェース２３、プロセッサ２４が協働してアプリケーション・プログラムを実行することによって実現される。   3, the touch screen device 2, the camera device 3, the GNSS module 4, the short-range wireless communication module 6, the acceleration sensor 7, the direction sensor 8, the atmospheric pressure sensor 9, the gyro sensor 10, and the internal clock 25 are the same as those in FIG. Corresponds to the components with reference numerals. In addition to these components, the portable electronic device of the present embodiment further includes an image file storage unit 31, a photo management database 32, a shooting position calculation unit 33, an image list display unit 34, and a captured image display as functional configurations. Unit 35, underlay finder screen display unit 36, posterior image capture unit 37, new point record addition unit 38, normal finder screen display unit 39, new additional image capture unit 40, close-up viewfinder screen display unit 41, close-up image capture A loading unit 42, a white board display / editing unit 43, an image editing unit 44, a login unit 51, a survey list display unit 52, a new survey registration unit 53, a survey selection unit 54, and an owner registration unit 55 are provided. These are realized when the I / O subsystem 20, the storage device 21, the storage controller 22, the peripheral interface 23, and the processor 24 cooperate to execute an application program.

画像ファイル記憶部３１は、カメラデバイス３により撮影された画像を画像ファイルとして保存する。写真管理データベース３２は、画像ファイル記憶部３１に保存された画像を、当該画像の撮影日時情報、及び撮影場所情報を含む画像管理情報と関連づけて管理するデータベースである。   The image file storage unit 31 stores an image taken by the camera device 3 as an image file. The photo management database 32 is a database that manages images stored in the image file storage unit 31 in association with image management information including shooting date / time information of the image and shooting location information.

撮影位置演算部３３は、携帯式電子デバイス１の絶対位置（緯度・経度・高度）を検出する。ここで、撮影位置演算部３３は、ＧＮＳＳモジュール４（及び気圧センサ９）により得られる位置情報、又は近距離無線通信モジュール６（Wi-Fi（登録商標）、Bluetooth（登録商標）、ZigBee（登録商標）等）を用いて実現されるローカルポジショニングシステム（local positioning system ：ＬＰＳ）により得られる位置情報により、現在の絶対位置（緯度・経度・高度）を検出する。なお、ＬＰＳについては、現在、Wi-Fiを利用する方式やBluetoothを利用する方式など様々な方式が公開されており（例えば、非特許文献３−５参照）、本発明とは直接関係はないので詳細な説明は省略する。   The photographing position calculation unit 33 detects the absolute position (latitude / longitude / altitude) of the portable electronic device 1. Here, the shooting position calculation unit 33 is the position information obtained by the GNSS module 4 (and the atmospheric pressure sensor 9), or the short-range wireless communication module 6 (Wi-Fi (registered trademark), Bluetooth (registered trademark), ZigBee (registered trademark). The current absolute position (latitude / longitude / altitude) is detected based on position information obtained by a local positioning system (LPS) realized by using a local positioning system (LPS). As for LPS, various methods such as a method using Wi-Fi and a method using Bluetooth are currently disclosed (for example, refer to Non-Patent Document 3-5), and is not directly related to the present invention. Therefore, detailed description is omitted.

画像リスト表示部３４は、写真管理データベース３２に登録された各画像管理情報を読み出し、撮影画像リストをタッチスクリーンデバイス２の画面上に表示する。ここで、撮影画像リストは、同じ撮影場所の各撮影日時の画像を、撮影日時が前の画像である事前画像、撮影日時が後の画像である事後画像の順に横並びして画像組とし、これらの画像組を縦列したリストである。表示する事前画像及び事後画像はサムネイル（縮小画像）とされる。また、撮影画像リストに於いて、事後画像が画像ファイル記憶部３１内に保存されていない場合には、事後画像に代えて未撮影であることを示す未撮影示教画像（例えば、カメラマークなど）が表示される。また、画像リスト表示部３４は、上記撮影画像リストに加え、リスト追加ボタン画像（新規事前画像を追加するリスト追加指示を入力するためのタップ操作位置を示すボタン画像）をタッチスクリーンデバイス２の画面上に表示する。   The image list display unit 34 reads each piece of image management information registered in the photo management database 32 and displays a photographed image list on the screen of the touch screen device 2. Here, the captured image list is an image set in which images at the same shooting location are arranged side by side in the order of a previous image whose shooting date is the previous image and a subsequent image whose shooting date is the later image. This is a list in which the image sets are vertically arranged. The pre-image and post-image to be displayed are thumbnails (reduced images). Also, in the photographed image list, when the posterior image is not stored in the image file storage unit 31, an unphotographed instructional image (for example, a camera mark or the like) indicating that it has not been photographed is used instead of the posterior image. ) Is displayed. Further, the image list display unit 34 displays a list addition button image (a button image indicating a tap operation position for inputting a list addition instruction for adding a new pre-image) in addition to the photographed image list on the screen of the touch screen device 2. Display above.

撮影済画像表示部３５は、上記の撮影画像リストにおいて、タッチスクリーンデバイス２により撮影画像リスト内の事前画像又は前記事後画像が選択（タップ）された場合において、画像ファイル記憶部３１から当該事前画像又は事後画像を読み出してタッチスクリーンデバイス２に表示するとともに、接写ボタン画像（接写撮影実行指示を入力するためのタップ操作位置を示すボタン画像）をタッチスクリーンデバイス２に表示する。   When the pre-image or the posterior image in the photographed image list is selected (tapped) by the touch screen device 2 in the photographed image list, the photographed image display unit 35 receives the pre-image from the image file storage unit 31. The image or posterior image is read and displayed on the touch screen device 2, and a close-up button image (a button image indicating a tap operation position for inputting a close-up shooting execution instruction) is displayed on the touch screen device 2.

下敷付ファインダ画面表示部３６は、上記の撮影画像リストにおいて、タッチスクリーンデバイス２により撮影画像リスト内の未撮影示教画像が選択された場合において、ファインダ重畳画像と、シャッターボタン画像（撮像実行指示を入力するためのタップ操作位置を示すボタン画像）とを含む下敷付ファインダ画面をタッチスクリーンデバイス２の画面に表示する。ここで、ファインダ重畳画像とは、カメラデバイス３からリアルタイムで取り込まれる電子ビューファインダ画像に、下敷画像を重畳表示して生成される画像、即ち、下敷画像が重畳表示された電子ビューファインダの画像である。下敷画像は、選択された撮影ボタン画像が属する画像組の事前画像に対し、淡色化処理、単色化処理、輪郭抽出処理等を行うことによって生成される。   When the touchscreen device 2 selects an unphotographed instructional image in the photographed image list in the photographed image list, the underlay finder screen display unit 36 displays the finder superimposed image and the shutter button image (imaging execution instruction). And a finder screen with an underlay including a tap operation position for inputting) on the screen of the touch screen device 2. Here, the finder superimposed image is an image generated by superimposing and displaying an underlay image on an electronic viewfinder image captured in real time from the camera device 3, that is, an image of an electronic viewfinder in which the underlay image is superimposed and displayed. is there. The underlay image is generated by performing a lightening process, a monochromatic process, a contour extraction process, or the like on the prior image of the image set to which the selected shooting button image belongs.

事後画像取込部３７は、上述の下敷付ファインダ画面において、タッチスクリーンデバイス２によりシャッターボタン画像が選択された場合、その選択時点の電子ビューファインダ画像を事後画像として取り込み、画像ファイル記憶部３１に保存する。また、事後画像取込部３７は、内部時計２５から取り込まれる当該事後画像の撮影日時情報、及びファインダ重畳画像の下敷画像として用いられた事前画像の撮影場所情報を含む画像管理情報と関連づけて、当該事後画像を写真管理データベース３２に登録する。 When the shutter button image is selected by the touch screen device 2 on the above-described underlay finder screen, the posterior image capturing unit 37 captures the electronic viewfinder image at the time of selection as a posterior image, and stores it in the image file storage unit 31. save. In addition, the posterior image capturing unit 37 is associated with image management information including shooting date / time information of the posterior image captured from the internal clock 25 and shooting location information of the prior image used as the underlying image of the finder superimposed image, The subsequent image is registered in the photo management database 32.

新地点レコード追加部３８は、上述の撮影画像リストがタッチスクリーンデバイス２に表示されている状態に於いて、タッチスクリーンデバイス２によりリスト追加ボタン画像が選択された場合、追加する撮影ポイントに関する情報（以下「追加撮影地点情報」）を入力するための撮影地点情報入力画面をタッチスクリーンデバイス２に表示する。また、新地点レコード追加部３８は、当該撮影地点情報入力画面に、撮影開始指示を入力するためのタップ操作位置を示す撮影開始ボタン画像を表示する。そして、タッチスクリーンデバイス２により撮影地点情報入力画面から追加撮影地点情報が入力され、撮影開始ボタン画像が選択（タップ）されると、新地点レコード追加部３８は、当該追加撮影地点情報を写真管理データベース３２に新規レコードとして登録する。   When the list addition button image is selected by the touch screen device 2 in the state in which the above-described photographed image list is displayed on the touch screen device 2, the new point record adding unit 38 is information on the photographing point to be added ( Hereinafter, a shooting point information input screen for inputting “additional shooting point information”) is displayed on the touch screen device 2. Further, the new location record adding unit 38 displays an imaging start button image indicating a tap operation position for inputting an imaging start instruction on the imaging location information input screen. When the additional shooting point information is input from the shooting point information input screen by the touch screen device 2 and the shooting start button image is selected (tapped), the new point record adding unit 38 manages the additional shooting point information in the photograph management. Register as a new record in the database 32.

通常ファインダ画面表示部３９は、タッチスクリーンデバイス２に撮影地点情報入力画面が表示された状態に於いて、タッチスクリーンデバイス２により撮影開始ボタン画像が選択（タップ）された場合、タッチスクリーンデバイス２に、カメラデバイス３からリアルタイムで取り込まれる電子ビューファインダ画像と、撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像とを含む通常ファインダ画面を表示する。   The normal viewfinder screen display unit 39 displays the shooting point information input screen on the touch screen device 2 and when the shooting start button image is selected (tapped) by the touch screen device 2, the normal viewfinder screen display unit 39 displays the touch screen device 2 on the touch screen device 2. A normal viewfinder screen including an electronic viewfinder image captured in real time from the camera device 3 and a shutter button image indicating a tap operation position for inputting an imaging execution instruction is displayed.

新規追加画像取込部４０は、上述の通常ファインダ画面において、タッチスクリーンデバイス２によりシャッターボタン画像が選択（タップ）された場合、その選択時点の電子ビューファインダ画像を、事前画像として画像ファイル記憶部３１に保存する。また、新規追加画像取込部４０は、内部時計２５から取り込まれる当該撮影画像の撮影日時情報、及び撮影場所情報を含む画像管理情報と関連づけて、当該事前画像を写真管理データベース３２に登録する。   When the shutter button image is selected (tapped) by the touch screen device 2 on the above-described normal finder screen, the newly added image capturing unit 40 uses the electronic viewfinder image at the time of selection as an advance image as an image file storage unit. Save to 31. Further, the newly added image capturing unit 40 registers the pre-image in the photo management database 32 in association with the image management information including the shooting date / time information and the shooting location information of the captured image captured from the internal clock 25.

接写ファインダ画面表示部４１は、タッチスクリーンデバイス２により、撮影済画像表示部３５がタッチスクリーンデバイス２に表示した接写ボタン画像が選択（タップ）された場合、タッチスクリーンデバイス２に、カメラデバイス３からリアルタイムで取り込まれる電子ビューファインダ画像及び撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像を含む接写ファインダ画面を表示する。   When the close-up finder screen display unit 41 selects (tap) the close-up button image displayed on the touch screen device 2 by the captured image display unit 35 by the touch screen device 2, the close-up view finder screen display unit 41 receives the touch screen device 2 from the camera device 3. A close-up viewfinder screen including an electronic viewfinder image captured in real time and a shutter button image indicating a tap operation position for inputting an imaging execution instruction is displayed.

接写画像取込部４２は、上述の接写ファインダ画面において、タッチスクリーンデバイス２によりシャッターボタン画像が選択された場合、その選択時点の電子ビューファインダ画像を事前画像として画像ファイル記憶部３１に保存する。また、接写画像取込部４２は、内部時計２５から取り込まれる当該事前画像の撮影日情報、及び先に接写ボタン画像が選択された際にタッチスクリーンデバイス２に表示されていた事前画像又は事後画像の撮影場所情報を含む画像管理情報と関連づけて、当該事前画像を写真管理データベース３２に登録する。   When the shutter button image is selected by the touch screen device 2 on the above-described close-up viewfinder screen, the close-up image capturing unit 42 stores the electronic viewfinder image at the time of selection in the image file storage unit 31 as a pre-image. Further, the close-up image capturing unit 42 captures the shooting date information of the pre-image captured from the internal clock 25 and the pre-image or the post-image displayed on the touch screen device 2 when the close-up button image is selected first. The prior image is registered in the photo management database 32 in association with the image management information including the shooting location information.

白板表示・編集部４３は、写真管理データベース３２に画像管理情報として格納される白板情報の編集処理を行う。画像編集部４４は、新規追加画像取込部４０，事後画像取込部３７，接写画像取込部４２により撮影された画像に対して指示矢印や線画図形の挿入等の編集を行う。ログイン部５１は、ログイン処理を行う。調査一覧表示部５２は、登録されている調査項目リストを含む調査一覧画面の表示を行う。新規調査登録部５３は、調査一覧画面の調査項目リストに、新たな調査項目を追加する処理を行う。調査選択部５４は、調査一覧画面の調査項目リストの中から調査項目を選択する処理を行う。所有者登録部５５は調査物件の所有者情報の登録処理を行う。   The white board display / editing unit 43 performs editing processing of white board information stored as image management information in the photo management database 32. The image editing unit 44 edits an image taken by the newly added image capturing unit 40, the posterior image capturing unit 37, and the close-up image capturing unit 42 such as insertion of an instruction arrow or a line drawing figure. The login unit 51 performs login processing. The survey list display unit 52 displays a survey list screen including a registered survey item list. The new survey registration unit 53 performs processing for adding a new survey item to the survey item list on the survey list screen. The survey selection unit 54 performs a process of selecting a survey item from the survey item list on the survey list screen. The owner registration unit 55 performs registration processing of the owner information of the survey property.

（３）データベース構造
図４は、図３の写真管理データベース３２の構成を表すＥＲ図（Entity Relationship Diagram）である（IDEF1X記法準拠）。写真管理データベース３２には、所有者管理テーブル、調査纂録簿管理テーブル、及び調査管理テーブルが格納されており、これらの各テーブルは、図４に示したように関係づけられてリレーショナル・データベースが構成されている。 (3) Database Structure FIG. 4 is an ER diagram (Entity Relationship Diagram) representing the configuration of the photo management database 32 of FIG. 3 (based on IDEF1X notation). The photo management database 32 stores an owner management table, a survey record book management table, and a survey management table. These tables are related to each other as shown in FIG. It is configured.

所有者管理テーブルは、工損調査対象物件の所有者に関する情報を格納するテーブルであり、“所有者ＩＤ”，“氏名”，“住所”，“電話番号”の各フィールドを有する。調査纂録簿管理テーブルは、各工損調査対象物件の調査纂録簿に関する情報を格納するテーブルであり、“調査纂録簿ＩＤ”，“調査纂録簿名”，“調査種別”，“所有者ＩＤ”，“表紙画像ファイル名”の各フィールドを有する。調査管理テーブルは、“調査ＩＤ”，“調査纂録簿ＩＤ”，“調査番号”，“日時”，“建物番号”，“写真番号”，“場所名称”，“調査名称”，“被写物件名称”，“被写対象”，“画像ファイル名”，“仕上”，“幅”，“長さ”，“損傷箇所数”，“撮影種別”，“事前調査ＩＤ”，“全体調査ＩＤ” の各フィールドを有する。各テーブルの各フィールドに格納される情報は、図４内の表に示した通りである。   The owner management table is a table for storing information regarding the owner of the property subject to inspection, and includes fields of “owner ID”, “name”, “address”, and “phone number”. The survey record book management table is a table for storing information related to the survey record book of each property damage investigation target property. “Survey record book ID”, “Survey record book name”, “Survey type”, “ It has fields of “owner ID” and “cover image file name”. The survey management table includes “survey ID”, “survey record book ID”, “survey number”, “date / time”, “building number”, “photo number”, “location name”, “survey name”, “photographed” “Property Name”, “Subject”, “Image File Name”, “Finish”, “Width”, “Length”, “Number of Damaged Locations”, “Photographing Type”, “Preliminary Survey ID”, “Overall Survey ID” ”Field. Information stored in each field of each table is as shown in the table in FIG.

ここで、調査管理テーブルの“調査名称”は、工損調査において行われる調査の種別を表し、「内部調査」，「外部調査」，「外構調査」，「傾斜調査」，「水準調査」の５つから選択される。「内部調査」は、床のタワミ・タイルの隙間・目地切れ・クロスの亀裂，隙間・塗り壁の亀裂，チリ切れ・天井の漏水跡等の調査、「外部調査」は、基礎の亀裂，破損・外壁の亀裂，目地切れ・屋根瓦のズレ等の調査、「外構調査」は、土間コンクリートの亀裂，隙間・犬走りの亀裂，隙間・塀の目地切れ・亀裂等の調査、「傾斜調査」は、柱の傾斜・敷居の傾斜・床の傾斜等の調査、「水準調査」は、の建物の隅や犬走りで地盤の沈下が発生したのかどうかを判定する為に水準測定に関する調査である。尚、“調査名称”は、必要に応じて適宜種類を追加できる。   Here, “Survey name” in the survey management table indicates the type of survey conducted in the industrial damage survey, and “Internal survey”, “External survey”, “External survey”, “Inclined survey”, “Level survey”. Are selected from the following five. "Internal investigation" is investigation of floor creakings, tile gaps, joint cuts, cross cracks, gaps, painted wall cracks, dust cuts, ceiling leaks, etc., "external investigation" is foundation cracks and damage・ Investigation of cracks in outer walls, joint breaks, roof tile displacement, etc., “External Survey” is a survey of cracks in concrete between concrete, cracks in gaps and dogs, cracks in joints and cracks in gaps and fences, etc. "Survey of column inclination, sill inclination, floor inclination, etc." Level investigation "is a survey on level measurement to determine whether ground subsidence has occurred in the corners of the building or dogs. is there. It should be noted that the “survey name” can be appropriately added as needed.

（４）携帯式電子デバイスの動作
以上のように構成された本実施例の携帯式電子デバイス１について、その動作を説明する。図５〜図９は、実施例１の携帯式電子デバイスにおける画面表示の遷移を表す図である。 (4) Operation of Portable Electronic Device The operation of the portable electronic device 1 of the present embodiment configured as described above will be described. 5 to 9 are diagrams illustrating transition of screen display in the portable electronic device of the first embodiment.

（ステップ１）（ログイン）
携帯式電子デバイス１にインストールされたアプリケーション・プログラムが起動すると、まず、ログイン部５１は、図５（ａ）のログイン画面をタッチスクリーンデバイス２に表示する。 (Step 1) (Login)
When the application program installed in the portable electronic device 1 is activated, the login unit 51 first displays the login screen shown in FIG. 5A on the touch screen device 2.

ユーザが、このログイン画面において、タッチスクリーンデバイス２によりログインボタン１０１を選択すると、次に、調査一覧表示部５２は、図５（ｂ）の調査纂録簿リスト１０２を表示する。ここで、タッチスクリーンデバイス２における「選択」操作とは、一般のタッチスクリーンデバイスで広く行われている通り、そのスクリーン上で選択する箇所をタップする操作をいう。また、「調査纂録簿」とは、一の案件に対する一連の調査記録を纂録した帳簿をいう。例えば、“○○中学校第２体育館建設工事”に関する工損調査の場合、その工事案件において工損調査する一連の調査記録をまとめた帳簿が、当該工事案件についての調査纂録簿である。「調査纂録簿リスト」は、調査纂録簿の一覧表をいう。   When the user selects the login button 101 with the touch screen device 2 on this login screen, the investigation list display unit 52 next displays the investigation record list 102 of FIG. Here, the “selection” operation in the touch screen device 2 refers to an operation of tapping a location to be selected on the screen, as is widely performed in general touch screen devices. The “survey record book” is a book that records a series of survey records for one project. For example, in the case of a construction damage investigation related to “XX Junior High School Second Gymnasium Construction Work”, a book that summarizes a series of investigation records for investigation of construction damage in the construction project is a survey record book for the construction project. “Survey record book list” refers to a list of survey record books.

（ステップ２）（調査纂録簿の選択）
調査纂録簿リスト１０２には、図５（ｂ）に示したように、現在工損調査が継続中の案件の調査纂録簿リスト１０２ａと、過去の工損調査の調査纂録簿リスト１０２ｂとに分けて表示され、また、タッチスクリーンデバイス２上の調査纂録簿リスト１０２の右上には、新規の調査纂録簿を追加する指示を入力するための、新規調査追加ボタン画像１０３が表示される。この画面に於いて、ユーザがタッチスクリーンデバイス２により新規調査追加ボタン画像１０３を選択した場合には、ステップ３の調査纂録簿リストに新規の調査纂録簿を追加するための処理に移行する。一方、ユーザが調査纂録簿リスト１０２内の各調査纂録簿のいずれかの項目を選択した場合には、図７（ａ）（調査纂録簿内に調査写真が存在しない場合）又は図８（ｄ）（調査纂録簿内に調査写真が存在する場合）の画面へ移行する。 (Step 2) (Select survey catalog)
As shown in FIG. 5B, the survey record book list 102 includes a survey record book list 102a for a case in which an industrial damage investigation is ongoing, and a survey record book list 102b for past work damage investigations. In addition, a new survey addition button image 103 for inputting an instruction to add a new survey record list is displayed at the upper right of the survey record list 102 on the touch screen device 2. Is done. In this screen, when the user selects the new survey addition button image 103 using the touch screen device 2, the process proceeds to the process for adding a new survey catalog to the survey catalog list in step 3. . On the other hand, when the user selects any item in each survey record list in the survey record list 102, FIG. 7 (a) (when no survey photo exists in the survey record list) or FIG. Move to the screen of 8 (d) (when a survey photo exists in the survey record book).

（ステップ３）（調査纂録簿の新規追加）
新規調査追加ボタン画像１０３が選択された場合、新規調査登録部５３は、まず、タッチスクリーンデバイス２上に図５（ｃ）の初期登録画面を表示するとともに、写真管理データベース３２の調査纂録簿テーブルに新たなレコード（新規登録レコード）を追加する。この初期登録画面では、画面下部に調査開始指示ボタン画像１０４が表示される。 (Step 3) (Addition of survey record book)
When the new survey addition button image 103 is selected, the new survey registration unit 53 first displays the initial registration screen of FIG. 5C on the touch screen device 2 and searches the survey record book of the photo management database 32. Add a new record (new registration record) to the table. In this initial registration screen, a survey start instruction button image 104 is displayed at the bottom of the screen.

ユーザが、この初期登録画面において、タッチスクリーンデバイス２により調査開始指示ボタン画像１０４を選択すると、新規調査登録部５３は、ユーザに表示画像を撮影するのを促すために、タッチスクリーンデバイス２上に図５（ｄ）の電子ビューファインダ画面を表示する。この電子ビューファインダ画面は、通常のスマートフォンにおけるカメラ機能と同様に、中央にカメラデバイス３からリアルタイムに取り込まれる電子ビューファインダ画像１０５が表示され、その横にシャッターボタン画像１０６が表示される。ユーザは、カメラデバイス３を、新たに登録する調査案件の対象である調査対象物件に向けてシャッターボタン画像１０６を選択し、調査対象物件の外観写真の撮影を行う。この外観写真は、当該調査案件の調査纂録簿の表紙画像として用いられる。新規調査登録部５３は、シャッターボタン画像１０６が選択されると、その選択時点の電子ビューファインダ画像１０５を取り込み、新規調査登録部５３は、タッチスクリーンデバイス２上に図６（ａ）に示したような表紙写真確認画面を表示する。このとき、新規調査登録部５３は、撮影位置演算部３３が出力する現在の絶対位置情報（緯度・経度・標高）と、内部時計２５が出力する現在日時情報とを取り込み、これらの情報も表紙写真確認画面に表示する。   When the user selects the survey start instruction button image 104 by the touch screen device 2 on the initial registration screen, the new survey registration unit 53 is placed on the touch screen device 2 in order to prompt the user to take a display image. The electronic viewfinder screen of FIG. 5D is displayed. On the electronic viewfinder screen, an electronic viewfinder image 105 captured in real time from the camera device 3 is displayed at the center, and a shutter button image 106 is displayed beside the electronic viewfinder image, in the same manner as a camera function in a normal smartphone. The user selects the shutter button image 106 toward the survey target property that is the target of the survey item to be newly registered, and takes a photograph of the appearance of the survey target property. This appearance photograph is used as a cover image of the survey record book of the survey case. When the shutter button image 106 is selected, the new survey registration unit 53 captures the electronic viewfinder image 105 at the time of selection, and the new survey registration unit 53 is shown on the touch screen device 2 as shown in FIG. A cover photo confirmation screen like this is displayed. At this time, the new survey registration unit 53 takes in the current absolute position information (latitude / longitude / elevation) output from the photographing position calculation unit 33 and the current date / time information output from the internal clock 25, and these information are also covered. Display on the photo confirmation screen.

表紙写真確認画面では、中央に撮影された表紙画像１０７が表示され、下部に再撮影ボタン画像１０８及び表紙確定ボタン画像１０９が表示される。また、表紙画像１０７の下方左側の撮影位置表示領域１１０に撮影時の絶対位置情報が表示され、表紙画像１０７の下方右側の撮影時刻表示領域１１１に撮影時の日時情報が表示される。ユーザが、この表紙写真確認画面において、タッチスクリーンデバイス２により再撮影ボタン画像１０８を選択すると、図５（ｄ）の電子ビューファインダ画面に戻り、表紙画像の撮り直しを行うことができる。一方、ユーザが、表紙写真確認画面において、タッチスクリーンデバイス２により表紙確定ボタン画像１０９を選択すると、新規調査登録部５３は、表紙画像１０７を画像ファイル記憶部３１に保存し、その画像ファイル名を調査纂録簿テーブルの上記新規登録レコードの“表紙画像ファイル名”フィールドに登録する。このとき、新規調査登録部５３は、表紙画像１０７に、撮影位置の絶対位置情報及び撮影時の日時情報を、電子透かし又は画像付加情報（例えば、ＪＰＥＧにおけるExif（Exchangeable image file format）内の撮影日時情報及びＧＮＳＳ情報）として埋め込み、画像ファイル記憶部３１に保存する。そして、画像リスト表示部３４は、タッチスクリーンデバイス２上に図６（ｂ）（図７（ａ））の撮影画像リスト画面を表示する。   On the cover photo confirmation screen, a cover image 107 photographed at the center is displayed, and a re-photograph button image 108 and a cover confirmation button image 109 are displayed at the bottom. Also, the absolute position information at the time of shooting is displayed in the shooting position display area 110 on the lower left side of the cover image 107, and the date and time information at the time of shooting is displayed in the shooting time display area 111 on the lower right side of the cover image 107. When the user selects the re-shoot button image 108 with the touch screen device 2 on this cover photo confirmation screen, the user can return to the electronic viewfinder screen of FIG. 5D and re-take the cover image. On the other hand, when the user selects the cover confirmation button image 109 with the touch screen device 2 on the cover photo confirmation screen, the new survey registration unit 53 saves the cover image 107 in the image file storage unit 31 and sets the image file name as the image file name. Register in the “Cover Image File Name” field of the newly registered record in the survey record book table. At this time, the new investigation registration unit 53 adds the absolute position information of the shooting position and the date / time information at the time of shooting to the cover image 107 as a digital watermark or image additional information (for example, shooting in Exif (Exchangeable image file format) in JPEG). Embedded as date / time information and GNSS information) and stored in the image file storage unit 31. Then, the image list display unit 34 displays the photographed image list screen of FIG. 6B (FIG. 7A) on the touch screen device 2.

（ステップ４）（所有者情報の設定）
調査纂録簿が新規に作成された初期状態では、調査纂録簿内には調査写真がまだ存在しない。従って、撮影画像リスト画面の中央部下半には図６（ｂ）（図７（ａ））に示したように空の撮影画像リスト１１５が表示される。尚、図６（ｂ）と図７（ａ）は説明の便宜上別々に記載しているが同じ画面を表す。この撮影画像リスト１１５の上辺縁には、調査の種別を選択するための５つの調査名称タブボタン画像１１６（“外部”，“内部”，“外構”，“傾斜”，“水準”の各ボタン画像）が横一列に表示されている。これらは、それぞれ「内部調査」，「外部調査」，「外構調査」，「傾斜調査」，「水準調査」の５つの調査種別を選択するものであり、各ボタンを選択すると、それに対応する調査種別に属する調査写真の撮影画像リスト１１５が表示され、撮影画像リスト画面の最上部の調査種別表示領域１１７に選択された調査種別の名称が表示される。撮影画像リスト画面の中央部上半の表紙画像表示領域１１８には、先に撮影した表紙画像が表示される。撮影画像リスト画面の下部には、現況写真の撮影指示を入力するための現況写真撮影ボタン画像１１９、及び外部写真の撮影指示を入力するための外部写真撮影ボタン画像１２０が表示される。ここで、「現況写真」とは、撮影時点の現状を記録するための写真をいう。「外部写真」とは、事前，事後の変化状況を記録するための写真をいう。 (Step 4) (Setting owner information)
In the initial state when a new survey catalog is created, there are no survey photos in the survey catalog. Accordingly, an empty photographed image list 115 is displayed in the lower half of the center of the photographed image list screen as shown in FIG. 6B (FIG. 7A). Although FIG. 6B and FIG. 7A are illustrated separately for convenience of explanation, they represent the same screen. On the upper edge of the photographed image list 115, five survey name tab button images 116 ("External", "Internal", "External", "Inclined", "Level") for selecting the type of survey are displayed. Button image) is displayed in a horizontal row. These are the five types of surveys, “Internal Survey”, “External Survey”, “External Survey”, “Inclined Survey”, and “Level Survey”, which correspond to the selection of each button. A photographed image list 115 of survey photographs belonging to the survey type is displayed, and the name of the selected survey type is displayed in the survey type display area 117 at the top of the photographed image list screen. In the cover image display area 118 in the upper half of the center portion of the photographed image list screen, the cover image that has been photographed first is displayed. On the lower part of the photographed image list screen, a current photograph button image 119 for inputting a photograph instruction for a current photograph and an external photograph button image 120 for inputting a photograph instruction for an external photograph are displayed. Here, the “current picture” is a picture for recording the current situation at the time of shooting. “External photo” refers to a photo for recording changes before and after the event.

ユーザが、図６（ｂ）（図７（ａ））の撮影画像リスト画面において、所有者情報（調査対象物件の所有者）を設定する場合、タッチスクリーンデバイス２の当該撮影画像リスト画面の表紙画像表示領域１１８をタップする。表紙画像表示領域１１８がタップされると、所有者登録部５５は、タッチスクリーンデバイス２上に図６（ｃ）の画面を表示する。図６（ｃ）の画面においては、所有者編集指示ボタン画像１２５，表紙写真確認ボタン画像１２６，キャンセルボタン画像１２７が表示される。ここで、ユーザが、この画面において、タッチスクリーンデバイス２により表紙写真確認ボタン画像１２６を選択すると、前述の図６（ａ）の画像に戻る。また、キャンセルボタン画像１２７を選択すると、前述の図６（ｂ）（図７（ａ））の画像に戻る。一方、ユーザが、タッチスクリーンデバイス２により所有者編集指示ボタン画像１２５を選択すると、所有者登録部５５は、タッチスクリーンデバイス２上に図６（ｄ）に示したような所有者編集画面を表示する。   When the user sets owner information (owner of the property to be investigated) on the captured image list screen of FIG. 6B (FIG. 7A), the cover of the captured image list screen of the touch screen device 2 Tap the image display area 118. When the cover image display area 118 is tapped, the owner registration unit 55 displays the screen of FIG. 6C on the touch screen device 2. On the screen of FIG. 6C, an owner edit instruction button image 125, a cover photo confirmation button image 126, and a cancel button image 127 are displayed. Here, when the user selects the cover photo confirmation button image 126 with the touch screen device 2 on this screen, the screen returns to the image shown in FIG. When the cancel button image 127 is selected, the screen returns to the image shown in FIG. 6B (FIG. 7A). On the other hand, when the user selects the owner editing instruction button image 125 using the touch screen device 2, the owner registration unit 55 displays an owner editing screen as shown in FIG. 6D on the touch screen device 2. To do.

図６（ｄ）の所有者編集画面において、画面中央の所有者リスト表示領域１２８には、写真管理データベース３２の所有者テーブルに現在登録されている所有者情報の一覧表が表示される。また、所有者編集画面の上部には、所有者追加ボタン画像１２９、保存ボタン画像１３０、及びキャンセルボタン画像１３１が表示される。ユーザが、この所有者編集画面において、タッチスクリーンデバイス２によりキャンセルボタン画像１３１を選択すると、前述の図６（ｃ）の画像に戻る。また、所有者追加ボタン画像１２９を選択すると、所有者登録部５５は、タッチスクリーンデバイス２上に図６（ｅ）の所有者情報入力画面を表示する。この所有者情報入力画面から、ユーザがタッチスクリーンデバイス２により所有者の氏名、住所、電話番号を入力し、戻りボタン画像１３２を選択すると、所有者登録部５５は、追加された所有者の所有者情報を写真管理データベース３２の所有者テーブルに保存し、図６（ｄ）の所有者編集画面に戻る。このとき、所有者リスト表示領域１２８には追加した所有者の所有者情報が追加表示される。   In the owner edit screen of FIG. 6D, a list of owner information currently registered in the owner table of the photo management database 32 is displayed in the owner list display area 128 in the center of the screen. Also, an owner addition button image 129, a save button image 130, and a cancel button image 131 are displayed at the top of the owner edit screen. When the user selects the cancel button image 131 by the touch screen device 2 on the owner edit screen, the screen returns to the image shown in FIG. When the owner addition button image 129 is selected, the owner registration unit 55 displays the owner information input screen shown in FIG. 6E on the touch screen device 2. When the user inputs the owner's name, address, and telephone number using the touch screen device 2 and selects the return button image 132 from the owner information input screen, the owner registration unit 55 owns the added owner. The owner information is stored in the owner table of the photo management database 32, and the screen returns to the owner edit screen shown in FIG. At this time, owner information of the added owner is additionally displayed in the owner list display area 128.

また、ユーザが、図６（ｄ）の所有者編集画面において、タッチスクリーンデバイス２により所有者リスト表示領域１２８のいずれかの所有者を選択しその状態で保存ボタン画像１３０を選択すると、所有者登録部５５は、選択された所有者の所有者ＩＤを、写真管理データベース３２の調査纂録簿テーブルの現在の調査案件レコードの“所有者ＩＤ”フィールド（図４参照）に保存し、図６（ｂ）の撮影画像リスト画面に戻る。これにより、所有者情報の設定が行われる。   Further, when the user selects any owner of the owner list display area 128 by the touch screen device 2 and selects the save button image 130 in that state on the owner editing screen of FIG. The registration unit 55 saves the owner ID of the selected owner in the “owner ID” field (see FIG. 4) of the current survey item record in the survey record table of the photo management database 32, and FIG. Return to the photographed image list screen of (b). Thereby, the owner information is set.

（ステップ５）（調査写真の追加撮影）
ユーザが、図６（ｂ）（図７（ａ））の撮影画像リスト画面において、調査写真の追加撮影を行う場合、タッチスクリーンデバイス２の当該撮影画像リスト画面の現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０（これら２つを纏めて「リスト追加ボタン画像」という。）を選択する。ここで、現況写真撮影ボタン画像１１９が選択された場合には、現況写真撮影指示状態となり、外部写真撮影ボタン画像１２０が選択された場合には、外部写真撮影指示状態となる。現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０が選択されると、白板表示・編集部４３は、タッチスクリーンデバイス２上に図７（ｂ）の撮影地点情報入力画面を表示する。撮影地点情報入力画面は、追加する撮影ポイントに関する情報を入力する画面である。本実施例の場合、具体的には、撮影地点情報入力画面において、従来の工損調査において撮影対象地点と共に撮影する白板に記入すべき情報を入力する。 (Step 5) (Additional photo of survey photo)
When the user performs additional photography of the survey photograph on the photographed image list screen of FIG. 6B (FIG. 7A), the current photograph photograph button image 119 on the photographed image list screen of the touch screen device 2 or the external A photograph button image 120 (these two are collectively referred to as “list addition button image”) is selected. Here, when the current state photography button image 119 is selected, the current state photography instruction state is entered, and when the outside photography button image 120 is selected, the state is an external photography instruction state. When the current state photography button image 119 or the external photography button image 120 is selected, the whiteboard display / editing unit 43 displays the photographing point information input screen of FIG. 7B on the touch screen device 2. The shooting point information input screen is a screen for inputting information related to a shooting point to be added. In the case of the present embodiment, specifically, information to be entered on the white board to be photographed together with the photographing target point in the conventional engineering damage investigation is input on the photographing point information input screen.

尚、図７（ｂ）では、説明の便宜上、撮影地点情報入力画面を、他の各画面の図よりも縦長に記載しているが、実際にタッチスクリーンデバイス２上に表示されるのは、図７（ｂ）に示した撮影地点情報入力画面のうちタッチスクリーンデバイス２の画面サイズ部分のみが表示される。そして、タッチスクリーンデバイス２を上下にスワイプ又はフリックする（指をスクリーン上に置いて上下方向に払う操作をする）ことにより表示部分を上下に移動させることができる。この操作は、現在広く用いられているスマートフォンやタブレット端末で用いられている操作方法と同様である。尚、後述の図８（ｄ）の記載についても同様である。   In FIG. 7 (b), for convenience of explanation, the shooting point information input screen is shown in a vertically longer form than the other screens, but what is actually displayed on the touch screen device 2 is Only the screen size portion of the touch screen device 2 is displayed in the shooting point information input screen shown in FIG. Then, the display portion can be moved up and down by swiping or flicking the touch screen device 2 up and down (putting the finger on the screen and paying up and down). This operation is the same as the operation method currently used with the smart phone and tablet terminal currently widely used. The same applies to the description in FIG.

撮影地点情報入力画面では、中央に撮影地点情報入力領域１４１が表示され、その下部に撮影開始ボタン画像１４２が表示される。ユーザは、この撮影地点情報入力画面の撮影地点情報入力領域１４１において、タッチスクリーンデバイス２から追加する撮影ポイントに関する情報（建物番号，部屋名称（場所名称），各部名称（被写物件名称），仕上げ材，損傷種類（被写対象），サイズ（幅，長さ），損傷箇所数）を入力することができる。撮影地点情報入力領域１４１に撮影ポイントに関する情報が入力されると、白板表示・編集部４３は、入力された各情報を、新規のレコードとして写真管理データベース３２の調査管理テーブルに保存する。   On the shooting point information input screen, a shooting point information input area 141 is displayed at the center, and a shooting start button image 142 is displayed at the bottom thereof. In the shooting point information input area 141 of this shooting point information input screen, the user can add information about the shooting point to be added from the touch screen device 2 (building number, room name (location name), part name (object name), finishing). Material, damage type (object to be imaged), size (width, length), number of damaged parts) can be entered. When information regarding the shooting point is input to the shooting point information input area 141, the whiteboard display / editing unit 43 stores the input information as a new record in the investigation management table of the photo management database 32.

撮影地点情報入力画面において、ユーザにより、タッチスクリーンデバイス２から撮影開始ボタン画像１４２が選択されると、通常ファインダ画面表示部３９は、外部写真撮影指示状態の場合には図７（ｃ）の電子ビューファインダ画面を表示し、現況写真撮影指示状態の場合には図８（ｃ）の電子ビューファインダ画面を表示する。以下、各状態における動作は次の通りである。   When the user selects the shooting start button image 142 from the touch screen device 2 on the shooting point information input screen, the normal viewfinder screen display unit 39 displays the electronic image shown in FIG. A viewfinder screen is displayed, and in the case of the current photo shooting instruction state, the electronic viewfinder screen of FIG. 8C is displayed. Hereinafter, the operation in each state is as follows.

（ａ）外部写真撮影指示状態
図７（ｃ）の電子ビューファインダ画面において、通常ファインダ画面表示部３９は、中央にカメラデバイス３からリアルタイムに取り込まれる電子ビューファインダ画像１５１を表示し、その横にシャッターボタン画像１０６を表示し、電子ビューファインダ画像１５１の左右上下隅の何れかの隅に白板画像１５３を重畳表示する。ここで、白板画像には、撮影地点情報入力画面で入力した追加する撮影ポイントに関する情報が白板として表示される。ここで、ユーザが白板画像１５３をタップした場合、通常ファインダ画面表示部３９は、図７（ｄ）に示したように、当該白板画像をタッチスクリーンデバイス２の画面全体に拡大して表示する。図７（ｄ）の白板画像の右上の閉窓ボタン画像１５４をユーザがタップすると、図７（ｃ）の電子ビューファインダ画面に戻る。これにより、ユーザは白板情報を確認しながら外部写真の撮影を行うことができる。 (A) External photograph shooting instruction state In the electronic viewfinder screen of FIG. 7C, the normal viewfinder screen display unit 39 displays an electronic viewfinder image 151 captured in real time from the camera device 3 at the center, and next to it. The shutter button image 106 is displayed, and the white board image 153 is superimposed and displayed at any one of the left, right, upper, and lower corners of the electronic viewfinder image 151. Here, in the white board image, information regarding the additional shooting point input on the shooting point information input screen is displayed as a white board. Here, when the user taps the white board image 153, the normal finder screen display unit 39 enlarges and displays the white board image on the entire screen of the touch screen device 2, as shown in FIG. When the user taps the close window button image 154 at the upper right of the white board image of FIG. 7D, the screen returns to the electronic viewfinder screen of FIG. Thereby, the user can take an external photograph while confirming the white board information.

電子ビューファインダ画面において、ユーザによりシャッターボタン画像１０６が選択された場合、新規追加画像取込部４０は、その選択時点の電子ビューファインダ画像を事前画像として取り込むとともに、撮影位置演算部３３が出力する現在の位置情報及び内部時計２５が出力する現在の日時情報を取り込み、次いで、画像編集部４４はタッチスクリーンデバイス２上に図８（ａ）の画像編集画面を表示する。画像編集画面には、中央の画像表示領域１６１に取り込まれた事前画像が表示され、その左上隅に白板画像１５３が重畳表示される。白板画像１５３は、ユーザがタッチスクリーンデバイス２上で当該白板画像１５３をスワイプする（画面を指で押して一定方向へ掃引する操作を行う）ことによって、画像表示領域１６１内での位置を移動させることができる。また、画像表示領域１６１の右側には、編集動作選択ボタン画像１６２、再撮影ボタン画像１０８、保存ボタン画像１３０が表示される。   When the shutter button image 106 is selected by the user on the electronic viewfinder screen, the newly added image capturing unit 40 captures the electronic viewfinder image at the time of selection as a pre-image, and the shooting position calculation unit 33 outputs it. The current position information and the current date / time information output from the internal clock 25 are captured, and then the image editing unit 44 displays the image editing screen of FIG. 8A on the touch screen device 2. On the image editing screen, a pre-image captured in the central image display area 161 is displayed, and a white board image 153 is superimposed on the upper left corner. The white board image 153 is moved in the image display area 161 when the user swipes the white board image 153 on the touch screen device 2 (performs an operation of pushing the screen with a finger and sweeping in a certain direction). Can do. Further, on the right side of the image display area 161, an editing operation selection button image 162, a re-shooting button image 108, and a save button image 130 are displayed.

編集動作選択ボタン画像１６２は、編集動作の切り換えを行うためのボタンであり、ユーザがこの編集動作選択ボタン画像１６２をタップすることによって、に図８（ａ）の画像編集画面（ポインタ編集モードの画像編集画面）と図８（ｂ）の画像編集画面（ペン編集モードの画像編集画面）とがトグル動作で切り替わる。図８（ａ）のポインタ編集モードの画像編集画面においては、ユーザが画像表示領域１６１上でタップした位置に矢印画像（ポインタ）が表示される。この矢印画像は、ユーザがタッチスクリーンデバイス２上で当該矢印画像をスワイプすることによって、画像表示領域１６１内での位置を移動させることができる。また、矢印画像は複数表示させることが可能であり、ユーザが画像表示領域１６１上で矢印画像のない箇所をタップする毎に新たな矢印画像が追加される。一方、ユーザが画像表示領域１６１上に既に表示されている矢印画像をタップすることで、当該矢印画像を消去することができる。また、図８（ｂ）のペン編集モードの画像編集画面においては、ユーザが画像表示領域１６１上でスワイプした軌跡に軌跡線画像が表示される。図８（ｂ）の画像編集画面では、画像表示領域１６１の左側に、さらにペン先ボタン画像１６３及び消しゴムボタン画像１６４が追加で表示される。軌跡線画像を追加する場合、ユーザはペン先ボタン画像１６３を選択した後に、画像表示領域１６１上で軌跡線画像を追加したい場所をスワイプする。これにより、スワイプされた軌跡に沿って軌跡線画像が表示される。尚、軌跡線画像は複数個追加することができる。一方、軌跡線画像を消去する場合には、ユーザは消しゴムボタン画像１６４を選択した後に、消去したい軌跡線画像をタップすることで、タップした軌跡線画像を消去することができる。以上の編集処理及び白板位置の移動処理は、画像編集部４４によって実行される。   The editing operation selection button image 162 is a button for switching the editing operation. When the user taps the editing operation selection button image 162, the image editing screen (in the pointer editing mode in FIG. 8A) is displayed. The image editing screen) and the image editing screen in FIG. 8B (the image editing screen in the pen editing mode) are switched by the toggle operation. On the image editing screen in the pointer editing mode in FIG. 8A, an arrow image (pointer) is displayed at a position where the user taps on the image display area 161. The arrow image can be moved in the image display area 161 by swiping the arrow image on the touch screen device 2. In addition, a plurality of arrow images can be displayed, and a new arrow image is added each time the user taps a position where there is no arrow image on the image display area 161. On the other hand, when the user taps an arrow image already displayed on the image display area 161, the arrow image can be deleted. Further, on the image editing screen in the pen editing mode in FIG. 8B, a locus line image is displayed on a locus swiped on the image display area 161 by the user. In the image editing screen of FIG. 8B, a pen point button image 163 and an eraser button image 164 are additionally displayed on the left side of the image display area 161. When adding a trajectory line image, the user selects the pen tip button image 163 and then swipes the place where the trajectory line image is to be added on the image display area 161. Thereby, a trajectory line image is displayed along the swipe trajectory. A plurality of trajectory line images can be added. On the other hand, when erasing a locus line image, the user can erase the tapped locus line image by selecting the eraser button image 164 and then tapping the locus line image to be erased. The above editing process and white board position movement process are executed by the image editing unit 44.

図８（ａ），（ｂ）の画像編集画面において、ユーザにより再撮影ボタン画像１０８が選択された場合には、図７（ｃ）の電子ビューファインダ画面に戻る。一方、保存ボタン画像１３０が選択された場合には、新規追加画像取込部４０は、画像表示領域１６１に表示されている事前画像及び白板画像並びに編集操作で追加された矢印画像等（以下「編集画像」）を、写真画像レイヤ、白板画像レイヤ、編集画像レイヤを含む多層画像として画像ファイル記憶部３１に保存する。またその際に、当該事前画像の撮影日時情報及び撮影場所情報を、事前画像に電子透かし又は画像付加情報として埋め込む。さらに、画像ファイル記憶部３１に保存した当該事前画像のファイル名を、その撮影日時情報及び撮影場所情報を含む画像管理情報と関連づけて、写真管理データベース３２の調査管理テーブルに新規レコードとして登録する。このとき、“写真番号”については連番で自動付番がされ、“撮影種別”は「外部写真」とされ、“事前調査ＩＤ”，“全体調査ＩＤ”は無効値（例えば、ＮＵＬＬ）に設定される。そして、画像リスト表示部３４は図８（ｄ）に示したような撮影画像リスト画面を表示する。この際、新たに追加された事前画像は、撮影画像リスト画面の撮影画像リスト１１５に表示されるが、この時点では当該事前画像に対応する事後画像はないので、撮影画像リスト１１５の当該事前画像の欄には、当該事前画像と未撮影示教画像１８１とが並べて表示される。また、当該事前画像の欄の下部には、外部写真であることを示す外部写真マーク１８２（「事前」「事後」のマーク）が表示される（図８（ｇ）参照）。   In the image editing screens of FIGS. 8A and 8B, when the re-photo button image 108 is selected by the user, the screen returns to the electronic viewfinder screen of FIG. On the other hand, when the save button image 130 is selected, the newly added image capturing unit 40 displays the prior image and the white board image displayed in the image display area 161, the arrow image added by the editing operation, and the like (hereinafter “ The edited image ") is stored in the image file storage unit 31 as a multilayer image including a photographic image layer, a white board image layer, and an edited image layer. At that time, the shooting date / time information and shooting location information of the previous image are embedded as a digital watermark or image additional information in the previous image. Further, the file name of the prior image stored in the image file storage unit 31 is registered as a new record in the investigation management table of the photo management database 32 in association with the image management information including the shooting date / time information and the shooting location information. At this time, “photo number” is automatically numbered consecutively, “shooting type” is “external photo”, and “preliminary survey ID” and “overall survey ID” are invalid values (for example, NULL). Is set. Then, the image list display unit 34 displays a photographed image list screen as shown in FIG. At this time, the newly added prior image is displayed in the captured image list 115 on the captured image list screen. However, since there is no posterior image corresponding to the prior image at this time, the prior image in the captured image list 115 is displayed. In this column, the preliminary image and the unphotographed instructional image 181 are displayed side by side. In addition, an external photograph mark 182 (“preliminary” and “subsequent” marks) indicating that the photograph is an external photograph is displayed at the bottom of the preliminary image column (see FIG. 8G).

（ｂ）現況写真撮影指示状態
図８（ｃ）の電子ビューファインダ画面において、通常ファインダ画面表示部３９は、中央にカメラデバイス３からリアルタイムに取り込まれる電子ビューファインダ画像１５１を表示し、その横にシャッターボタン画像１０６を表示する。この場合、白板画像１５３は表示しない。ユーザがシャッターボタン画像１０６を選択した場合、新規追加画像取込部４０は、その選択時点の電子ビューファインダ画像を事前画像として取り込むとともに、撮影位置演算部３３が出力する現在の位置情報及び内部時計２５が出力する現在の日時情報を取り込み、画像ファイル記憶部３１に保存する。またその際に、内部時計２５から取り込まれた当該事前画像の撮影日時情報、及び撮影位置演算部３３により算出された撮影場所情報を、事前画像に電子透かし又は画像付加情報として埋め込む。さらに、画像ファイル記憶部３１に保存した当該事前画像のファイル名を、その撮影日時情報及び撮影場所情報を含む画像管理情報と関連づけて、写真管理データベース３２の調査管理テーブルに新規レコードとして登録する。このとき、“写真番号”については連番で自動付番がされ、“撮影種別”は「現況写真」とされ、“事前調査ＩＤ”，“全体調査ＩＤ”は無効値（例えば、ＮＵＬＬ）に設定される。そして、図８（ｄ）に示したような撮影画像リスト画面を表示する。この際、新たに追加された事前画像は、撮影画像リスト画面の撮影画像リスト１１５に表示されるが、現況写真では事後画像は必要ないので、撮影画像リスト１１５の当該事前画像の欄には、当該事前画像のみが表示される。また、当該事前画像の欄の下部には、現況写真であることを示す現況写真マーク１８３（「現況」のマーク）が表示される。 (B) Current photograph shooting instruction state In the electronic viewfinder screen of FIG. 8C, the normal viewfinder screen display unit 39 displays an electronic viewfinder image 151 captured in real time from the camera device 3 at the center, and next to it. A shutter button image 106 is displayed. In this case, the white board image 153 is not displayed. When the user selects the shutter button image 106, the newly added image capturing unit 40 captures the electronic viewfinder image at the time of selection as a pre-image, and also outputs the current position information and the internal clock output from the shooting position calculating unit 33. The current date / time information output by the CPU 25 is captured and stored in the image file storage unit 31. At that time, the shooting date / time information of the pre-image captured from the internal clock 25 and the shooting location information calculated by the shooting position calculation unit 33 are embedded as a digital watermark or image additional information in the pre-image. Further, the file name of the prior image stored in the image file storage unit 31 is registered as a new record in the investigation management table of the photo management database 32 in association with the image management information including the shooting date / time information and the shooting location information. At this time, “photo number” is automatically numbered consecutively, “shooting type” is “current photo”, and “preliminary survey ID” and “overall survey ID” are invalid values (for example, NULL). Is set. Then, a captured image list screen as shown in FIG. 8D is displayed. At this time, the newly added prior image is displayed in the captured image list 115 on the captured image list screen. However, since the posterior image is not necessary in the current state photograph, the column of the prior image in the captured image list 115 includes Only the prior image is displayed. In addition, a current state photo mark 183 (a “current state” mark) indicating that it is a current state photo is displayed at the bottom of the advance image column.

（ステップ６）（撮影画像リストの各欄の閲覧）
図８（ｄ）が、工損調査が進行した段階における撮影画像リスト画面の状態を表している。この撮影画像リスト画面のタッチスクリーンデバイス２への表示処理は、画像リスト表示部３４によって実行される。工損調査の初期段階では図６（ｂ）（図７（ａ））の如く撮影画像リスト１１５が空であったものが、図８（ｄ）では撮影画像リスト１１５に写真欄１１５ａが複数追加されている。１つの写真欄１１５ａは、図８（ｅ）の拡大図に示したように、事前画像が表示される事前画像表示領域１９１、事後画像が表示される事後画像表示領域１９２、場所名称及び被写物件名称が表示される場所・被写物件名称表示領域１９３、撮影種別（“現況”／“事前・事後”）が表示される撮影種別表示領域１９４、写真番号が表示される写真番号表示領域１９５、及びプルダウン矢印マーク画像が表示されるプルダウン矢印マーク表示領域１９６を有する。事前画像表示領域１９１及び事後画像表示領域１９２は、写真欄１１５ａの上部約４／５の範囲に左右に並列して設けられ、場所・被写物件名称表示領域１９３及び撮影種別表示領域１９４並びにプルダウン矢印マーク表示領域１９６は、それぞれ写真欄１１５ａの下部約１／５の範囲に左から右に横並びに設けられている。写真番号表示領域１９５は事前画像表示領域１９１の右上隅に重畳して設けられている。 (Step 6) (Browsing each column of the photographed image list)
FIG. 8D shows the state of the photographed image list screen at the stage where the work damage investigation has progressed. The display processing of the photographed image list screen on the touch screen device 2 is executed by the image list display unit 34. In the initial stage of the industrial damage investigation, the photographed image list 115 is empty as shown in FIG. 6B (FIG. 7A), but in FIG. 8D, a plurality of photograph columns 115a are added to the photographed image list 115. Has been. As shown in the enlarged view of FIG. 8 (e), one photo column 115a includes a pre-image display area 191 in which a pre-image is displayed, a post-image display area 192 in which a post-image is displayed, a place name and a subject image. A place / photographed property name display area 193 where the property name is displayed, a shooting type display area 194 where the shooting type (“present status” / “pre / post”) is displayed, and a photo number display area 195 where the photo number is displayed , And a pull-down arrow mark display area 196 in which a pull-down arrow mark image is displayed. The pre-image display area 191 and the post-image display area 192 are provided in parallel in the left and right in the upper range of about 4/5 of the photo column 115a, and the place / photographed object name display area 193, the shooting type display area 194, and the pull-down menu. The arrow mark display areas 196 are provided side by side from left to right in the range of about 1/5 of the lower part of the photo column 115a. The photo number display area 195 is provided so as to overlap the upper right corner of the pre-image display area 191.

“撮影種別”が現況写真（“現況”）の場合、事後画像表示領域１９２は空白となり、撮影種別表示領域１９４の欄には「現況」と表示される。   When the “photographing type” is a current picture (“current situation”), the posterior image display area 192 is blank, and “current situation” is displayed in the field of the photographing type display area 194.

“撮影種別”が外部写真（“事前・事後”）の場合に於いて、事後画像が画像ファイル記憶部３１内にある場合には、事後画像表示領域１９２には事後画像が表示され、撮影種別表示領域１９４の欄には「事前」「事後」の文字が共に濃色で表示される（図８（ｄ）の写真番号１−３の写真欄１１５ａ，図８（ｈ）を参照）。ここで、画像リスト表示部３４が、各写真欄１１５ａの事前画像に対して、それに対応する事後画像が画像ファイル記憶部３１内にあるか否かを判断する場合、画像リスト表示部３４は、写真管理データベース３２の調査管理テーブルを参照し、まず事前画像の“調査ＩＤ”を取得し、次いで、取得した事前画像の調査ＩＤをキーとして、調査管理テーブルの各レコードの内、“事前調査ＩＤ”が事前画像の調査ＩＤに一致するレコードを検索する。一致するレコードがなければ事後画像が画像ファイル記憶部３１内に無い（事後画像がまだ撮影されていない）と判断され、一致するレコードがあれば当該レコードに対応する画像ファイルが事後画像であると判断される。   When the “shooting type” is an external photograph (“pre-post / post-post”) and the post-image is in the image file storage unit 31, the post-image is displayed in the post-image display area 192, and the shooting type is displayed. In the column of the display area 194, the characters “previous” and “subsequent” are displayed in dark colors (see the photo column 115a of the photo number 1-3 in FIG. 8D and FIG. 8H). Here, when the image list display unit 34 determines whether or not the posterior image corresponding to the pre-image of each photo column 115a is in the image file storage unit 31, the image list display unit 34 Referring to the survey management table of the photo management database 32, first obtain the “survey ID” of the preliminary image, and then use the survey ID of the acquired preliminary image as a key to specify “preliminary survey ID” in each record of the survey management table. "" Is searched for a record that matches the survey ID of the prior image. If there is no matching record, it is determined that the posterior image is not in the image file storage unit 31 (the posterior image has not yet been photographed). If there is a matching record, the image file corresponding to the record is the posterior image. To be judged.

撮影種別が外部写真撮影（“事前・事後”）の場合に於いて、事後画像がまだ撮影されていない場合（画像ファイル記憶部３１内に事後画像がない場合）には、事後画像表示領域１９２には、図８（ｄ）に示したような未撮影示教画像１８１（カメラマークの下に「事後撮影」の文字列が表示された画像）が表示される。また、撮影種別表示領域１９４の欄には「事前」「事後」の文字が表示され、「事前」は濃色で、「事後」は薄色で表示される（図８（ｄ）の写真番号１−２の写真欄１１５ａ，図８（ｇ）を参照）。これにより、ユーザは撮影画像リスト画面を一瞥して事後写真がまだ撮影されていない写真欄１１５ａを視認することが可能となる。   When the shooting type is external photography (“pre / post”) and the post image has not been taken yet (when there is no post image in the image file storage unit 31), the post image display area 192. In FIG. 8, an unphotographed teaching image 181 (an image in which a character string “post-shooting” is displayed under the camera mark) as shown in FIG. 8D is displayed. In the field of the photographing type display area 194, characters “prior” and “post fact” are displayed, “prior” is displayed in dark color, and “post fact” is displayed in light color (the photo number in FIG. 8D). 1-2, see the photo column 115a, FIG. 8 (g)). As a result, the user can glance at the photographed image list screen and visually recognize the photo field 115a in which the subsequent photograph has not yet been photographed.

撮影画像リスト画面の各写真欄１１５ａの右下隅のプルダウン矢印マーク表示領域１９６がユーザによりタップされると、画像リスト表示部３４は、図８（ｆ）に示したように、当該画像欄の下に、撮影ポイントに関する情報（白板情報）をプルダウンリスト１８４として表示する。このプルダウンリスト１８４には、“部屋名称（場所名称）”，“測定箇所（被写物件名称）”，“仕上材”，“損傷種類（被写対象）”，“サイズ（幅，長さ）”，“物件番号（建物番号）”の欄が表示され、右下隅に接写写真撮影ボタン画像１８４が表示される。画像リスト表示部３４は、写真管理データベース３２から、プルダウン矢印マーク表示領域１９６がタップされた写真欄１１５ａに対応するこれら各欄の情報を読み出して、プルダウンリスト１８４の各欄に表示する。   When the user taps the pull-down arrow mark display area 196 in the lower right corner of each photograph field 115a on the photographed image list screen, the image list display unit 34 displays the bottom of the image field as shown in FIG. In addition, information regarding the shooting point (white board information) is displayed as a pull-down list 184. The pull-down list 184 includes “room name (location name)”, “measurement location (name of the object to be photographed)”, “finishing material”, “damage type (object to be photographed)”, “size (width, length). "," Property number (building number) "column is displayed, and a close-up photography button image 184 is displayed in the lower right corner. The image list display unit 34 reads the information of each column corresponding to the photo column 115 a where the pull-down arrow mark display area 196 is tapped from the photo management database 32 and displays the information in each column of the pull-down list 184.

プルダウンリスト１８４が表示された状態に於いて、ユーザにより接写写真撮影ボタン画像１８４が選択された場合には、接写撮影動作が実行される。接写撮影動作については、ステップ９において述べる。   In the state where the pull-down list 184 is displayed, when the close-up photo shooting button image 184 is selected by the user, a close-up shooting operation is executed. The close-up shooting operation will be described in step 9.

（ステップ７）（事後画像の撮影）
タッチスクリーンデバイス２に図８（ｄ）の撮影画像リスト画面が表示されている状態（又は図８（ｅ）のプルダウンリスト１８４を展開した状態）において、ユーザにより、いずれかの写真欄１１５ａの事後画像表示領域１９２に表示された未撮影示教画像１８１がタップされた場合、まず、下敷付ファインダ画面表示部３６は、タップされた未撮影示教画像１８１が属する写真欄１１５ａの事前画像（以下「対応事前画像」という。）の調査レコードを写真管理データベース３２の調査管理テーブルから読み出し、次いで、白板表示・編集部４３が図７（ｂ）と同様の撮影地点情報入力画面を表示して、ユーザによる撮影地点情報の追加を促す。ここで、表示される白板入力画面の各入力欄には、先に読み出された対応事前画像の撮影地点情報がデフォルト値として予め記入される。従って、ユーザは変更したい欄のみ入力すればよい。撮影地点情報の入力が終わると、ユーザはそのままタッチスクリーンデバイス２から撮影開始ボタン画像１４２（図７（ｂ）参照）を選択する。ユーザにより撮影開始ボタン画像１４２が選択されると、下敷付ファインダ画面表示部３６は、タッチスクリーンデバイス２上に図９（ａ）の電子ビューファインダ画面を表示する。このとき、下敷付ファインダ画面表示部３６は、対応事前画像を画像ファイル記憶部３１から読み出して、カメラデバイス３からリアルタイムで取り込まれる電子ビューファインダ画像に、当該対応事前画像から生成される下敷画像を重畳表示してファインダ重畳画像を生成する。そして、生成したファインダ重畳画像を、電子ビューファインダ画面の中央のビューファインダ領域２０１に表示する。ここで、下敷画像は、読み出された対応事前画像を淡色化して半透明化することによって生成される。ユーザは、このファインダ重畳画像を見ながら携帯式電子デバイス１を移動させ、リアルタイムに変化する電子ビューファインダ画像が下敷画像にぴったり重なるように撮影アングルを決めることで、事前画像と事後画像の撮影アングルを合致させることができる。 (Step 7) (Capturing the subsequent image)
In a state where the captured image list screen of FIG. 8D is displayed on the touch screen device 2 (or in a state where the pull-down list 184 of FIG. 8E is expanded), the user can postpone any of the photo fields 115a. When the unphotographed instructional image 181 displayed in the image display area 192 is tapped, first, the underlay finder screen display unit 36 displays a pre-image (hereinafter referred to as a pre-image) of the photo column 115a to which the tapped unphotographed instructional image 181 belongs. The survey record of “corresponding pre-image”) is read out from the survey management table of the photo management database 32, and then the whiteboard display / editing unit 43 displays the same shooting point information input screen as FIG. Encourage the user to add shooting point information. Here, in each input field of the whiteboard input screen to be displayed, the shooting point information of the corresponding prior image read out in advance is previously entered as a default value. Therefore, the user only needs to input the column that he wants to change. When the input of the shooting point information is finished, the user selects the shooting start button image 142 (see FIG. 7B) from the touch screen device 2 as it is. When the shooting start button image 142 is selected by the user, the underlay finder screen display unit 36 displays the electronic viewfinder screen of FIG. 9A on the touch screen device 2. At this time, the underlay finder screen display unit 36 reads the corresponding preliminary image from the image file storage unit 31, and adds the base image generated from the corresponding preliminary image to the electronic viewfinder image captured in real time from the camera device 3. A superimposed viewfinder image is generated. Then, the generated finder superimposed image is displayed in the viewfinder area 201 at the center of the electronic viewfinder screen. Here, the underlying image is generated by making the read corresponding preliminary image lighter and translucent. The user moves the portable electronic device 1 while observing the finder superimposed image, and determines the shooting angle so that the electronic viewfinder image that changes in real time exactly overlaps the underlying image. Can be matched.

また、下敷付ファインダ画面表示部３６は、電子ビューファインダ画面のビューファインダ領域２０１の側方にシャッターボタン画像１０６を表示し、ビューファインダ領域２０１の左上隅には白板画像１５３が重畳表示される。このとき、下敷付ファインダ画面表示部３６は、写真管理データベース３２の調査管理テーブルから上記対応事前画像のレコードを読み出し、白板画像１５３に、先に撮影地点情報入力画面で入力した追加撮影ポイントに関する撮影地点情報を白板として表示する（図９（ａ）参照）。   The underlay finder screen display unit 36 displays the shutter button image 106 on the side of the viewfinder area 201 on the electronic viewfinder screen, and a white plate image 153 is superimposed on the upper left corner of the viewfinder area 201. At this time, the underlay finder screen display unit 36 reads the record of the corresponding pre-image from the investigation management table of the photo management database 32, and captures the image regarding the additional shooting point previously input on the shooting point information input screen to the white board image 153. The point information is displayed as a white board (see FIG. 9A).

図９（ａ）の電子ビューファインダ画面が表示された状態に於いて、ユーザにより、タッチスクリーンデバイス２からシャッターボタン画像１０６が選択されると、事後画像取込部３７は、その選択時点の電子ビューファインダ画像を事後画像として取り込み、撮影位置演算部３３が出力する現在の絶対位置情報（緯度・経度・標高）と、内部時計２５が出力する現在日時情報とを取り込む。次いで、画像編集部４４は図８（ａ）の画像編集画面を表示する。画像編集画面には、中央の画像表示領域１６１に取り込まれた事後画像が表示され、その左右上下隅の何れかの隅に白板画像１５３が重畳表示される。白板画像１５３は、ユーザがタッチスクリーンデバイス２上で当該白板画像１５３をスワイプすることによって、画像表示領域１６１内での位置を移動させることができる。また、画像表示領域１６１の右側には、編集動作選択ボタン画像１６２、再撮影ボタン画像１０８、保存ボタン画像１３０が表示される。この画像編集画面での編集操作については、上述の「ステップ５」で既に説明したので省略する。   When the user selects the shutter button image 106 from the touch screen device 2 in the state in which the electronic viewfinder screen of FIG. 9A is displayed, the posterior image capturing unit 37 selects the electronic image at the time of selection. The viewfinder image is captured as a posterior image, and the current absolute position information (latitude, longitude, altitude) output from the photographing position calculation unit 33 and the current date and time information output from the internal clock 25 are captured. Next, the image editing unit 44 displays the image editing screen of FIG. On the image editing screen, the posterior image captured in the central image display area 161 is displayed, and a white board image 153 is superimposed and displayed at any one of the left, right, upper and lower corners. The position of the white board image 153 in the image display area 161 can be moved by the user swiping the white board image 153 on the touch screen device 2. Further, on the right side of the image display area 161, an editing operation selection button image 162, a re-shooting button image 108, and a save button image 130 are displayed. Since the editing operation on the image editing screen has already been described in the above “Step 5”, the description thereof will be omitted.

画像編集画面において、ユーザにより、タッチスクリーンデバイス２から保存ボタン画像１３０が選択された場合、事後画像取込部３７は、画像表示領域１６１に表示されている事前画像及び白板画像並びに編集操作で追加された矢印画像等（以下「編集画像」）を、写真画像レイヤ、白板画像レイヤ、編集画像レイヤを含む多層画像として画像ファイル記憶部３１に保存する。またその際に、当該事前画像の撮影日時情報及び撮影場所情報を、事前画像に電子透かし又は画像付加情報として埋め込む。さらに、画像ファイル記憶部３１に保存した当該事前画像のファイル名を、その撮影日時情報及び撮影場所情報を含む画像管理情報と関連づけて、写真管理データベース３２の調査管理テーブルに登録する。このとき、“写真番号”には対応事前画像の写真番号と同じ番号が設定され、“撮影種別”は「外部写真」に設定され、“事前調査ＩＤ”には対応事前画像の調査ＩＤが設定され、“全体調査ＩＤ”は無効値（例えば、ＮＵＬＬ）に設定される。これにより、事前写真の画像のレコードとの関連づけがなされる。そして、図８（ｄ）に示したような撮影画像リスト画面に戻る。   When the user selects the save button image 130 from the touch screen device 2 on the image editing screen, the posterior image capturing unit 37 adds the pre-image and the white board image displayed in the image display area 161 and the editing operation. The arrow image or the like (hereinafter referred to as “edited image”) is stored in the image file storage unit 31 as a multilayer image including a photographic image layer, a white board image layer, and an edited image layer. At that time, the shooting date / time information and shooting location information of the previous image are embedded as a digital watermark or image additional information in the previous image. Further, the file name of the prior image stored in the image file storage unit 31 is registered in the investigation management table of the photo management database 32 in association with the image management information including the shooting date / time information and the shooting location information. At this time, “Photo number” is set to the same number as the photo number of the corresponding pre-image, “Photographing type” is set to “External photo”, and “Pre-survey ID” is set to the survey ID of the corresponding pre-image. Then, the “overall survey ID” is set to an invalid value (for example, NULL). Thereby, the association with the record of the image of the pre-photo is made. Then, the screen returns to the photographed image list screen as shown in FIG.

（ステップ８）（撮影済画像確認操作）
タッチスクリーンデバイス２に図８（ｄ）の撮影画像リスト画面が表示されている状態（又は図８（ｅ）のプルダウンリスト１８４を展開した状態）において、ユーザにより、いずれかの写真欄１１５ａの事前画像表示領域１９１に表示された撮影済みの事前画像又は事後画像表示領域１９２に表示された撮影済みの事後画像がタップされた場合、撮影済画像表示部３５は、タッチスクリーンデバイス２上に図９（ｂ）に示したような撮影画像確認画面を表示する。撮影画像確認画面は、中央の画像表示領域１６１にタップされた事前画像又は事後画像（以下「選択確認画像」という。）が表示され、画像表示領域１６１の上側に画像の種別名（“事前画像”／“事後画像”）及び閉窓ボタン画像１５４が表示され、画像表示領域１６１の下側に接写写真撮影ボタン画像１８５、再撮影ボタン画像１０８、画像削除ボタン画像２０２が表示される。この撮影画像確認画面によって、ユーザは撮影済みの選択確認画像を拡大して確認することができる。 (Step 8) (Operation for confirming photographed image)
In a state where the photographed image list screen in FIG. 8D is displayed on the touch screen device 2 (or in a state in which the pull-down list 184 in FIG. 8E is expanded), the user can pre-select any of the photo fields 115a. When the captured previous image displayed in the image display area 191 or the captured posterior image displayed in the posterior image display area 192 is tapped, the captured image display unit 35 is displayed on the touch screen device 2 as shown in FIG. A captured image confirmation screen as shown in (b) is displayed. The captured image confirmation screen displays the tapped prior image or subsequent image (hereinafter referred to as “selection confirmed image”) in the central image display area 161, and the image type name (“preliminary image” above the image display area 161. "/" Post image ") and a closing window image 154 are displayed, and a close-up photography button image 185, a re-shooting button image 108, and an image deletion button image 202 are displayed below the image display area 161. This photographed image confirmation screen allows the user to enlarge and confirm the photographed selection confirmation image.

撮影画像確認画面において、ユーザによりタッチスクリーンデバイス２から閉窓ボタン画像１５４が選択されると、撮影済画像表示部３５は、撮影画像確認画面を閉じて図８（ｄ）の撮影画像リスト画面に戻る。また、画像削除ボタン画像２０２が選択されると、撮影済画像表示部３５は、画像ファイル記憶部３１及び写真管理データベース３２から、選択確認画像の画像ファイル及び画像ファイル名を削除し、撮影画像確認画面を閉じて図８（ｄ）の撮影画像リスト画面に戻る。このとき、削除された画像は撮影画像リスト画面においては表示されず、その代わりに接写写真撮影ボタン画像１８５が表示される。   When the user selects the window closing button image 154 from the touch screen device 2 on the photographed image confirmation screen, the photographed image display unit 35 closes the photographed image confirmation screen and displays the photographed image list screen in FIG. Return. When the image deletion button image 202 is selected, the captured image display unit 35 deletes the image file and the image file name of the selected confirmation image from the image file storage unit 31 and the photo management database 32, and confirms the captured image confirmation. The screen is closed and the screen returns to the photographed image list screen of FIG. At this time, the deleted image is not displayed on the photographed image list screen, but a close-up photograph photographing button image 185 is displayed instead.

撮影画像確認画面において、ユーザによりタッチスクリーンデバイス２から再撮影ボタン画像１０８が選択されると、図７（ｃ）の電子ビューファインダ画面に戻り、選択確認画像に対応する事前画像又は事後画像の再撮影操作に移行する。図７（ｃ）以降の撮影操作及び画像編集操作の説明については、既に説明したため省略する。   When the user selects the re-capture button image 108 from the touch screen device 2 on the captured image confirmation screen, the screen returns to the electronic viewfinder screen of FIG. 7C, and the previous image or the subsequent image corresponding to the selected confirmation image is displayed again. Move to shooting operation. The description of the shooting operation and the image editing operation after FIG.

撮影画像確認画面において、ユーザによりタッチスクリーンデバイス２から接写写真撮影ボタン画像１８５が選択されると、次の接写撮影動作へ移行する。   When the user selects the close-up photography button image 185 from the touch screen device 2 on the photographed image confirmation screen, the process proceeds to the next close-up photography operation.

（ステップ９）（接写撮影動作）
図８（ｅ）又は図９（ｂ）の接写写真撮影ボタン画像１８５が選択された場合には、以下の接写撮影動作が実行される。まず、接写ファインダ画面表示部４１は、接写写真撮影ボタン画像１８５が選択された際に選択されている写真欄１１５ａの事前画像又は事後画像（以下「選択元画像」という。）のレコードを、写真管理データベース３２の調査管理テーブルから読み出し、そのレコードの調査ＩＤを取得して、これを全体調査ＩＤに設定する。ここで「全体調査ＩＤ」とは、調査管理テーブルの接写画像のレコードに対するその全体画像のレコードの調査ＩＤをいう。次いで、接写ファインダ画面表示部４１は、タッチスクリーンデバイス２上に図７（ｃ）の電子ビューファインダ画面を表示し、ステップ４で説明した操作と同様の操作で、接写画像の撮影及び編集を行う。 (Step 9) (Close-up shooting operation)
When the close-up photography button image 185 in FIG. 8E or FIG. 9B is selected, the following close-up photography operation is executed. First, the close-up viewfinder screen display unit 41 takes a record of a pre-image or a post-image (hereinafter referred to as “selection source image”) in the photo column 115a that is selected when the close-up photography button image 185 is selected. Read from the survey management table of the management database 32, obtain the survey ID of the record, and set this as the overall survey ID. Here, “overall survey ID” refers to the survey ID of the record of the entire image with respect to the close-up image record of the survey management table. Next, the close-up viewfinder screen display unit 41 displays the electronic viewfinder screen of FIG. 7C on the touch screen device 2, and takes and edits the close-up image by the same operation as described in step 4. .

そして、図８（ａ）又は図８（ｂ）の画像編集画面において、ユーザにより保存ボタン画像１３０が選択されると、接写画像取込部４２は、画像表示領域１６１に表示されている接写画像及び白板画像並びに編集操作で追加された矢印画像等（以下「編集画像」）を、写真画像レイヤ、白板画像レイヤ、編集画像レイヤを含む多層画像として画像ファイル記憶部３１に保存する。またその際に、当該接写事前画像の撮影日時情報及び撮影場所情報を、当該接写画像に電子透かし又は画像付加情報として埋め込む。さらに、画像ファイル記憶部３１に保存した当該接写画像のファイル名を、その撮影日時情報及び撮影場所情報を含む画像管理情報と関連づけて、写真管理データベース３２の調査管理テーブルに新規レコードとして登録する。このとき、“写真番号”については連番で自動付番がされ、“撮影種別”は「外部写真」に設定され、 “全体調査ＩＤ”には先に設定した全体調査ＩＤを設定する。これにより、全体写真の画像のレコードとの関連づけがなされる。また、このとき“事前調査ＩＤ”は無効値（例えば、ＮＵＬＬ）に設定される。これは、選択元画像が事前画像の場合には、それ以上前の事前画像は存在せず、また、選択元画像が事後画像の場合には、当該接写画像に対応する事前画像の調査レコードが存在しないためである。   When the user selects the save button image 130 on the image editing screen in FIG. 8A or 8B, the close-up image capture unit 42 displays the close-up image displayed in the image display area 161. And the white board image and the arrow image added by the editing operation (hereinafter referred to as “edited image”) are stored in the image file storage unit 31 as a multilayer image including a photographic image layer, a white board image layer, and an edited image layer. At that time, the shooting date / time information and shooting location information of the close-up pre-image are embedded in the close-up image as a digital watermark or image additional information. Furthermore, the file name of the close-up image stored in the image file storage unit 31 is registered as a new record in the investigation management table of the photo management database 32 in association with the image management information including the shooting date / time information and shooting location information. At this time, “photo number” is automatically numbered consecutively, “shooting type” is set to “external photo”, and the overall survey ID set previously is set to “overall survey ID”. As a result, the entire picture is associated with the record of the image. At this time, the “prior survey ID” is set to an invalid value (for example, NULL). This is because when the selection source image is a prior image, there is no previous previous image, and when the selection source image is a posterior image, there is a survey record of the prior image corresponding to the close-up image. This is because it does not exist.

そして、画像リスト表示部３４は図８（ｄ）に示したような撮影画像リスト画面を再表示する。このとき、画像リスト表示部３４は、図８（ｄ）に示したように、“全体調査ＩＤ”フィールドに全体調査ＩＤが設定されたレコード（子レコード）の写真欄１１５ａについては、全体調査ＩＤのレコード（親レコード）の写真欄１１５ａの下に連なるように表示するとともに、子レコードの写真欄１１５ａには、接写写真であることが分かるように、当該写真欄１１５ａの左側に接写表示マーク１８６を表示する。これにより、撮影画像リスト画面を見たユーザは、一瞥して全体写真の写真欄１１５ａと接写写真の写真欄１１５ａの区別とその関連性を容易に視認することができる。   Then, the image list display unit 34 redisplays the captured image list screen as shown in FIG. At this time, as shown in FIG. 8D, the image list display unit 34 sets the overall survey ID for the photo field 115a of the record (child record) in which the overall survey ID is set in the “overall survey ID” field. Is displayed so as to be continuous below the photo field 115a of the record (parent record), and in the photo field 115a of the child record, a close-up display mark 186 is displayed on the left side of the photo field 115a so that it can be seen that the photo is close-up. Is displayed. Thereby, the user who has looked at the photographed image list screen can easily visually recognize the distinction between the photo column 115a of the whole photo and the photo column 115a of the close-up photo and the relationship thereof.

（４．１）接写撮影時における調査管理テーブルへの登録処理及び撮影画像リスト画面の再表示処理の補足説明
次に、接写写真の撮影時における、接写画像取込部４２による接写画像の調査レコードの調査管理テーブルへの登録処理と、画像リスト表示部３４による撮影画像リスト画面の再表示処理とについて、補足説明する。 (4.1) Supplementary explanation of registration processing in the investigation management table and close-up image list screen display processing during close-up photography Next, a close-up image investigation record by the close-up image capture unit 42 during close-up photography A supplementary explanation will be given of the registration processing in the survey management table and the re-display processing of the photographed image list screen by the image list display unit 34.

（Ａ）事前画像の撮影時
例えば、撮影画像リスト画面における撮影画像リスト１１５が図１０（ａ１）の状態にあり、写真管理データベース３２の調査管理テーブルが図１０（ｂ１）の状態にある場合を考える。尚、図１０における撮影画像リスト１１５内の事前画像表示領域１９１内に表示されたＡ１，Ａ２等の符号は写真番号を表す。 (A) At the time of photographing a pre-image For example, a case where the photographed image list 115 on the photographed image list screen is in the state of FIG. 10A1 and the investigation management table of the photograph management database 32 is in the state of FIG. Think. Note that symbols such as A1, A2 and the like displayed in the prior image display area 191 in the photographed image list 115 in FIG. 10 represent photo numbers.

（Ａ１）この状態に於いて、ユーザにより写真番号Ａ１の事前画像が選択（タップ）され、次いで図９（ｂ）の画面で接写写真撮影ボタン画像１８５が選択（タップ）されて接写写真が撮影された場合、接写画像取込部４２は、図１０（ｂ２）に示したように、調査管理テーブルに、当該接写写真に対する調査レコード（調査ＩＤ＝３の調査レコード）を新規に作成し、当該調査レコードの“全体調査ＩＤ”に、選択元画像である写真番号Ａ１の事前画像の調査レコードの調査ＩＤ（１）を格納する。これにより、調査レコード（調査ＩＤ＝３，写真番号＝Ａ１−１）は、調査レコード（調査ＩＤ＝１，写真番号＝Ａ１）に対して事前画像の接写画像として関連づけられる。また、このとき接写画像取込部４２は、当該接写写真に対する調査レコードのその他のフィールドには、選択元画像Ａ１の調査レコードにおける対応するフィールドの値をコピーする。そして、画像リスト表示部３４は、調査管理テーブルが更新されると、図１０（ａ２）に示したように、新規に登録された接写画像の調査レコード（調査ＩＤ＝３，写真番号＝Ａ１−１）の写真欄１１５ａを、選択元画像の調査レコード（調査ＩＤ＝１，写真番号＝Ａ１）の写真欄１１５ａの下に連ねて表示すると共に、当該写真欄１１５ａの左側に接写表示マーク１８６を表示する。   (A1) In this state, the user selects (tap) a pre-image of the photo number A1, and then selects (tap) the close-up photo button 185 on the screen of FIG. 9B to take a close-up photo. In this case, the close-up image capture unit 42 newly creates a survey record (survey record with survey ID = 3) for the close-up photo in the survey management table as shown in FIG. 10 (b2). In the “overall survey ID” of the survey record, the survey ID (1) of the survey record of the prior image of the photo number A1 that is the selection source image is stored. Thus, the survey record (survey ID = 3, photo number = A1-1) is associated with the survey record (survey ID = 1, photo number = A1) as a close-up image of the prior image. At this time, the close-up image capture unit 42 copies the value of the corresponding field in the survey record of the selection source image A1 to the other field of the survey record for the close-up photo. Then, when the survey management table is updated, the image list display unit 34, as shown in FIG. 10 (a2), the newly registered close-up image survey record (survey ID = 3, photo number = A1-). The photo column 115a of 1) is displayed continuously below the photo column 115a of the survey record (survey ID = 1, photo number = A1) of the selection source image, and a close-up display mark 186 is displayed on the left side of the photo column 115a. indicate.

（Ａ２）次に、ユーザにより写真番号Ａ１の事前画像が再度選択（タップ）され又は写真番号Ａ１−１の事前画像が選択（タップ）され、次いで図９（ｂ）の画面で接写写真撮影ボタン画像１８５が選択（タップ）されて接写写真が撮影された場合、接写画像取込部４２は、図１０（ｂ３）に示したように、調査管理テーブルに、当該接写写真に対する調査レコード（調査ＩＤ＝４の調査レコード）を新規に作成し、当該調査レコードの“全体調査ＩＤ”に、選択元画像の調査レコードの“全体調査ＩＤ”フィールドに無効な値（ＮＵＬＬ）が設定されている場合（即ち、選択元画像が写真番号Ａ１の場合）にはその選択元画像の調査レコードの調査ＩＤ（１）を、選択元画像の調査レコードの“全体調査ＩＤ”フィールドに有効な値が設定されている場合（即ち、選択元画像が写真番号Ａ１−１の場合）にはその“全体調査ＩＤ”フィールドに設定されている調査ＩＤ（１）を格納する。これにより、調査レコード（調査ＩＤ＝４，写真番号＝Ａ１−２）は、調査レコード（調査ＩＤ＝１，写真番号＝Ａ１）に対して事前画像の接写画像として関連づけられる。また、このとき接写画像取込部４２は、当該接写写真に対する調査レコードのその他のフィールドには、選択元画像Ａ１の調査レコードにおける対応するフィールドの値をコピーする。そして、画像リスト表示部３４は、調査管理テーブルが更新されると、図１０（ａ３）に示したように、新規に登録された接写画像の調査レコード（調査ＩＤ＝４，写真番号＝Ａ１−２）の写真欄１１５ａを、選択元画像の調査レコード（調査ＩＤ＝１，写真番号＝Ａ１）の写真欄１１５ａの下に連ねて表示すると共に、当該写真欄１１５ａの左側に接写表示マーク１８６を表示する。   (A2) Next, the user selects (tap) the pre-image of the photo number A1 again or selects (tap) the pre-image of the photo number A1-1, and then the close-up photography button on the screen of FIG. 9B. When the image 185 is selected (tapped) and a close-up photo is taken, the close-up image capturing unit 42 stores a search record (investigation ID) for the close-up photo in the search management table, as shown in FIG. = 4 survey record) is newly created, and an invalid value (NULL) is set in the “overall survey ID” field of the survey record of the selection source image in the “overall survey ID” of the survey record ( That is, when the selection source image is the photo number A1, the survey ID (1) of the survey record of the selection source image is set to a valid value in the “overall survey ID” field of the survey record of the selection source image. Is the case are (i.e., if the selected original image Image Number A1-1) To store the survey ID (1) that is set in the "overall survey ID" field. Thus, the survey record (survey ID = 4, photo number = A1-2) is associated with the survey record (survey ID = 1, photo number = A1) as a close-up image of the prior image. At this time, the close-up image capture unit 42 copies the value of the corresponding field in the survey record of the selection source image A1 to the other field of the survey record for the close-up photo. Then, when the survey management table is updated, the image list display unit 34, as shown in FIG. 10 (a3), the newly registered close-up image survey record (survey ID = 4, photo number = A1-). 2) the photo column 115a is displayed continuously below the photo column 115a of the survey record (survey ID = 1, photo number = A1) of the selection source image, and a close-up display mark 186 is displayed on the left side of the photo column 115a. indicate.

以下同様に、写真番号Ａ１に対する接写画像を、写真管理データベース３２内の調査管理テーブル及び撮影画像リスト１１５に逐次追加することができる。写真番号Ｂ１に対する接写画像についても、同様にして逐次追加することができる。   Similarly, the close-up image corresponding to the photograph number A1 can be sequentially added to the investigation management table and the photographed image list 115 in the photograph management database 32. The close-up image corresponding to the photo number B1 can be added sequentially in the same manner.

（Ｂ）事後画像の撮影時
例えば、撮影画像リスト画面における撮影画像リスト１１５が図１１（ａ１）の状態にあり、写真管理データベース３２の調査管理テーブルが図１１（ｂ１）の状態にある場合を考える。尚、図１１における撮影画像リスト１１５内の事前画像表示領域１９１及び事後画像表示領域１９２内に表示されたＡ１，Ａ１−１，Ａ２，Ｂ１等の符号は写真番号を表す。 (B) At the time of shooting a subsequent image For example, a case where the shot image list 115 on the shot image list screen is in the state of FIG. 11 (a1) and the investigation management table of the photo management database 32 is in the state of FIG. 11 (b1). Think. Note that symbols such as A1, A1-1, A2, and B1 displayed in the pre-image display area 191 and the post-image display area 192 in the photographed image list 115 in FIG. 11 represent photo numbers.

（Ｂ１）この状態に於いて、ユーザにより写真番号Ｂ１の事後画像が選択（タップ）され、次いで図９（ｂ）の画面で接写写真撮影ボタン画像１８５が選択（タップ）されて接写写真が撮影された場合、接写画像取込部４２は、図１１（ｂ２）に示したように、調査管理テーブルに、当該接写写真に対する調査レコード（調査ＩＤ＝５の調査レコード）を新規に作成し、当該調査レコードの“全体調査ＩＤ”に、選択元画像である写真番号Ｂ１の事後画像の調査レコードの調査ＩＤ（４）を格納する。また、当該接写写真に対する事前画像は存在しないため、当該調査レコードの“事前調査ＩＤ”には、「事後画像に対する事前画像が存在しない」ことを示す番号である未存在コード０を格納する。これにより、調査レコード（調査ＩＤ＝５，写真番号＝Ｂ１−２）は、調査レコード（調査ＩＤ＝４，写真番号＝Ｂ１）に対して事後画像の接写画像として関連づけられる。また、このとき接写画像取込部４２は、当該接写写真に対する調査レコードのその他のフィールドには、選択元画像Ｂ１の調査レコードにおける対応するフィールドの値をコピーする。そして、画像リスト表示部３４は、調査管理テーブルが更新されると、図１１（ａ２）に示したように、新規に登録された接写画像の調査レコード（調査ＩＤ＝５，写真番号＝Ｂ１−２）の写真欄１１５ａを、選択元画像の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ１）の写真欄１１５ａの下に連ねて表示すると共に、当該写真欄１１５ａの左側に接写表示マーク１８６を表示する。また、新たに追加される接写画像Ｂ１−２に対する事前画像は存在しないので、接写画像Ｂ１−２に対する事前画像の事前画像表示領域１９１は空となる。   (B1) In this state, the user selects (tap) the posterior image of the photo number B1, and then selects (tap) the close-up photo button 185 on the screen of FIG. 9B to take a close-up photo. In this case, the close-up image capturing unit 42 newly creates a survey record (survey record with survey ID = 5) for the close-up photo in the survey management table as shown in FIG. 11 (b2). In the “overall survey ID” of the survey record, the survey ID (4) of the survey record of the posterior image of the photo number B1 which is the selection source image is stored. Further, since there is no prior image for the close-up photograph, the “pre-survey ID” of the survey record stores a non-existing code 0 that is a number indicating that “the previous image does not exist for the subsequent image”. Thereby, the survey record (survey ID = 5, photo number = B1-2) is associated with the survey record (survey ID = 4, photo number = B1) as a close-up image of the posterior image. At this time, the close-up image capture unit 42 copies the value of the corresponding field in the survey record of the selection source image B1 to the other field of the survey record for the close-up photo. Then, when the survey management table is updated, the image list display unit 34, as shown in FIG. 11 (a2), the newly registered close-up image survey record (survey ID = 5, photo number = B1- 2) the photo column 115a is displayed continuously below the photo column 115a of the survey record (survey ID = 4, photo number = B1) of the selection source image, and a close-up display mark 186 is displayed on the left side of the photo column 115a. indicate. Also, since there is no prior image for the newly added close-up image B1-2, the prior image display area 191 of the prior image for the close-up image B1-2 is empty.

ここで、選択元画像である事後画像Ｂ１に対する事前画像Ａ１には、接写画像Ａ１−１が関連づけて保存されているが、新たに追加される接写画像Ｂ１−２は、既存の事前画像の接写画像Ａ１−１とは関連づけられないことに注意しておく（図１１（ａ２），（ｂ２）参照）。もし、ユーザが事前画像の接写画像Ａ１−１に対する事後画像を撮影する場合には、当該接写画像Ａ１−１の事前画像表示領域１９１の横の事後画像表示領域１９２に表示された未撮影示教画像１８１を選択（タップ）すればよい。   Here, the close-up image A1-1 is stored in association with the pre-image A1 for the posterior image B1 that is the selection source image, but the newly added close-up image B1-2 is a close-up of the existing pre-image. Note that it is not associated with the image A1-1 (see FIGS. 11A2 and 11B2). If the user takes a posterior image of the close-up image A1-1 of the pre-image, the unphotographed instruction displayed in the posterior image display area 192 next to the pre-image display area 191 of the close-up image A1-1. The image 181 may be selected (tapped).

（Ｂ２）次に、ユーザにより写真番号Ｂ１の事前画像が再度選択（タップ）され又は写真番号Ｂ１−２の事後画像が選択（タップ）され、次いで図９（ｂ）の画面で接写写真撮影ボタン画像１８５が選択（タップ）されて接写写真が撮影された場合、接写画像取込部４２は、図１１（ｂ３）に示したように、調査管理テーブルに、当該接写写真に対する調査レコード（調査ＩＤ＝６の調査レコード）を新規に作成し、当該調査レコードの“全体調査ＩＤ”に、選択元画像の調査レコードの“全体調査ＩＤ”フィールドに無効な値が設定されている場合（即ち、選択元画像が写真番号Ｂ１の場合）にはその選択元画像の調査レコードの調査ＩＤ（４）を、選択元画像の調査レコードの“全体調査ＩＤ”フィールドに有効な値が設定されている場合（即ち、選択元画像が写真番号Ｂ１−２の場合）にはその“全体調査ＩＤ”フィールドに設定されている調査ＩＤ（４）を格納する。また、当該接写写真に対する事前画像は存在しないため、当該調査レコードの“事前調査ＩＤ”には、「事後画像に対する事前画像が存在しない」ことを示す番号である未存在コード０を格納する。これにより、調査レコード（調査ＩＤ＝６，写真番号＝Ｂ１−３）は、調査レコード（調査ＩＤ＝４，写真番号＝Ｂ１）に対して事後画像の接写画像として関連づけられる。また、このとき接写画像取込部４２は、当該接写写真に対する調査レコードのその他のフィールドには、選択元画像Ｂ１の調査レコードにおける対応するフィールドの値をコピーする。そして、画像リスト表示部３４は、調査管理テーブルが更新されると、図１１（ａ３）に示したように、新規に登録された接写画像の調査レコード（調査ＩＤ＝６，写真番号＝Ｂ１−３）の写真欄１１５ａを、選択元画像の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ１）の写真欄１１５ａの下に連ねて表示すると共に、当該写真欄１１５ａの左側に接写表示マーク１８６を表示する。また、新たに追加される接写画像Ｂ１−３に対する事前画像は存在しないので、接写画像Ｂ１−３に対する事前画像の事前画像表示領域１９１は空となる。   (B2) Next, the user selects (tap) the pre-image of the photo number B1 again or selects (tap) the post-image of the photo number B1-2, and then the close-up photography button on the screen of FIG. 9B. When the image 185 is selected (tapped) and a close-up photo is taken, the close-up image capturing unit 42 stores a search record (investigation ID) for the close-up photo in the search management table, as shown in FIG. = 6 survey record) is newly created, and an invalid value is set in the “overall survey ID” field of the survey record of the selection source image in the “overall survey ID” of the survey record (that is, selected) If the original image is photo number B1, the survey ID (4) of the survey record of the selected source image is set to a valid value in the “overall survey ID” field of the survey record of the selected source image. (I.e., the selected original image for photographic number B1-2) storing survey ID that is to be set to the "entire survey ID" field (4). Further, since there is no prior image for the close-up photograph, the “pre-survey ID” of the survey record stores a non-existing code 0 that is a number indicating that “the previous image does not exist for the subsequent image”. Thus, the survey record (survey ID = 6, photo number = B1-3) is associated with the survey record (survey ID = 4, photo number = B1) as a close-up image of the posterior image. At this time, the close-up image capture unit 42 copies the value of the corresponding field in the survey record of the selection source image B1 to the other field of the survey record for the close-up photo. Then, when the survey management table is updated, the image list display unit 34, as shown in FIG. 11 (a3), the newly registered close-up image survey record (survey ID = 6, photo number = B1- 3) The photo column 115a is displayed continuously below the photo column 115a of the survey record (survey ID = 4, photo number = B1) of the selection source image, and a close-up display mark 186 is displayed on the left side of the photo column 115a. indicate. Further, since there is no pre-image for the newly added close-up image B1-3, the pre-image display area 191 of the pre-image for the close-up image B1-3 is empty.

以下同様に、写真番号Ｂ１に対する接写画像を、写真管理データベース３２内の調査管理テーブル及び撮影画像リスト１１５に逐次追加することができる。   Similarly, the close-up image for the photo number B1 can be sequentially added to the investigation management table and the photographed image list 115 in the photo management database 32.

（４．２）事後撮影時における調査写真追加撮影処理についての補足説明
最後に、事後画像の撮影時における調査写真追加撮影処理についての補足説明を行う。尚、事前画像の撮影時における調査写真追加撮影処理については、ステップ５において既に説明した通りである。実際の工損調査の現場に於いては、事後調査に於いて、事前画像がない場合にも新たに事後画像を追加したい場合がある。斯かる場合、ユーザが、図８（ｄ）の撮影画像リスト画面において、現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０を選択（タップ）することによって、新たに事後画像を追加することができる。以下、この処理について説明する。 (4.2) Supplementary explanation about survey photo additional shooting processing at the time of subsequent shooting Finally, a supplementary description of survey photo additional shooting processing at the time of shooting the subsequent image will be given. Note that the survey photo additional shooting process at the time of shooting the pre-image is as already described in step 5. In actual work damage investigation sites, there are cases where it is desired to add a new post image even if there is no pre image in the post survey. In such a case, the user may add a new posterior image by selecting (tapping) the current state photography button image 119 or the external photography button image 120 on the photographed image list screen of FIG. it can. Hereinafter, this process will be described.

携帯式電子デバイス１が、現時点が「事前画像撮影状態」にあるのか、それとも「事後画像撮影状態」にあるのかを自動判断する場合、写真管理データベース３２の調査管理テーブルを参照し、“調査纂録簿ＩＤ”フィールドが現在の調査纂録簿ＩＤであるレコードセットに対して、“事前調査ＩＤ”フィールドに無効値（ＮＵＬＬ）以外の値が設定された調査レコードが存在するか否かを検索し、無効値（ＮＵＬＬ）以外の値が設定された調査レコードが存在しなければ現時点は「事前画像撮影状態」にあると自動判定し、無効値（ＮＵＬＬ）以外の値が設定された調査レコードが存在すれば現時点は「事後画像撮影状態」にあると自動判定する。これは、例えば、図８（ｄ）の撮影画像リスト画面において、撮影画像リスト１１５が図１２（ａ１）のように事前画像Ａ１，Ａ２及び事後画像Ｂ１が表示されているような場合には、携帯式電子デバイス１は現時点が「事後画像撮影状態」にあると自動判定する。一方、撮影画像リスト１１５が図１２（ｃ）のように事前画像Ａ１，Ａ２のみが表示され、事後画像が一つも表示されていないような場合には、携帯式電子デバイス１は現時点が「事前画像撮影状態」にあると自動判定することになる。   When the portable electronic device 1 automatically determines whether the current time is in the “previous image photographing state” or the “post-image photographing state”, the investigation management table in the photo management database 32 is referred to, For a record set in which the “record ID” field is the current survey record ID, a search is performed to determine whether there is a survey record in which a value other than an invalid value (NULL) is set in the “preliminary survey ID” field. If there is no survey record set with a value other than the invalid value (NULL), it is automatically determined that the current state is the “previous image shooting state”, and a survey record set with a value other than the invalid value (NULL) is set. If it exists, it is automatically determined that the current state is the “post-image shooting state”. For example, when the pre-images A1 and A2 and the post-image B1 are displayed in the photographed image list 115 as shown in FIG. 12 (a1) on the photographed image list screen in FIG. The portable electronic device 1 automatically determines that the current time is in the “post-image shooting state”. On the other hand, when the photographed image list 115 displays only the previous images A1 and A2 as shown in FIG. 12C and no posterior image is displayed, the portable electronic device 1 indicates that the current time is “prior”. It is automatically determined that the state is “image shooting state”.

携帯式電子デバイス１が「事後画像撮影状態」にあると自動判定している場合において、図８（ｄ）の撮影画像リスト画面から、ユーザにより外部写真撮影ボタン画像１２０が選択（タップ）された場合、外部写真撮影指示状態となりステップ５と同様にして、新地点レコード追加部３８，通常ファインダ画面表示部３９，及び新規追加画像取込部４０により、白板情報の編集、事後画像の撮影、及び画像編集の処理が行われる。このとき、新規追加画像取込部４０は、写真管理データベース３２の調査管理テーブルに新規レコードとして登録する際に、当該新規レコードが事後画像であることを示すために“事前調査ＩＤ”フィールドに「事後画像に対する事前画像が存在しない」ことを示す番号である未存在コード０を格納する（図１２（ｂ２）の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ３）参照）。そして、画像リスト表示部３４は、調査管理テーブルが更新されると、図１２（ａ２）に示したように、新規に登録された事後画像の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ３）の写真欄１１５ａを追加した撮影画像リスト１１５を撮影画像リスト画面に再表示する。また、新たに追加される事後画像Ｂ３に対する事前画像は存在しないので、接写画像Ｂ３に対する事前画像の事前画像表示領域１９１は空となり、撮影種別表示領域１９４に「事前」の文字が淡色で、「事後」の文字が濃色で表示される。   When the portable electronic device 1 is automatically determined to be in the “post-action image capturing state”, the user has selected (tapped) the external photography button image 120 from the captured image list screen of FIG. In this case, the external photo shooting instruction state is entered, and in the same manner as in step 5, the new point record adding unit 38, the normal finder screen display unit 39, and the new additional image capturing unit 40 are used to edit the whiteboard information, shoot the post image, and Image editing processing is performed. At this time, when registering as a new record in the survey management table of the photo management database 32, the newly added image capturing unit 40 displays “new survey record” in the “preliminary survey ID” field to indicate that the new record is a subsequent image. The non-existence code 0 which is a number indicating that “the previous image does not exist for the posterior image” is stored (refer to the investigation record (survey ID = 4, photo number = B3) in FIG. 12B2). Then, when the survey management table is updated, the image list display unit 34, as shown in FIG. 12 (a2), the newly registered post-image survey record (survey ID = 4, photo number = B3). The photographed image list 115 to which the photograph field 115a is added is displayed again on the photographed image list screen. Further, since there is no pre-image for the newly added post-image B3, the pre-image display area 191 of the pre-image for the close-up image B3 is empty, and “pre-” characters are light in the shooting type display area 194. “After” is displayed in dark color.

携帯式電子デバイス１が「事後画像撮影状態」にあると自動判定している場合において、図８（ｄ）の撮影画像リスト画面から、ユーザにより現況写真撮影ボタン画像１１９が選択（タップ）された場合も同様である。この場合、写真管理データベース３２の調査管理テーブルは、図１２（ｂ３）に示すように新規の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ３）が追加され、画像リスト表示部３４は、図１２（ａ３）に示したように、新規に登録された事後画像の調査レコード（調査ＩＤ＝４，写真番号＝Ｂ３）の写真欄１１５ａを追加した撮影画像リスト１１５を撮影画像リスト画面に再表示する。この場合、新たに追加される事後画像Ｂ３に対する事前画像は存在しないので、接写画像Ｂ３に対する事前画像の事前画像表示領域１９１は空となり、撮影種別表示領域１９４に「現況」の文字が濃色で表示される。   When the portable electronic device 1 is automatically determined to be in the “post-action image shooting state”, the user has selected (tapped) the current photo shooting button image 119 from the shooting image list screen of FIG. The same applies to the case. In this case, a new survey record (survey ID = 4, photo number = B3) is added to the survey management table of the photo management database 32 as shown in FIG. As shown in (a3), the captured image list 115 to which the photograph field 115a of the newly registered post-image survey record (survey ID = 4, photo number = B3) is added is displayed again on the captured image list screen. . In this case, since there is no pre-image for the newly added post-image B3, the pre-image display area 191 of the pre-image for the close-up image B3 is empty, and the “current” character is dark in the shooting type display area 194. Is displayed.

尚、携帯式電子デバイス１が「事前画像撮影状態」にあると自動判定している場合（例えば、図１２（ｃ）のように事後画像な撮影をまだ１回も行っていないような場合）においても、事後画像として新たに調査レコードを追加したい場合がある。このような場合には、携帯式電子デバイス１は、事前画像として新たに調査レコードを追加すべきか、事後画像として新たに調査レコードを追加すべきかについて、図８（ｄ）の撮影画像リスト画面において、ユーザにより現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０がシングルタップにより選択されたか、ダブルタップにより選択されたかによって判断する。シングルタップにより選択された場合には、携帯式電子デバイス１は、自動判定した「事前画像撮影状態」を維持する。一方、ダブルタップにより選択された場合には、携帯式電子デバイス１は、「事前画像撮影状態」から「事後画像撮影状態」に状態を変更し、あとは上述した通り、新たな事後画像を追加する処理を実行する。   When the portable electronic device 1 is automatically determined to be in the “previous image shooting state” (for example, when the subsequent image has not been shot yet as shown in FIG. 12C). However, there are cases where it is desired to add a new survey record as a post-mortem image. In such a case, the portable electronic device 1 determines whether a new survey record should be added as a prior image or a new survey record as a subsequent image on the captured image list screen of FIG. Judgment is made based on whether the user has selected the current state photography button image 119 or the external photography button image 120 by a single tap or a double tap. When the selection is made by a single tap, the portable electronic device 1 maintains the “previous image shooting state” automatically determined. On the other hand, when selected by double tap, the portable electronic device 1 changes the state from “pre-image shooting state” to “post-image shooting state”, and then adds a new post-image as described above. Execute the process.

本実施例では、ＲＦタグを利用して被写対象の位置の自動的な取り込みを行う実施例について説明する。本実施例の携帯式電子デバイス１のハードウェア構成は、実施例１の図１及び図２と同様である。また、機能構成についても、撮影位置演算部３３の位置検出機能と写真管理データベース３２の調査管理テーブルのテーブル構造を除き、実施例１の図３と同様である。従って、実施例１と同様の部分については説明を省略する。   In the present embodiment, an embodiment will be described in which an RF tag is used to automatically capture the position of an object to be imaged. The hardware configuration of the portable electronic device 1 of the present embodiment is the same as that of FIG. 1 and FIG. The functional configuration is the same as that of FIG. 3 of the first embodiment except for the position detection function of the photographing position calculation unit 33 and the table structure of the investigation management table of the photo management database 32. Therefore, description of the same parts as those in the first embodiment is omitted.

図１３は、実施例２の写真管理データベース３２における調査管理テーブルの構造を表す図である。実施例１の図４と比べて、“被写対象位置”フィールドが追加された点が異なり、それ以外は実施例１と同様である。この“被写対象位置”フィールドには、写真の被写対象（例えば、「亀裂・破損」，「縁切れ」，「剥離」，「隙間」，「ズレ」，「チリ切れ」，「漏水跡」等）の絶対位置（緯度・経度・高度）の情報が格納される。   FIG. 13 is a diagram illustrating the structure of the investigation management table in the photo management database 32 according to the second embodiment. Compared to FIG. 4 of the first embodiment, a “target position” field is added, and the rest is the same as the first embodiment. In this “object position” field, the object to be photographed (for example, “crack / breakage”, “edge break”, “peeling”, “clearance”, “deviation”, “dirt break”, “leakage trace” ") Is stored in absolute position information (latitude, longitude, altitude).

また、本実施例において、撮影位置演算部３３は、実施例１の場合と同様に、ＧＮＳＳモジュール４（及び気圧センサ９）により得られる位置情報又は近距離無線通信モジュール６を用いて実現されるＬＰＳにより得られる位置情報により現在の絶対位置（緯度・経度・高度）を検出する。また、方位センサ８により携帯式電子デバイス１の向き（方位ベクトル）を検出する。ここで、方位センサ８は、基本的には地磁気センサにより地磁気を３軸方向で計測することにより方位を検出するものであるが、地下街や建物内などのように地磁気の乱れが生じる環境下に於いては、加速度センサ７やジャイロセンサ１０により補正を行うことにより正確な方位を検出することができる（非特許文献７参照）。さらに、本実施例の撮影位置演算部３３は、被写対象の位置に設置されるＲＦタグまでの距離を検出し、携帯式電子デバイス１の向きからカメラデバイス３の撮影視軸の視軸方位を検出し、これらの検出された絶対位置、ＲＦタグまでの距離、視軸方位に基づき、ＲＦタグの絶対位置を算出する。この場合、ＲＦタグとして、本体に標準装備された近距離無線通信モジュール６に対応した周波数帯のものを使用してもよいし、ＲＦタグを読み取るための専用アダプタを本体に装着してこれを近距離無線通信モジュール６として使用してもよい。以下、この被写対象の位置に設置されるＲＦタグの絶対位置の検出について説明する。   In the present embodiment, the photographing position calculation unit 33 is realized by using the position information obtained by the GNSS module 4 (and the atmospheric pressure sensor 9) or the short-range wireless communication module 6 as in the case of the first embodiment. The current absolute position (latitude / longitude / altitude) is detected from position information obtained by LPS. Further, the direction (direction vector) of the portable electronic device 1 is detected by the direction sensor 8. Here, the azimuth sensor 8 basically detects the azimuth by measuring the terrestrial magnetism in three axial directions with a geomagnetic sensor. In this case, the correct azimuth can be detected by correcting with the acceleration sensor 7 or the gyro sensor 10 (see Non-Patent Document 7). Further, the shooting position calculation unit 33 of the present embodiment detects the distance to the RF tag installed at the position of the object to be imaged, and the visual axis direction of the shooting visual axis of the camera device 3 from the direction of the portable electronic device 1. Are detected, and the absolute position of the RF tag is calculated based on the detected absolute position, the distance to the RF tag, and the visual axis direction. In this case, an RF tag having a frequency band corresponding to the short-range wireless communication module 6 provided as a standard in the main body may be used, or a dedicated adapter for reading the RF tag is attached to the main body. The short-range wireless communication module 6 may be used. Hereinafter, detection of the absolute position of the RF tag installed at the position of the object to be imaged will be described.

図１４は、実施例２の携帯式電子デバイス１を用いて被写物件の撮影を行う様子の一例を示す図である。図１４（ａ）はＲＦタグ付きクラックスケールを用いて撮影する例、図１４（ｂ）はＲＦタグ付き指し棒を用いて撮影する例を示している。被写物件Ａは壁面Ｓに生じた亀裂であるとする。図１４（ａ）においては、被写物件Ａを撮影するにあたり、ユーザは被写物件Ａに、クラックスケール２１０を被写物件Ａに宛がう。ここで、クラックスケール２１０は、壁面Ｓに繰り返し貼剥可能なシール面を備え、ユーザは壁面Ｓにクラックスケール２１０を貼着した状態で撮影することができるものとする。クラックスケール２１０には、ＩＤ情報を埋め込んだＲＦタグ２１１を有しており、携帯式電子デバイス１の近距離無線通信モジュール６との間で無線通信を行うことが可能とされている。図１４（ｂ）は、クラックスケール２１０を被写物件Ａに貼着することが困難な場所（例えば、天井、土間など）の場合に指し棒２１２を用いる例である。撮影に当たり、ユーザの補助者が、先端にＲＦタグ２１１を内蔵した指し棒２１２を被写物件Ａに宛がう。   FIG. 14 is a diagram illustrating an example of a state in which the object to be photographed is photographed using the portable electronic device 1 according to the second embodiment. FIG. 14A shows an example of photographing using a crack scale with an RF tag, and FIG. 14B shows an example of photographing using a pointing stick with an RF tag. It is assumed that the object A is a crack generated in the wall surface S. In FIG. 14 (a), when shooting the object A, the user assigns the cracked object 210 to the object A and the crack scale 210. Here, the crack scale 210 is provided with a seal surface that can be repeatedly applied to the wall surface S, and the user can take a picture with the crack scale 210 attached to the wall surface S. The crack scale 210 includes an RF tag 211 in which ID information is embedded, and wireless communication can be performed with the short-range wireless communication module 6 of the portable electronic device 1. FIG. 14B is an example in which the pointing stick 212 is used in a place where it is difficult to attach the crack scale 210 to the object A (for example, a ceiling, a dirt). At the time of shooting, a user's assistant places a pointing stick 212 with a built-in RF tag 211 at the tip of the object A.

この状態で、撮影を行う（図７（ｃ），図８（ｃ）又は図９（ａ）においてシャッターボタン画像１０６を選択する）と、撮影位置演算部３３は、実施例１で説明したものと同様に、電子ビューファインダ画像、内部時計２５が出力する撮影日時情報、方位センサ８が出力する携帯式電子デバイス１の向き（方位ベクトル）、及びＧＮＳＳモジュール４（及び気圧センサ９）により得られる位置情報又は近距離無線通信モジュール６を用いて実現されるＬＰＳにより得られる位置情報により現在の絶対位置（緯度・経度・高度）を取り込む。そして、近距離無線通信モジュール６が、被写物件Ａの位置に設置されたＲＦタグ２１１との間で無線通信を行い、当該ＲＦタグ２１１までの距離Ｌを検出する。ＲＦタグ２１１までの距離検出技術は、現在、ＲＦＩＤ（radio frequency identifier）の技術分野に於いてタグリーダにおいて広く用いられている技術である（例えば、非特許文献６，特許文献５等参照）。例えば、近距離無線通信モジュール６がＲＦタグ２１１へ発射した送信波に対してＲＦタグ２１１から反射される反射波の強度から近距離無線通信モジュール６とＲＦタグ２１１との間の距離Ｌを検出したり、送信波と反射波との位相差から距離Ｌを検出したりすることが可能である。カメラデバイス３は携帯式電子デバイス１内に固定的に内蔵されているので、携帯式電子デバイス１の向きから、カメラデバイス３の撮影視軸の視軸方位ベクトルｕ＝（ｕｘ，ｕｙ，ｕｚ）（‖ｕ‖＝１）を算出することができる。従って、携帯式電子デバイス１の絶対座標Ｐ＝（ｐｘ，ｐｙ，ｐｚ）（緯度・経度・高度を絶対座標に換算したもの）と視軸方位ベクトルｕと距離Ｌから、ＲＦタグ２１１の絶対座標Ｑは、Ｑ＝Ｐ＋Ｌ・ｕにより容易に求めることができる。撮影位置演算部３３は、このようにして求めたＲＦタグ２１１の絶対位置情報（絶対座標Ｑを緯度・経度・高度に換算したもの）を出力する。事後画像取込部３７，新規追加画像取込部４０，又は接写画像取込部４２は、事前画像，事後画像，又は接写画像を画像ファイル記憶部３１に保存する際には、このＲＦタグ２１１の絶対位置情報と撮影日時情報とを当該画像に埋め込み保存する。また、同時に、写真管理データベース３２の調査管理テーブルに当該画像に関連するレコードを保存する際に、“被写対象位置”フィールドにこのＲＦタグ２１１の絶対位置情報を格納する。 When shooting is performed in this state (the shutter button image 106 is selected in FIG. 7C, FIG. 8C, or FIG. 9A), the shooting position calculation unit 33 is the same as that described in the first embodiment. Similarly, the electronic viewfinder image, the shooting date / time information output from the internal clock 25, the direction (direction vector) of the portable electronic device 1 output from the direction sensor 8, and the GNSS module 4 (and the atmospheric pressure sensor 9) are obtained. The current absolute position (latitude / longitude / altitude) is acquired from the position information or position information obtained by LPS realized using the short-range wireless communication module 6. Then, the short-range wireless communication module 6 performs wireless communication with the RF tag 211 installed at the position of the object A, and detects the distance L to the RF tag 211. The distance detection technology to the RF tag 211 is currently widely used in tag readers in the technical field of RFID (radio frequency identifier) (see, for example, Non-Patent Document 6 and Patent Document 5). For example, the distance L between the near field communication module 6 and the RF tag 211 is detected from the intensity of the reflected wave reflected from the RF tag 211 with respect to the transmission wave emitted from the near field communication module 6 to the RF tag 211. It is possible to detect the distance L from the phase difference between the transmitted wave and the reflected wave. Since the camera device 3 is fixedly incorporated in the portable electronic device 1, the viewing axis direction vector u = (u x , u y , of the photographing viewing axis of the camera device 3 is determined from the orientation of the portable electronic device 1. u z ) (‖u‖ = 1) can be calculated. Therefore, from the absolute coordinates P = (p x , p y , p z ) of the portable electronic device 1 (the latitude, longitude, and altitude converted into absolute coordinates), the visual axis direction vector u, and the distance L, the RF tag 211 Can be easily obtained by Q = P + L · u. The photographing position calculation unit 33 outputs the absolute position information (the absolute coordinate Q converted into latitude, longitude, and altitude) of the RF tag 211 obtained in this way. The post-image capture unit 37, the newly added image capture unit 40, or the close-up image capture unit 42 saves the pre-image, the post-image, or the close-up image in the image file storage unit 31. The absolute position information and the shooting date and time information are embedded and stored in the image. At the same time, when a record related to the image is stored in the investigation management table of the photo management database 32, the absolute position information of the RF tag 211 is stored in the “target position” field.

このように、本実施例の携帯式電子デバイス１では、撮影対象である被写物件Ａの位置に設置されるＲＦタグ２１１の絶対位置情報を撮影時に取り込み、これを撮影した画像に埋め込むと共に写真管理データベース３２当該画像と関連づけて保管することにより、被写物件Ａの位置を、別に準備された建物等の図面に一々記入して管理する必要がなくなり、管理作業を著しく省力化することが可能となる。   As described above, in the portable electronic device 1 according to the present embodiment, the absolute position information of the RF tag 211 installed at the position of the object A to be photographed is captured at the time of photographing, and is embedded in the photographed image and photographed. Management database 32 By storing the image in association with the image, it is no longer necessary to manage the location of the object A by writing it separately on a separately prepared drawing of the building, etc., and management work can be saved significantly. It becomes.

本実施例では、事後画像の撮影時において撮影アングルが事前画像と一致した場合に報知し又は自動撮影する実施例について説明する。本実施例の携帯式電子デバイス１のハードウェア構成は、実施例１の図１及び図２と同様である。また、機能構成についても、下敷付ファインダ画面表示部３６及び事後画像取込部３７の動作の一部を除き、実施例１の図３と同様である。従って、実施例１と同様の部分については説明を省略する。   In the present embodiment, a description will be given of an embodiment in which notification or automatic shooting is performed when the shooting angle coincides with the previous image at the time of shooting the posterior image. The hardware configuration of the portable electronic device 1 of the present embodiment is the same as that of FIG. 1 and FIG. Also, the functional configuration is the same as that of FIG. 3 of the first embodiment except for a part of the operations of the finder screen display unit 36 with the underlay and the post image capturing unit 37. Therefore, description of the same parts as those in the first embodiment is omitted.

本実施例の下敷付ファインダ画面表示部３６は、図９（ａ）の電子ビューファインダ画面に於いて、ビューファインダ領域２０１に表示された下敷画像の元である事前画像（以下「対応事前画像」という。）Ｉ１に対する電子ビューファインダ画像Ｉ２（ｔ）（ｔは時刻を表す。）の位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））をリアルタイムに演算する。ここで、位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））＝（Ｐ（Ｉ１，Ｉ２（ｔ）），Ｒ（Ｉ１，Ｉ２（ｔ）））は、平行移動成分Ｐ（Ｉ１，Ｉ２（ｔ））と回転移動成分Ｒ（Ｉ１，Ｉ２（ｔ））からなる。また、位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））の演算は公知の方法を用いる。例えば、対応事前画像Ｉ１と電子ビューファインダ画像Ｉ２（ｔ）の画像相関演算を行って相関係数の最も大きくなる位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））を算出する方法等を用いることができる。また、被写体追跡等の計算で用いられるテンプレートマッチング（ブロックマッチング）法、アクティブ探索法、Mean Shift法、パーティクルフィルタなどの公知の手法を応用して用いることもできる（非特許文献８参照）。   The underlay finder screen display unit 36 of the present embodiment displays a pre-image (hereinafter referred to as “corresponding pre-image”) that is the source of the underlay image displayed in the viewfinder area 201 on the electronic viewfinder screen of FIG. The displacement vector V (I1, I2 (t)) of the electronic viewfinder image I2 (t) (t represents time) for I1 is calculated in real time. Here, the displacement vector V (I1, I2 (t)) = (P (I1, I2 (t)), R (I1, I2 (t))) is a translation component P (I1, I2 (t)). ) And a rotational movement component R (I1, I2 (t)). Also, a known method is used to calculate the positional deviation vector V (I1, I2 (t)). For example, a method of calculating a positional deviation vector V (I1, I2 (t)) having the largest correlation coefficient by performing an image correlation operation between the corresponding prior image I1 and the electronic viewfinder image I2 (t) is used. it can. Further, a known method such as a template matching (block matching) method, an active search method, a mean shift method, or a particle filter that is used in calculation of subject tracking can be applied (see Non-Patent Document 8).

そして、下敷付ファインダ画面表示部３６は、図１５（ａ）に示したように、算出された位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））に応じて、携帯式電子デバイス１の向きを動かすべき方向を指示する撮影アングル補正指示マーク１５５ａ，１５５ｂをタッチスクリーンデバイス２の画面内に表示する。ここで、撮影アングル補正指示マーク１５５ａは、カメラデバイス３を平行移動すべき方向を表しており、撮影アングル補正指示マーク１５５ｂは、カメラデバイス３を回転すべき方向を表している。このように、撮影アングル補正指示マーク１５５ａ，１５５ｂを表示することによって、ユーザは、携帯式電子デバイス１をどの方向に動かして撮影アングルを合わせればよいのかを一瞥して視認することができ、位置合わせ作業の効率が向上する。   The underlay finder screen display unit 36 moves the direction of the portable electronic device 1 according to the calculated displacement vector V (I1, I2 (t)) as shown in FIG. Shooting angle correction instruction marks 155a and 155b that indicate the power direction are displayed on the screen of the touch screen device 2. Here, the shooting angle correction instruction mark 155a represents the direction in which the camera device 3 should be translated, and the shooting angle correction instruction mark 155b represents the direction in which the camera device 3 should be rotated. In this way, by displaying the shooting angle correction instruction marks 155a and 155b, the user can see at a glance which direction the portable electronic device 1 should be moved to match the shooting angle, The efficiency of the alignment work is improved.

一方、事後画像取込部３７は、下敷付ファインダ画面表示部３６がリアルタイムに算出する位置ずれベクトルＶ（Ｉ１，Ｉ２（ｔ））を参照して、下敷画像に対する電子ビューファインダ画像の位置ずれ量（位置ずれベクトルのノルム）‖Ｖ（Ｉ１，Ｉ２（ｔ））‖が所定の閾値εを下回ったか否かを検査する。尚、閾値εは、実際のブレの許容量を考慮して適宜に設定される。そして、閾値εを下回った場合、事後画像取込部３７は、図１５（ｂ）に示すように、撮影アングルが合致したことを報知する撮影アングル合致マーク１５６をタッチスクリーンデバイス２の画面内に表示する。これにより、ユーザは、撮影アングルがうまく合致したか否かを一瞥して即座に視認することができ、位置合わせ作業の効率が向上する。   On the other hand, the posterior image capturing unit 37 refers to the displacement vector V (I1, I2 (t)) calculated in real time by the finder screen display unit 36 with the underlying sheet, and the positional displacement amount of the electronic viewfinder image with respect to the underlying image. It is checked whether (norm of misregistration vector) ‖ V (I1, I2 (t)) 下 is below a predetermined threshold ε. Note that the threshold value ε is appropriately set in consideration of the actual allowable amount of blurring. When the value falls below the threshold ε, the posterior image capturing unit 37 displays a shooting angle match mark 156 informing that the shooting angle is matched in the screen of the touch screen device 2 as shown in FIG. indicate. Thereby, the user can glance at whether or not the shooting angles are well matched and can immediately visually recognize it, thereby improving the efficiency of the alignment work.

尚、本実施例では、事後画像取込部３７は、下敷画像に対する電子ビューファインダ画像の位置ずれ量‖Ｖ（Ｉ１，Ｉ２（ｔ））‖が閾値εを下回った場合に撮影アングル合致マーク１５６を表示してユーザに報知する構成例について示したが、撮影アングル合致マーク１５６を表示する代わりにアラーム（電子音）を鳴らして報知するようにすることもできる。   In this embodiment, the posterior image capturing unit 37 detects the shooting angle coincidence mark 156 when the amount of displacement ‖V (I1, I2 (t)) ‖ of the electronic viewfinder image with respect to the underlying image is less than the threshold ε. However, instead of displaying the shooting angle match mark 156, an alarm (electronic sound) may be sounded to notify the user.

また、撮影アングル合致マーク１５６等で報知する代わりに、自動的にシャッターを切り、位置ずれ量‖Ｖ（Ｉ１，Ｉ２（ｔ））‖が閾値εを下回った時点ｔ２の電子ビューファインダ画像Ｉ２（ｔ２）を事後画像として取り込むとともに、内部時計２５から取り込まれる当該事後画像の撮影日時情報、及び対応事前画像の撮影場所情報を取り込んで、図８（ａ）の編集画面へ移行するように構成することもできる。   Further, instead of notifying with the shooting angle coincidence mark 156 or the like, the shutter is automatically released, and the electronic viewfinder image I2 (at time t2 when the positional deviation amount 位置 V (I1, I2 (t)) ‖ falls below the threshold ε ( In addition to capturing t2) as a posterior image, the photographic date / time information of the posterior image captured from the internal clock 25 and the shooting location information of the corresponding pre-image are captured, and the process proceeds to the editing screen of FIG. You can also

本実施例では、本発明の携帯式電子デバイスを、ダムやトンネル等における亀裂等の経時変化を記録する定点調査に応用する例について説明する。工損調査の場合との違いは、工損調査の場合には同じ調査地点について事前／事後の２つの画像を管理すればよいが、定点調査の場合には、同じ調査地点について、経時的に記録される２つ以上の画像を管理する必要がある点である。   In this embodiment, an example will be described in which the portable electronic device of the present invention is applied to a fixed point survey for recording a change over time such as a crack in a dam or a tunnel. The difference from the case of the industrial damage survey is that in the case of the industrial damage investigation, it is only necessary to manage the two images before and after the same survey point. It is necessary to manage two or more images to be recorded.

本実施例の携帯式電子デバイス１は、画像リスト表示部３４の機能の一部を除き、基本的には実施例２の携帯式電子デバイス１と同様である。ここでは、本実施例の携帯式電子デバイス１の実施例２と相違する点について説明する。   The portable electronic device 1 of the present embodiment is basically the same as the portable electronic device 1 of the second embodiment, except for a part of the function of the image list display unit 34. Here, differences from the second embodiment of the portable electronic device 1 of the present embodiment will be described.

本実施例の携帯式電子デバイス１においては、図６（ｂ）（図７（ａ））に示したような撮影画像リスト画面において、現況写真撮影ボタン画像１１９及び外部写真撮影ボタン画像１２０に加えて、もう一つ定点写真撮影ボタン画像１２１が追加される（図１８参照）。ユーザが、図１８の撮影画像リスト画面において、調査写真の追加撮影を行う場合、タッチスクリーンデバイス２の当該撮影画像リスト画面の現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０若しくは定点写真撮影ボタン画像１２１（これら３つを纏めて「リスト追加ボタン画像」という。）を選択する。ここで、現況写真撮影ボタン画像１１９が選択された場合には、現況写真撮影指示状態となり、外部写真撮影ボタン画像１２０が選択された場合には、外部写真撮影指示状態となり、外部写真撮影ボタン画像１２０が選択された場合には、定点写真撮影指示状態となる。現況写真撮影ボタン画像１１９又は外部写真撮影ボタン画像１２０若しくは定点写真撮影ボタン画像１２１が選択されると、白板表示・編集部４３は、タッチスクリーンデバイス２上に図７（ｂ）の撮影地点情報入力画面を表示する。このように、本実施例では、新たに「定点写真撮影」のモードが追加される。   In the portable electronic device 1 according to the present embodiment, in addition to the current photography button image 119 and the external photography button image 120 on the photographed image list screen as shown in FIG. 6B (FIG. 7A). Then, another fixed point photography button image 121 is added (see FIG. 18). When the user performs additional photography of a survey photograph on the photographed image list screen of FIG. 18, a current photograph button image 119 or an external photograph button button 120 or a fixed point photograph button on the photographed image list screen of the touch screen device 2. The image 121 (these three are collectively referred to as “list addition button image”) is selected. Here, when the current state photography button image 119 is selected, the current state photography instruction state is entered, and when the external photography button image 120 is selected, the state is an external photography instruction state, and the outside photography button image is displayed. When 120 is selected, a fixed-point photography instruction state is entered. When the current state photography button image 119, the external photography button image 120, or the fixed point photography button image 121 is selected, the whiteboard display / editing unit 43 inputs the photographing point information of FIG. 7B on the touch screen device 2. Display the screen. As described above, in this embodiment, a mode of “fixed point photography” is newly added.

本実施例の携帯式電子デバイス１における写真管理データベース３２の構造は図１３と同様である。図１６は、実施例４の携帯式電子デバイス１における、写真管理データベース３２の調査管理テーブルの具体的なデータ内容の一例を表す図である。図１６（ａ）は、調査管理テーブルの内容の具体例、図１６（ｂ）は調査管理テーブル内に格納される調査レコードのうち、一つの定点に対する一連の調査レコード間の関係を表した図である。図１６に示したように、定点調査（定点写真撮影指示状態）に於いては調査管理テーブルの“撮影種別”フィールドは「定点」に設定される。また、“事前調査ＩＤ”フィールドには、その調査レコードの１つ前に行った調査の調査レコードの調査ＩＤが格納される。例えば、或る定点Ａについて、２０１５年３月１日に第１回目、２０１５年５月１日に第２回目、２０１５年７月１日に第３回目の定点調査を行った場合、定点Ａの第１回目の定点調査の調査レコードの“事前調査ＩＤ”には無効値（ＮＵＬＬ）が設定され（図１６の調査ＩＤ（１）の調査レコードを参照）、定点Ａの第２回目の定点調査の調査レコードの“事前調査ＩＤ”には第１回目の調査レコードの調査ＩＤが設定され（図１６の調査ＩＤ（１４）の調査レコードを参照）、定点Ａの第３回目の定点調査の調査レコードの“事前調査ＩＤ”には第２回目の調査レコードの調査ＩＤが設定される（図１６の調査ＩＤ（３２）の調査レコードを参照）。このようにして、一つの定点に対する一連の調査レコード間の関係付けが行われる。   The structure of the photo management database 32 in the portable electronic device 1 of this embodiment is the same as that shown in FIG. FIG. 16 is a diagram illustrating an example of specific data contents of the investigation management table of the photo management database 32 in the portable electronic device 1 according to the fourth embodiment. FIG. 16A shows a specific example of the contents of the survey management table, and FIG. 16B shows the relationship between a series of survey records for one fixed point among the survey records stored in the survey management table. It is. As shown in FIG. 16, in the fixed point survey (fixed point photography instruction state), the “shooting type” field of the survey management table is set to “fixed point”. In the “preliminary survey ID” field, the survey ID of the survey record of the survey performed immediately before the survey record is stored. For example, when a fixed point A is subjected to the first fixed point survey on March 1, 2015, the second fixed point on May 1, 2015, and the third fixed point survey on July 1, 2015, the fixed point A An invalid value (NULL) is set in the “preliminary survey ID” of the survey record of the first fixed point survey of (see the survey record of survey ID (1) in FIG. 16), and the second fixed point of fixed point A The survey ID of the first survey record is set in the “preliminary survey ID” of the survey record of the survey (refer to the survey record of survey ID (14) in FIG. 16), and the third fixed point survey of fixed point A The survey ID of the second survey record is set in the “preliminary survey ID” of the survey record (see the survey record of survey ID (32) in FIG. 16). In this way, the relationship between a series of survey records for one fixed point is performed.

図１７は、実施例４の携帯式電子デバイス１における撮影画像リスト画面の中の定点調査に対する一つの写真欄１１５ａの表示例を表す図である。尚、本実施例においても実施例２と同様に、撮影画像リスト画面は図８（ｄ）と同様に表示され、図１７は撮影画像リスト画面内の撮影画像リスト１１５中の一つの写真欄１１５ａを表している。図１７（ａ）は、今回の調査における事後画像の撮影が未完了な状態の写真欄１１５ａ、（ｂ）は今回の調査における事後画像の撮影が完了した状態の写真欄１１５ａである。   FIG. 17 is a diagram illustrating a display example of one photo column 115a for a fixed point survey in the photographed image list screen in the portable electronic device 1 according to the fourth embodiment. In this embodiment, as in the second embodiment, the photographed image list screen is displayed in the same manner as in FIG. 8D, and FIG. 17 shows one photo field 115a in the photographed image list 115 in the photographed image list screen. Represents. FIG. 17A shows a photo column 115a in a state where photographing of the posterior image in the current survey is not completed, and FIG. 17B shows a photo column 115a in a state where photographing of the posterior image in the current survey is completed.

画像リスト表示部３４は、“撮影種別”が「定点」の調査レコードを撮影画像リスト１１５に表示する場合、まず、今回の調査の調査日を、内部時計２５が出力する現在の日時に設定する。そして、調査管理テーブルから“写真番号”が同一の調査レコードのレコードセットを抽出し、抽出されたレコードセット中に“日時”が調査日と同一の調査レコードがあれば、そのレコードセットの一連の定点調査において事後画像の撮影は完了した状態であると判断する。抽出されたレコードセット中に“日時”が調査日と同一の調査レコードがなければ、そのレコードセットの一連の定点調査において事後画像の撮影は未完了の状態であると判断する。   The image list display unit 34 first sets the survey date of the current survey to the current date and time output by the internal clock 25 when displaying the survey record whose “imaging type” is “fixed” in the captured image list 115. . Then, a record set of survey records having the same “photo number” is extracted from the survey management table, and if there is a survey record having the same “date and time” as the survey date in the extracted record set, a series of records of the record set is extracted. In the fixed point survey, it is determined that the shooting of the posterior image is completed. If there is no survey record whose “date and time” is the same as the survey date in the extracted record set, it is determined that the posterior image has not been captured in a series of fixed point surveys of that record set.

事後画像の撮影が未完了の状態であると判断された場合、画像リスト表示部３４は、当該レコードセット中で“日時”が最も後の調査レコード（以下「末尾調査レコード」という。）を抽出し、その末尾調査レコードに対する画像ファイルを画像ファイル記憶部３１から読み出して、当該レコードセットに対する写真欄１１５ａの事前画像表示領域１９１に表示する。また、当該レコードセットに対する写真欄１１５ａの事後画像表示領域１９２には、未撮影示教画像１８１を表示する（図１７（ａ）参照）。   When it is determined that the shooting of the subsequent image is incomplete, the image list display unit 34 extracts the survey record with the latest “date and time” in the record set (hereinafter referred to as “tail survey record”). Then, the image file for the end survey record is read from the image file storage unit 31 and displayed in the pre-image display area 191 of the photo column 115a for the record set. In addition, the unphotographed instructional image 181 is displayed in the posterior image display area 192 of the photo column 115a for the record set (see FIG. 17A).

一方、事後画像の撮影が完了の状態であると判断された場合、画像リスト表示部３４は、当該レコードセット中で“日時”が調査日と同一の調査レコード（以下「末尾調査レコード」という。）を抽出し、その末尾調査レコードに対する画像ファイルを画像ファイル記憶部３１から読み出して、当該レコードセットに対する写真欄１１５ａの事後画像表示領域１９２に表示する。また、画像リスト表示部３４は、当該レコードセット中で“日時”が調査日より前のもの（以下これらをまとめて「事前画像」という。）のうち最も後の調査レコード（以下「第２末尾調査レコード」という。）を抽出し、その第２末尾調査レコードに対する画像ファイルを画像ファイル記憶部３１から読み出して、当該レコードセットに対する写真欄１１５ａの事前画像表示領域１９１に表示する。   On the other hand, when it is determined that the posterior image capturing is completed, the image list display unit 34 refers to a survey record in which “date and time” is the same as the survey date in the record set (hereinafter referred to as “tail survey record”). ) Is extracted from the image file storage unit 31 and displayed in the posterior image display area 192 of the photo column 115a for the record set. In addition, the image list display unit 34 has the latest survey record (hereinafter referred to as “second end”) in the record set whose “date and time” is earlier than the survey date (hereinafter collectively referred to as “preliminary image”). "Investigation record") is extracted, and the image file for the second end investigation record is read from the image file storage unit 31 and displayed in the pre-image display area 191 of the photo column 115a for the record set.

また、画像リスト表示部３４は、画像リスト表示部３４は、一連の定点調査のレコードセットに対する写真欄１１５ａの写真番号表示領域１９５には「定点」と表示し、場所・被写物件名称表示領域１９３には、場所名称及び被写物件名称を表示するとともに、事前画像表示領域１９１に表示されている画像の“日付”を表示する。更に、事前画像表示領域１９１の左右に、レコード移動ボタン画像１９７，１９８を表示する。   The image list display unit 34 displays “fixed point” in the photo number display area 195 of the photo column 115a for a series of fixed point survey record sets, and the place / photographed property name display area. In 193, the place name and the name of the object to be copied are displayed, and the “date” of the image displayed in the pre-image display area 191 is displayed. Further, record move button images 197 and 198 are displayed on the left and right of the prior image display area 191.

図１７（ａ）又は図１７（ｂ）において、ユーザによりレコード移動ボタン画像１９７が選択されると、画像リスト表示部３４は、事前画像の中で、現在、事前画像表示領域１９１に表示されている画像よりも１つ前の撮影日時の事前画像を事前画像表示領域１９１に表示し、それに合わせて場所・被写物件名称表示領域１９３の表示を更新する。ユーザによりレコード移動ボタン画像１９８が選択されると、画像リスト表示部３４は、事前画像の中で、現在、事前画像表示領域１９１に表示されている画像よりも１つ後の撮影日時の事前画像を事前画像表示領域１９１に表示し、それに合わせて場所・被写物件名称表示領域１９３の表示を更新する。このようにして、ユーザは事前画像の表示を切り替えて確認することができる。   In FIG. 17A or FIG. 17B, when the record movement button image 197 is selected by the user, the image list display unit 34 is currently displayed in the previous image display area 191 in the previous image. The previous image of the shooting date and time before the existing image is displayed in the previous image display area 191, and the display of the place / photographed property name display area 193 is updated accordingly. When the record movement button image 198 is selected by the user, the image list display unit 34 displays the previous image of the shooting date and time one after the image currently displayed in the previous image display area 191 in the previous image. Is displayed in the prior image display area 191 and the display of the place / photographed article name display area 193 is updated accordingly. In this way, the user can switch and confirm the display of the prior image.

また、図１７（ａ）においてユーザにより未撮影示教画像１８１が選択されると、実施例１のステップ７で説明した手順と同様の手順により、事後画像の撮影動作が実行される。尚、このとき下敷画像は、未撮影示教画像１８１が選択された時点で事前画像表示領域１９１に表示されている画像が用いて作成される。   Further, when the unphotographed instruction image 181 is selected by the user in FIG. 17A, the posterior image photographing operation is executed by the same procedure as that described in step 7 of the first embodiment. At this time, the base image is created using the image displayed in the prior image display area 191 when the unphotographed instruction image 181 is selected.

以上のように、本発明の携帯式電子デバイスは、同一の地点を複数回に亘って繰り返し撮影し記録する定点調査についても適用することが出来る。   As described above, the portable electronic device of the present invention can also be applied to a fixed point survey in which the same spot is repeatedly photographed and recorded a plurality of times.

本実施例では、さらに、被写体サイズ情報の自動計算及び記録機能をもたせた携帯式電子デバイスの実施例について説明する。本実施例における携帯式電子デバイスの構成は、基本的には実施例１と同様であるので、ここでは実施例１と相違する点を中心に説明する。尚、本実施例では、本発明に係る携帯式電子デバイスを工損調査に適用した一例について説明する。   In the present embodiment, an embodiment of a portable electronic device having an automatic calculation and recording function of subject size information will be described. Since the configuration of the portable electronic device in the present embodiment is basically the same as that of the first embodiment, differences from the first embodiment will be mainly described here. In the present embodiment, an example in which the portable electronic device according to the present invention is applied to the industrial damage investigation will be described.

図１９は、図１の携帯式電子デバイスにアプリケーション・プログラムをインストールして構成される実施例５の携帯式電子デバイスの機能構成を表すブロック図である。図１９において、タッチスクリーンデバイス２、カメラデバイス３、ＧＮＳＳモジュール４、近距離無線通信モジュール６、加速度センサ７、方位センサ８、気圧センサ９、ジャイロセンサ１０、内部時計２５、画像ファイル記憶部３１、写真管理データベース３２、撮影位置演算部３３、画像リスト表示部３４、撮影済画像表示部３５、下敷付ファインダ画面表示部３６、事後画像取込部３７、新地点レコード追加部３８、通常ファインダ画面表示部３９、新規追加画像取込部４０、接写ファインダ画面表示部４１、接写画像取込部４２、白板表示・編集部４３、及び画像編集部４４は、図３の同符号の構成部分に対応している。本実施例では、新たにサイズ換算比算出部４５及びサイズ計測部４６が追加されている。   FIG. 19 is a block diagram illustrating a functional configuration of the portable electronic device of the fifth embodiment configured by installing an application program in the portable electronic device of FIG. 19, the touch screen device 2, the camera device 3, the GNSS module 4, the short-range wireless communication module 6, the acceleration sensor 7, the direction sensor 8, the atmospheric pressure sensor 9, the gyro sensor 10, the internal clock 25, the image file storage unit 31, Photo management database 32, photographing position calculation unit 33, image list display unit 34, photographed image display unit 35, underlay finder screen display unit 36, post image capture unit 37, new point record addition unit 38, normal finder screen display The unit 39, the newly added image capturing unit 40, the close-up finder screen display unit 41, the close-up image capturing unit 42, the whiteboard display / editing unit 43, and the image editing unit 44 correspond to the components having the same reference numerals in FIG. ing. In the present embodiment, a size conversion ratio calculation unit 45 and a size measurement unit 46 are newly added.

サイズ換算比算出部４５は、事後画像取込部３７、新規追加画像取込部４０、又は接写画像取込部４２により事後画像、事前画像、又は現況画像として取り込まれる撮影画像において、予め登録されたスケールの基準となるスケール基準画像を探索し、当該スケール基準画像が索出された場合には、撮影画像内におけるスケール基準画像のサイズに基づき、撮影画像上のサイズに対する実際の被写物件Ａのサイズの比であるサイズ換算比Ｒを算出する。   The size conversion ratio calculation unit 45 is registered in advance in a captured image captured as a posterior image, a prior image, or a current image by the posterior image capturing unit 37, the newly added image capturing unit 40, or the close-up image capturing unit 42. When a scale reference image serving as a reference for the scale is searched and the scale reference image is searched, the actual object A for the size on the photographed image is based on the size of the scale reference image in the photographed image. The size conversion ratio R, which is the ratio of the sizes of, is calculated.

サイズ計測部４６は、サイズ換算比算出部４５によりサイズ換算比が算出された場合において、画像編集部４４によりタッチスクリーンデバイス２上に表示された画像編集画面上の撮影画像で、ユーザによりタッチスクリーンデバイス２を用いて２点が指定された場合に、撮影画像上における当該２点間の距離Ｌ１を算出する。そして、当該距離Ｌ１にサイズ換算比Ｒを乗じて、実際の被写物件Ａにおける当該２点間の距離Ｌ２を算出し、画像編集画面内に表示する。   When the size conversion ratio is calculated by the size conversion ratio calculation unit 45, the size measurement unit 46 is a captured image on the image editing screen displayed on the touch screen device 2 by the image editing unit 44, and is touched by the user. When two points are designated using the device 2, a distance L1 between the two points on the captured image is calculated. Then, the distance L1 is multiplied by the size conversion ratio R to calculate the distance L2 between the two points in the actual object A and displayed in the image editing screen.

以上のように構成された本実施例の携帯式電子デバイスにおいて、以下、被写体サイズ情報の自動計算及び記録機能を中心とする動作について説明する。本実施例に於いて、被写体サイズ情報の自動計算を実施する場合には、被写物件Ａの撮影時に、スケールの基準となるスケール基準物Ｐを被写物件Ａとともに撮影する必要がある。図２０は、被写物件Ａとともにスケール基準物Ｐを撮影する例を示した図である。本実施例に於いては、スケール基準物Ｐとして、図２０（ｂ）に示したような、スライドケース付のクラックスケール２１０を用いている。このクラックスケール２１０は、スライドケース２１０ａと目盛板２１０ｂとからなる。目盛板２１０ｂは無色透明の樹脂により撓曲自在に形成され、長方形のシート状に形成され、長辺に沿って目盛りが表示されている。スライドケース２１０ａは偏平長尺箱状を成し、中央に長方形の貫通窓２１０ｃが形成され、左右側面に目盛板２１０ｂが挿通する挿通孔が形成されている。目盛板２１０ｂは、スライドケース２１０ａの左右側面の挿通孔を通して、スライドケース２１０ａに左右に摺動自在に装着される。また、スライドケース２１０ａの背面には粘着部が設けられており、被写物件Ａの在る壁面Ｓに対して貼剥自在とされている。さらに、スライドケース２１０ａの正面の貫通窓２１０ｃの左右には、検出マーク２１０ｄ，２１０ｄが表示されている。この検出マーク２１０ｄ，２１０ｄは、撮影画像内においてスケール基準画像を識別するためのマークであり、例えば、二次元バーコードや特徴的図形のように、他の部分との識別が容易な特徴的なマークとされている。撮影の際には、図２０（ａ）に示したように、罅割れ等の被写物件Ａの中央付近にクラックスケール２１０を貼着して、目盛板２１０ｂの目盛りを被写物件Ａの幅に合わせた状態として、これを携帯式電子デバイス１のカメラデバイス３により撮影する。このとき、カメラデバイス３のレンズ収差等による撮影画像上でのサイズ換算計算の誤差を少なくするため、できるだけクラックスケール２１０がカメラデバイス３の視軸上となるようにし、且つできるだけカメラデバイス３の視軸が壁面Ｓに垂直となるようにして撮影する。   In the portable electronic device of the present embodiment configured as described above, the operation centering on the automatic calculation and recording function of subject size information will be described below. In the present embodiment, when automatic calculation of subject size information is performed, it is necessary to photograph the scale reference object P, which serves as a scale reference, together with the object A when the object A is photographed. FIG. 20 is a diagram illustrating an example of photographing the scale reference object P together with the object A to be photographed. In the present embodiment, a crack scale 210 with a slide case as shown in FIG. The crack scale 210 includes a slide case 210a and a scale plate 210b. The scale plate 210b is formed of a colorless and transparent resin so as to be freely bent, is formed in a rectangular sheet shape, and scales are displayed along the long sides. The slide case 210a has a flat long box shape, a rectangular through window 210c is formed at the center, and an insertion hole through which the scale plate 210b is inserted is formed on the left and right side surfaces. The scale plate 210b is slidably attached to the slide case 210a through the insertion holes on the left and right side surfaces of the slide case 210a. Moreover, the adhesive part is provided in the back surface of the slide case 210a, and it can be peeled off with respect to the wall surface S in which the to-be-photographed object A exists. Furthermore, detection marks 210d and 210d are displayed on the left and right of the through window 210c in front of the slide case 210a. The detection marks 210d and 210d are marks for identifying the scale reference image in the photographed image. For example, the detection marks 210d and 210d are characteristic features that can be easily distinguished from other parts such as a two-dimensional bar code and a characteristic figure. It is marked. At the time of shooting, as shown in FIG. 20A, a crack scale 210 is attached near the center of the object A to be cracked, and the scale of the scale plate 210b is the width of the object A to be photographed. This is photographed by the camera device 3 of the portable electronic device 1 as a state matched to the above. At this time, in order to reduce the error in the size conversion calculation on the photographed image due to the lens aberration or the like of the camera device 3, the crack scale 210 should be on the visual axis of the camera device 3 as much as possible and the view of the camera device 3 as much as possible. Photographing is performed so that the axis is perpendicular to the wall surface S.

このようにして、図７（ｃ）又は図９（ａ）に示した電子ビューファインダ画面において、ユーザにより、タッチスクリーンデバイス２からシャッターボタン画像１０６が選択されると、新規追加画像取込部４０又は事後画像取込部３７若しくは接写画像取込部４２は、その選択時点の電子ビューファインダ画像を事前画像として取り込むとともに、撮影位置演算部３３が出力する現在の位置情報及び内部時計２５が出力する現在の日時情報を取り込む。そして、本実施例における画像編集部４４は、タッチスクリーンデバイス２上に図２１（ａ）の画像編集画面を表示する。画像編集画面において、中央の画像表示領域１６１に取り込まれた事前画像が表示され、その左右上下隅の何れかの隅に白板画像１５３が重畳表示され、その白板画像１５３は、ユーザがタッチスクリーンデバイス２上で当該白板画像１５３をスワイプすることにより、画像表示領域１６１内での位置を移動させることができる点は、実施例１と同様である。また、画像表示領域１６１の右側には、編集動作選択ボタン画像１６２、再撮影ボタン画像１０８、保存ボタン画像１３０が表示され、ユーザがこの編集動作選択ボタン画像１６２をタップすることによって、に図９（ａ）の画像編集画面（ポインタ編集モードの画像編集画面）と図８（ｂ）の画像編集画面（ペン編集モードの画像編集画面）とがトグル動作で切り替わる点も、実施例１と同様である。本実施例では、これに加えて、画像編集部４４は、画像表示領域１６１の右側に、ポインタグループ選択ボタン画像１６５及び測定モード選択ボタン画像１６６を表示する。このポインタグループ選択ボタン画像１６５及び測定モード選択ボタン画像１６６は、ポインタ編集モードの画像編集画面においてのみ表示される。   In this way, when the user selects the shutter button image 106 from the touch screen device 2 on the electronic viewfinder screen shown in FIG. 7C or 9A, the newly added image capturing unit 40 is selected. Alternatively, the posterior image capturing unit 37 or the close-up image capturing unit 42 captures the electronic viewfinder image at the time of selection as a pre-image, and outputs the current position information output from the photographing position calculation unit 33 and the internal clock 25. Capture the current date and time information. Then, the image editing unit 44 in this embodiment displays the image editing screen in FIG. 21A on the touch screen device 2. In the image editing screen, the pre-image captured in the central image display area 161 is displayed, and a white board image 153 is superimposed and displayed at any one of the left, right, upper and lower corners. The white board image 153 is displayed on the touch screen device by the user. The position in the image display area 161 can be moved by swiping the white board image 153 on the same as in the first embodiment. Also, on the right side of the image display area 161, an editing operation selection button image 162, a re-shooting button image 108, and a save button image 130 are displayed. When the user taps the editing operation selection button image 162, FIG. Similar to the first embodiment, the image editing screen (a) (image editing screen in the pointer editing mode) and the image editing screen (image editing screen in the pen editing mode) in FIG. is there. In this embodiment, in addition to this, the image editing unit 44 displays a pointer group selection button image 165 and a measurement mode selection button image 166 on the right side of the image display area 161. The pointer group selection button image 165 and the measurement mode selection button image 166 are displayed only on the image editing screen in the pointer editing mode.

ポインタグループ選択ボタン画像１６５は、矢印画像（ポインタ）のグループを選択するパレットボタン画像である。矢印画像のグループは、画像編集画面上では色により表示される。ユーザは、ポインタグループ選択ボタン画像１６５に表示されたパレットの中から色を選択することにより、編集に使用する矢印画像のグループ（色）を選択することができる。測定モード選択ボタン画像１６６は、距離測定モードと非測定モードとを切り替えるためのトグルボタンである。ここで、「距離測定モード」とは、サイズ換算比算出部４５及びサイズ計測部４６により被写体サイズ情報の自動計算及び記録を実行する動作モードをいい、「非測定モード」とは、被写体サイズ情報の自動計算及び記録を実行しない動作モードをいう。ユーザがタッチスクリーンデバイス２上で測定モード選択ボタン画像１６６をタップすることによって、距離測定モードと非測定モードとを交互に切り替えることができる。尚、距離測定モードになると測定モード選択ボタン画像１６６の色は選択色（明濃色）に変更され、非測定モードになると測定モード選択ボタン画像１６６の色は非選択色（暗淡色）に変更される。   The pointer group selection button image 165 is a palette button image for selecting a group of arrow images (pointers). The group of arrow images is displayed in color on the image editing screen. The user can select a group (color) of arrow images used for editing by selecting a color from the palette displayed on the pointer group selection button image 165. The measurement mode selection button image 166 is a toggle button for switching between the distance measurement mode and the non-measurement mode. Here, the “distance measurement mode” refers to an operation mode in which automatic calculation and recording of subject size information is performed by the size conversion ratio calculation unit 45 and the size measurement unit 46, and the “non-measurement mode” refers to subject size information. An operation mode in which automatic calculation and recording are not executed. When the user taps the measurement mode selection button image 166 on the touch screen device 2, the distance measurement mode and the non-measurement mode can be switched alternately. In the distance measurement mode, the color of the measurement mode selection button image 166 is changed to a selected color (bright and dark), and in the non-measurement mode, the color of the measurement mode selection button image 166 is changed to a non-selected color (dark and light). Is done.

非測定モードにおける画像編集部４４の動作については、実施例１と同様であるため説明は省略する。尚、本実施例では、画像編集画面の画像表示領域１６１内に表示される矢印画像の色は、ポインタグループ選択ボタン画像１６５によって選択された色となり、同一の画像表示領域１６１内に複数の色の矢印画像を追加することが可能とされている。   Since the operation of the image editing unit 44 in the non-measurement mode is the same as that of the first embodiment, the description thereof is omitted. In this embodiment, the color of the arrow image displayed in the image display area 161 of the image editing screen is the color selected by the pointer group selection button image 165, and a plurality of colors are displayed in the same image display area 161. It is possible to add an arrow image.

ユーザにより距離測定モードが選択された場合における編集動作を以下に説明する。距離測定モードが選択されると、測定モード選択ボタン画像１６６は選択色（明濃色）となる。そして、サイズ換算比算出部４５は、画像表示領域１６１に表示されている撮影画像において、予め登録されたスケールの基準となるスケール基準画像１６７を探索する。本実施例においては、スケール基準画像１６７は、クラックスケール２１０のスライドケース２１０ａの画像とされている。ここで、上述の通りスライドケース２１０ａの正面の貫通窓２１０ｃの左右には、検出マーク２１０ｄ，２１０ｄが表示されているので、サイズ換算比算出部４５は、撮影画像内においてこの検出マーク２１０ｄ，２１０ｄの画像を探索することによってスライドケース２１０ａの画像を容易に識別し抽出することができる。   An editing operation when the distance measurement mode is selected by the user will be described below. When the distance measurement mode is selected, the measurement mode selection button image 166 becomes a selected color (bright color). Then, the size conversion ratio calculation unit 45 searches for a scale reference image 167 serving as a reference for a scale registered in advance in the captured image displayed in the image display area 161. In the present embodiment, the scale reference image 167 is an image of the slide case 210 a of the crack scale 210. Here, as described above, the detection marks 210d and 210d are displayed on the left and right sides of the through window 210c in front of the slide case 210a. Therefore, the size conversion ratio calculation unit 45 can detect the detection marks 210d and 210d in the captured image. The image of the slide case 210a can be easily identified and extracted by searching for the image.

スケール基準画像１６７が抽出できなかった場合には、サイズ換算比算出部４５は、画像編集画面上にエラーメッセージ（例えば、「スケール基準画像が抽出せきません！」というポップアップボックス）を表示した後に、非測定モードに戻す。一方、スケール基準画像１６７が抽出できた場合には、サイズ換算比算出部４５は、撮影画像内におけるスケール基準画像１６７のサイズに基づき、撮影画像上のサイズに対する実際の被写物件Ａのサイズの比であるサイズ換算比Ｒを算出する。例えば、撮影画像上において、スケール基準画像１６７の長手方向の長さがｗ１画素とする。また、実際のスライドケース２１０ａの長手方向の長さがｗ２であったとする（図２０（ａ）参照）。このとき、サイズ換算比Ｒは、Ｒ＝ｗ２／ｗ１となる。   When the scale reference image 167 cannot be extracted, the size conversion ratio calculation unit 45 displays an error message (for example, a pop-up box “Scale reference image cannot be extracted!”) On the image editing screen. Return to the non-measurement mode. On the other hand, when the scale reference image 167 can be extracted, the size conversion ratio calculation unit 45 calculates the actual size of the object A with respect to the size on the photographed image based on the size of the scale reference image 167 in the photographed image. The size conversion ratio R, which is the ratio, is calculated. For example, the length of the scale reference image 167 in the longitudinal direction on the captured image is w1 pixels. Also, assume that the actual length of the slide case 210a in the longitudinal direction is w2 (see FIG. 20A). At this time, the size conversion ratio R is R = w2 / w1.

次に、ユーザはポインタグループ選択ボタン画像１６５により矢印画像（ポインタ）のグループを選択し、画像表示領域１６１内の撮影画像上で、矢印画像を置きたい位置を指定していく。図２１（ｂ）に、ユーザにより５つの矢印画像の位置が指定された状態の例を示す。図２１（ｂ）において、矢印画像の位置は丸囲み数字の１から５の順に指定されたものとする。サイズ計測部４６は、２番目以降の矢印画像Ｙｉ（ｉ＝２，３，…）の位置が指定されると、その前に指定された矢印画像Ｙｉ−１の位置からの撮影画像上での距離Ｌ１（Ｙｉ−１，Ｙｉ）を計算し、当該距離Ｌ１（Ｙｉ−１，Ｙｉ）にサイズ換算比Ｒを乗じて被写物件Ａにおける当該２点間の距離Ｌ２（Ｙｉ−１，Ｙｉ）＝Ｒ・Ｌ１（Ｙｉ−１，Ｙｉ）を算出する。そして、算出した距離Ｌ２（Ｙｉ−１，Ｙｉ）の値を、画像表示領域１６１内の撮影画像上における矢印画像Ｙｉ−１，Ｙｉの中間位置に表示する。また、それとともに、サイズ計測部４６は、算出した距離Ｌ２（Ｙｉ−１，Ｙｉ）を、写真管理データベース３２における当該撮影画像に対する調査レコードの“長さ”フィールド（図４参照）に文字列データとして格納する。格納された“長さ”フィールドの文字列データは、同時に白板画像１５３にも反映される。例えば、図２１（ｂ）の例では、(L2(Y1, Y2), L2(Y2, Y3), L2(Y3, Y4), L2(Y4, Y5)) = (51.1, 39.1, 28.9, 27.9)と計算され、この場合、調査レコードの“長さ”フィールドには、文字列“51.1+9.1+28.9+27.9”が格納され、この文字列が白板画像１５３の長さ（Ｌ）の欄にも反映される。 Next, the user selects a group of arrow images (pointers) with the pointer group selection button image 165 and designates a position where the arrow image is to be placed on the captured image in the image display area 161. FIG. 21B shows an example of a state where the positions of five arrow images are designated by the user. In FIG. 21B, it is assumed that the positions of the arrow images are designated in the order of circled numbers 1 to 5. When the position of the second and subsequent arrow images Y i (i = 2, 3,...) Is designated, the size measurement unit 46 displays the image on the captured image from the position of the arrow image Y i−1 designated before that. The distance L1 (Y i−1 , Y i ) is calculated by multiplying the distance L1 (Y i−1 , Y i ) by the size conversion ratio R and the distance L2 between the two points in the object A Y i−1 , Y i ) = R · L 1 (Y i−1 , Y i ) is calculated. Then, the calculated value of the distance L2 (Y i−1 , Y i ) is displayed at an intermediate position between the arrow images Y i−1 and Y i on the captured image in the image display area 161. At the same time, the size measurement unit 46 writes the calculated distance L2 (Y i−1 , Y i ) in the “length” field (see FIG. 4) of the investigation record for the captured image in the photo management database 32. Store as column data. The stored character string data in the “length” field is simultaneously reflected in the white board image 153. For example, in the example of FIG. 21B, (L2 (Y 1 , Y 2 ), L2 (Y 2 , Y 3 ), L2 (Y 3 , Y 4 ), L2 (Y 4 , Y 5 )) = ( 51.1, 39.1, 28.9, 27.9). In this case, the character string “51.1 + 9.1 + 28.9 + 27.9” is stored in the “length” field of the survey record, and this character string is the length of the white board image 153. This is also reflected in the column (S).

次に、撮影画像内の罅割れが途中で分岐しているような場合に、距離測定を一旦打ち切って改めて別の点から距離測定を行いたいような場合には、ユーザは、ポインタグループ選択ボタン画像１６５により、別のポインタグループの矢印画像を選択した後に、画像表示領域１６１内の撮影画像上で、矢印画像を置きたい位置を指定していく。図２２に、図２１（ｂ）の状態からポインタグループを切り替えた後に、さらにユーザにより２つの矢印画像の位置が指定された状態の例を示す。この例では、矢印画像の位置は丸囲み数字の６，７の順に指定されたものとする。この場合、サイズ計測部４６は、ポインタグループの変更後、２番目以降の矢印画像Ｙｉ（ｉ＝７，…）の位置が指定されると、その前に指定された矢印画像Ｙｉ−１の位置からの撮影画像上での距離Ｌ１（Ｙｉ−１，Ｙｉ）を計算し、当該距離Ｌ１（Ｙｉ−１，Ｙｉ）にサイズ換算比Ｒを乗じて被写物件Ａにおける当該２点間の距離Ｌ２（Ｙｉ−１，Ｙｉ）＝Ｒ・Ｌ１（Ｙｉ−１，Ｙｉ）を算出する。そして、算出した距離Ｌ２（Ｙｉ−１，Ｙｉ）の値を、画像表示領域１６１内の撮影画像上における矢印画像Ｙｉ−１，Ｙｉの中間位置に表示する。それとともに、サイズ計測部４６は、算出した距離Ｌ２（Ｙｉ−１，Ｙｉ）を、写真管理データベース３２における当該撮影画像に対する調査レコードの“長さ”フィールドに文字列データとして格納する。格納された“長さ”フィールドの文字列データは、同時に白板画像１５３にも反映される。例えば、図２２の例では、(L2(Y1, Y2), L2(Y2, Y3), L2(Y3, Y4), L2(Y4, Y5); L2(Y6, Y7)) = (51.1, 39.1, 28.9, 27.9; 19.4)（但し、“;”はポインタグループの区切りを表す）と計算され、この場合、調査レコードの“長さ”フィールドには、文字列“51.1+9.1+28.9+27.9, 19.4”が格納され、この文字列が白板画像１５３の長さ（Ｌ）の欄にも反映される。 Next, when the crack in the photographed image is branched in the middle, if the user wants to measure the distance from another point after discontinuing the distance measurement, the user selects the pointer group selection button image. After selecting an arrow image of another pointer group by 165, the position where the arrow image is to be placed is designated on the captured image in the image display area 161. FIG. 22 shows an example of a state in which the position of two arrow images is further specified by the user after switching the pointer group from the state of FIG. In this example, it is assumed that the positions of the arrow images are designated in the order of the encircled numbers 6 and 7. In this case, when the position of the second and subsequent arrow images Y i (i = 7,...) Is designated after changing the pointer group, the size measuring unit 46 designates the arrow image Y i−1 designated before that. The distance L1 (Y i−1 , Y i ) on the photographed image from the position of the image is calculated, and the distance L1 (Y i−1 , Y i ) is multiplied by the size conversion ratio R so that The distance L2 (Y i−1 , Y i ) = R · L1 (Y i−1 , Y i ) between the two points is calculated. Then, the calculated value of the distance L2 (Y i−1 , Y i ) is displayed at an intermediate position between the arrow images Y i−1 and Y i on the captured image in the image display area 161. At the same time, the size measuring unit 46 stores the calculated distance L2 (Y i−1 , Y i ) as character string data in the “length” field of the investigation record for the captured image in the photo management database 32. The stored character string data in the “length” field is simultaneously reflected in the white board image 153. For example, in the example of FIG. 22, (L2 (Y 1 , Y 2 ), L2 (Y 2 , Y 3 ), L2 (Y 3 , Y 4 ), L2 (Y 4 , Y 5 ); L2 (Y 6 , Y 7 )) = (51.1, 39.1, 28.9, 27.9; 19.4) (where “;” represents the pointer group delimiter). In this case, the “length” field of the survey record contains a string “51.1 + 9.1 + 28.9 + 27.9, 19.4” is stored, and this character string is also reflected in the length (L) column of the white board image 153.

画像編集が終わると、ユーザは画像編集画面において保存ボタン画像１３０を選択する。そうすると、実施例１と同様、事後画像取込部３７，新規追加画像取込部４０，又は接写画像取込部４２による撮影画像の保存等の処理が行われる。   When the image editing is completed, the user selects the save button image 130 on the image editing screen. Then, similar to the first embodiment, processing such as storage of a photographed image is performed by the posterior image capturing unit 37, the newly added image capturing unit 40, or the close-up image capturing unit 42.

以上のように、本実施例では、撮影画像内のスケール基準画像１６７を用いて、画像編集画面上の撮影画像の２点をタッチスクリーンデバイス２により指定することで、実際の被写物件Ａ上の対応する２点間距離Ｌ２（Ｙｉ，Ｙｉ−１）を自動測定し記録することができる。これにより、被写物件Ａ上で定規や巻尺による実際の測定を行わずとも、画像編集画面上において距離の計測や記録を行うことが可能となり、調査における作業効率が向上する。 As described above, in this embodiment, by using the scale reference image 167 in the photographed image, the two points of the photographed image on the image editing screen are designated by the touch screen device 2, so that the actual object A The corresponding distance L2 (Y i , Y i −1) between the two points can be automatically measured and recorded. Accordingly, it is possible to measure and record the distance on the image editing screen without actually measuring the object A with a ruler or a tape measure, and the work efficiency in the survey is improved.

実施例５では、被写体サイズ情報のうち、長さ（Ｌ）の自動計算及び記録機能に関する実施例について説明したが、幅（Ｗ）についても撮影画像上での計測及び記録が可能である。実施例６では、幅計測及び記録機能をもたせた携帯式電子デバイスの実施例について説明する。尚、本実施例の携帯式電子デバイスの構成は、実施例５と同様であり、サイズ計測部４６の機能のみ異なる。   In the fifth embodiment, the embodiment related to the automatic calculation and recording function of the length (L) in the subject size information has been described, but the width (W) can be measured and recorded on the captured image. In the sixth embodiment, an embodiment of a portable electronic device having a width measurement and recording function will be described. The configuration of the portable electronic device of the present embodiment is the same as that of the fifth embodiment, and only the function of the size measuring unit 46 is different.

この場合、スケール基準物Ｐとして、図２０（ｂ）のクラックスケール２１０のうち、目盛板２１０ｂを除いたスライドケース２１０ａのみを用いる。そして、被写物件Ａの撮影時には、スケールの基準となるスケール基準物Ｐであるスライドケース２１０ａを被写物件Ａとともに撮影する。   In this case, only the slide case 210a excluding the scale plate 210b is used as the scale reference object P in the crack scale 210 of FIG. Then, at the time of shooting the object A, the slide case 210a, which is the scale reference object P serving as a scale reference, is imaged together with the object A.

このようにして、図７（ｃ）又は図９（ａ）に示した電子ビューファインダ画面において、ユーザにより、タッチスクリーンデバイス２からシャッターボタン画像１０６が選択されると、新規追加画像取込部４０又は事後画像取込部３７若しくは接写画像取込部４２は、その選択時点の電子ビューファインダ画像を事前画像として取り込むとともに、撮影位置演算部３３が出力する現在の位置情報及び内部時計２５が出力する現在の日時情報を取り込む。そして、本実施例における画像編集部４４は、タッチスクリーンデバイス２上に図２３（ａ）の画像編集画面を表示する。図２３（ａ）の画像編集画面は、基本的には実施例５の図２１（ａ）と同様であるが、実施例５の場合との相違点は、測定モード選択ボタン画像１６６の代わりに距離測定モード選択ボタン画像１６６ａを設けたこと、及び新たに幅測定モード選択ボタン画像１６６ｂを設けたことである。尚、図２３（ａ）の距離測定モード選択ボタン画像１６６ａは、実施例５の図２１（ａ）の測定モード選択ボタン画像１６６の表示名称を変更しただけであり、機能的には実施例５の測定モード選択ボタン画像１６６と同じであるので、これについては説明を省略する。   In this way, when the user selects the shutter button image 106 from the touch screen device 2 on the electronic viewfinder screen shown in FIG. 7C or 9A, the newly added image capturing unit 40 is selected. Alternatively, the posterior image capturing unit 37 or the close-up image capturing unit 42 captures the electronic viewfinder image at the time of selection as a pre-image, and outputs the current position information output from the photographing position calculation unit 33 and the internal clock 25. Capture the current date and time information. Then, the image editing unit 44 in this embodiment displays the image editing screen in FIG. 23A on the touch screen device 2. The image editing screen of FIG. 23A is basically the same as that of FIG. 21A of the fifth embodiment, but the difference from the case of the fifth embodiment is that instead of the measurement mode selection button image 166. That is, the distance measurement mode selection button image 166a is provided, and the width measurement mode selection button image 166b is newly provided. Note that the distance measurement mode selection button image 166a in FIG. 23 (a) is only the display name of the measurement mode selection button image 166 in FIG. Since this is the same as the measurement mode selection button image 166 of FIG.

幅測定モード選択ボタン画像１６６ｂは、幅測定モードと非測定モードとを切り替えるためのトグルボタンである。尚、ここで、「幅測定モード」とは、サイズ計測部４６により被写物件Ａの幅方向のサイズ情報の取得及び記録を実行する動作モードをいう。ユーザがタッチスクリーンデバイス２上で幅測定モード選択ボタン画像１６６ｂをタップすることによって、幅測定モードと非測定モードとを交互に切り替えることができる。尚、“距離測定モード”の状態でユーザが幅測定モード選択ボタン画像１６６ｂをタップすると、“距離測定モード”は解消されて“幅測定モード”となり、また、“幅測定モード”の状態でユーザが距離測定モード選択ボタン画像１６６ａをタップすると、“幅測定モード”は解消されて“距離測定モード”となるものとする。また、幅測定モードになると幅測定モード選択ボタン画像１６６ｂの色は選択色（明濃色）に変更され、非測定モードになると幅測定モード選択ボタン画像１６６ｂの色は非選択色（暗淡色）に変更される。   The width measurement mode selection button image 166b is a toggle button for switching between the width measurement mode and the non-measurement mode. Here, the “width measurement mode” refers to an operation mode in which the size measurement unit 46 executes acquisition and recording of size information in the width direction of the object A. When the user taps the width measurement mode selection button image 166b on the touch screen device 2, the width measurement mode and the non-measurement mode can be switched alternately. When the user taps the width measurement mode selection button image 166b in the “distance measurement mode” state, the “distance measurement mode” is canceled and becomes the “width measurement mode”, and the user in the “width measurement mode” state. When the distance measurement mode selection button image 166a is tapped, the “width measurement mode” is canceled and the “distance measurement mode” is set. In the width measurement mode, the color of the width measurement mode selection button image 166b is changed to a selected color (bright and dark), and in the non-measurement mode, the color of the width measurement mode selection button image 166b is a non-selected color (dark and light). Changed to

また、ユーザが、画像編集画面内の画像表示領域１６１で、タッチスクリーンデバイス２からピンチイン操作（タッチスクリーンデバイス２に二本の指を乗せつまむ（間を狭める）ように動かす操作）を行うと、画像編集部４４は画像表示領域１６１上に表示された撮影画像は縮小表示し、また、タッチスクリーンデバイス２からピンチアウト操作（タッチスクリーンデバイス２に二本の指を乗せ、二本の指の間を広げるように動かす操作）を行うと、画像編集部４４は画像表示領域１６１上に表示された撮影画像を拡大表示する。図２３（ｂ）の編集画面では、図２３（ａ）の編集画面からのピンチアウト操作により、スケール基準画像１６７の近傍が拡大表示されている。   In addition, when the user performs a pinch-in operation (operation to move two fingers on the touch screen device 2 so as to pinch (narrow)) in the image display area 161 in the image editing screen, The image editing unit 44 displays the captured image displayed on the image display area 161 in a reduced size, and also performs a pinch-out operation from the touch screen device 2 (put two fingers on the touch screen device 2 and When the image editing unit 44 performs an operation of moving the image to expand the image, the image editing unit 44 displays the captured image displayed on the image display area 161 in an enlarged manner. In the editing screen of FIG. 23B, the vicinity of the scale reference image 167 is enlarged and displayed by a pinch-out operation from the editing screen of FIG.

ユーザにより幅測定モードが選択された場合における編集動作を以下に説明する。幅測定モードが選択されると、図２３（ｂ）に示したように、幅測定モード選択ボタン画像１６６ｂは選択色（明濃色）となる。それとともに、スケール基準物Ｐであるスライドケース２１０ａの画像の貫通窓２１０ｃの中央に、幅測定用目盛画像１６８が表示される。この幅測定用目盛画像１６８は、クラックスケール２１０の目盛板２１０ｂに付された目盛りに相当するものである。尚、幅測定用目盛画像１６８の画像編集画面上での大きさは、スケール基準画像１６７との相対的なサイズ比から計算される。図２３（ｂ）の画像編集画面には７つの幅測定用目盛画像１６８が表示されているが、このうちの中央の幅測定用目盛画像１６８が現在選択中の目盛とみなされる。ユーザがこの幅測定用目盛画像１６８の上で、タッチスクリーンデバイス２からスワイプ操作又はフリップ操作を行うと、その指の動きに合わせて、クラックスケール２１０の目盛板２１０ｂをスライドさせるのと同様の動きで、各幅測定用目盛画像１６８がスクロールして表示される目盛りの幅が変化する（図２３（ｂ）の左側の目盛り部分拡大図を参照）。このようにして、撮影画像内の罅割れの幅に適合した幅測定用目盛画像１６８を選択することにより、幅（Ｗ）についての撮影画像上での計測及び記録が可能となる。サイズ計測部４６は、選択された幅測定用目盛画像１６８の幅Ｗを、写真管理データベース３２における当該撮影画像に対する調査レコードの“幅”フィールド（図４参照）に文字列データとして格納する。格納された“幅”フィールドの文字列データは、同時に白板画像１５３にも反映される。例えば、図２３（ｂ）の例では、Ｗ＝０．９５ｍｍが選択されており、この場合、調査レコードの“幅”フィールドには、文字列“0.95”が格納され、この文字列が白板画像１５３の幅（Ｗ）の欄にも反映される。   The editing operation when the width measurement mode is selected by the user will be described below. When the width measurement mode is selected, as shown in FIG. 23B, the width measurement mode selection button image 166b becomes a selected color (bright and dark color). At the same time, a scale image 168 for width measurement is displayed at the center of the through window 210c of the image of the slide case 210a which is the scale reference object P. This width measurement scale image 168 corresponds to a scale attached to the scale plate 210b of the crack scale 210. The size of the scale image for width measurement 168 on the image editing screen is calculated from the relative size ratio with the scale reference image 167. In the image editing screen in FIG. 23B, seven width measurement scale images 168 are displayed, and the center width measurement scale image 168 is regarded as the currently selected scale. When the user performs a swipe operation or flip operation from the touch screen device 2 on the width measurement scale image 168, the same movement as sliding the scale plate 210b of the crack scale 210 in accordance with the movement of the finger. Thus, the width of the scale displayed by scrolling each of the width measurement scale images 168 changes (see the scale enlarged view on the left side of FIG. 23B). In this way, by selecting the width measurement scale image 168 suitable for the crack width in the captured image, the width (W) can be measured and recorded on the captured image. The size measuring unit 46 stores the width W of the selected scale image for width measurement 168 as character string data in the “width” field (see FIG. 4) of the investigation record for the photographed image in the photo management database 32. The stored character string data in the “width” field is also reflected in the white board image 153 at the same time. For example, in the example of FIG. 23B, W = 0.95 mm is selected. In this case, the character string “0.95” is stored in the “width” field of the survey record, and this character string is a whiteboard image. This is also reflected in the width (W) field of 153.

以上のように、本実施例では、撮影画像内のスケール基準画像１６７とともに表示される幅測定用目盛画像１６８を用いて、画像編集画面上の撮影画像において被写物件Ａの幅とのサイズ合わせを行い幅Ｗの測定を行うことで、実際の被写物件Ａ上の幅Ｗを測定し記録することができる。これにより、被写物件Ａ上でクラックスケール２１０による実際の測定を行わずとも、画像編集画面上において幅Ｗの計測や記録を行うことが可能となり、調査における作業効率が向上する。   As described above, in this embodiment, the width measurement scale image 168 displayed together with the scale reference image 167 in the photographed image is used to adjust the size of the photographed image on the image editing screen with the width of the object A. And measuring the width W, the width W on the actual object A can be measured and recorded. Accordingly, it is possible to measure and record the width W on the image editing screen without performing actual measurement with the crack scale 210 on the object A, and work efficiency in the investigation is improved.

１ 携帯式電子デバイス
２ タッチスクリーンデバイス
３ カメラデバイス
４ ＧＮＳＳモジュール
５ 携帯回線通信モジュール
６ 近距離無線通信モジュール
７ 加速度センサ
８ 方位センサ
９ 気圧センサ
１０ ジャイロセンサ
１９ システムバス
２０ Ｉ／Ｏサブシステム
２０ａ ディスプレイ・コントローラ
２０ｂ カメラ入力コントローラ
２０ｃ ＧＮＳＳコントローラ
２０ｄ 携帯回線通信コントローラ
２０ｅ 近距離無線通信コントローラ
２１ ストレージ・デバイス
２２ ストレージ・コントローラ
２３ 周辺インタフェース
２４ プロセッサ
２５ 内部時計
２６ メモリ
２７ メモリ・バス
３１ 画像ファイル記憶部
３２ 写真管理データベース
３３ 撮影位置演算部
３４ 画像リスト表示部
３５ 撮影済画像表示部
３６ 下敷付ファインダ画面表示部
３７ 事後画像取込部
３８ 新地点レコード追加部
３９ 通常ファインダ画面表示部
４０ 新規追加画像取込部
４１ 接写ファインダ画面表示部
４２ 接写画像取込部
４３ 白板表示・編集部
４４ 画像編集部
４５ サイズ換算比算出部
４６ サイズ計測部
５１ ログイン部
５２ 調査一覧表示部
５３ 新規調査登録部
５４ 調査選択部
５５ 所有者登録部 DESCRIPTION OF SYMBOLS 1 Portable electronic device 2 Touch screen device 3 Camera device 4 GNSS module 5 Mobile line communication module 6 Short-range wireless communication module 7 Acceleration sensor 8 Direction sensor 9 Pressure sensor 10 Gyro sensor 19 System bus 20 I / O subsystem 20a Display Controller 20b Camera input controller 20c GNSS controller 20d Mobile line communication controller 20e Short-range wireless communication controller 21 Storage device 22 Storage controller 23 Peripheral interface 24 Processor 25 Internal clock 26 Memory 27 Memory bus 31 Image file storage unit 32 Photo management database 33 Shooting position calculation unit 34 Image list display unit 35 Captured image display unit 36 Underlay finder screen display unit 37 Subsequent Image capturing unit 38 New point record adding unit 39 Normal viewfinder screen display unit 40 New additional image capturing unit 41 Close-up viewfinder screen display unit 42 Close-up image capturing unit 43 Whiteboard display / editing unit 44 Image editing unit 45 Size conversion ratio calculation Unit 46 Size measurement unit 51 Login unit 52 Survey list display unit 53 New survey registration unit 54 Survey selection unit 55 Owner registration unit

Claims (9)

タッチスクリーンデバイスと、カメラデバイスと、内部時計とを備えた写真撮影・管理用の携帯式電子デバイスであって、
前記カメラデバイスにより撮影された画像を画像ファイルとして保存する画像記憶手段と、
前記画像記憶手段に保存された画像を、当該画像の撮影日時情報、及び撮影場所情報を含む画像管理情報と関連づけて管理する写真管理データベースと、
前記写真管理データベースに登録された前記各画像管理情報を読み出し、
同じ撮影場所の各撮影日時の画像を、撮影日時が前の画像である事前画像、撮影日時が後の画像である事後画像の順に横並びにして画像組とし、これらの画像組を縦列した撮影画像リストを作成し、当該撮影画像リストを、前記タッチスクリーンデバイスの画面に表示するとともに、
前記撮影画像リストに於いて、前記事後画像が前記画像記憶手段内に保存されていない場合には、前記事後画像に代えて未撮影であることを示す未撮影示教画像を表示する画像リスト表示手段と、
前記撮影画像リストにおいて、前記タッチスクリーンデバイスにより前記撮影画像リスト内の前記未撮影示教画像が選択された場合において、
前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像に、当該未撮影示教画像が属する画像組の前記事前画像から生成される下敷画像を重畳表示してファインダ重畳画像を生成し、
当該ファインダ重畳画像と、撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像とを含む下敷付ファインダ画面を前記タッチスクリーンデバイスの画面に表示する下敷付ファインダ画面表示手段と、
前記下敷付ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事後画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事後画像の撮影日時情報、及び前記ファインダ重畳画像の下敷画像として用いられた前記事前画像の撮影場所情報を含む画像管理情報と関連づけて当該事後画像を前記写真管理データベースに登録する事後画像取込手段と、を備え、
前記画像リスト表示手段は、前記事後画像取込手段により前記事後画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事後画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする携帯式電子デバイス。 A portable electronic device for photography and management comprising a touch screen device, a camera device, and an internal clock,
Image storage means for storing an image photographed by the camera device as an image file;
A photo management database for managing images stored in the image storage means in association with image management information including shooting date / time information of the image and shooting location information;
Read each image management information registered in the photo management database,
Images taken at the same shooting location at each shooting date and time are arranged in the order of a prior image whose shooting date and time is the previous image and a subsequent image whose shooting date and time is the later image. Create a list and display the captured image list on the screen of the touch screen device,
In the photographed image list, when the posterior image is not stored in the image storage means, an image that displays an unphotographed instruction image indicating that it has not been photographed instead of the posterior image. List display means;
In the photographed image list, when the unphotographed instructional image in the photographed image list is selected by the touch screen device,
An electronic viewfinder image captured in real time from the camera device is superimposed on the base image generated from the prior image of the image set to which the unphotographed instructional image belongs to generate a finder superimposed image,
Underlay finder screen display means for displaying an underlay finder screen including the finder superimposed image and a shutter button image indicating a tap operation position for inputting an imaging execution instruction on the screen of the touch screen device;
When the shutter button image is selected by the touch screen device on the underlay finder screen, the electronic viewfinder image at the time of selection is stored in the image storage means as the posterior image, and from the internal clock Post-registration of the posterior image in the photo management database in association with image management information including shooting date / time information of the posterior image to be captured and shooting location information of the pre-image used as the underlying image of the finder superimposed image An image capturing means,
The image list display means, when the posterior image is newly registered in the photo management database by the posterior image capturing means, the touched image list including the newly registered posterior image as the touch list. A portable electronic device characterized by being redisplayed on a screen of a screen device. 前記撮影画像リストにおいて、前記タッチスクリーンデバイスにより前記撮影画像リスト内の前記事前画像が選択された場合において、前記画像記憶手段から当該事前画像を読み出して前記タッチスクリーンデバイスに表示するとともに、接写撮影実行指示を入力するためのタップ操作位置を示す接写ボタン画像を前記タッチスクリーンデバイスに表示する撮影済画像表示手段と、
前記タッチスクリーンデバイスにより前記接写ボタン画像が選択された場合、前記タッチスクリーンデバイスに、前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像及び撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像を含む接写ファインダ画面を表示する接写ファインダ画面表示手段と、
前記接写ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事前画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事前画像の撮影日時情報、及び先に前記接写ボタン画像が選択された際に前記タッチスクリーンデバイスに表示されていた前記事前画像の前記撮影場所情報を含む画像管理情報と関連づけて当該事前画像を前記写真管理データベースに登録する接写画像取込手段と、を備え、
前記画像リスト表示手段は、前記接写画像取込手段により前記事前画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事前画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする請求項１記載の携帯式電子デバイス。 In the captured image list, when the pre-image in the captured image list is selected by the touch screen device, the pre-image is read from the image storage unit and displayed on the touch screen device, and close-up shooting A photographed image display means for displaying a close-up button image indicating a tap operation position for inputting an execution instruction on the touch screen device;
When the close-up button image is selected by the touch screen device, an electronic viewfinder image captured in real time from the camera device and a tap operation position for inputting an imaging execution instruction to the touch screen device are displayed. Close-up viewfinder screen display means for displaying a close-up viewfinder screen including
When the shutter button image is selected by the touch screen device on the close-up viewfinder screen, the electronic viewfinder image at the time of selection is stored in the image storage unit as the pre-image and is taken from the internal clock The pre-image shooting date and time information, and the image management information including the shooting location information of the pre-image displayed on the touch screen device when the close-up button image was previously selected. Close-up image capturing means for registering an image in the photo management database,
When the pre-image is newly registered in the photo management database by the close-up image capturing unit, the image list display unit displays the photographed image list including the pre-registered new image as the touch screen. 2. The portable electronic device according to claim 1, wherein the portable electronic device is displayed again on the screen of the device. 前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、算出された位置ずれベクトルに応じて、前記カメラデバイスの向きを動かすべき方向を指示する撮影アングル補正指示マークを前記タッチスクリーンデバイスの画面内に表示する撮影アングル補正指示手段を備えていることを特徴とする請求項１又は２記載の携帯式電子デバイス。   The underlay finder screen display means calculates, in real time, a position displacement vector of the electronic viewfinder image with respect to the prior image that is the source of the underlay image on the underlay finder screen, and calculates the calculated position displacement vector. 3. An imaging angle correction instruction means for displaying an imaging angle correction instruction mark for instructing a direction in which the direction of the camera device should be moved is displayed on the screen of the touch screen device. The portable electronic device as described. 前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、
前記事後画像取込手段は、前記下敷付ファインダ画面表示手段が算出する位置ずれベクトルを参照して、前記下敷画像に対する前記電子ビューファインダ画像の位置ずれ量が所定の閾値を下回ったときに、撮影アングルが合致したことを報知する撮影アングル合致報知手段を備えていることを特徴とする請求項１乃至３の何れか一記載の携帯式電子デバイス。 The underlay finder screen display means calculates, in real time, a position displacement vector of the electronic viewfinder image with respect to the prior image that is the source of the underlay image on the underlay finder screen,
The posterior image capturing means refers to the displacement vector calculated by the underlay finder screen display means, and when the amount of displacement of the electronic viewfinder image with respect to the underlay image falls below a predetermined threshold, The portable electronic device according to any one of claims 1 to 3, further comprising shooting angle match notifying means for notifying that the shooting angles are matched. 前記下敷付ファインダ画面表示手段は、前記下敷付ファインダ画面において、前記下敷画像の元である前記事前画像に対する前記電子ビューファインダ画像の位置ずれベクトルをリアルタイムに演算し、
前記事後画像取込手段は、前記下敷付ファインダ画面表示手段が算出する位置ずれベクトルを参照して、前記下敷画像に対する前記電子ビューファインダ画像の位置ずれ量が所定の閾値を下回ったときに、その選択時点の前記電子ビューファインダ画像を前記事後画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該事後画像の撮影日時情報、及び前記ファインダ重畳画像の下敷画像として用いられた前記事前画像の撮影場所情報を含む画像管理情報と関連づけて当該事後画像を前記写真管理データベースに登録することを特徴とする請求項１乃至３の何れか一記載の携帯式電子デバイス。 The underlay finder screen display means calculates, in real time, a position displacement vector of the electronic viewfinder image with respect to the prior image that is the source of the underlay image on the underlay finder screen,
The posterior image capturing means refers to the displacement vector calculated by the underlay finder screen display means, and when the amount of displacement of the electronic viewfinder image with respect to the underlay image falls below a predetermined threshold, The electronic viewfinder image at the time of the selection was stored in the image storage means as the posterior image, and was used as the underlying image of the finder superimposed image and the shooting date / time information of the posterior image captured from the internal clock The portable electronic device according to any one of claims 1 to 3, wherein the posterior image is registered in the photo management database in association with image management information including shooting location information of the prior image. 現在位置の測位を行う測位モジュールと、
近距離無線通信を行う近距離無線通信モジュールと、
現在の方位を検出する方位センサと、
前記測位モジュールにより現在の絶対位置を検出し、
前記近距離無線通信モジュールにより撮影対象の位置に設置されるＲＦタグとの間で無線通信を行い、当該ＲＦタグまでの距離を検出し、
前記方位センサにより前記カメラデバイスの撮影視軸の視軸方位を検出し、
これらの検出された絶対位置、ＲＦタグまでの距離、視軸方位に基づき、前記ＲＦタグの絶対位置を算出する撮影位置演算手段と、を備え、
前記画像リスト表示手段は、前記撮影画像リストに加えて、新規事前画像を追加するリスト追加指示を入力するためのタップ操作位置を示すリスト追加ボタン画像を、前記タッチスクリーンデバイスの画面に表示するものであり、
前記タッチスクリーンデバイスにより前記リスト追加ボタン画像が選択された場合、前記タッチスクリーンデバイスに、前記カメラデバイスからリアルタイムで取り込まれる電子ビューファインダ画像及び撮像実行指示を入力するためのタップ操作位置を示すシャッターボタン画像を含む通常ファインダ画面を表示する通常ファインダ画面表示手段と、
前記通常ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、その選択時点の前記電子ビューファインダ画像を前記事前画像として前記画像記憶手段に保存するとともに、前記内部時計から取り込まれる当該撮影画像の撮影日時情報、及び前記撮影位置演算手段により算出された前記ＲＦタグの絶対位置からなる撮影場所情報を含む画像管理情報と関連づけて当該事前画像を前記写真管理データベースに登録する新規追加画像取込手段と、を備え、
前記画像リスト表示手段は、前記新規追加画像取込手段により前記事前画像が前記写真管理データベースに新たに登録された場合、新たに登録された当該事前画像を含む前記撮影画像リストを、前記タッチスクリーンデバイスの画面に再表示することを特徴とする請求項１乃至５の何れか一記載の携帯式電子デバイス。 A positioning module that measures the current position;
A short-range wireless communication module for performing short-range wireless communication;
An orientation sensor that detects the current orientation;
The current absolute position is detected by the positioning module,
Wireless communication is performed with an RF tag installed at a position to be imaged by the short-range wireless communication module, and a distance to the RF tag is detected.
Detecting the visual axis direction of the photographing visual axis of the camera device by the orientation sensor,
Photographing position calculation means for calculating the absolute position of the RF tag based on the detected absolute position, the distance to the RF tag, and the visual axis direction,
The image list display means displays, on the screen of the touch screen device, a list addition button image indicating a tap operation position for inputting a list addition instruction for adding a new pre-image in addition to the photographed image list. And
When the list addition button image is selected by the touch screen device, a shutter button indicating a tap operation position for inputting an electronic viewfinder image captured in real time from the camera device and an imaging execution instruction to the touch screen device. Normal finder screen display means for displaying a normal finder screen including an image;
When the shutter button image is selected by the touch screen device on the normal viewfinder screen, the electronic viewfinder image at the time of selection is stored in the image storage unit as the pre-image and is taken from the internal clock The new image is registered in the photo management database in association with the image management information including the shooting date and time information of the shot image and the shooting location information including the absolute position of the RF tag calculated by the shooting position calculation means. An additional image capturing means,
When the previous image is newly registered in the photo management database by the new additional image capturing unit, the image list display unit is configured to touch the captured image list including the newly registered previous image with the touch. 6. The portable electronic device according to claim 1, wherein the portable electronic device is displayed again on a screen of the screen device. 前記下敷付ファインダ画面又は前記通常ファインダ画面において、前記タッチスクリーンデバイスにより前記シャッターボタン画像が選択された場合、前記タッチスクリーンデバイス上に、その選択時点の前記電子ビューファインダ画像である撮影画像を含む画像編集画面を表示する画像編集手段と、
前記撮影画像において、予め登録されたスケールの基準となるスケール基準画像を探索し、前記スケール基準画像が索出された場合には、前記撮影画像内における前記スケール基準画像のサイズに基づき、前記撮影画像上のサイズに対する実際の被写体のサイズの比であるサイズ換算比を算出するサイズ換算比算出手段と、
前記サイズ換算比算出手段により前記サイズ換算比が算出された場合、前記画像編集画面上の前記撮影画像において前記タッチスクリーンデバイスにより２点が指定された場合に、前記撮影画像上における当該２点間の距離Ｌ１を算出し、当該距離Ｌ１に前記サイズ換算比を乗じて被写体における当該２点間の距離Ｌ２を算出し、前記画像編集画面内に表示するサイズ計測手段と、を備えたことを特徴とする請求項６記載の携帯式電子デバイス。


When the shutter button image is selected by the touch screen device on the underlay finder screen or the normal finder screen, the image includes a photographed image that is the electronic viewfinder image at the time of selection on the touch screen device. Image editing means for displaying an editing screen;
In the photographed image, a scale reference image serving as a scale reference registered in advance is searched, and when the scale reference image is searched, the photographing is performed based on the size of the scale reference image in the photographed image. A size conversion ratio calculating means for calculating a size conversion ratio that is a ratio of the size of the actual subject to the size on the image;
When the size conversion ratio is calculated by the size conversion ratio calculation means, when two points are specified by the touch screen device in the captured image on the image editing screen, the two points on the captured image And a size measuring unit that calculates the distance L2 between the two points in the subject by multiplying the distance L1 by the size conversion ratio and displays the distance L2 in the image editing screen. The portable electronic device according to claim 6 .


タッチスクリーンデバイスと、カメラデバイスと、内部時計と、コンピュータとを備えた携帯式電子デバイスに読み込ませて実行することにより、当該携帯式電子デバイスを請求項１乃至５の何れか一記載の携帯式電子デバイスとして機能させることを特徴とするプログラム。   The portable electronic device according to any one of claims 1 to 5, wherein the portable electronic device is read and executed by a portable electronic device including a touch screen device, a camera device, an internal clock, and a computer. A program that functions as an electronic device. タッチスクリーンデバイスと、カメラデバイスと、内部時計と、測位モジュールと、近距離無線通信モジュールと、方位センサと、コンピュータとを備えた携帯式電子デバイスに読み込ませて実行することにより、当該携帯式電子デバイスを請求項６又は７記載の携帯式電子デバイスとして機能させることを特徴とするプログラム。   The portable electronic device is loaded and executed by a portable electronic device including a touch screen device, a camera device, an internal clock, a positioning module, a short-range wireless communication module, an orientation sensor, and a computer. A program for causing a device to function as the portable electronic device according to claim 6 or 7.
JP2016159483A 2016-08-16 2016-08-16 Portable electronic device and program for photography and management Active JP6471986B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016159483A JP6471986B2 (en) 2016-08-16 2016-08-16 Portable electronic device and program for photography and management

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016159483A JP6471986B2 (en) 2016-08-16 2016-08-16 Portable electronic device and program for photography and management

Publications (2)

Publication Number Publication Date
JP2018029239A JP2018029239A (en) 2018-02-22
JP6471986B2 true JP6471986B2 (en) 2019-02-20

Family

ID=61248631

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016159483A Active JP6471986B2 (en) 2016-08-16 2016-08-16 Portable electronic device and program for photography and management

Country Status (1)

Country Link
JP (1) JP6471986B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019141365A (en) * 2018-02-21 2019-08-29 株式会社三共 Game machine
US11340709B2 (en) 2018-10-18 2022-05-24 Hewlett-Packard Development Company, L.P. Relative gestures
JPWO2020225843A1 (en) * 2019-05-07 2020-11-12
JP7137230B2 (en) * 2020-03-23 2022-09-14 株式会社 零Space Fixed point photography system and program
JP7051981B1 (en) 2020-11-12 2022-04-11 日本工営株式会社 Rhagades measurement support device and its method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11125855A (en) * 1997-10-24 1999-05-11 Taisei Corp Site photographing system
JP2002344963A (en) * 2001-05-18 2002-11-29 Sumitomo Forestry Co Ltd Photographing information attaching device
JP4901797B2 (en) * 2008-04-07 2012-03-21 株式会社東芝 Construction digital camera
JP2010101158A (en) * 2008-09-26 2010-05-06 Takenaka Komuten Co Ltd Photographing and recording system

Also Published As

Publication number Publication date
JP2018029239A (en) 2018-02-22

Similar Documents

Publication Publication Date Title
JP6471986B2 (en) Portable electronic device and program for photography and management
US20220270197A1 (en) Image capturing method and display method for recognizing a relationship among a plurality of images displayed on a display screen
US20180286098A1 (en) Annotation Transfer for Panoramic Image
US10750083B2 (en) Systems and methods for processing digital image data representing multiple views of an object of interest
US20100265177A1 (en) Electronic apparatus, display controlling method and program
JP7391317B2 (en) Information management device, information management system, information management method, and information management program
CN104160369A (en) Methods, Apparatuses, and Computer-Readable Storage Media for Providing Interactive Navigational Assistance Using Movable Guidance Markers
JP2011248748A (en) Mobile terminal for checking, checking system, checking method for mobile terminal, and checking program for mobile terminal
Napolitano et al. Combination of image-based documentation and augmented reality for structural health monitoring and building pathology
JP2017107420A (en) Image display system and image display program
US20090297067A1 (en) Apparatus providing search service, method and program thereof
US20180300552A1 (en) Differential Tracking for Panoramic Images
US20230291994A1 (en) Photographing information management method and worker terminal in which program for executing photographing information management method is installed
US20210029497A1 (en) Field cooperation system and management device
US20110214085A1 (en) Method of user display associated with displaying registered images
JP2009253659A (en) Digital camera for construction photography
JP2013161390A (en) Server, client terminal, system and program
JP2011060254A (en) Augmented reality system and device, and virtual object display method
JP6886670B2 (en) Construction site terminals, construction site systems, and programs
JP2012019374A (en) Electronic album creation server, information processor, electronic album creation system, and control method of electronic album creation server
JP2016171454A (en) Business loss compensation work support device and program
JP6639832B2 (en) Imaging device, imaging method, imaging program
JP7346245B2 (en) Construction site recording program
JP6509546B2 (en) Image search system and image search method
JP2010175896A (en) Information processor, imaging device and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180301

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180829

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20181126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181206

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181226

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190111

R150 Certificate of patent or registration of utility model

Ref document number: 6471986

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150