JP2005276059A - Commodity information providing system - Google Patents

Abstract

<P>PROBLEM TO BE SOLVED: To improve convenience as compared with the conventional system, when acquiring commodity information through remote operation from an information terminal via a network. <P>SOLUTION: A commodity information providing system is comprised of a Web server 203 connected with an information terminal 202 via a network 201 and a commodity imaging unit 104 communication-connected with the Web server 203 and moves the commodity imaging unit 104 or selects an object to be imaged by means of remote operation from the information terminal 202, so that the photographed image of the imaged commodity is supplied to the information terminal 202. The commodity imaging apparatus 104 comprises an image processing section 209 for imaging a bar code corresponding to a commodity, and extracting commodity identification information recorded in advance from the bar code image; and the Web server 203 includes a commodity information database, to be retrieved on the basis of the extracted commodity identification information. The information terminal 202 comprises a display section 202b for displaying the commodity information searched from the database, on the basis of the commodity identification information. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は商品情報の提供システムに関し、特にネットワークを利用した通信販売に好適な商品情報提供システムに関する。   The present invention relates to a product information providing system, and more particularly to a product information providing system suitable for mail order sales using a network.

近年のパーソナルコンピュータの普及に伴い、インターネットを利用した通信販売（以下、ネット通販と記す。）が急速に普及しており、例えば特許文献１に示すようなネット通販システムが知られている。このようなネット販売においては、利用者はホームページを検索したり関連付けられたリンクを辿る等の作業を行うことで所望の商品の写真や簡単な説明を閲覧することができ、これによって商品の購入ができるようになっている。
このようなネット通販は、利用者にとっては時間に制限なく商品注文を行うことができるという便利さがあり、又高齢者や体の不自由な方等の利用者にとっては自宅に居ながら商品の購入ができるという消費生活の面における大きな利便性を有している。また、商品の販売業者にとっては商品の注文販売や流通をシステム化することが容易となるため、設備や人件費の削減に大きな効果を発揮している。
特開２００２−４９８０１号公報 With the spread of personal computers in recent years, mail order sales using the Internet (hereinafter referred to as “net mail order”) are rapidly spreading. For example, a net mail order system as shown in Patent Document 1 is known. In such online sales, the user can browse photos of the desired product and brief explanations by searching the home page and following the associated links, thereby purchasing the product. Can be done.
Such online shopping is convenient for users to place orders for products without any time limit, and for users such as the elderly and people with physical disabilities, the products can be purchased at home. It has great convenience in terms of consumer life that can be purchased. In addition, since it is easy for a merchandise distributor to systematize the order sales and distribution of merchandise, it has a great effect on reducing equipment and labor costs.
JP 2002-49801 A

上述したような従来のネット販売においては、利用者の閲覧に供される写真画像データは商品がよく見えるような構図で撮像されたものが多く、その画像データ数はネット通販のＷｅｂサイト管理者側のデータ容量の負担や利用者側のダウンロードの負担等を考慮し、１商品あたり１枚又は２枚程度であるのが通常である。このため、利用者は閲覧対象の商品とその類似商品とを対比しながら購入を検討するといったことが容易にはできなかった。
また、利用者に商品の大きさを把握させるために「縦×横×高さ」の寸法を商品画像の脇等に記載させる場合があるが、単に数値だけで示されていてもその大きさが適切なものであるかどうかを判断するのは容易なことではなかった。このため、利用者は商品の大きさや色合い、他に同種の商品があるかどうか等の情報を注文時に十分得ることが容易でなく、実際に注文した商品が手元に届いたときに所望のものと違っていたことに気づくということが起こり得た。 In the conventional online sales as described above, the photographic image data used for browsing by the user is often taken with a composition that allows the product to be seen well, and the number of the image data is the website manager of the online mail order. Considering the data capacity burden on the user's side, the download burden on the user's side, and the like, it is normal that the number is one or two per product. For this reason, it has not been easy for the user to consider the purchase while comparing the product to be browsed with the similar product.
In addition, in order to allow the user to grasp the size of the product, there may be a case where the dimensions of "vertical x horizontal x height" are written on the side of the product image, etc. It was not easy to determine whether is appropriate. For this reason, it is not easy for the user to obtain sufficient information at the time of ordering such as the size and color of the product and whether there are other similar products, and the desired product when the ordered product arrives at hand. It might happen that you noticed something different.

このように、従来の商品情報提供システムにおいては、所望の商品と類似商品との相対的な差異等を十分に知ることができないために、購入に必要な正確な情報を得ることが困難であるという問題があった。   As described above, in the conventional product information providing system, since it is not possible to sufficiently know the relative difference between a desired product and a similar product, it is difficult to obtain accurate information necessary for purchase. There was a problem.

本発明は上述したような問題を解決するためになされたものであり、類似商品の一群が陳列棚に並べて展示され、利用者が自らの操作によって各商品を相対的に比較等を行って注文することが可能な商品情報提供システムを提供することを目的とする。   The present invention has been made to solve the above-described problems. A group of similar products are displayed side by side on a display shelf, and a user makes an order by relatively comparing each product by his / her own operation. An object of the present invention is to provide a product information providing system capable of doing this.

本発明は、上述した課題を解決するために以下の手段より構成したものである。
ネットワークを介してそれぞれ接続される端末及びＷｅｂサーバと、前記端末に通信接続される表示装置と、前記Ｗｅｂサーバと通信接続されて商品陳列棚近傍を移動可能に配置される商品撮像装置とからなり、操作者の前記端末から前記Ｗｅｂサーバへのアクセスに基づき、前記商品撮像装置を移動制御させて離間地にある所望の商品の確認情報を得るための商品情報提供システムにおいて、前記端末は、前記操作者の音声を入力するための第１のマイクロフォンと、この第１のマイクロフォンから得られた音声をデジタル信号に変換し、又前記商品撮像装置から前記Ｗｅｂサーバと前記ネットワークとを介して供給されたデータから音声データを抽出して音声出力するための第１の音声信号処理手段とを具備し、前記商品撮像装置は、少なくともズーム画像を得るための第１の撮像手段と、前記陳列された商品の広角画像を得るための第２の撮像手段と、前記第１の撮像手段による前記陳列された商品の近傍に設けられたバーコードのズーム画像から商品識別情報を抽出する手段と、前記商品撮像装置の近傍位置から得られる音声を入力するための第２のマイクロフォンと、この第２のマイクロフォンから得られた音声をデジタル信号に変換し、又前記端末から前記ネットワークと前記Ｗｅｂサーバとを介して供給されたデータから音声データを抽出して音声出力するための第２の音声信号処理手段とを具備し、前記Ｗｅｂサーバには、前記商品識別情報に対応付けられて検索される前記陳列された商品の詳細情報を有するデータベースが格納されると共に、前記表示装置において、前記第１及び第２の撮像手段から得られた商品撮像情報に基づき、前記操作者による第１の撮像手段の撮像モードを制御してこの撮像モードに応じた前記陳列商品の撮像情報と、前記バーコードによる商品識別情報に基づく前記商品の詳細情報と、前記操作者の音声情報に基づく商品陳列側の音声情報と、をそれぞれ得て離間地にある商品の確認を行えるようにしたことを特徴とする商品情報提供システム。 The present invention is constituted by the following means in order to solve the above-described problems.
A terminal and a Web server respectively connected via a network; a display device connected to the terminal; and a product imaging device connected to the Web server so as to be movable in the vicinity of the product display shelf. In the product information providing system for obtaining confirmation information of a desired product in a remote place by moving the product imaging device based on an access from the terminal of the operator to the Web server, the terminal includes: A first microphone for inputting an operator's voice, voice obtained from the first microphone is converted into a digital signal, and supplied from the product imaging device via the Web server and the network. And a first audio signal processing means for extracting audio data from the received data and outputting the audio, First imaging means for obtaining at least a zoom image, second imaging means for obtaining a wide-angle image of the displayed product, and provided in the vicinity of the displayed product by the first imaging means Means for extracting product identification information from the zoomed image of the bar code, a second microphone for inputting sound obtained from a position near the product imaging device, and sound obtained from the second microphone. A second audio signal processing means for converting the digital signal into audio signals, extracting audio data from the data supplied from the terminal via the network and the Web server, and outputting the audio data; The server stores a database having detailed information on the displayed products that are searched in association with the product identification information, and is stored in the display device. Then, based on the product imaging information obtained from the first and second imaging means, the imaging mode of the first imaging means by the operator is controlled, and the imaging information of the display product corresponding to the imaging mode The detailed information of the product based on the product identification information by the barcode and the audio information on the product display side based on the voice information of the operator can be obtained to check the product in the remote place. Product information providing system characterized by

本発明によれば、商品情報提供システムの利用者は、情報端末から店舗内に設置されている移動可能な商品撮像装置を遠隔操作し、例えば商品を陳列した商品棚等の周辺を移動させてこの商品棚に陳列された商品を閲覧することができるため、利用者は店舗から遠く離れた場所から、例えば自宅に居ながら店舗内をショッピングしているように商品を選ぶことができるという効果を奏する。   According to the present invention, a user of a product information providing system remotely operates a movable product imaging device installed in a store from an information terminal, and moves, for example, around a product shelf or the like displaying products. Since the products displayed on the product shelf can be browsed, the user can select the product from a place far away from the store, for example, shopping in the store while staying at home. Play.

また、利用者は商品撮像装置を遠隔操作することによって搭載された撮像カメラの被写体を自在に変更したり選択したりすることができ、利用者は購入したい等と考えていた商品以外にも多種多様な商品を見ることができると共に、いくつかの商品を同時に見比べて購入を検討する等、商品選択の自由度が広がることが多いに期待できる効果を有する。   In addition, the user can freely change and select the subject of the mounted imaging camera by remotely operating the product imaging device, and the user can select various items other than the product that he / she wanted to purchase. In addition to being able to see a variety of products, it is possible to expect a wide range of freedom in selecting products, such as comparing several products at the same time and considering purchasing.

また、各商品の近傍に予めバーコードを貼付しておくことにより、商品撮像装置はバーコードを撮像して画像解析を行うことで、バーコードによって一意に選択される商品に関する商品情報をＷｅｂサーバに有したデータベースから簡単に抽出することができ、利用者は選択した商品に関する情報を容易に取得することができるという格別な効果を有する。   In addition, by attaching a barcode in the vicinity of each product in advance, the product imaging device captures the barcode and performs image analysis, thereby obtaining product information regarding the product uniquely selected by the barcode. The database can be easily extracted from the database, and the user can easily obtain information on the selected product.

更にまた、利用者は情報端末の設置場所からマイクロフォンとスピーカとを介して店舗に設置されている商品撮像装置の近傍にいる店員等と話しをすることができるので、商品の撮像画像やデータベースから得た情報だけでは十分に認識できない商品情報の確認や質問等を容易に行うことができるという格別な効果を奏する。   Furthermore, since the user can talk with the store clerk in the vicinity of the product imaging device installed in the store via the microphone and the speaker from the installation location of the information terminal, from the captured image and database of the product There is an extraordinary effect that product information that cannot be sufficiently recognized only by the obtained information, questions, etc. can be easily performed.

以下、本発明を実施するための最良の形態につき好ましい実施例を説明する。   Hereinafter, preferred embodiments of the best mode for carrying out the present invention will be described.

まず、図１は本実施例に係る商品情報提供システムの概略図で、稼動運用されるネット通販の店舗又は倉庫（以下、店舗と総称する。）内で用いられていることを想定した図である。同図に示すように、店舗１１には複数の種類の商品を展示するための商品棚１０１が設置され、この商品棚１０１の各棚には商品１０２が見えやすいように置かれ、この商品１０２の近傍（例えば、商品１０２が置かれている棚板部分）には商品１０２を特定するための認識情報をデータ化したバーコード１０３が見えやすく貼付されている。   First, FIG. 1 is a schematic diagram of a product information providing system according to the present embodiment, and is a diagram assuming that it is used in a store or warehouse (hereinafter collectively referred to as a store) of an online mail order that is operated and operated. is there. As shown in the figure, a product shelf 101 for displaying a plurality of types of products is installed in the store 11, and the product 102 is placed on each shelf of the product shelf 101 so that the product 102 can be easily seen. A bar code 103 in which recognition information for specifying the product 102 is converted into data is pasted in the vicinity (for example, a shelf portion on which the product 102 is placed).

なお、商品１０２の商品棚１０１への配置については、商品ジャンル毎や同種で異色毎等、利用者が商品の購入に際して比較すると予想される商品群をまとめておくのがよい。これについて、同図では「食器」が置かれた商品棚１０１と「化粧品」が置かれた商品棚１０１とを例として図示している。
そして、商品撮像装置１０４が商品棚１０１の周辺を経路１０５に沿って移動可能なように設置されている。（移動手段については後述する。） As for the arrangement of the products 102 on the product shelf 101, it is preferable to collect a group of products that the user is expected to compare when purchasing the products, for example, for each product genre or the same type and different colors. In this figure, the product shelf 101 on which “tableware” is placed and the product shelf 101 on which “cosmetics” are placed are illustrated as examples.
The product imaging device 104 is installed so as to be movable along the route 105 around the product shelf 101. (The moving means will be described later.)

次に、図２に商品撮像装置１０４の概略構成も含め、本商品情報提供システムの概略システム構成例を示す。同図によれば、インターネット等のネットワーク２０１を介して接続された利用者のパーソナルコンピュータ（ＰＣ）やホームサーバ等の情報端末２０２とネット通販のＷｅｂサイトを提供するＷｅｂサーバ２０３とがそれぞれ接続され、Ｗｅｂサーバ２０３には商品撮像装置１０４と無線通信可能な送受信機２０４が接続される。   Next, FIG. 2 shows a schematic system configuration example of the product information providing system including the schematic configuration of the product imaging device 104. According to the figure, an information terminal 202 such as a personal computer (PC) of a user or a home server connected via a network 201 such as the Internet and a Web server 203 that provides a Web site for online shopping are respectively connected. The Web server 203 is connected to a transceiver 204 capable of wireless communication with the product imaging device 104.

これにおいて、送受信機２０４は、Ｗｅｂサーバ２０３から供給された信号に基づき商品撮像装置１０４を制御するための制御データを無線信号にして商品撮像装置１０４に送信し、又商品撮像装置１０４から供給された画像データや各種応答データの無線信号をＷｅｂサーバ２０３に供給する中継手段として機能するものである。   In this case, the transceiver 204 transmits control data for controlling the product imaging device 104 to the product imaging device 104 based on the signal supplied from the Web server 203 as a wireless signal, and is supplied from the product imaging device 104. It functions as a relay means for supplying wireless signals of the received image data and various response data to the Web server 203.

また、Ｗｅｂサーバ２０３には、上述したように店舗１１が管理運営するネット通販のＷｅｂサイトが格納される。そして、店舗１１が保有する各商品１０２についての商品説明、性能、品質、価格、写真画像、映像、音声アナウンス等の商品情報がデジタルデータ化されて構成されたデータベースも格納されており、前記Ｗｅｂサイトからバーコード１０３にデータ化された前記認識情報に基づく検索が可能である。   In addition, the Web server 203 stores a Web site for online shopping managed by the store 11 as described above. A database in which product information such as product description, performance, quality, price, photographic image, video, audio announcement, etc. of each product 102 held by the store 11 is converted into digital data is also stored. A search based on the recognition information converted into the barcode 103 from the site is possible.

また、情報端末２０２は、端末全体を制御する制御手段とネットワーク２０１との接続をするためのネットワークインターフェースとを有したＰＣ部２０２ａと、ＰＣ部２０２ａの状態を表示させたり商品撮像装置１０４やＷｅｂサーバ２０３から得た各種情報を表示させるための表示部２０２ｂと、利用者の話す音声を入力するマイク部２０２ｃ（第１のマイクロフォン）と、ＰＣ部２０２ａで処理されて音声として出力される音声データを拡声させるためのスピーカ部２０２ｄとから構成される。   The information terminal 202 also displays a PC unit 202a having a control unit that controls the entire terminal and a network interface for connecting to the network 201, and displays the status of the PC unit 202a, the product imaging device 104, and the Web A display unit 202b for displaying various information obtained from the server 203, a microphone unit 202c (first microphone) for inputting voice spoken by the user, and voice data processed and output as voice by the PC unit 202a And a speaker unit 202d for expanding the sound.

そして、ＰＣ部２０２ａにはマイク部２０２ｃで収音された利用者の音声をデジタルデータに変換し、又商品制御装置１０４から送受信機２０４、Ｗｅｂサーバ２０３、及びネットワーク２０１を介して供給されたデータからアナログの音声データに変換するための図示しない音声処理部（第１の音声信号処理手段）が具備されている。   The PC unit 202a converts the user's voice collected by the microphone unit 202c into digital data, and the data supplied from the product control device 104 via the transceiver 204, the Web server 203, and the network 201. A voice processing unit (first voice signal processing means) (not shown) for converting the voice data into analog voice data is provided.

ＰＣ部２０２ａは、図示しないＷｅｂブラウザソフトを有しており、利用者はこのＷｅｂブラウザソフトを用いてＷｅｂサーバ２０３が保有する前記ネット通販のＷｅｂサイトにアクセスし、このＷｅｂブラウザソフトによって商品撮像装置１０４を遠隔操作すると共に、所望の商品１０２を選定してＷｅｂサーバ２０３の前記データベースに格納された前記所望の商品１０２に関する商品情報をＰＣ部２０２ａにダウンロードすることができる。   The PC unit 202a has Web browser software (not shown), and the user uses this Web browser software to access the Internet mail-order Web site held by the Web server 203, and the Web browser software uses the product imaging device. The remote control 104 can be used to select a desired product 102 and download the product information regarding the desired product 102 stored in the database of the Web server 203 to the PC unit 202a.

そして、商品撮像装置１０４は、送受信機２０４から供給された無線信号に含まれる制御データやＰＣ部２０２ａから供給される利用者の音声データを後述する制御部２０６と音声処理部２１２とに供給したり、又後述する画像処理部２０９から供給されるデジタル映像データやバーコード１０３の解析結果、あるいは音声処理部２１２から供給される店員等の音声データを送受信機２０４に無線送信するための送受信部２０５と、送受信部２０５から供給された前記制御データに基づき後述するパン・チルトカメラ２０７、広角カメラ２０８、音声処理部２１２、及び駆動部２１３を制御する制御部２０６と、この制御部２０６の制御に基づいてパン、チルト、又はズームを駆動して商品１０２やバーコード１０３を撮像するためのパン・チルトカメラ２０７（第１の撮像手段）と、制御部２０６の制御に基づいて商品棚１０１全体を撮像するための広角レンズを具備した広角カメラ２０８（第２の撮像手段）と、パン・チルトカメラ２０７と広角カメラ２０８とから供給された撮像データをデジタルデータに変換したり、パン・チルトカメラ２０７で撮像されたバーコード１０３の画像データを画像解析してこのバーコードから前記認識情報を抽出し送受信部２０５に供給するための画像処理部２０９と、前記店舗１１の店員等の声を収音して後述する音声処理部２１２に供給するためのマイク部２１０（第２のマイクロフォン）と、音声処理部２１２から供給される前記利用者の音声データを拡声させるためのスピーカ部２１１と、前記マイク部２１０で収音された音声をデジタル音声データに変換し、又送受信部２０５で受信した音声データに関する無線信号を音声に変換してスピーカ部２１１に供給するための音声処理部２１２（第２の音声信号処理手段）と、制御部２０６の制御に基づいて商品撮像装置１０４を経路１０５に沿って移動させるための駆動部２１３とから構成される。   Then, the product imaging apparatus 104 supplies the control data included in the wireless signal supplied from the transceiver 204 and the voice data of the user supplied from the PC unit 202a to the control unit 206 and the voice processing unit 212 described later. Or a transmission / reception unit for wirelessly transmitting digital video data supplied from an image processing unit 209, which will be described later, an analysis result of the barcode 103, or audio data of a store clerk supplied from the audio processing unit 212 to the transceiver 204 205, a control unit 206 that controls a pan / tilt camera 207, a wide-angle camera 208, an audio processing unit 212, and a drive unit 213, which will be described later, based on the control data supplied from the transmission / reception unit 205, and control of the control unit 206 Pan / tilt or zoom to drive the product 102 or barcode 103 based on the A wide-angle camera 208 (second imaging means) having a wide-angle lens for imaging the entire product shelf 101 based on the control of the control unit 206, and a pan / tilt camera 207. Image data supplied from the camera and the wide-angle camera 208 is converted into digital data, or the image data of the barcode 103 imaged by the pan / tilt camera 207 is image-analyzed to extract the recognition information from the barcode and transmit / receive An image processing unit 209 for supplying to the unit 205, a microphone unit 210 (second microphone) for collecting a voice of a store clerk or the like of the store 11 and supplying the collected voice to a later-described audio processing unit 212; A speaker unit 211 for amplifying the user's voice data supplied from the unit 212 and the voice collected by the microphone unit 210; An audio processing unit 212 (second audio signal processing means) for converting the radio signal related to the audio data received by the transmission / reception unit 205 into audio and supplying the audio signal to the speaker unit 211, and a control unit The driving unit 213 is configured to move the commodity imaging device 104 along the path 105 based on the control 206.

以上の説明において、経路１０５は誘導ラインやレール等予め床上や天井に布設された経路であってもよいし、商品撮像装置１０４が自在に移動可能なように道幅が確保されただけの経路であってもよく、駆動部２１３は経路１０５に対応した回転部材等により構成された周知の駆動手段を具備するものである。   In the above description, the route 105 may be a route previously laid on the floor or ceiling, such as a guide line or rail, or a route with a sufficient width so that the commodity imaging device 104 can move freely. The driving unit 213 includes a known driving unit configured by a rotating member or the like corresponding to the path 105.

また、バーコード１０３は、例えばＪＡＮ（Ｊａｐａｎ Ａｒｔｉｃｌｅ Ｎｕｍｂｅｒ）コードのような規格化された商品管理コードであってよいし、商品を特定させるために予め付与されたＩＤ情報等の認識情報を所定の形式によりバーコード化したものであってもよい。この所定の形式によるバーコード化については周知技術によって容易に実現可能であり、本実施例においては説明を省略する。   Further, the barcode 103 may be a standardized product management code such as a JAN (Japan Article Number) code, and identification information such as ID information given in advance for specifying a product is a predetermined code. It may be a barcode according to the format. This bar code conversion in a predetermined format can be easily realized by a known technique, and the description thereof is omitted in this embodiment.

次に、図３は図示しない表示装置に表示させるときの表示例であり、ＰＣ部２０２ａ内の図示しない記憶部に格納されたＷｅｂブラウザソフトでＷｅｂサーバ２０３のネット通販のＷｅｂサイトにアクセスし、このアクセスによって得られたときの表示例である。同図に示すように、Ｗｅｂブラウザ画面３０１は、パン・チルトカメラ２０７で撮像されている画像を表示させるための第１の表示ウィンドウ３０２と、広角カメラ２０８で撮像されている画像を表示させるための第２の表示ウィンドウ３０３と、商品撮像装置１０４を経路１０５に沿って移動させるための移動操作ボタン３０４と、パン・チルトカメラ２０７をパン（左右）させたりチルト（上下）させるためのカメラ操作ボタン３０５と、パン・チルトカメラ２０７の撮像レンズをズームアップさせたりズームダウンさせるためのズームボタン３０６と、利用者が任意に選択したバーコード１０３の撮像画像が第１の表示ウィンドウ３０２に表示されているときにこの表示されたバーコードからコード化された認識情報を抽出するときに選択するバーコード選択ボタン３０７と、マイク部２１０の傍にいる店員等と会話をするときに選択するトークボタン３０８とから構成される。   Next, FIG. 3 is a display example when displaying on a display device (not shown). The Web browser software stored in a storage unit (not shown) in the PC unit 202a is used to access a website of the online mail order of the Web server 203. It is a display example when it is obtained by this access. As shown in the figure, the Web browser screen 301 displays a first display window 302 for displaying an image captured by the pan / tilt camera 207 and an image captured by the wide-angle camera 208. A second display window 303, a movement operation button 304 for moving the commodity imaging device 104 along the path 105, and a camera operation for panning (left / right) or tilting (up / down) the pan / tilt camera 207. A button 305, a zoom button 306 for zooming up and down the imaging lens of the pan / tilt camera 207, and a captured image of the barcode 103 arbitrarily selected by the user are displayed in the first display window 302. When extracting encoded recognition information from this displayed barcode Barcode selection button 307-option, and a talk button 308. to select when a conversation with the clerk or the like who is near the microphone 210.

以上説明した構成による商品情報提供システムの動作について、図４に例示した動作シーケンス図を併せ参照して詳述する。まず、同図（ａ）に示したように、利用者は情報端末２０２のＰＣ部２０２ａでＷｅｂブラウザソフトを起動し、ネットワーク２０１を介してＷｅｂサーバ２０３のネット通販のＷｅｂサイトにネットワーク接続を行う（シーケンスＳ４０１）。   The operation of the product information providing system configured as described above will be described in detail with reference to the operation sequence diagram illustrated in FIG. First, as shown in FIG. 2A, the user activates the web browser software on the PC unit 202a of the information terminal 202, and makes a network connection to the online mail order website of the web server 203 via the network 201. (Sequence S401).

次に、ＰＣ部２０２ａから前記ネットワーク接続されたＷｅｂサーバ２０３は、送受信機２０４に対して商品撮像装置１０４内のパン・チルトカメラ２０７の撮像と広角カメラ２０８の撮像とを開始させるために撮像開始要求を示すコマンドを出力する（シーケンスＳ４０２）。
このコマンド出力は、Ｗｅｂサーバ２０３と送受信機２０４とを接続した信号形式に従って出力されるが、この接続手段はシリアル、パラレル、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等の双方向通信が可能なものであればよい。 Next, the Web server 203 connected to the network from the PC unit 202a starts imaging to cause the transceiver 204 to start imaging of the pan / tilt camera 207 and imaging of the wide-angle camera 208 in the product imaging apparatus 104. A command indicating the request is output (sequence S402).
This command output is output in accordance with a signal format in which the Web server 203 and the transceiver 204 are connected. If this connection means is capable of bidirectional communication such as serial, parallel, USB (Universal Serial Bus), etc. Good.

そして次に、前記撮像開始要求のコマンドを受信した送受信機２０４は、商品撮像装置１０４に対して前記コマンドを無線信号に変換して出力する（シーケンスＳ４０３）。   Next, the transceiver 204 that has received the imaging start request command converts the command into a radio signal and outputs it to the commodity imaging apparatus 104 (sequence S403).

前記コマンドの無線信号を受信した送受信部２０５は、この受信信号から前記撮像開始要求コマンドを抽出して制御部２０６に供給し、制御部２０６はパン・チルトカメラ２０７及び広角カメラ２０８が撮像を開始するよう制御を行う。そして、この撮像開始の制御を受けたパン・チルトカメラ２０７及び広角カメラ２０８は、それぞれの撮像データを画像処理部２０９に供給する。
撮像データが供給された画像処理部２０９は、入来した各撮像データがコンポジットビデオやＳビデオのようなアナログ映像信号であった場合は、これらの映像信号をデジタル映像データに変換して送受信部２０５に供給する。前記入来した各映像データがデジタルビデオであった場合はこのフォーマット変換処理は必要ない。 The transmitting / receiving unit 205 that has received the command radio signal extracts the imaging start request command from the received signal and supplies the command to the control unit 206. The control unit 206 starts imaging by the pan / tilt camera 207 and the wide-angle camera 208. Control to do so. Then, the pan / tilt camera 207 and the wide-angle camera 208 that have been controlled to start imaging supply the respective imaging data to the image processing unit 209.
The image processing unit 209 supplied with the imaging data converts the video signals into digital video data when each incoming imaging data is an analog video signal such as composite video or S video, and transmits and receives 205. If the incoming video data is digital video, this format conversion process is not necessary.

次に、前記デジタル映像データを受信した送受信部２０５は、送受信機２０４に対してこの映像データを無線信号に変換して出力する（シーケンスＳ４０４）。   Next, the transmission / reception unit 205 that has received the digital video data converts the video data into a radio signal and outputs it to the transceiver 204 (sequence S404).

そして次に、前記映像データの無線信号を受信した送受信機２０４は、受信信号から映像データを抽出してＷｅｂサーバ２０３に対して出力する（シーケンスＳ４０５）。   Next, the transceiver 204 that has received the radio signal of the video data extracts the video data from the received signal and outputs the video data to the Web server 203 (sequence S405).

前記映像データを受信したＷｅｂサーバ２０３は、この映像データを前述の表示例で説明した移動操作ボタン３０４、カメラ操作ボタン３０５、ズームボタン３０６、バーコード選択ボタン３０７、トークボタン３０８等のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｓｅ）情報と共に、ネットワーク２０１を介してＰＣ部２０２ａに送出する（シーケンスＳ４０６）。   The Web server 203 that has received the video data uses the GUI (Graphical) such as the movement operation button 304, the camera operation button 305, the zoom button 306, the barcode selection button 307, and the talk button 308 described in the above display example. Along with User Interface information, the information is transmitted to the PC unit 202a via the network 201 (sequence S406).

そして、ＰＣ部２０２ａは、Ｗｅｂサーバ２０３から供給された前記映像データやＧＵＩ情報をＷｅｂブラウザソフトによって表示部２０２ｂにＷｅｂブラウザ画面３０１のように表示する。   The PC unit 202a displays the video data and GUI information supplied from the Web server 203 on the display unit 202b like the Web browser screen 301 by Web browser software.

次に、上記の情報を得た利用者は、表示部２０２ｂに表示されたＷｅｂブラウザ画面３０１を見ながら、ＰＣ部２０２ａに具備された図示しないマウス等のポインティングデバイス（本実施例においては、マウスを用いるとする。）を用いて商品撮像装置１０４を操作する。
例えば、利用者がマウスを用いて移動操作ボタン３０４の「前」「後」「左」「右」の中からいずれか１つのボタンをポインタで指し示して選択ボタンを押すと、この選択ボタンが押されている間中、駆動部２１３は前記指し示された移動操作ボタン３０４に対応する方向に移動するよう制御されて商品撮像装置１０４が動作する。 Next, the user who has obtained the above information looks at the Web browser screen 301 displayed on the display unit 202b, and a pointing device such as a mouse (not shown) provided in the PC unit 202a (in this embodiment, the mouse The product imaging device 104 is operated using the above.
For example, when the user uses the mouse to point to one of the “front”, “back”, “left”, and “right” buttons of the movement operation button 304 with the pointer and presses the selection button, the selection button is pressed. During this time, the drive unit 213 is controlled to move in the direction corresponding to the indicated movement operation button 304, and the product imaging device 104 operates.

移動動作中の商品撮像装置１０４は、パン・チルトカメラ２０７及び広角カメラ２０８が商品１０２や商品棚１０１を撮像しており、前述したようにそれらの撮像データが第１の表示ウィンドウ３０２及び第２の表示ウィンドウ３０３に表示されるので、利用者はこれらの表示ウィンドウを見ながら移動操作ボタン３０４を操作することができる。
そして、商品撮像装置１０４の移動を停止させたいときは、前記押し続けていたマウスの選択ボタンを離すことにより前記移動制御は中止されて移動動作が停止される。 In the product imaging device 104 during the moving operation, the pan / tilt camera 207 and the wide-angle camera 208 image the product 102 and the product shelf 101, and as described above, the captured image data is stored in the first display window 302 and the second display image. Therefore, the user can operate the movement operation button 304 while viewing these display windows.
When it is desired to stop the movement of the commodity imaging device 104, the movement control is stopped and the movement operation is stopped by releasing the selection button of the mouse that has been kept pressed.

ここで、移動操作ボタン３０４の操作に基づく商品撮像装置１０４の動作について図４（ｂ）の動作シーケンス図を参照して更に詳しく説明する。この動作シーケンスは前述した同図（ａ）のシーケンスと同様なものであるが、同図（ｂ）によれば、まず利用者は、表示部２０２ｂに表示されたＷｅｂブラウザ画面３０１を見ながら、マウスを用いて移動操作ボタン３０４の「前」「後」「左」「右」の中からいずれか１つのボタンをポインタで指し示して選択ボタンを押す。これにより、この選択ボタンが押されている間中、前記指し示された移動操作ボタン３０４に関連付けられた駆動部２１３を駆動させるコマンドがネットワーク２０１を介してＷｅｂサーバ２０３に送信される（シーケンスＳ４１１）。   Here, the operation of the product imaging device 104 based on the operation of the movement operation button 304 will be described in more detail with reference to the operation sequence diagram of FIG. This operation sequence is the same as the sequence shown in FIG. 1A, but according to FIG. 1B, the user first looks at the Web browser screen 301 displayed on the display unit 202b, Using the mouse, one of the buttons “front”, “rear”, “left”, and “right” of the movement operation button 304 is pointed with the pointer and the selection button is pressed. As a result, while the selection button is being pressed, a command for driving the drive unit 213 associated with the indicated movement operation button 304 is transmitted to the Web server 203 via the network 201 (sequence S411). ).

次に、前記コマンドを受信したＷｅｂサーバ２０３は、送受信機２０４に対してこのコマンドの信号を出力する（シーケンスＳ４１２）。このコマンド信号は、前述したようにＷｅｂサーバ２０３と送受信機２０４とを接続した信号形式に従って出力されるものである。   Next, the Web server 203 that has received the command outputs a signal of this command to the transceiver 204 (sequence S412). This command signal is output according to the signal format in which the Web server 203 and the transceiver 204 are connected as described above.

そして次に、前記コマンド信号を受信した送受信機２０４は、このコマンド信号を無線信号に変換して商品撮像装置１０４に出力する（シーケンスＳ４１３）。
前記コマンドの無線信号を受信した送受信部２０５は、この無線信号から前記移動操作ボタン３０４に関連付けられた駆動部２１３を駆動させるコマンドを抽出して制御部２０６に供給し、制御部２０６はこの供給されたコマンドを駆動部２１３に供給する。そして、駆動部２１３は、前記供給されたコマンドに基づき商品撮像装置１０４を移動させるべく駆動する。 Next, the transceiver 204 that has received the command signal converts the command signal into a radio signal and outputs the radio signal to the product imaging device 104 (sequence S413).
The transmission / reception unit 205 that has received the wireless signal of the command extracts a command for driving the driving unit 213 associated with the movement operation button 304 from the wireless signal, and supplies the command to the control unit 206, and the control unit 206 supplies the command. The command is supplied to the drive unit 213. Then, the drive unit 213 drives the product imaging device 104 to move based on the supplied command.

また、前記コマンドを受信した駆動部２１３は、このコマンドを受信した応答として予め設定されたタイミングで応答ステータスを制御部２０６に出力し、制御部２０６はこの供給された応答ステータスを送受信部２０５に供給する。   Further, the drive unit 213 that has received the command outputs a response status to the control unit 206 at a timing set in advance as a response to the reception of the command, and the control unit 206 sends the supplied response status to the transmission / reception unit 205. Supply.

次に、前記応答ステータスを受信した送受信部２０５は、送受信機２０４に対してこの応答ステータスを無線信号に変換して出力する（シーケンスＳ４１４）。   Next, the transmission / reception unit 205 that has received the response status converts the response status into a radio signal and outputs it to the transceiver 204 (sequence S414).

そして次に、前記応答ステータスの無線信号を受信した送受信機２０４は、この受信信号を前述したＷｅｂサーバ２０３と送受信機２０４との接続による信号形式に変換してＷｅｂサーバ２０３に対して出力する（シーケンスＳ４１５）。   Next, the transmitter / receiver 204 that has received the response status wireless signal converts the received signal into a signal format based on the connection between the Web server 203 and the transmitter / receiver 204 and outputs the signal to the Web server 203 ( Sequence S415).

Ｗｅｂサーバ２０３は、この応答ステータス信号を受信したことにより利用者からの操作指示が商品撮像装置１０４に伝達されたことを判断し、この受信信号から応答ステータスをネットワーク２０１を介してＰＣ部２０２ａに送出する（シーケンスＳ４１６）。
そして、ＰＣ部２０２ａはＷｅｂサーバ２０３から前記応答ステータスを受信してＷｅｂブラウザソフトに供給する。 The Web server 203 determines that an operation instruction from the user has been transmitted to the product imaging device 104 by receiving the response status signal, and sends the response status to the PC unit 202a via the network 201 from the received signal. This is sent out (sequence S416).
The PC unit 202a receives the response status from the Web server 203 and supplies it to the Web browser software.

次に、利用者が商品棚１０１に陳列された商品群の中から所望の商品１０２を選定する際の商品情報提供システムの動作について説明する。まず、利用者はＷｅｂブラウザ画面３０１の第１の表示ウィンドウ３０２や第２の表示ウィンドウ３０３を見ながら、前述したような操作によって移動操作ボタン３０４を操作して商品撮像装置１０４を移動させ、所望の商品１０２が見つかったときや、もっとよく見てみたい商品が見つかったときに移動を停止させる。   Next, the operation of the product information providing system when the user selects a desired product 102 from the product group displayed on the product shelf 101 will be described. First, while viewing the first display window 302 and the second display window 303 on the Web browser screen 301, the user operates the movement operation button 304 by the operation as described above to move the product imaging device 104, The movement is stopped when the product 102 is found or when a product to be seen more closely is found.

そして、利用者はマウスを用いて、カメラ操作ボタン３０５の「上」「下」「左」「右」の中からいずれか１つのボタン、又はズームボタン３０６の「ズームアップ」又は「ズームバック」の内どちらか１つのボタンをポインタで指し示して選択ボタンを押す。この選択ボタンが押さている間中、カメラを制御するためのコマンドが前述した図４（ｂ）と同様なシーケンスによってＰＣ部２０２ａから商品撮像装置１０４に対して発行され、このカメラ制御コマンドを受信した商品撮像装置１０４は、このコマンドを送受信部２０５から制御部２０６を介してパン・チルトカメラ２０７に供給する。   Then, the user uses the mouse to select one of the “up”, “down”, “left”, and “right” buttons of the camera operation button 305, or “zoom up” or “zoom back” of the zoom button 306. Point to one of the buttons with the pointer and press the select button. While the selection button is pressed, a command for controlling the camera is issued from the PC unit 202a to the product imaging device 104 in the same sequence as in FIG. 4B described above, and the camera control command is received. The merchandise imaging apparatus 104 supplies this command from the transmission / reception unit 205 to the pan / tilt camera 207 via the control unit 206.

そして、前記カメラ制御コマンドを受信したパン・チルトカメラ２０７は、このコマンドに基づき自身の向きを動かしたり撮像レンズをズーミングさせる。このようにパン・チルトカメラ２０７が駆動されているときの撮像画像は前述したように第１の表示ウィンドウ３０２に表示されるので、利用者は、所望の表示状態のときに前記マウスの選択ボタンを離して前記カメラ制御コマンドの発行を停止させ、それに基づいてパン・チルトカメラ２０７の駆動を停止させる。   The pan / tilt camera 207 that has received the camera control command moves its direction or zooms the imaging lens based on this command. Since the captured image when the pan / tilt camera 207 is driven is displayed on the first display window 302 as described above, the user can select the mouse selection button in the desired display state. The camera control command issuance is stopped and the pan / tilt camera 207 is stopped based on the release.

このようにして、利用者は第１の表示ウィンドウ３０２や第２の表示ウィンドウ３０３を見ながら商品撮像装置１０４を移動させ、第１の表示ウィンドウ３０２について任意に拡大表示させて隣り合った商品を見比べたりしながら所望の商品１０２を選定する。   In this way, the user moves the product imaging device 104 while viewing the first display window 302 and the second display window 303, and arbitrarily enlarges the first display window 302 to display adjacent products. A desired product 102 is selected while comparing.

次に、利用者は所望の商品１０２を選定し、この商品１０２の近傍又は商品１０２そのものに貼付されているバーコード１０３を第１の表示ウィンドウに表示させる。これにおいて、バーコード１０３の表示はこのバーコード全体について視覚的に判別可能な程度にズーミングさせて表示させる必要がある。   Next, the user selects a desired product 102, and displays the barcode 103 attached to the vicinity of the product 102 or the product 102 itself on the first display window. In this case, it is necessary to display the barcode 103 so that the entire barcode is zoomed to such an extent that it can be visually discriminated.

このようにしてバーコード１０３を表示させた後、利用者はバーコード選択ボタン３０７をマウスのポインタで指し示して選択ボタンを押す。この選択ボタンの押下操作により、バーコード解析のためのコマンドが前述した図４（ｂ）と同様なシーケンスによってＰＣ部２０２ａから商品撮像装置１０４に対して発行され、このバーコード解析コマンドを受信した商品撮像装置１０４は、このコマンドを送受信部２０５から制御部２０６、パン・チルトカメラ２０７を介して画像処理部２０９に供給する。   After displaying the barcode 103 in this way, the user points the barcode selection button 307 with the mouse pointer and presses the selection button. By pressing this selection button, a command for bar code analysis is issued from the PC unit 202a to the product imaging device 104 in the same sequence as in FIG. 4B, and the bar code analysis command is received. The product imaging apparatus 104 supplies this command from the transmission / reception unit 205 to the image processing unit 209 via the control unit 206 and the pan / tilt camera 207.

前記バーコード解析コマンドが供給された画像処理部２０９は、パン・チルトカメラ２０７から供給されているバーコード１０３の画像について画像認識を行い、バーコードに含まれた商品識別情報を抽出する。このバーコードの画像認識処理は周知の技術によって実現可能であり、本実施例においては説明を省略する。   The image processing unit 209 supplied with the barcode analysis command performs image recognition on the image of the barcode 103 supplied from the pan / tilt camera 207, and extracts the product identification information included in the barcode. This barcode image recognition processing can be realized by a well-known technique and will not be described in the present embodiment.

画像処理部２０９によってバーコード１０３から抽出された前記商品識別情報は送受信部２０５に供給され、送受信機２０４を介してＷｅｂサーバ２０３に供給される。そして、Ｗｅｂサーバ２０３では、前述したようにこの供給された商品識別情報に基づき関連する前述した商品情報が抽出され、ネットワーク２０１を介してＰＣ部２０２ａに転送される。これにより、利用者は所望の商品１０２についての前記商品情報を得ることができる。   The product identification information extracted from the barcode 103 by the image processing unit 209 is supplied to the transmission / reception unit 205, and is supplied to the Web server 203 via the transmission / reception unit 204. The Web server 203 extracts the related product information described above based on the supplied product identification information as described above, and transfers the extracted product information to the PC unit 202a via the network 201. Thereby, the user can obtain the product information on the desired product 102.

次に、店舗１１に商品説明を行うための店員がいる場合に、利用者がネットワーク２０１を介して店員と会話をする動作について説明する。利用者は、商品１０２を閲覧している最中に店員と話しをしたい場合が発生したとき、利用者はトークボタン３０８をマウスのポインタで指し示して選択ボタンを押す。
この選択ボタンが押されている間、情報端末２０２のマイク部２０２ｃ及びスピーカ部２０２ｄによる音声の入出力処理が可能となるようＰＣ部２０２ａに内蔵された前述の音声処理部が制御されると共に、商品撮像装置１０４のマイク部２１０及びスピーカ部２１１による音声の入出力処理が可能となるよう音声処理のためのコマンドが前述した図４（ｂ）と同様なシーケンスによってＰＣ部２０２ａから商品撮像装置１０４に対して発行され、この音声処理コマンドを受信した商品撮像装置１０４は、このコマンドを送受信部２０５から制御部２０６を介して音声処理部２１２に供給する。 Next, an operation in which a user has a conversation with a store clerk via the network 201 when there is a store clerk for explaining a product in the store 11 will be described. When the user wants to talk to the store clerk while browsing the product 102, the user points the talk button 308 with the mouse pointer and presses the selection button.
While the selection button is pressed, the above-described voice processing unit built in the PC unit 202a is controlled so that voice input / output processing by the microphone unit 202c and the speaker unit 202d of the information terminal 202 can be performed. A command for voice processing is sent from the PC unit 202a to the product imaging device 104 in the same sequence as in FIG. 4B described above so that voice input / output processing can be performed by the microphone unit 210 and the speaker unit 211 of the product imaging device 104. The product imaging apparatus 104 that has issued the voice processing command and supplies the command to the voice processing unit 212 via the control unit 206 from the transmission / reception unit 205.

前記音声処理コマンドが供給された音声処理部２１２は、マイク部２１０から入力される店員の音声を処理し、又後述するように送受信部２０５から供給される利用者の音声データをスピーカ部２１１に出力するよう動作する。   The voice processing unit 212 supplied with the voice processing command processes the clerk's voice input from the microphone unit 210, and the user's voice data supplied from the transmission / reception unit 205, as will be described later, to the speaker unit 211. Operates to output.

そして、上述したようにトークボタン３０８がマウスによって選択されて選択ボタンが押されている間、利用者が情報端末２０２のマイク部２０２ｃによって音声を入力すると、その入力された音声はＰＣ部２０２ａの音声処理部でデジタル音声データに変換され、ＰＣ部２０２ａからネットワーク２０１を介してＷｅｂサーバ２０３に供給された後、このデジタルデータはＷｅｂサーバ２０３から送受信機２０４を介して無線信号として商品撮像装置１０４に供給される。そして、上述したように送受信部２０５で受信した無線信号から音声データが抽出されて音声処理部２１２に供給される。音声処理部２１２は、供給された前記音声データをアナログ音声信号に変換してスピーカ部２１１に供給し、利用者の音声として出力する。   As described above, while the talk button 308 is selected by the mouse and the selection button is pressed, when the user inputs a sound through the microphone unit 202c of the information terminal 202, the input sound is stored in the PC unit 202a. After being converted into digital audio data by the audio processing unit and supplied from the PC unit 202a to the Web server 203 via the network 201, the digital data is converted from the Web server 203 via the transceiver 204 as a radio signal to the product imaging device 104. To be supplied. Then, as described above, audio data is extracted from the radio signal received by the transmission / reception unit 205 and supplied to the audio processing unit 212. The audio processing unit 212 converts the supplied audio data into an analog audio signal, supplies the analog audio signal to the speaker unit 211, and outputs it as a user's audio.

一方、商品撮像装置１０４のマイク部２１０から入力された店員の音声は、音声処理部２１２でデジタル音声データに変換されて送受信部２０５に供給され、無線信号として送受信機２０４に出力されてＷｅｂサーバ２０３に入力される。そして、Ｗｅｂサーバ２０３はこの供給された音声データをネットワーク２０１を介してＰＣ部２０２ａに転送し、利用者はスピーカ部２０２ｄで店員の音声を聞くことができる。   On the other hand, the clerk's voice input from the microphone unit 210 of the product imaging device 104 is converted into digital voice data by the voice processing unit 212 and supplied to the transmission / reception unit 205, and is output to the transceiver 204 as a wireless signal to be sent to the Web server. 203. The Web server 203 transfers the supplied audio data to the PC unit 202a via the network 201, and the user can listen to the store clerk's audio through the speaker unit 202d.

そして、トークボタン３０８を押し続けていたマウスの選択ボタンを解除すると、コマンド通信や音声データ通信が中止されて音声通話処理は終了される。   Then, when the selection button of the mouse that has continued to press the talk button 308 is released, command communication and voice data communication are stopped, and the voice call processing is ended.

以上詳述したように、本実施例に係る商品情報提供システムを用いることにより、利用者は情報端末２０２から店舗１１の商品撮像装置１０４を遠隔操作し、商品棚１０１の周りに布設された経路１０５に沿って商品撮像装置１０４を移動させて商品棚１０１に陳列された商品１０２を閲覧できるため、利用者は例えば自宅に置いてあるＰＣをＰＣ部２０２ａとすることで、自宅に居ながら店舗１１内をショッピングしているように商品を選ぶことができる。このようにすることで、利用者はほしいと思っていた商品以外にも多種多様な商品を見ることができるため、商品選択の自由度が広がることが多いに期待できる。   As described above in detail, by using the product information providing system according to the present embodiment, the user remotely operates the product imaging device 104 of the store 11 from the information terminal 202, and the route laid around the product shelf 101. Since the product imaging device 104 can be moved along 105 and the product 102 displayed on the product shelf 101 can be viewed, for example, the user can set the PC unit 202a as a PC unit 202a, so that the store can stay at home. Items can be selected as if they are shopping in 11. In this way, the user can see a wide variety of products in addition to the products that he / she wanted, so it can be expected that the degree of freedom of product selection will be widened.

また、利用者はパン・チルトカメラ２０７の簡単な遠隔操作によって気になった商品にカメラレンズを向け、そしてズーミングしてその商品の細部を見ることができる。これにおいて、店舗側は商品棚１０１への商品展示を類似商品毎や同種で異色の商品毎のように予め所定のカテゴリ別に展示しておけば、利用者は商品棚１０１全体を見渡したり、隣り合った商品を第１の表示ウィンドウ３０２に一緒に表示させて、商品の大きさ、形、色等を比較しながら商品を選ぶことが容易となる。   In addition, the user can point the camera lens at a product of interest by simple remote operation of the pan / tilt camera 207 and zoom to view details of the product. In this case, if the store displays the product display on the product shelf 101 in advance for each similar product or the same kind and different products for each predetermined category, the user looks over the entire product shelf 101 or next to it. The matched products are displayed together on the first display window 302, and it becomes easy to select the products while comparing the size, shape, color, etc. of the products.

また、店舗１１は各商品の近傍又は商品１０２そのものにバーコード１０３を予め貼付しておくことにより、商品撮像装置１０４はバーコード１０３を撮像して画像解析を行うことで、バーコード１０３によって一意に選択される商品１０２に関する商品情報をＷｅｂサーバ２０３に格納されたデータベースから簡単に抽出することができ、利用者は選択した商品１０２に関する情報を容易に取得することができる。   Further, the store 11 attaches the barcode 103 in the vicinity of each product or the product 102 itself, so that the product imaging device 104 captures the barcode 103 and performs image analysis, thereby uniquely identifying the barcode 103. The product information related to the selected product 102 can be easily extracted from the database stored in the Web server 203, and the user can easily acquire the information related to the selected product 102.

更にまた、利用者は情報端末２０２の設置場所からマイク部２０２ｃとスピーカ部２０２ｄとを介し、そして店舗１１に設置されている商品撮像装置１０４の近傍にいる店員はマイク部２１０とスピーカ部２１１とを介して互いに話しをすることができるので、商品の撮像画像やＷｅｂサーバ２０３のデータベースから得た商品情報だけでは十分に認識できない情報の確認や質問等を容易に行うことができる。   Furthermore, the user can connect from the installation location of the information terminal 202 via the microphone unit 202c and the speaker unit 202d, and the store clerk in the vicinity of the product imaging device 104 installed in the store 11 can connect the microphone unit 210 and the speaker unit 211. Since it is possible to talk to each other via the product information, it is possible to easily confirm information, questions and the like that cannot be sufficiently recognized only by the product image obtained from the captured image of the product or the database of the Web server 203.

なお、本実施例においては、送受信機２０４と商品撮像装置１０４との間は無線通信を行うような構成としたが、この無線通信手段は有線通信手段に置換えてもよいものである。例えば、Ｗｅｂサーバ２０３からのシリアル又はパラレル信号を長線路通信が可能な平衡式のシリアル又はパラレル信号に変換して送受信部２０５に接続してもよい。   In the present embodiment, the wireless communication between the transceiver 204 and the product imaging device 104 is configured to be wirelessly communicated. However, the wireless communication means may be replaced with a wired communication means. For example, a serial or parallel signal from the Web server 203 may be converted into a balanced serial or parallel signal capable of long-line communication and connected to the transmission / reception unit 205.

また、本実施例では、移動操作ボタン３０４として「前」「後」「左」「右」の４つの操作ボタンを例示したが、経路１０５の布設状態によっては「前」「後」又は「左」「右」の方向制御のみであってもよい。   In the present embodiment, four operation buttons of “front”, “rear”, “left”, and “right” are illustrated as the movement operation buttons 304, but “front”, “rear”, or “left” depending on the installation state of the path 105. Only “right” direction control may be used.

また、本実施例において説明した利用者と店員との会話の機能を使用しない場合は、情報端末２０２の構成からマイク部２０２ｃ及びスピーカ部２０２ｄを除き、そして商品撮像装置１０４の構成からマイク部２１０、スピーカ部２１１、及び音声処理部２１２を除けばよい。   Further, when the conversation function between the user and the clerk described in the present embodiment is not used, the microphone unit 202c and the speaker unit 202d are excluded from the configuration of the information terminal 202, and the microphone unit 210 is configured from the configuration of the product imaging device 104. The speaker unit 211 and the audio processing unit 212 may be omitted.

以上によれば、本発明に係る商品情報提供システムはネットワークを利用したネットワーク通信販売システムや、大規模倉庫の在庫管理システム等、陳列された商品等物品の管理を遠隔地から実施する用途にたいへん有用である。   According to the above, the product information providing system according to the present invention is very suitable for use in remote management of displayed goods such as a network mail order system using a network and an inventory management system for a large-scale warehouse. Useful.

本実施例に係る、商品情報提供システムの概略図で、稼動運用されるネット通販の店舗又は倉庫内で用いられることを想定した図である。1 is a schematic diagram of a merchandise information providing system according to the present embodiment, and is a diagram assumed to be used in a store or warehouse of an online mail order that is operated and operated. 本実施例に係る、商品情報提供システムの概略システム構成を示した図である。It is the figure which showed schematic system structure of the merchandise information provision system based on a present Example. 本実施例に係る、情報端末２０２の表示部２０２ｂに表示されるＷｅｂブラウザ画面の表示例である。It is a display example of the Web browser screen displayed on the display part 202b of the information terminal 202 based on a present Example. 本実施例に係る、商品情報提供システムの動作シーケンスを示した図である。It is the figure which showed the operation | movement sequence of the merchandise information provision system based on a present Example.

符号の説明Explanation of symbols

１１ 店舗
１０４ 商品撮像装置
２０１ ネットワーク
２０２ 情報端末
２０２ａ ＰＣ部
２０２ｂ 表示部
２０２ｃ マイク部
２０２ｄ スピーカ部
２０３ Ｗｅｂサーバ
２０４ 送受信機
２０５ 送受信部
２０６ 制御部
２０７ パン・チルトカメラ
２０８ 広角カメラ
２０９ 画像処理部
２１０ マイク部
２１１ スピーカ部
２１２ 音声処理部
２１３ 駆動部

DESCRIPTION OF SYMBOLS 11 Store 104 Commodity imaging device 201 Network 202 Information terminal 202a PC part 202b Display part 202c Microphone part 202d Speaker part 203 Web server 204 Transceiver 205 Transceiver part 206 Control part 207 Pan / tilt camera 208 Wide angle camera 209 Image processing part 210 Microphone part 211 Speaker unit 212 Audio processing unit 213 Drive unit

Claims (1)

ネットワークを介してそれぞれ接続される端末及びＷｅｂサーバと、前記端末に通信接続される表示装置と、前記Ｗｅｂサーバと通信接続されて商品陳列棚近傍を移動可能に配置される商品撮像装置とからなり、操作者の前記端末から前記Ｗｅｂサーバへのアクセスに基づき、前記商品撮像装置を移動制御させて離間地にある所望の商品の確認情報を得るための商品情報提供システムにおいて、
前記端末は、前記操作者の音声を入力するための第１のマイクロフォンと、この第１のマイクロフォンから得られた音声をデジタル信号に変換し、又前記商品撮像装置から前記Ｗｅｂサーバと前記ネットワークとを介して供給されたデータから音声データを抽出して音声出力するための第１の音声信号処理手段とを具備し、
前記商品撮像装置は、少なくともズーム画像を得るための第１の撮像手段と、前記陳列された商品の広角画像を得るための第２の撮像手段と、前記第１の撮像手段による前記陳列された商品の近傍に設けられたバーコードのズーム画像から商品識別情報を抽出する手段と、前記商品撮像装置の近傍位置から得られる音声を入力するための第２のマイクロフォンと、この第２のマイクロフォンから得られた音声をデジタル信号に変換し、又前記端末から前記ネットワークと前記Ｗｅｂサーバとを介して供給されたデータから音声データを抽出して音声出力するための第２の音声信号処理手段とを具備し、
前記Ｗｅｂサーバには、前記商品識別情報に対応付けられて検索される前記陳列された商品の詳細情報を有するデータベースが格納されると共に、
前記表示装置において、前記第１及び第２の撮像手段から得られた商品撮像情報に基づき、前記操作者による第１の撮像手段の撮像モードを制御してこの撮像モードに応じた前記陳列商品の撮像情報と、前記バーコードによる商品識別情報に基づく前記商品の詳細情報と、前記操作者の音声情報に基づく商品陳列側の音声情報と、をそれぞれ得て離間地にある商品の確認を行えるようにしたことを特徴とする商品情報提供システム。

A terminal and a Web server respectively connected via a network; a display device connected to the terminal; and a product imaging device connected to the Web server so as to be movable in the vicinity of the product display shelf. In the product information providing system for obtaining the confirmation information of the desired product in the remote place by controlling the movement of the product imaging device based on the access from the terminal of the operator to the Web server,
The terminal converts a first microphone for inputting the voice of the operator, a voice obtained from the first microphone into a digital signal, and the Web server and the network from the commodity imaging device. First audio signal processing means for extracting audio data from the data supplied via the audio and outputting the audio,
The commodity imaging apparatus includes at least a first imaging unit for obtaining a zoom image, a second imaging unit for obtaining a wide-angle image of the displayed commodity, and the display by the first imaging unit. From means for extracting product identification information from a zoomed image of a barcode provided in the vicinity of the product, a second microphone for inputting sound obtained from the vicinity of the product imaging device, and the second microphone Second audio signal processing means for converting the obtained audio into a digital signal and extracting audio data from the data supplied from the terminal via the network and the Web server and outputting the audio. Equipped,
The Web server stores a database having detailed information of the displayed products that are searched in association with the product identification information,
In the display device, on the basis of the product imaging information obtained from the first and second imaging means, the imaging mode of the first imaging means by the operator is controlled, and the display product corresponding to the imaging mode is controlled. The product information in the remote area can be confirmed by obtaining imaging information, detailed information of the product based on the product identification information by the bar code, and audio information on the product display side based on the operator's audio information. Product information providing system characterized by that.

Images