JP4014521B2 - 移動端末及びコンピュータ・ソフトウエア - Google Patents
移動端末及びコンピュータ・ソフトウエア Download PDFInfo
- Publication number
- JP4014521B2 JP4014521B2 JP2003066009A JP2003066009A JP4014521B2 JP 4014521 B2 JP4014521 B2 JP 4014521B2 JP 2003066009 A JP2003066009 A JP 2003066009A JP 2003066009 A JP2003066009 A JP 2003066009A JP 4014521 B2 JP4014521 B2 JP 4014521B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- information
- mobile terminal
- self
- partner
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Navigation (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephone Function (AREA)
- Telephonic Communication Services (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、移動端末及びコンピュータ・ソフトウエアであり、携帯電話機やＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）などの移動端末に係り、特に、自分と通話相手の、両移動端末の位置情報と向いている方向を示す方位情報を取得し、表示部に実際の通話相手が所在する方向に相手の映像を表示し、また、その映像の近くに矢印などを付加して相手の向いている方向も示す技術に関する。
【０００２】
【従来の技術】
知らない土地や混雑している場所において、待ち合わせ相手を簡単に探す方法として、ＧＰＳ等の衛星から自己の現在位置情報を、位置情報サービスセンターから相手の位置情報を、地図情報データベースから地図情報を獲得し、両者の位置情報と地図情報を表示部に表示するという携帯通信機器が提案されている（例えば、特許文献１参照）。この他にも、位置情報、地図情報に加えて、撮像部によって撮影した周辺の風景画像をメールに添付して相手に送る携帯通信機器が提案されている（例えば、特許文献２参照）。
【０００３】
また、特別な電波発信機や受信機を使うことなく、被検索者を検索者が探し出すシステムを構築する方法として、検索者と被検索者の相対位置情報を検索者に提供する位置情報通知装置が提案されている（例えば、特許文献３参照）。この装置は、検索者と被検索者との相対座標、方位、距離などを液晶表示装置に表示することができる。
【０００４】
携帯端末に撮像部を設け、カメラによって撮影した画像を表示部に表示したり、表示している画像を携帯電話の回線を使って送信し、相手の携帯端末に表示することは、ＩＴＵ−ＴＨ．３２３等の規格で標準化されている周知の技術である。また、携帯端末に地磁気センサーを内蔵し、携帯端末の向いている方向を測定することも周知の技術である。
【０００５】
【特許文献１】
特開２００２−２６２３３８号公報
【特許文献２】
特開２００２−１９１０６７号公報
【特許文献３】
特開２００２−２７５２７号公報
【０００６】
【発明が解決しようとする課題】
カメラのついた携帯端末を用いて通話する際に、自分の顔などを撮影しながらその画像を通話相手に送り、また自分も通話相手の画像を受信しながら通話ができるというテレビ電話システムが実現しているが、通話相手がどこにいるのか直感的にはわからない。
【０００７】
また、三人のユーザが同時に通話できるという三者通話システムがあるが、音声情報だけでは誰が誰に話しかけているのか分かりにくいといった問題があった。
【０００８】
本発明は、通話相手端末の位置と向いている方向を表示し、臨場感のある会話を可能とする移動端末及びコンピュータ・ソフトウエアを提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明では、上記のような課題を解決するために、通話相手から送信されてくる画像を、実際に通話相手のいる方向に合わせて画面に表示する。また、相手の向いている方向も示す。これにより、テレビ電話がより臨場感あふれるものとなる。
【００２２】
【発明の実施の形態】
以下、本発明の実施の形態を、図面を用いて説明する。図１は、実施形態の移動端末の構成説明図である。図２は、実施形態の移動端末における表示部に表示される画面の一例の説明図である。図３は、２つの移動端末の所在位置および向きが、北方向から成す角度を表した図である。図４は、実施例１の移動端末の表示部に表示する動作手順を示すフローチャートの一例である。図５は、実施例１の移動端末の表示画面の一例の説明図である。図６は、実施例２の移動端末の表示画面の一例の説明図である。図７は、実施例３の移動端末の表示画面の一例の説明図である。図８は、実施例３の移動端末における表示位置調節処理の手順を示すフローチャートの一例である。図９は、実施例３の移動端末で使用する表示位置一覧表の内容の一例の説明図である。図１０は、実施例４の移動端末の表示画面の一例の説明図である。図１１は、実施例５の移動端末の表示画面の一例の説明図である。
【００２３】
図１は、本発明の一実施形態に係る各々の移動端末が、基地局とＧＰＳ衛星からの電波を利用して該移動端末の所在位置情報を取得し、また、通話相手の移動端末の位置情報を取得し、該位置情報と通話相手の移動端末が所在する位置情報とを用いて通話相手の所在する位置方向を決定し、移動端末にある表示部の中心付近に予め定められた点から該方向に一定の距離だけ離した位置に、通話相手の移動端末に付属するカメラが映す映像を表示するのに必要な手段を表した構成図である。
【００２４】
本実施形態の移動端末１００は、データ受信部１０１、データ解析部１０２、自己位置情報取得部１０３、自己方向測定部１０４、相対位置決定部１０５、相対方位決定部１０６、相手表示位置・方向決定部１０７、表示部１０８、撮像部１０９、データ送信部１１０、音声再生部１１１などを、含んだものとして構成されている。
【００２５】
図２は、２人のユーザが本実施形態の移動端末を用いて通話している場合の、移動端末の表示部１０８、撮像部１０９、音声再生部１１１を示したものである。
【００２６】
データ受信部１０１は、基地局及びＧＰＳ衛星から送られてくる電波を受信する部分である。
【００２７】
データ解析部１０２は、データ受信部１０１が受信した電波を解析し、次の情報を得る。通話相手の音声、通話相手の移動端末の所在位置情報、通話相手の移動端末に付属する表示部の上方が向いている方向を示す方位情報、通話相手の移動端末に付属するカメラが映す映像情報、などである。
【００２８】
自己位置情報取得部１０３は、自己端末の所在位置を測定して位置情報を取得するものであり、基地局、ロケーションサーバ（ＧＰＳや基地局を使用した位置情報の提供サービスを行うサーバ）、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星と情報のやり取りを行い、移動端末の所在位置の座標を、緯度・経度の数値で取得する部分である。
【００２９】
自己方向測定部１０４は、自己端末の向いている方向を測定して方位情報を取得するものであり、地磁気センサーなどを用いて移動端末の向く方位を測定し、数値化する部分である。方向から北方向を０°とし、西方向への角度θ０を求める。ここでの、移動端末の向く方位というのは、移動端末に付属する表示部１０８の下方から上方に向かって引いた直線２０１（図２参照）が指す方位のことである。なお、移動端末の表示部１０８に直交する線（図２の紙面に垂直の方向）の方位を測定することも可能で、直線２０１が鉛直方向のとき等でも方位を測定することができる。方位は、移動端末を持って歩くユーザの進む方向でも有る。
【００３０】
相対位置決定部１０５は、通話相手の移動端末の所在位置情報をデータ解析部１０２から受け取り、自己位置情報と比較して相対位置座標を計算する。図３は、２つの移動端末の所在位置と向いている方向を表したものである。点Ｐ０に自分が所有する移動端末０、点Ｐ１に通話相手の所有する移動端末１があり、移動端末０は北方向から西方向に角度θ０だけ傾いた方向を向いており、移動端末１は北方向から西方向に角度θ１だけ傾いた方向を向いている。
【００３１】
自分の移動端末０の位置座標をＰ０（ｘ０，ｙ０）、通話相手の移動端末１の位置座標をＰ１（ｘ１，ｙ１）とすると、相対位置座標ｄＰ１は、
ｄＰ１＝（ｘ１−ｘ０，ｙ１−ｙ０）
となる。点Ｐ０から点Ｐ１へ引いた直線と、点Ｐ０から真北に向かって引いた直線とが成す角度θｐ１は、数式１のように表される。
【数１】
なお、ｄｘ１＝ｘ１−ｘ０、ｄｙ１＝ｙ１−ｙ０、とした。
【００３２】
経度・緯度の数値は、北緯・東経の方向に測定された値を正の値に、南緯・西経の方向に測定された値を負の値として計算する。なお、これらの数値は−１８０°から１８０°の範囲内とする。
【００３３】
また相対位置決定部１０５は、自己方向測定部１０４から移動端末の向いている方位情報を受け取り、これと相対位置座標を用いて、通話相手の移動端末が所在する方位と自分の移動端末の向いている方位との角度差θ’ｐ１＝θｐ１−θ０、を計算する。
【００３４】
相対方位決定部１０６は、データ解析部１０２から通話相手の移動端末が向いている方位情報を、自己方向測定部１０４からは移動端末の向いている方位情報を受け取り、通話相手の移動端末が向いている方位と自分の移動端末の向いている方位との角度差θ’１＝θ１−θ０、を計算する部分である。
【００３５】
相手表示位置・方向決定部１０７は、相対位置決定部１０５と相対方位決定部１０６からθ’ｐ１とθ’１を受け取り、通話相手の映像を表示部１０８に表示する際の位置と大きさ、その映像の端から出す通話相手の移動端末が向いている方位を示す矢印２０２の方向を決定する部分である。
【００３６】
表示部１０８は、データ解析部１０２から通話相手の映像情報と、相手表示位置・方向決定部１０７から通話相手の映像を表示する位置と大きさ、その映像の端から出す矢印２０２の方向とを受け取り、通話相手の映像を表示する部分である。また、表示部１０８の中心付近で予め定められた位置に、自分を示す星型などのマーク２０４を表示する。また、移動端末の向いている方向を表すために、図中の印２０３のような北方向を示すマークを表示する。表示部１０８はこれ以外にも、移動端末を操作した場合にその操作に応じた画面を表示する。
【００３７】
撮像部１０９は、小型カメラなどを用いて、移動端末を所有するユーザの顔や、景色などを撮影し、映像情報を得る部分である。映像情報は、データ送信部１１０に送られ、基地局に送信される。
【００３８】
データ送信部１１０は、自己位置情報取得部１０３から移動端末の所在位置情報、自己方向測定部１０４から移動端末の向いている方位情報、撮像部１０９から映像情報、などを受け取り、基地局に送信する部分である。
【００３９】
音声再生部１１１は、データ解析部１０２から通話相手の音声情報を受け取り、音として再生する部分である。
【００４０】
実施例１を説明する。図４は、本実施形態の移動端末が、通話相手の移動端末の所在位置情報と、向いている方位情報と、撮像部が映す映像情報とを、表示部に表示する処理手順を示すフローチャートである。
【００４１】
まず、データ受信部１０１で基地局からの電波を受信し（ステップＳ４０１）、データ解析部１０２でデータを解析する（ステップＳ４０２）。解析の結果、通話相手の音声、通話相手の移動端末の所在位置情報、通話相手の移動端末が向いている方向を示す方位情報、通話相手の移動端末に付属するカメラが映す映像情報を取得する。次に、通話の初めか途中かを判断するために、通話中フラグの状態を見る（ステップＳ４０３）。通話中フラグが立っていない、すなわち通話が始まって初めてデータが来た状態である場合は、ステップＳ４０４に進み通話中フラグを立てる。その後、自己位置情報を取得し（ステップＳ４０５）、位置取得タイマをスタートさせる（ステップＳ４０６）。続いて、自己方向情報を取得し（ステップＳ４０７）、方向取得タイマをスタートさせて（ステップＳ４０８）、ステップＳ４１５に進む。
【００４２】
ステップＳ４０３で通話中フラグが立っている場合、すなわち通話の最中でデータを受信した場合、ステップＳ４０９に進む。位置取得タイマが満了していれば、自己位置情報を取得し（ステップＳ４１０）、位置取得タイマをリセットし（ステップＳ４１１）、ステップＳ４１２に進む。すなわち、位置情報を取得してから予め定められた時間間隔だけ時間が経過していたら、もう一度位置情報を取得する。ステップＳ４０９で位置取得タイマが満了していない場合は、何もせずステップＳ４１２に進む。
【００４３】
方向情報についても位置情報と同様のフローで取得する。まず、ステップＳ４１２で方向取得タイマが満了していれば、自己方向情報を取得し（ステップＳ４１３）、方向取得タイマをリセットし（ステップＳ４１４）、ステップＳ４１５に進む。ステップＳ４１２で方向取得タイマが満了していない場合は、何もせずステップＳ４１４に進む。なお、位置取得タイマと方向取得タイマの時間間隔は等しくなくてもよい。また、ユーザの操作キーによる指示を受けて取得するようにすることも可能である。
【００４４】
ステップＳ４１５では、相手の移動端末の所在位置情報と自己位置情報をもとに、相対位置決定部１０５で相手の移動端末の相対位置を決定する。また、自己方向情報を用いて相手の移動端末が所在する位置方向を決定する。
【００４５】
ステップＳ４１６では、相手の移動端末の方位情報と自己方向情報を用いて、自分の移動端末に対する相手の移動端末の向きを、相対方位決定部１０６が決定する。
【００４６】
ステップＳ４１７では、相手の移動端末に付属する撮像部が映す映像情報を表示部１０８に表示する位置を、相手表示位置・方向決定部１０７が決定する。表示位置は、表示部１０８の予め定められた点から、予め定められた距離だけ離れた点を中心とした、予め定められた半径の円、もしくは予め定められた大きさの長方形の範囲である。
【００４７】
ステップＳ４１８では相手の移動端末の向きを示す矢印２０２を表示する位置を、相手表示位置・方向決定部１０７が決定する。矢印２０２は予め定められた形と大きさをもつ。矢印２０２は、表示部１０８に表示された相手の映像の中心から、相対方位決定部１０６が決定した相手の移動端末の向く方向に直線を引いたときに映像の端と交わる点を始点とし、相手の移動端末の向く方向に表示する。
【００４８】
ステップＳ４１９では、相手表示位置・方向決定部１０７が決定した、相手の映像と矢印２０２を表示部１０８に表示する。
【００４９】
本実施形態の移動端末を用いて、一人の通話相手と通話する場合について、表示部１０８に表示される画面を説明する。図５は、本実施形態の移動端末を用いてユーザＡとユーザＢが通話している際に、ユーザが体の向きを変えるなどして移動端末の向きが変化した場合に、表示部１０８に表示される画面を示している。
【００５０】
図５の５１１、５１２、５１３は、ユーザＡ（黒丸）とユーザＢ（白丸）の位置関係と、それぞれが持つ移動端末の向きを矢印で表している。なお、紙面の上方を北方向としている。
【００５１】
図５の画面５２１、５２２、５２３は、ユーザＢの持つ移動端末の表示部１０８の画面で、画面５３１、５３２、５３３がユーザＡの持つ移動端末の表示部１０８の画面を表している。なお、縦の列は、それぞれ同時刻のものである。
【００５２】
図５の５１１の状態は、ユーザＡの北方向にユーザＢが所在しており、ユーザＡの移動端末は北向き、ユーザＢの移動端末は南向きであり、それぞれが向き合っている状態である。この時、ユーザＡ、Ｂの移動端末の表示部１０８には、それぞれ画面５３１、５２１が表示されている。
【００５３】
図５の５１２の状態は、ユーザＡの移動端末が北西に向きを変えた場合である。この時の、ユーザＡの移動端末の表示部１０８には画面５３２が表示されている。ユーザＡから見るとユーザＢは右斜め前方向に所在することになる。ユーザＢの移動端末の向きは状態５１１から変化していないので、矢印はユーザＡ自身を示す中心方向を向いている。一方、ユーザＢの移動端末の表示部１０８には画面５２２が表示される。ユーザＢから見るとユーザＡの所在位置は変化していないが、ユーザＡの移動端末の向きが変化したため、ユーザＡの向きを示す矢印が右斜め下を向いている。
【００５４】
図５の５２３の状態は、ユーザＢの移動端末が北に向きを変えた場合である。この時の、ユーザＡの移動端末の表示部１０８には画面５３３が表示されている。ユーザＡから見るとユーザＢの所在位置は変化していないが、ユーザＢの移動端末の向きが変化したため、ユーザＢの向きを示す矢印が右斜め上を向いている。一方、ユーザＢの移動端末の表示部１０８には画面５２３が表示される。ユーザＢから見るとユーザＡの所在位置はユーザＢの向いている方と反対側になるため、ユーザＡの映像が表示部１０８の下方に表示される。
【００５５】
実施例２を説明する。図６は、本実施形態の移動端末を用いてユーザＡ６０１、ユーザＢ６０２、ユーザＣ６０３が三人で通話をしている場合の、それぞれのユーザの位置関係６１０と、ユーザＡ６０１が持つ移動端末の表示部に表示される画面６２０を表している。
【００５６】
６１０の状態では、ユーザＡは北方向を向いていて、ユーザＢとユーザＣがお互いに向き合っている。ユーザＡは、表示画面６２０を見れば、ユーザＢとユーザＣが話をしていて、自分には話しかけていないのだとわかる。
【００５７】
このように複数人で通話をする場合、誰に話しかけているのかが一目瞭然であり、音声だけの場合と比べて臨場感あふれる会話ができる。
【００５８】
実施例３を説明する。図７は、本実施形態の移動端末を用いてユーザＡ７０１、ユーザＢ７０２、ユーザＣ７０３が三人で通話をしている場合の、それぞれのユーザの位置関係７１０と、ユーザＡ７０１が持つ移動端末の表示部に表示される画面７２０、画面７３０を表している。
【００５９】
７１０の状態では、ユーザＡから見てユーザＢとユーザＣがほぼ同じ角度に所在している。そのため、ユーザＡの移動端末の表示部に、ユーザＢとユーザＣの映像を同時に表示すると、画面７２０のようにユーザＢの映像とユーザＣの映像が重なってしまい、どちらか一方の映像がかけてしまう。
【００６０】
これを回避するために、例えば画面７３０のようにユーザＣの映像をずらして表示することで、ユーザＢの映像がかけないようにする。ここで、ユーザＣの所在する方向がわかるようするために、ユーザＢと映像が重ならなかった場合にユーザＣの映像が表示されるべき位置の中心に、黒丸などのマーク７３１を表示する。また、マーク７３１がユーザＣの所在する方向であることがわかるようにするために、マーク７３１からユーザＣの映像の端までを点線などで結ぶ。また、ユーザＣの向いている方向を表す矢印２０２は、マーク７３１を始点として表示することができる。
【００６１】
図８に、本実施形態の移動端末を用いて複数人の通話相手と同時に通話をする場合に、通話相手の映像が別の通話相手の映像の上に重ならないように、通話相手の映像の表示位置を記録しておく表示位置一覧表を参照して、通話相手の映像を表示する位置を決定する、処理手順のフローチャートの一部を示す。ここで、表示位置一覧表に記録される内容を図９に示す。表示位置一覧表には、通話相手識別子９０１、映像の中心９０２、映像の大きさ９０３の項目がある。通話相手識別子９０１は、表示する映像がどの通話相手からのものかを判断するために必要で、通話相手の名前などである。または、通話相手の電話番号や、メールアドレス、ユーザが予め決めておいたニックネームなどでもよい。
【００６２】
映像の中心９０２は、通話相手の映像を表示したとき、その映像の中心が位置する点を表すものである。例えば、中心付近に表示された自分を表すマーク２０４を座標（０，０）として、そこからの相対位置を横方向、縦方向ごとに長さや液晶のドット数などで表す。または、表示部の４つ端などのような特定の点を（０，０）として、その相対位置を表してもよい。
【００６３】
映像の大きさ９０３は、通話相手の映像の大きさを表すものである。例えば、映像が円の場合は、その半径などである。映像が円以外の形であれば、その映像全体を覆うことができる最小の円の半径を、映像の大きさとして代入することもできる。
【００６４】
ステップＳ８０１からステップＳ８１０は、図４のフローチャートのステップＳ４１５からステップＳ４１９の部分に相当するものであり、ステップＳ４０１からステップＳ４１４の部分は全く同様の内容となるため、省略してある。
【００６５】
まず、ステップＳ８０１では、全ての通話相手に対して表示位置の決定を行ったかどうかを判断する。全員分が終わっていればステップＳ８１０に進んで画面表示を行い、まだ終わっていなければステップＳ８０２に進む。ここで、相対位置決定部１０５で相手の移動端末の相対位置を決定し、相手の映像を表示する位置を相手表示位置・方向決定部１０７が決定する（ステップＳ８０３）。次に、表示位置一覧表を参照し（ステップＳ８０４）、ステップＳ８０３で決定した表示位置が、他の通話相手の映像を表示する位置と重なっている部分がないかを判断する（ステップＳ８０５）。判断方法としては、ステップＳ８０３で決定した映像の中心９０２と、既に登録されている通話相手の映像の中心９０２との距離が、ステップＳ８０３で決定した映像の大きさ９０３と、既に登録されている通話相手の映像の大きさ９０３との和よりも大きければ、映像は重なっていないと判断する。これを、表示位置一覧表に登録されている通話相手全てに対して行い、全ての通話相手の映像に対して映像が重なっていなければ、ステップＳ８０７に進む。もし、重なっていると判断された場合はステップＳ８０６に進み、予め定められた方向、距離だけ映像の中心をずらし、もう一度ステップＳ８０５に戻って映像が重なっていないかどうかを判断する。これを映像が重ならなくなるまで繰り返す。
【００６６】
ステップＳ８０７で相対方向を決定し、ステップＳ８０８で矢印の位置及び方向を決定する。その後に、ステップＳ８０３もしくはステップＳ８０６で決定した映像の中心を、表示位置一覧表に登録する（ステップＳ８０９）。ここまでの処理を、全ての通話相手の映像に対して行う。ステップＳ８１０では、全ての通話相手の映像を表示部に表示する。この際、ステップＳ８０６で位置をずらした映像に関しては、マーク７３１及びマーク７３１から映像の端までの点線を表示する。
【００６７】
実施例４を説明する。図１０は、本実施形態の移動端末を用いて、ユーザＢ１００２、ユーザＣ１００３、ユーザＤ１００４と通話しているユーザＡの移動端末の表示部に表示された画面を示している。自分の所在する方向を向いている通話相手の映像は大きく表示し、自分の所在する方向とは違った方向を向いている通話相手の映像は小さく表示した例である。
【００６８】
通話相手の向いている方向と、ユーザＡを示すマークから通話相手の映像とを結んだ線とが成す角度は、ユーザＢ、ユーザＣ、ユーザＤに対して約０°、約６０°、約１００°である。よって、一番角度の小さいユーザＢの映像が一番大きく表示され、次に角度の小さいユーザＣの映像が次に大きく、一番角度の大きいユーザＤの映像は一番小さく表示される。
【００６９】
これにより、自分と話しがしたいという意思があり、自分の所在する方向を向いている通話相手の映像を大きく表示することで、誰が自分に話し掛けているのかを視覚的に容易に判断できる。
【００７０】
また、映像の大きさを変化させる代わりに、映像を立体的に表示して、映像の奥行きで表現することもできる。自分が所在する方を向いている通話相手の映像は手前に見えるように表示し、自分の方を向いていない通話相手の映像は奥の方に見えるように表示する。
【００７１】
実施例５を説明する。図１１は、本実施形態の移動端末を用いて、３人の通話相手と通話している場合の、表示部に表示される画面を示している。この実施例では、通話相手の平面画像を立体的に傾けることにより、通話相手の向いている方向を示している。通話相手１１０２と通話相手１１０３はお互い向き合っており、通話相手１１０４は下の方向を向いている。なお、平面画像を平面的に回転させて、その画像の向きで相手の向いている方向を表現してもよい。
【００７２】
実施例６を説明する。通話相手を判断するために通話相手が持つ移動端末の撮像部が映す映像の代わりに、動物等の識別可能なキャラクタ画像を表示することもできる。表示する画像は、通話相手の移動端末からデータとして受信し、自分の移動端末に表示してもよいし、自分の移動端末で予め定めておいた画像を表示してもよい。
【００７３】
また、電話番号等といった通話相手を識別できるものと、その通話相手と通話する場合に自分の移動端末に表示させる画像との関係を示した対応テーブルを用意しておき、特定の通話相手と通話する際にはいつも決まったキャラクタ画像を表示させてもよい。表示させる画像を予め決めておかなくても、移動端末がランダムに決定することもできる。
【００７４】
キャラクタ画像を３Ｄデータで表現し、通話相手の向いている方向を、そのキャラクタの向いている方向で表してもよい。そのキャラクタに手などの方向を示すことができる特徴を持たせ、その特徴を用いて通話相手の向いている方向を表してもよい。
【００７５】
なお、見知らぬ土地や混雑している場所などでは、待ち合わせをしている相手となかなか出会えない場合がある。そういった際、本実施形態の移動端末を用いて、相手の所在する方向と、相手の向いている向きを知り、「君から見て斜め右のビルにいるよ」などといった、お互いが出会うための的確な指示を出すことが可能である。また、移動端末は、基地局と通信を行う無線端末に限らず、有線端末でもよい。
【００７６】
なお、上記実施形態では、移動端末を説明したが、自己端末の所在位置の測定データから位置情報を取得する自己位置情報取得機能と、自己端末の向いている方向の測定データから方位情報を取得する自己方位情報取得機能と、通話相手端末を識別する相手識別機能と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信機能と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得機能と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得機能と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示機能とをコンピュータに実現させるプログラムからなる移動端末用コンピュータ・ソフトウエアを使用することにより、従来の移動端末を本発明の移動端末とすることができる。また、本発明の他の実施形態１の移動端末は、例えば具体的には、ユーザの顔や風景を撮影する撮像手段と、移動端末の所在位置を測定する位置情報取得手段と、移動端末の（表示部の先端）向いている方向を測定する方位情報取得手段と、通話相手の移動端末の位置情報と方位情報を取得する手段と、通話相手の位置情報と自己の位置情報および方位情報を用いて、自己の移動端末の向きに対する通話相手の所在する方向を決定する相対位置決定手段と、通話相手の方位情報と自己の方位情報を用いて、自己の移動端末の向きに対する通話相手の向いている方向を決定する相対方位決定手段と、通話相手の移動端末の撮像部が映す映像を自己の移動端末の表示部に表示する位置を該両端末の相対位置に従って決定する映像表示位置決定手段と、通話相手の移動端末が向いている方向を示す矢印を表示する位置および傾きを決定する矢印表示位置決定手段と、上記映像と上記矢印を表示する表示手段とを、具備した構成をとる。本発明の他の実施形態２は、自己端末の所在位置を測定して位置情報を取得する自己位置情報取得手段と、自己端末の向いている方向を測定して方位情報を取得する自己方位情報取得手段と、通話相手端末を識別する相手識別手段と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信手段と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得手段と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得手段と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示手段とを備える移動端末である。本発明の他の実施形態３は、上記方位相手位置表示手段は、通話相手端末の所在位置の方位として、該所在位置を示すマークを、円周上の該当方位個所に表示する移動端末である。そして、本発明の他の実施形態４は、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、自己端末と通話相手端末との距離を算出して相手距離情報を取得する相手距離情報取得手段を備えており、上記方位相手位置表示手段は、前記相手距離情報に応じて通話相手端末の所在位置を示すマークの大きさを変更して表示する移動端末である。更に、本発明の他の実施形態５は、上記自己端末情報送信手段は、予め定められた時間間隔を経て、自己位置情報取得手段が再度取得した位置情報及び自己方位情報取得手段が再度取得した方位情報を通話相手端末へ送信する移動端末である。また、本発明の他の実施形態６は、上記自己端末情報送信手段は、操作キーの操作を受けて通話相手端末へ送信する移動端末である。そして、本発明の他の実施形態７は、通話相手を識別する通話相手識別子、該通話相手識別子を表示する位置及び該通話相手識別子の大きさの対応関係を格納した表示位置記録手段を備える移動端末である。更に、本発明の他の実施形態８は、複数人の通話相手端末の全ての通話相手識別子が重ならずに表示できるように、通話相手の所在位置を示すマークの表示位置を調節する表示位置調節手段を備える移動端末である。また、本発明の他の実施形態９は、自己端末が向いている方位、通話相手端末の所在位置の方位及び該通話相手端末の向いている方位を基に、自己端末と通話相手端末とが向き合っているかを判断する判断手段を備え、該判断手段が向き合っていると判断したとき、上記方位相手位置表示手段は、通話相手端末の所在位置を示すマークを変更して表示する移動端末である。通話相手端末の所在位置を示すマークの変更は、マークの大きさ、色、奥行き の変化や撮像した映像を平面的又は立体的に傾けた表示とする等により行うことができ、また、方位を示す矢印の長さ、太さ、色等の変更とすることもできる。そして、本発明の他の実施形態１０は、複数の通話相手端末の所在位置の方位及び該通話相手端末の向いている方位を基に、複数の通話相手端末が互いに向き合っているかを判断する判断手段を備え、該判断手段が互いに向き合っていると判断したとき、上記方位相手位置表示手段は、該複数の通話相手端末の所在位置を示すマークを変更して表示する移動端末である。更に、本発明の他の実施形態１１は、自己端末の所在位置の測定データから位置情報を取得する自己位置情報取得機能と、自己端末の向いている方向の測定データから方位情報を取得する自己方位情報取得機能と、通話相手端末を識別する相手識別機能と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信機能と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得機能と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得機能と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示機能とをコンピュータに実現させるプログラムからなる移動端末用コンピュータ・ソフトウエアである。本発明の他の実施形態によれば、通話相手の映像を通話相手のいる方向に表示することができ、臨場感のある通話を楽しめることができる。また、相手の向いている方向も示すことで、三者通話のように複数人で通話する場合に、誰が誰に話しかけているのかがはっきりわかるため、臨場感のあるスムーズな会話が可能とする移動端末を得ることができる。
【００７７】
【発明の効果】
本発明によれば、臨場感のある通話を行うことが可能な移動端末を提供することができる。
【図面の簡単な説明】
【図１】実施形態の移動端末の構成説明図。
【図２】実施形態の移動端末における表示部に表示される画面の一例の説明図。
【図３】２つの移動端末の所在位置および向きが、北方向から成す角度を表した図。
【図４】実施例１の移動端末の表示部に表示する動作手順を示すフローチャートの一例。
【図５】実施例１の移動端末の表示画面の一例の説明図。
【図６】実施例２の移動端末の表示画面の一例の説明図。
【図７】実施例３の移動端末の表示画面の一例の説明図。
【図８】実施例３の移動端末における表示位置調節処理の手順を示すフローチャートの一例。
【図９】実施例３の移動端末で使用する表示位置一覧表の内容の一例の説明図。
【図１０】実施例４の移動端末の表示画面の一例の説明図。
【図１１】実施例５の移動端末の表示画面の一例の説明図。
【符号の説明】
１００ 移動端末
１０１ データ受信部
１０２ データ解析部
１０３ 自己位置情報取得部
１０４ 自己方向測定部
１０５ 相対位置決定部
１０６ 相対方位決定部
１０７ 相手表示位置・方向決定部
１０８ 表示部
１０９ 撮像部
１１０ データ送信部
１１１ 音声再生部
【発明の属する技術分野】
本発明は、移動端末及びコンピュータ・ソフトウエアであり、携帯電話機やＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）などの移動端末に係り、特に、自分と通話相手の、両移動端末の位置情報と向いている方向を示す方位情報を取得し、表示部に実際の通話相手が所在する方向に相手の映像を表示し、また、その映像の近くに矢印などを付加して相手の向いている方向も示す技術に関する。
【０００２】
【従来の技術】
知らない土地や混雑している場所において、待ち合わせ相手を簡単に探す方法として、ＧＰＳ等の衛星から自己の現在位置情報を、位置情報サービスセンターから相手の位置情報を、地図情報データベースから地図情報を獲得し、両者の位置情報と地図情報を表示部に表示するという携帯通信機器が提案されている（例えば、特許文献１参照）。この他にも、位置情報、地図情報に加えて、撮像部によって撮影した周辺の風景画像をメールに添付して相手に送る携帯通信機器が提案されている（例えば、特許文献２参照）。
【０００３】
また、特別な電波発信機や受信機を使うことなく、被検索者を検索者が探し出すシステムを構築する方法として、検索者と被検索者の相対位置情報を検索者に提供する位置情報通知装置が提案されている（例えば、特許文献３参照）。この装置は、検索者と被検索者との相対座標、方位、距離などを液晶表示装置に表示することができる。
【０００４】
携帯端末に撮像部を設け、カメラによって撮影した画像を表示部に表示したり、表示している画像を携帯電話の回線を使って送信し、相手の携帯端末に表示することは、ＩＴＵ−ＴＨ．３２３等の規格で標準化されている周知の技術である。また、携帯端末に地磁気センサーを内蔵し、携帯端末の向いている方向を測定することも周知の技術である。
【０００５】
【特許文献１】
特開２００２−２６２３３８号公報
【特許文献２】
特開２００２−１９１０６７号公報
【特許文献３】
特開２００２−２７５２７号公報
【０００６】
【発明が解決しようとする課題】
カメラのついた携帯端末を用いて通話する際に、自分の顔などを撮影しながらその画像を通話相手に送り、また自分も通話相手の画像を受信しながら通話ができるというテレビ電話システムが実現しているが、通話相手がどこにいるのか直感的にはわからない。
【０００７】
また、三人のユーザが同時に通話できるという三者通話システムがあるが、音声情報だけでは誰が誰に話しかけているのか分かりにくいといった問題があった。
【０００８】
本発明は、通話相手端末の位置と向いている方向を表示し、臨場感のある会話を可能とする移動端末及びコンピュータ・ソフトウエアを提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明では、上記のような課題を解決するために、通話相手から送信されてくる画像を、実際に通話相手のいる方向に合わせて画面に表示する。また、相手の向いている方向も示す。これにより、テレビ電話がより臨場感あふれるものとなる。
【００２２】
【発明の実施の形態】
以下、本発明の実施の形態を、図面を用いて説明する。図１は、実施形態の移動端末の構成説明図である。図２は、実施形態の移動端末における表示部に表示される画面の一例の説明図である。図３は、２つの移動端末の所在位置および向きが、北方向から成す角度を表した図である。図４は、実施例１の移動端末の表示部に表示する動作手順を示すフローチャートの一例である。図５は、実施例１の移動端末の表示画面の一例の説明図である。図６は、実施例２の移動端末の表示画面の一例の説明図である。図７は、実施例３の移動端末の表示画面の一例の説明図である。図８は、実施例３の移動端末における表示位置調節処理の手順を示すフローチャートの一例である。図９は、実施例３の移動端末で使用する表示位置一覧表の内容の一例の説明図である。図１０は、実施例４の移動端末の表示画面の一例の説明図である。図１１は、実施例５の移動端末の表示画面の一例の説明図である。
【００２３】
図１は、本発明の一実施形態に係る各々の移動端末が、基地局とＧＰＳ衛星からの電波を利用して該移動端末の所在位置情報を取得し、また、通話相手の移動端末の位置情報を取得し、該位置情報と通話相手の移動端末が所在する位置情報とを用いて通話相手の所在する位置方向を決定し、移動端末にある表示部の中心付近に予め定められた点から該方向に一定の距離だけ離した位置に、通話相手の移動端末に付属するカメラが映す映像を表示するのに必要な手段を表した構成図である。
【００２４】
本実施形態の移動端末１００は、データ受信部１０１、データ解析部１０２、自己位置情報取得部１０３、自己方向測定部１０４、相対位置決定部１０５、相対方位決定部１０６、相手表示位置・方向決定部１０７、表示部１０８、撮像部１０９、データ送信部１１０、音声再生部１１１などを、含んだものとして構成されている。
【００２５】
図２は、２人のユーザが本実施形態の移動端末を用いて通話している場合の、移動端末の表示部１０８、撮像部１０９、音声再生部１１１を示したものである。
【００２６】
データ受信部１０１は、基地局及びＧＰＳ衛星から送られてくる電波を受信する部分である。
【００２７】
データ解析部１０２は、データ受信部１０１が受信した電波を解析し、次の情報を得る。通話相手の音声、通話相手の移動端末の所在位置情報、通話相手の移動端末に付属する表示部の上方が向いている方向を示す方位情報、通話相手の移動端末に付属するカメラが映す映像情報、などである。
【００２８】
自己位置情報取得部１０３は、自己端末の所在位置を測定して位置情報を取得するものであり、基地局、ロケーションサーバ（ＧＰＳや基地局を使用した位置情報の提供サービスを行うサーバ）、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星と情報のやり取りを行い、移動端末の所在位置の座標を、緯度・経度の数値で取得する部分である。
【００２９】
自己方向測定部１０４は、自己端末の向いている方向を測定して方位情報を取得するものであり、地磁気センサーなどを用いて移動端末の向く方位を測定し、数値化する部分である。方向から北方向を０°とし、西方向への角度θ０を求める。ここでの、移動端末の向く方位というのは、移動端末に付属する表示部１０８の下方から上方に向かって引いた直線２０１（図２参照）が指す方位のことである。なお、移動端末の表示部１０８に直交する線（図２の紙面に垂直の方向）の方位を測定することも可能で、直線２０１が鉛直方向のとき等でも方位を測定することができる。方位は、移動端末を持って歩くユーザの進む方向でも有る。
【００３０】
相対位置決定部１０５は、通話相手の移動端末の所在位置情報をデータ解析部１０２から受け取り、自己位置情報と比較して相対位置座標を計算する。図３は、２つの移動端末の所在位置と向いている方向を表したものである。点Ｐ０に自分が所有する移動端末０、点Ｐ１に通話相手の所有する移動端末１があり、移動端末０は北方向から西方向に角度θ０だけ傾いた方向を向いており、移動端末１は北方向から西方向に角度θ１だけ傾いた方向を向いている。
【００３１】
自分の移動端末０の位置座標をＰ０（ｘ０，ｙ０）、通話相手の移動端末１の位置座標をＰ１（ｘ１，ｙ１）とすると、相対位置座標ｄＰ１は、
ｄＰ１＝（ｘ１−ｘ０，ｙ１−ｙ０）
となる。点Ｐ０から点Ｐ１へ引いた直線と、点Ｐ０から真北に向かって引いた直線とが成す角度θｐ１は、数式１のように表される。
【数１】
【００３２】
経度・緯度の数値は、北緯・東経の方向に測定された値を正の値に、南緯・西経の方向に測定された値を負の値として計算する。なお、これらの数値は−１８０°から１８０°の範囲内とする。
【００３３】
また相対位置決定部１０５は、自己方向測定部１０４から移動端末の向いている方位情報を受け取り、これと相対位置座標を用いて、通話相手の移動端末が所在する方位と自分の移動端末の向いている方位との角度差θ’ｐ１＝θｐ１−θ０、を計算する。
【００３４】
相対方位決定部１０６は、データ解析部１０２から通話相手の移動端末が向いている方位情報を、自己方向測定部１０４からは移動端末の向いている方位情報を受け取り、通話相手の移動端末が向いている方位と自分の移動端末の向いている方位との角度差θ’１＝θ１−θ０、を計算する部分である。
【００３５】
相手表示位置・方向決定部１０７は、相対位置決定部１０５と相対方位決定部１０６からθ’ｐ１とθ’１を受け取り、通話相手の映像を表示部１０８に表示する際の位置と大きさ、その映像の端から出す通話相手の移動端末が向いている方位を示す矢印２０２の方向を決定する部分である。
【００３６】
表示部１０８は、データ解析部１０２から通話相手の映像情報と、相手表示位置・方向決定部１０７から通話相手の映像を表示する位置と大きさ、その映像の端から出す矢印２０２の方向とを受け取り、通話相手の映像を表示する部分である。また、表示部１０８の中心付近で予め定められた位置に、自分を示す星型などのマーク２０４を表示する。また、移動端末の向いている方向を表すために、図中の印２０３のような北方向を示すマークを表示する。表示部１０８はこれ以外にも、移動端末を操作した場合にその操作に応じた画面を表示する。
【００３７】
撮像部１０９は、小型カメラなどを用いて、移動端末を所有するユーザの顔や、景色などを撮影し、映像情報を得る部分である。映像情報は、データ送信部１１０に送られ、基地局に送信される。
【００３８】
データ送信部１１０は、自己位置情報取得部１０３から移動端末の所在位置情報、自己方向測定部１０４から移動端末の向いている方位情報、撮像部１０９から映像情報、などを受け取り、基地局に送信する部分である。
【００３９】
音声再生部１１１は、データ解析部１０２から通話相手の音声情報を受け取り、音として再生する部分である。
【００４０】
実施例１を説明する。図４は、本実施形態の移動端末が、通話相手の移動端末の所在位置情報と、向いている方位情報と、撮像部が映す映像情報とを、表示部に表示する処理手順を示すフローチャートである。
【００４１】
まず、データ受信部１０１で基地局からの電波を受信し（ステップＳ４０１）、データ解析部１０２でデータを解析する（ステップＳ４０２）。解析の結果、通話相手の音声、通話相手の移動端末の所在位置情報、通話相手の移動端末が向いている方向を示す方位情報、通話相手の移動端末に付属するカメラが映す映像情報を取得する。次に、通話の初めか途中かを判断するために、通話中フラグの状態を見る（ステップＳ４０３）。通話中フラグが立っていない、すなわち通話が始まって初めてデータが来た状態である場合は、ステップＳ４０４に進み通話中フラグを立てる。その後、自己位置情報を取得し（ステップＳ４０５）、位置取得タイマをスタートさせる（ステップＳ４０６）。続いて、自己方向情報を取得し（ステップＳ４０７）、方向取得タイマをスタートさせて（ステップＳ４０８）、ステップＳ４１５に進む。
【００４２】
ステップＳ４０３で通話中フラグが立っている場合、すなわち通話の最中でデータを受信した場合、ステップＳ４０９に進む。位置取得タイマが満了していれば、自己位置情報を取得し（ステップＳ４１０）、位置取得タイマをリセットし（ステップＳ４１１）、ステップＳ４１２に進む。すなわち、位置情報を取得してから予め定められた時間間隔だけ時間が経過していたら、もう一度位置情報を取得する。ステップＳ４０９で位置取得タイマが満了していない場合は、何もせずステップＳ４１２に進む。
【００４３】
方向情報についても位置情報と同様のフローで取得する。まず、ステップＳ４１２で方向取得タイマが満了していれば、自己方向情報を取得し（ステップＳ４１３）、方向取得タイマをリセットし（ステップＳ４１４）、ステップＳ４１５に進む。ステップＳ４１２で方向取得タイマが満了していない場合は、何もせずステップＳ４１４に進む。なお、位置取得タイマと方向取得タイマの時間間隔は等しくなくてもよい。また、ユーザの操作キーによる指示を受けて取得するようにすることも可能である。
【００４４】
ステップＳ４１５では、相手の移動端末の所在位置情報と自己位置情報をもとに、相対位置決定部１０５で相手の移動端末の相対位置を決定する。また、自己方向情報を用いて相手の移動端末が所在する位置方向を決定する。
【００４５】
ステップＳ４１６では、相手の移動端末の方位情報と自己方向情報を用いて、自分の移動端末に対する相手の移動端末の向きを、相対方位決定部１０６が決定する。
【００４６】
ステップＳ４１７では、相手の移動端末に付属する撮像部が映す映像情報を表示部１０８に表示する位置を、相手表示位置・方向決定部１０７が決定する。表示位置は、表示部１０８の予め定められた点から、予め定められた距離だけ離れた点を中心とした、予め定められた半径の円、もしくは予め定められた大きさの長方形の範囲である。
【００４７】
ステップＳ４１８では相手の移動端末の向きを示す矢印２０２を表示する位置を、相手表示位置・方向決定部１０７が決定する。矢印２０２は予め定められた形と大きさをもつ。矢印２０２は、表示部１０８に表示された相手の映像の中心から、相対方位決定部１０６が決定した相手の移動端末の向く方向に直線を引いたときに映像の端と交わる点を始点とし、相手の移動端末の向く方向に表示する。
【００４８】
ステップＳ４１９では、相手表示位置・方向決定部１０７が決定した、相手の映像と矢印２０２を表示部１０８に表示する。
【００４９】
本実施形態の移動端末を用いて、一人の通話相手と通話する場合について、表示部１０８に表示される画面を説明する。図５は、本実施形態の移動端末を用いてユーザＡとユーザＢが通話している際に、ユーザが体の向きを変えるなどして移動端末の向きが変化した場合に、表示部１０８に表示される画面を示している。
【００５０】
図５の５１１、５１２、５１３は、ユーザＡ（黒丸）とユーザＢ（白丸）の位置関係と、それぞれが持つ移動端末の向きを矢印で表している。なお、紙面の上方を北方向としている。
【００５１】
図５の画面５２１、５２２、５２３は、ユーザＢの持つ移動端末の表示部１０８の画面で、画面５３１、５３２、５３３がユーザＡの持つ移動端末の表示部１０８の画面を表している。なお、縦の列は、それぞれ同時刻のものである。
【００５２】
図５の５１１の状態は、ユーザＡの北方向にユーザＢが所在しており、ユーザＡの移動端末は北向き、ユーザＢの移動端末は南向きであり、それぞれが向き合っている状態である。この時、ユーザＡ、Ｂの移動端末の表示部１０８には、それぞれ画面５３１、５２１が表示されている。
【００５３】
図５の５１２の状態は、ユーザＡの移動端末が北西に向きを変えた場合である。この時の、ユーザＡの移動端末の表示部１０８には画面５３２が表示されている。ユーザＡから見るとユーザＢは右斜め前方向に所在することになる。ユーザＢの移動端末の向きは状態５１１から変化していないので、矢印はユーザＡ自身を示す中心方向を向いている。一方、ユーザＢの移動端末の表示部１０８には画面５２２が表示される。ユーザＢから見るとユーザＡの所在位置は変化していないが、ユーザＡの移動端末の向きが変化したため、ユーザＡの向きを示す矢印が右斜め下を向いている。
【００５４】
図５の５２３の状態は、ユーザＢの移動端末が北に向きを変えた場合である。この時の、ユーザＡの移動端末の表示部１０８には画面５３３が表示されている。ユーザＡから見るとユーザＢの所在位置は変化していないが、ユーザＢの移動端末の向きが変化したため、ユーザＢの向きを示す矢印が右斜め上を向いている。一方、ユーザＢの移動端末の表示部１０８には画面５２３が表示される。ユーザＢから見るとユーザＡの所在位置はユーザＢの向いている方と反対側になるため、ユーザＡの映像が表示部１０８の下方に表示される。
【００５５】
実施例２を説明する。図６は、本実施形態の移動端末を用いてユーザＡ６０１、ユーザＢ６０２、ユーザＣ６０３が三人で通話をしている場合の、それぞれのユーザの位置関係６１０と、ユーザＡ６０１が持つ移動端末の表示部に表示される画面６２０を表している。
【００５６】
６１０の状態では、ユーザＡは北方向を向いていて、ユーザＢとユーザＣがお互いに向き合っている。ユーザＡは、表示画面６２０を見れば、ユーザＢとユーザＣが話をしていて、自分には話しかけていないのだとわかる。
【００５７】
このように複数人で通話をする場合、誰に話しかけているのかが一目瞭然であり、音声だけの場合と比べて臨場感あふれる会話ができる。
【００５８】
実施例３を説明する。図７は、本実施形態の移動端末を用いてユーザＡ７０１、ユーザＢ７０２、ユーザＣ７０３が三人で通話をしている場合の、それぞれのユーザの位置関係７１０と、ユーザＡ７０１が持つ移動端末の表示部に表示される画面７２０、画面７３０を表している。
【００５９】
７１０の状態では、ユーザＡから見てユーザＢとユーザＣがほぼ同じ角度に所在している。そのため、ユーザＡの移動端末の表示部に、ユーザＢとユーザＣの映像を同時に表示すると、画面７２０のようにユーザＢの映像とユーザＣの映像が重なってしまい、どちらか一方の映像がかけてしまう。
【００６０】
これを回避するために、例えば画面７３０のようにユーザＣの映像をずらして表示することで、ユーザＢの映像がかけないようにする。ここで、ユーザＣの所在する方向がわかるようするために、ユーザＢと映像が重ならなかった場合にユーザＣの映像が表示されるべき位置の中心に、黒丸などのマーク７３１を表示する。また、マーク７３１がユーザＣの所在する方向であることがわかるようにするために、マーク７３１からユーザＣの映像の端までを点線などで結ぶ。また、ユーザＣの向いている方向を表す矢印２０２は、マーク７３１を始点として表示することができる。
【００６１】
図８に、本実施形態の移動端末を用いて複数人の通話相手と同時に通話をする場合に、通話相手の映像が別の通話相手の映像の上に重ならないように、通話相手の映像の表示位置を記録しておく表示位置一覧表を参照して、通話相手の映像を表示する位置を決定する、処理手順のフローチャートの一部を示す。ここで、表示位置一覧表に記録される内容を図９に示す。表示位置一覧表には、通話相手識別子９０１、映像の中心９０２、映像の大きさ９０３の項目がある。通話相手識別子９０１は、表示する映像がどの通話相手からのものかを判断するために必要で、通話相手の名前などである。または、通話相手の電話番号や、メールアドレス、ユーザが予め決めておいたニックネームなどでもよい。
【００６２】
映像の中心９０２は、通話相手の映像を表示したとき、その映像の中心が位置する点を表すものである。例えば、中心付近に表示された自分を表すマーク２０４を座標（０，０）として、そこからの相対位置を横方向、縦方向ごとに長さや液晶のドット数などで表す。または、表示部の４つ端などのような特定の点を（０，０）として、その相対位置を表してもよい。
【００６３】
映像の大きさ９０３は、通話相手の映像の大きさを表すものである。例えば、映像が円の場合は、その半径などである。映像が円以外の形であれば、その映像全体を覆うことができる最小の円の半径を、映像の大きさとして代入することもできる。
【００６４】
ステップＳ８０１からステップＳ８１０は、図４のフローチャートのステップＳ４１５からステップＳ４１９の部分に相当するものであり、ステップＳ４０１からステップＳ４１４の部分は全く同様の内容となるため、省略してある。
【００６５】
まず、ステップＳ８０１では、全ての通話相手に対して表示位置の決定を行ったかどうかを判断する。全員分が終わっていればステップＳ８１０に進んで画面表示を行い、まだ終わっていなければステップＳ８０２に進む。ここで、相対位置決定部１０５で相手の移動端末の相対位置を決定し、相手の映像を表示する位置を相手表示位置・方向決定部１０７が決定する（ステップＳ８０３）。次に、表示位置一覧表を参照し（ステップＳ８０４）、ステップＳ８０３で決定した表示位置が、他の通話相手の映像を表示する位置と重なっている部分がないかを判断する（ステップＳ８０５）。判断方法としては、ステップＳ８０３で決定した映像の中心９０２と、既に登録されている通話相手の映像の中心９０２との距離が、ステップＳ８０３で決定した映像の大きさ９０３と、既に登録されている通話相手の映像の大きさ９０３との和よりも大きければ、映像は重なっていないと判断する。これを、表示位置一覧表に登録されている通話相手全てに対して行い、全ての通話相手の映像に対して映像が重なっていなければ、ステップＳ８０７に進む。もし、重なっていると判断された場合はステップＳ８０６に進み、予め定められた方向、距離だけ映像の中心をずらし、もう一度ステップＳ８０５に戻って映像が重なっていないかどうかを判断する。これを映像が重ならなくなるまで繰り返す。
【００６６】
ステップＳ８０７で相対方向を決定し、ステップＳ８０８で矢印の位置及び方向を決定する。その後に、ステップＳ８０３もしくはステップＳ８０６で決定した映像の中心を、表示位置一覧表に登録する（ステップＳ８０９）。ここまでの処理を、全ての通話相手の映像に対して行う。ステップＳ８１０では、全ての通話相手の映像を表示部に表示する。この際、ステップＳ８０６で位置をずらした映像に関しては、マーク７３１及びマーク７３１から映像の端までの点線を表示する。
【００６７】
実施例４を説明する。図１０は、本実施形態の移動端末を用いて、ユーザＢ１００２、ユーザＣ１００３、ユーザＤ１００４と通話しているユーザＡの移動端末の表示部に表示された画面を示している。自分の所在する方向を向いている通話相手の映像は大きく表示し、自分の所在する方向とは違った方向を向いている通話相手の映像は小さく表示した例である。
【００６８】
通話相手の向いている方向と、ユーザＡを示すマークから通話相手の映像とを結んだ線とが成す角度は、ユーザＢ、ユーザＣ、ユーザＤに対して約０°、約６０°、約１００°である。よって、一番角度の小さいユーザＢの映像が一番大きく表示され、次に角度の小さいユーザＣの映像が次に大きく、一番角度の大きいユーザＤの映像は一番小さく表示される。
【００６９】
これにより、自分と話しがしたいという意思があり、自分の所在する方向を向いている通話相手の映像を大きく表示することで、誰が自分に話し掛けているのかを視覚的に容易に判断できる。
【００７０】
また、映像の大きさを変化させる代わりに、映像を立体的に表示して、映像の奥行きで表現することもできる。自分が所在する方を向いている通話相手の映像は手前に見えるように表示し、自分の方を向いていない通話相手の映像は奥の方に見えるように表示する。
【００７１】
実施例５を説明する。図１１は、本実施形態の移動端末を用いて、３人の通話相手と通話している場合の、表示部に表示される画面を示している。この実施例では、通話相手の平面画像を立体的に傾けることにより、通話相手の向いている方向を示している。通話相手１１０２と通話相手１１０３はお互い向き合っており、通話相手１１０４は下の方向を向いている。なお、平面画像を平面的に回転させて、その画像の向きで相手の向いている方向を表現してもよい。
【００７２】
実施例６を説明する。通話相手を判断するために通話相手が持つ移動端末の撮像部が映す映像の代わりに、動物等の識別可能なキャラクタ画像を表示することもできる。表示する画像は、通話相手の移動端末からデータとして受信し、自分の移動端末に表示してもよいし、自分の移動端末で予め定めておいた画像を表示してもよい。
【００７３】
また、電話番号等といった通話相手を識別できるものと、その通話相手と通話する場合に自分の移動端末に表示させる画像との関係を示した対応テーブルを用意しておき、特定の通話相手と通話する際にはいつも決まったキャラクタ画像を表示させてもよい。表示させる画像を予め決めておかなくても、移動端末がランダムに決定することもできる。
【００７４】
キャラクタ画像を３Ｄデータで表現し、通話相手の向いている方向を、そのキャラクタの向いている方向で表してもよい。そのキャラクタに手などの方向を示すことができる特徴を持たせ、その特徴を用いて通話相手の向いている方向を表してもよい。
【００７５】
なお、見知らぬ土地や混雑している場所などでは、待ち合わせをしている相手となかなか出会えない場合がある。そういった際、本実施形態の移動端末を用いて、相手の所在する方向と、相手の向いている向きを知り、「君から見て斜め右のビルにいるよ」などといった、お互いが出会うための的確な指示を出すことが可能である。また、移動端末は、基地局と通信を行う無線端末に限らず、有線端末でもよい。
【００７６】
なお、上記実施形態では、移動端末を説明したが、自己端末の所在位置の測定データから位置情報を取得する自己位置情報取得機能と、自己端末の向いている方向の測定データから方位情報を取得する自己方位情報取得機能と、通話相手端末を識別する相手識別機能と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信機能と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得機能と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得機能と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示機能とをコンピュータに実現させるプログラムからなる移動端末用コンピュータ・ソフトウエアを使用することにより、従来の移動端末を本発明の移動端末とすることができる。また、本発明の他の実施形態１の移動端末は、例えば具体的には、ユーザの顔や風景を撮影する撮像手段と、移動端末の所在位置を測定する位置情報取得手段と、移動端末の（表示部の先端）向いている方向を測定する方位情報取得手段と、通話相手の移動端末の位置情報と方位情報を取得する手段と、通話相手の位置情報と自己の位置情報および方位情報を用いて、自己の移動端末の向きに対する通話相手の所在する方向を決定する相対位置決定手段と、通話相手の方位情報と自己の方位情報を用いて、自己の移動端末の向きに対する通話相手の向いている方向を決定する相対方位決定手段と、通話相手の移動端末の撮像部が映す映像を自己の移動端末の表示部に表示する位置を該両端末の相対位置に従って決定する映像表示位置決定手段と、通話相手の移動端末が向いている方向を示す矢印を表示する位置および傾きを決定する矢印表示位置決定手段と、上記映像と上記矢印を表示する表示手段とを、具備した構成をとる。本発明の他の実施形態２は、自己端末の所在位置を測定して位置情報を取得する自己位置情報取得手段と、自己端末の向いている方向を測定して方位情報を取得する自己方位情報取得手段と、通話相手端末を識別する相手識別手段と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信手段と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得手段と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得手段と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示手段とを備える移動端末である。本発明の他の実施形態３は、上記方位相手位置表示手段は、通話相手端末の所在位置の方位として、該所在位置を示すマークを、円周上の該当方位個所に表示する移動端末である。そして、本発明の他の実施形態４は、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、自己端末と通話相手端末との距離を算出して相手距離情報を取得する相手距離情報取得手段を備えており、上記方位相手位置表示手段は、前記相手距離情報に応じて通話相手端末の所在位置を示すマークの大きさを変更して表示する移動端末である。更に、本発明の他の実施形態５は、上記自己端末情報送信手段は、予め定められた時間間隔を経て、自己位置情報取得手段が再度取得した位置情報及び自己方位情報取得手段が再度取得した方位情報を通話相手端末へ送信する移動端末である。また、本発明の他の実施形態６は、上記自己端末情報送信手段は、操作キーの操作を受けて通話相手端末へ送信する移動端末である。そして、本発明の他の実施形態７は、通話相手を識別する通話相手識別子、該通話相手識別子を表示する位置及び該通話相手識別子の大きさの対応関係を格納した表示位置記録手段を備える移動端末である。更に、本発明の他の実施形態８は、複数人の通話相手端末の全ての通話相手識別子が重ならずに表示できるように、通話相手の所在位置を示すマークの表示位置を調節する表示位置調節手段を備える移動端末である。また、本発明の他の実施形態９は、自己端末が向いている方位、通話相手端末の所在位置の方位及び該通話相手端末の向いている方位を基に、自己端末と通話相手端末とが向き合っているかを判断する判断手段を備え、該判断手段が向き合っていると判断したとき、上記方位相手位置表示手段は、通話相手端末の所在位置を示すマークを変更して表示する移動端末である。通話相手端末の所在位置を示すマークの変更は、マークの大きさ、色、奥行き の変化や撮像した映像を平面的又は立体的に傾けた表示とする等により行うことができ、また、方位を示す矢印の長さ、太さ、色等の変更とすることもできる。そして、本発明の他の実施形態１０は、複数の通話相手端末の所在位置の方位及び該通話相手端末の向いている方位を基に、複数の通話相手端末が互いに向き合っているかを判断する判断手段を備え、該判断手段が互いに向き合っていると判断したとき、上記方位相手位置表示手段は、該複数の通話相手端末の所在位置を示すマークを変更して表示する移動端末である。更に、本発明の他の実施形態１１は、自己端末の所在位置の測定データから位置情報を取得する自己位置情報取得機能と、自己端末の向いている方向の測定データから方位情報を取得する自己方位情報取得機能と、通話相手端末を識別する相手識別機能と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信機能と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得機能と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、通話相手端末の所在位置の方位を算出して相手位置方位情報を取得する相手位置方位情報取得機能と、自己端末の向いている方位と、通話相手端末の所在位置の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示機能とをコンピュータに実現させるプログラムからなる移動端末用コンピュータ・ソフトウエアである。本発明の他の実施形態によれば、通話相手の映像を通話相手のいる方向に表示することができ、臨場感のある通話を楽しめることができる。また、相手の向いている方向も示すことで、三者通話のように複数人で通話する場合に、誰が誰に話しかけているのかがはっきりわかるため、臨場感のあるスムーズな会話が可能とする移動端末を得ることができる。
【００７７】
【発明の効果】
本発明によれば、臨場感のある通話を行うことが可能な移動端末を提供することができる。
【図面の簡単な説明】
【図１】実施形態の移動端末の構成説明図。
【図２】実施形態の移動端末における表示部に表示される画面の一例の説明図。
【図３】２つの移動端末の所在位置および向きが、北方向から成す角度を表した図。
【図４】実施例１の移動端末の表示部に表示する動作手順を示すフローチャートの一例。
【図５】実施例１の移動端末の表示画面の一例の説明図。
【図６】実施例２の移動端末の表示画面の一例の説明図。
【図７】実施例３の移動端末の表示画面の一例の説明図。
【図８】実施例３の移動端末における表示位置調節処理の手順を示すフローチャートの一例。
【図９】実施例３の移動端末で使用する表示位置一覧表の内容の一例の説明図。
【図１０】実施例４の移動端末の表示画面の一例の説明図。
【図１１】実施例５の移動端末の表示画面の一例の説明図。
【符号の説明】
１００ 移動端末
１０１ データ受信部
１０２ データ解析部
１０３ 自己位置情報取得部
１０４ 自己方向測定部
１０５ 相対位置決定部
１０６ 相対方位決定部
１０７ 相手表示位置・方向決定部
１０８ 表示部
１０９ 撮像部
１１０ データ送信部
１１１ 音声再生部
Claims (10)
- 自己端末の所在位置を測定して位置情報を取得する自己位置情報取得手段と、自己端末の向いている方向を測定して方位情報を取得する自己方位情報取得手段と、通話相手端末を識別する相手識別手段と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信手段と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得手段と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、自己端末から見た相手端末の方位を算出して相手位置方位情報を取得する相手位置方位情報取得手段と、自己端末の向いている方位と、自己端末から見た相手端末の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示手段とを備えることを特徴とする移動端末。
- 請求項１記載の移動端末において、
上記方位相手位置表示手段は、自己端末から見た相手端末の方位として、該所在位置を示すマークを、円周上の該当方位個所に表示することを特徴とする移動端末。 - 請求項２記載の移動端末において、
受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、自己端末と通話相手端末との距離を算出して相手距離情報を取得する相手距離情報取得手段を備えており、上記方位相手位置表示手段は、前記相手距離情報に応じて通話相手端末の所在位置を示すマークの大きさを変更して表示することを特徴とする移動端末。 - 請求項１記載の移動端末において、
上記自己端末情報送信手段は、予め定められた時間間隔を経て、自己位置情報取得手段が再度取得した位置情報及び自己方位情報取得手段が再度取得した方位情報を通話相手端末へ送信することを特徴とする移動端末。 - 請求項４記載の移動端末において、
上記自己端末情報送信手段は、操作キーの操作を受けて通話相手端末へ送信することを特徴とする移動端末。 - 請求項１記載の移動端末において、
通話相手を識別する通話相手識別子、該通話相手識別子を表示する位置及び該通話相手識別子の大きさの対応関係を格納した表示位置記録手段を備えることを特徴とする移動端末。 - 請求項６記載の移動端末において、
複数人の通話相手端末の全ての通話相手識別子が重ならずに表示できるように、通話相手の所在位置を示すマークの表示位置を調節する表示位置調節手段を備えることを特徴とする移動端末。 - 請求項１記載の移動端末において、
自己端末が向いている方位、自己端末から見た相手端末の方位及び該通話相手端末の向いている方位を基に、自己端末と通話相手端末とが向き合っているかを判断する判断手段を備え、該判断手段が向き合っていると判断したとき、上記方位相手位置表示手段は、通話相手端末の所在位置を示すマークを変更して表示することを特徴とする移動端末。 - 請求項１記載の移動端末において、
自己端末から見た複数の相手端末の方位及び該通話相手端末の向いている方位を基に、複数の通話相手端末が互いに向き合っているかを判断する判断手段を備え、該判断手段が互いに向き合っていると判断したとき、上記方位相手位置表示手段は、該複数の通話相手端末の所在位置を示すマークを変更して表示することを特徴とする移動端末。 - 自己端末の所在位置の測定データから位置情報を取得する自己位置情報取得機能と、自己端末の向いている方向の測定データから方位情報を取得する自己方位情報取得機能と、通話相手端末を識別する相手識別機能と、通話相手端末へ自己端末の位置情報及び方位情報を送信する自己端末情報送信機能と、通話相手端末の位置情報及び方位情報を受信する相手端末情報取得機能と、受信した通話相手端末の位置情報と自己端末の位置情報とを用いて、自己端末から見た相手端末の方位を算出して相手位置方位情報を取得する相手位置方位情報取得機能と、自己端末の向いている方位と、自己端末から見 た相手端末の方位と、該通話相手端末の向いている方位とを表示する方位相手位置表示機能とをコンピュータに実現させるプログラムからなる移動端末用コンピュータ・ソフトウエア。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003066009A JP4014521B2 (ja) | 2003-03-12 | 2003-03-12 | 移動端末及びコンピュータ・ソフトウエア |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003066009A JP4014521B2 (ja) | 2003-03-12 | 2003-03-12 | 移動端末及びコンピュータ・ソフトウエア |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2004274653A JP2004274653A (ja) | 2004-09-30 |
| JP2004274653A5 JP2004274653A5 (ja) | 2005-09-29 |
| JP4014521B2 true JP4014521B2 (ja) | 2007-11-28 |
Family
ID=33126838
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003066009A Expired - Lifetime JP4014521B2 (ja) | 2003-03-12 | 2003-03-12 | 移動端末及びコンピュータ・ソフトウエア |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4014521B2 (ja) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4520335B2 (ja) * | 2005-03-11 | 2010-08-04 | 株式会社エヌ・ティ・ティ・ドコモ | データ送受信装置、双方向データ伝送システム、及び、データ送受信方法 |
| JP4669751B2 (ja) * | 2005-07-04 | 2011-04-13 | Ｎｅｃカシオモバイルコミュニケーションズ株式会社 | 無線通信機能付き方位計測装置、方位計測方法、及び、プログラム |
| JP5172794B2 (ja) * | 2009-08-06 | 2013-03-27 | 日本電信電話株式会社 | ビデオコミュニケーションシステム、方法およびプログラム |
| US8121618B2 (en) * | 2009-10-28 | 2012-02-21 | Digimarc Corporation | Intuitive computing methods and systems |
| JP5475698B2 (ja) | 2011-01-26 | 2014-04-16 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置、表示制御方法、プログラム及び情報記憶媒体 |
| WO2013046423A1 (ja) * | 2011-09-30 | 2013-04-04 | パイオニア株式会社 | ヘッドアップディスプレイ、制御方法、及び表示装置 |
| WO2013046425A1 (ja) * | 2011-09-30 | 2013-04-04 | パイオニア株式会社 | ヘッドアップディスプレイ、制御方法、及び表示装置 |
| US9311640B2 (en) | 2014-02-11 | 2016-04-12 | Digimarc Corporation | Methods and arrangements for smartphone payments and transactions |
| JP2017146739A (ja) * | 2016-02-16 | 2017-08-24 | 株式会社リコー | 位置情報共有システム、情報処理装置、及びプログラム |
| JP7163020B2 (ja) * | 2017-12-08 | 2022-10-31 | 株式会社東芝 | 通信システム、通信方法およびプログラム |
| WO2020013061A1 (ja) * | 2018-07-11 | 2020-01-16 | ソニー株式会社 | 情報処理装置および情報処理方法 |
| JP7146542B2 (ja) * | 2018-09-18 | 2022-10-04 | 株式会社Ｓｃｒｅｅｎホールディングス | 経路案内プログラム、経路案内装置、および経路案内システム |
-
2003
- 2003-03-12 JP JP2003066009A patent/JP4014521B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004274653A (ja) | 2004-09-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10051417B2 (en) | Ad hoc formation and tracking of location-sharing groups | |
| US8014763B2 (en) | Wireless communications with proximal targets identified visually, aurally, or positionally | |
| US8531514B2 (en) | Image providing system and image providing method | |
| US9509867B2 (en) | Methods and apparatus for collecting image data | |
| JP4014521B2 (ja) | 移動端末及びコンピュータ・ソフトウエア | |
| US9710969B2 (en) | Indicating the geographic origin of a digitally-mediated communication | |
| US9013505B1 (en) | Mobile system representing virtual objects on live camera image | |
| KR102285107B1 (ko) | 컨텐츠 공유 | |
| CN111179435B (zh) | 增强现实处理方法及装置、***、存储介质和电子设备 | |
| US9584980B2 (en) | Methods and apparatus for position estimation | |
| US20080051033A1 (en) | Wireless communications with visually- identified targets | |
| EP3287745B1 (en) | Information interaction method and device | |
| JP5577318B2 (ja) | 位置情報提供方法及び位置情報提供システム | |
| JP5146600B2 (ja) | 移動通信装置、位置情報取得方法、及びプログラム | |
| KR100566637B1 (ko) | 지피에스 및 이미지를 이용한 이동통신 단말기의 위치통지 방법 | |
| JP4697931B2 (ja) | 情報提供システムおよび携帯端末 | |
| JP2010171664A (ja) | 携帯情報端末、情報表示制御方法、及び、情報表示制御プログラム | |
| JP2012064071A (ja) | 情報システム、端末装置、広告出力方法、およびプログラム | |
| JP6600450B2 (ja) | 場所情報指定装置、場所情報指定方法及び場所情報指定プログラム | |
| JPH09297532A (ja) | 端末装置 | |
| JP2002262338A (ja) | 携帯通信機器 | |
| JP2008235971A (ja) | 撮像装置、及び、撮像装置における立体的形状撮影方法 | |
| KR20120081448A (ko) | 근거리 통신에 기반한 스마트 태깅 장치 및 이를 이용한 위치 인지 방법 | |
| CN113438462B (zh) | 一种多设备互联拍摄方法及装置、电子设备及存储介质 | |
| JP7026504B2 (ja) | 表示サイズ調整システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050428 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050428 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070618 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070626 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070725 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070911 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070911 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100921 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100921 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110921 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120921 Year of fee payment: 5 |