JP5635334B2

JP5635334B2 - 携帯端末

Info

Publication number: JP5635334B2
Application number: JP2010186273A
Authority: JP
Inventors: 宇志山田
Original assignee: Kyocera Corp
Current assignee: Kyocera Corp
Priority date: 2010-08-23
Filing date: 2010-08-23
Publication date: 2014-12-03
Anticipated expiration: 2030-08-23
Also published as: JP2012043359A

Description

本発明は、タッチパネルを備える携帯端末であって、壁紙画像に操作キーを割り当て可能な携帯端末に関するものである。

近年、タッチパネルを採用した携帯電話やＰＤＡ（Personal Digital Assistant）等の携帯端末が開発されている。タッチパネルを採用することで、表示パネル上に操作キー（ソフトキー）を再現できることから、機械スイッチを削減でき、また、操作系の視認性・レイアウトの自由度の向上などの理由により、ユーザビリティの向上に貢献している。また、操作キーの配置を変更することが可能な携帯端末も知られており、例えば、特許文献１では、ユーザの指の大きさに応じて操作キーの配置を変更する携帯端末が開示されている。

特開２０１０−１０８０８０号公報

従来のタッチパネルを備える携帯端末では、待ち受け画面上に操作キーのアイコンを配置してしまうと、図１４（ａ）に示すように、待ち受け画面として設定された壁紙画像の一部がアイコンによって隠されてしまうという問題があった。図１４（ｂ）に示すように、壁紙画像と操作キーのアイコンとを分けて表示することも考えられるが、この場合には壁紙画像の表示領域が狭くなるという問題がある。特許文献１に記載の携帯端末では、ソフトキーの配置を変更することが可能であるが、依然として壁紙画像の一部が操作キーのアイコンによって隠されてしまう。また、待ち受け画面上に操作キーのアイコンが表示されていると、他人が容易に操作することができ、他人による操作を防止するためには指紋認証や暗証番号入力などの方法でロックする必要があった。

本発明の目的は、上記問題を解決するため、壁紙画像が操作キーのアイコンで隠れてしまうことを防止し、ユーザに自由な操作レイアウトを与えるとともに、ロックをかけることなくセキュリティを向上させる携帯端末を提供することにある。

上記課題を解決するため、本発明に係る携帯端末は、文字情報及び画像情報を表示する表示部と、前記表示部の前面に配設され、入力を受け付けるタッチパネル部と、前記表示部に壁紙画像を表示させ、該壁紙画像内の一部の領域を操作キー割当領域として１又は複数を設定し、該操作キー割当領域に特定の操作キーを割り当てる制御部と、前記操作キー割当領域及び該操作キー割当領域に割り当てられた操作キーを対応付けて記憶する記憶部と、を備え、前記制御部は、前記タッチパネル部が入力を受け付けた際、該入力を受け付けた位置の前記操作キー割当領域に対応付けた前記操作キーに応じた制御を行い、前記制御部は、前記操作キー割当領域の設定時に、前記壁紙画像の隣接画素間の色調差を算出し、所定の閾値以上の色調差を有する部分を境界とし、該境界によって閉じられた領域を前記操作キー割当領域として設定し、前記制御部は、前記境界によって閉じられた領域の面積が所定の閾値未満である場合には、前記所定の閾値以上の面積である周囲の操作キー割当領域に統合することを特徴とする。

また、本発明に係る携帯端末において、前記制御部は、前記設定された操作キー割当領域を、前記タッチパネル部から入力される位置情報に基づいて編集（統合、分割、又は挿入）することを特徴とする。

本発明によれば、壁紙画像内の１つ以上の領域にそれぞれ操作キーを割り当てることで、壁紙画像が操作キーのアイコンで隠れてしまうことを防止し、ユーザに自由な操作レイアウトを与えることができる。また、操作キーのアイコンを壁紙画像上に表示させないことにより、ロックをかけることなくセキュリティの向上を図ることができる。

本発明による実施形態の携帯端末の概略構成を示すブロック図である。本発明による実施形態の携帯端末の入力部の斜視図である。本発明による第１の実施形態の携帯端末の操作キー割り当て動作を示すフローチャートである。本発明による第１の実施形態の携帯端末の操作キー割り当て動作時に、入力部に表示される画像及び文字の一例を示す図である。本発明による第１の実施形態の携帯端末の壁紙画像に操作キーを割り当てた例を示す図である。本発明による第２の実施形態の色調差算出処理を説明する図である。本発明による第２の実施形態の操作キー割当領域の設定を説明する図である本発明による第２の実施形態の携帯端末の操作キー割り当て動作を示すフローチャートである。本発明による第２の実施形態の携帯端末のキー割り当て動作時に、入力部に表示される画像及び文字の一例を示す図である。本発明による第２の実施形態の携帯端末の壁紙画像に操作キーを割り当てた例を示す図である。本発明による第３の実施形態の携帯端末の操作キー割り当て動作を示すフローチャートである。本発明による第３の実施形態の携帯端末の操作キー割当領域の統合例を示す図である。本発明による第３の実施形態の携帯端末の操作キー割当領域の分割例を示す図である。従来の操作キーのアイコンが配置された待ち受け画面を示す図である。

以下、本発明による携帯端末の実施形態について、図面を参照して詳細に説明する。

（第１の実施形態）
図１は、本発明による実施形態の携帯端末の構成を示すブロック図である。本実施形態の携帯端末は、制御部１１と、入力部１２と、撮像部１３と、記憶部１４とを備える。

入力部１２は、ユーザからの操作入力を受け付けると共に、各アプリケーションプログラムに応じて入力結果など各種情報の表示を行う。入力部１２は、タッチパネル部１２１と、表示部１２２とを備える。図２は、入力部１２の斜視図である。

表示部１２２は、操作キーなどの入力受付用のアイコン、壁紙画像、ユーザに通知するメッセージなど、各種画像情報及び文字情報を表示する。表示部１２２は、液晶ディスプレイ（ＬＣＤ）又は有機ＥＬディスプレイなどで構成される。

タッチパネル部１２１は、表示部１２２の前面に重畳して配設され、ユーザの指やスタイラスペンなどによる入力を受け付けるマトリクススイッチ等で構成され、例えば抵抗膜方式や静電容量方式などが知られている。タッチパネル部１２１は、指やスタイラス等の押圧やスライドによる入力を検知することにより、当該押圧による入力が検知された位置に対応する信号を制御部１１に出力する。なお、本発明では、タッチパネル部が指やスライタス等による接触、押圧、あるいはスライドを検知することを、「入力を受け付ける」としている。更には、タッチパネル部が光学方式であれば、タッチパネル部が指やスライタス等を検知することを、「入力を受け付ける」となる。

撮像部１３は、撮像レンズ、撮像素子などから構成され、画像を撮像して撮像画像を取得する。撮像した画像は、制御部１１に出力され、画像処理部（図示せず）により画像処理が施される。

記憶部１４は、撮像部１３によって撮像した画像を記憶するメモリや、本携帯端末を動作させるためのプログラムを記憶するメモリ等を１つの記憶部として表示したものである。

制御部１１は、壁紙画像（表示部１２２の待ち受け画面の背景画像）の設定、操作キーを割り当てるための壁紙画像内の領域である操作キー割当領域の１又は複数の設定、及び操作キー割当領域に対する特定の操作キーの割り当てを行う。

制御部１１は、壁紙画像を設定する際には、表示部１２２に、例えば、「壁紙画像を選択してください。」といったユーザに対する要求メッセージを表示させる。そして、ユーザの指示に基づいて、撮像部１３により取得した画像や、インターネットに接続してダウンロードする、あるいは外部機器に接続して受信するなどにより外部から取得した画像を、壁紙画像として表示部１２２に表示させる。なお、図1においては、外部機器と接続するための接続部または無線送受信部の図示を省略している。

制御部１１は、操作キー割当領域を設定する際には、表示部１２２に、例えば、「領域設定をします。開始地点を選んでください。」「領域を囲んで下さい。」といったユーザに対する要求メッセージを表示させる。そして、ユーザがタッチパネル部１２１をスタイラスペン又は指でなぞると、制御部１１はタッチパネル部１２１から入力される位置情報を取得し、なぞられた領域を操作キー割当領域として設定し、記憶部１４に記憶する。

制御部１１は、操作キーの割り当てを行う際には、表示部１２２に、例えば、「割り当てキーを選んで下さい。」といったユーザに対する要求メッセージを表示させる。そして、割り当てる操作キーをユーザが選択すると、制御部１１は選択された操作キーと操作キー割当領域とを対応付けて、記憶部１４に記憶する。

次に、本実施形態の携帯端末の操作キー割り当て動作を図３及び図４を参照して説明する。図３は本実施形態の携帯端末の操作キー割り当て動作を示すフローチャートであり、図４は操作キー割り当て動作時に、入力部１２の表示部１２２に表示される画像及び文字の一例を示す図である。

ステップＳ１０１では、入力部１２により、ユーザからの操作キー割当モードの選択を受け付け、操作キー割当モードが選択されると、処理をステップＳ１０２に進める。

ステップＳ１０２では、制御部１１により、壁紙画像を設定（変更）するかの問い合わせメッセージを表示部１２２に表示させる。壁紙画像を設定する場合には、制御部１１により、ユーザが指定した画像を壁紙画像として設定する。図４（ａ）は、設定された壁紙画像の一例を示す図である。

ステップＳ１０３では、制御部１１により、図４（ｂ）に示すように、領域の選択を要求するメッセージを表示部１２２に表示させる。そして、タッチパネル部１２１がなぞられると、制御部１１はなぞられた位置情報を取得する。図４（ｃ）は、ユーザによる領域の選択が行われている様子を示す。なお、本実施例では、スタイラスペンＢによりなぞる状態を示す。

ステップＳ１０４では、制御部１１により、取得した位置情報から、なぞられた形状が閉じた形状である否かを判定する。なぞられた形状が閉じた形状であると判定した場合には、処理をステップＳ１０５に進め、なぞられた形状が閉じた形状でないと判定した場合には、領域の選択し直しを要求するメッセージを表示部１２２に表示させ、処理をステップＳ１０３に戻す。

ステップＳ１０５では、制御部１１により、タッチパネル部１２１がなぞられた領域を操作キー割当領域として設定する。

ステップＳ１０６では、制御部１１により、図４（ｄ）に示すように、割り当てる操作キーの選択を要求するメッセージを表示部１２２に表示させる。ユーザが操作キーを選択すると、図４（ｅ）に示すように、操作キー割当領域に対する操作キーの割り当てが完了した旨のメッセージを表示部１２２に表示させる。

この処理を繰り返すことにより、壁紙画像中の設定した操作キー割当領域ごとに異なる操作キーを割り当てることができる。図５は、壁紙画像中の太陽、雲、空、山、及び湖の領域にそれぞれ異なる操作キーを割り当てた例を示す図である。具体的には、本携帯端末が通話可能な携帯電話機である場合に、太陽の領域にメニューキー、雲の領域にメールキー、空の領域にＷｅｂキー、山の領域にオンフックキー、及び湖の領域にオフフックキー等のように携帯電話機として使用する際に必要とする操作キーを割り当てている。なお、壁紙画像から設定された操作キー割当領域を除いた領域、具体的には、図５を用いて説明すると、太陽、雲、山、及び湖の領域を操作キー割当領域とした場合、その操作キー割当領域を除いた領域となる空を、新たな操作キー割当領域として設定することも可能である。

このように、本実施形態の携帯端末によれば、壁紙画像内の任意の画像領域に対して操作キーを割り当てることができるので、壁紙画像が操作キーのアイコンで隠れてしまうことを防止し、ユーザに自由な操作レイアウトを与える。また、壁紙画像上に操作キーのアイコンを表示させないことにより、セキュリティの向上を図ることができる。

（第２の実施形態）
次に、本発明による第２の実施形態の携帯端末について説明する。本実施形態の携帯端末は、壁紙画像の色調変化を検出することにより、自動的に操作キー割当領域を設定する点が第１の実施形態の携帯端末と相違する。

本実施形態の制御部１１は、壁紙画像の隣接画素間の色調差を算出する機能を有する。なお、当該機能は、専用のプロセッサ(例えば、ＤＳＰ(デジタルシグナルプロセッサ))によって実現してもよい。図６は、色調差算出処理を説明する図である。携帯端末で使用されている画像のフォーマットとして、一般的な拡張子である“ｊｐｅｇ”を例にすると、画像の色調はＲＧＢ座標で表現され、各色成分８ｂｉｔ（０〜２５５）の数値で濃淡が表現されている。制御部１１は、色空間座標における色調ベクトルの相関、すなわち２つのベクトルの挟み角を求めることで色調差（色調変化量）を算出する。なお、ＲＧ間、ＧＢ間、ＢＲ間の各単色ベクトルの相関はそれぞれ直交の関係になるため、相関は０となり、このとき色調差は最大となる。

図７は、操作キー割当領域の設定を説明するための図であり、実際に壁紙画像として使用可能な画像である。本実施例では、特に、図７中の太枠で示された領域Ａを操作キー割当領域として設定する場合について説明する。図７の青空の色調は、図６に示すように例えばＲＧＢ座標で［９０，２００，２４０］と表され、図７の葉の色調はＲＧＢ座標で［４０，１００，４０］と表される。制御部１１は、両者の色調差を算出し、色調差が所定の閾値以上である部分を境界として検出し、青空の領域と葉の領域とを分割する。そして、境界によって閉じられた領域を操作キー割当領域として設定する。なお、壁紙画像（タッチパネル部１２１）の最外周も境界とするのが好適である。

図７中に矢印で示す区間１は、空から植物にかけて色調変化が大きい（例えば、ＲＧＢ座標で空では［９０，２００，２４０］、植物では［４０，１００，４０］）ので、制御部１１は当該部分を境界として検出する。一方、図７中に矢印で示す区間２では、葉の明るい部分と暗い部分とで色調の変化（例えば、ＲＧＢ座標で明部では［４０，１００，４０］、暗部では［２０，８０，２０］）が生じているが、色調変化が小さいので、境界として検出しない。これにより、より正確に壁紙画像内のオブジェクトを抽出することができる。

また、制御部１１は、境界によって閉じられた領域の面積が所定の閾値未満である場合には、所定の閾値以上の面積である周囲の操作キー割当領域に統合する。すなわち、操作キーとして使用するには領域が狭すぎるような領域は、操作キー割当領域として設定しないようにし、必要以上に領域の細分化が行われないようにする。例えば、図７中に矢印で示す区間３では、植物の枝の間から覗く道路や空など、色調に大きな変化はあるものの、面積が小さいため、別個の操作キー割当領域としては設定しない。所定の閾値は、例えば、指入力想定の場合は直径５ｍｍの円の面積、スタイラスペン想定の場合は直径２ｍｍの円の面積とする。

次に、本実施形態の携帯端末のキー割り当て動作を図８及び図９を参照して説明する。図８は本実施形態の携帯端末のキー割り当て動作を示すフローチャートであり、図９はキー割り当て動作時に、入力部１２の表示部１２２に表示される画像及び文字の一例を示す図である。

ステップＳ２０１では、制御部１１により、ユーザからの操作キー割当モードの選択を受け付け、操作キー割当モードが選択されると、処理をステップＳ２０２に進める。

ステップＳ２０２では、制御部１１により、壁紙画像を設定（変更）するかの問い合わせメッセージを表示部１２２に表示させる。壁紙画像を設定する場合には、制御部１１により、ユーザが指定した画像を壁紙画像として設定する。

ステップＳ２０３では、制御部１１により、図９（ａ）に示すように、領域の設定を要求するメッセージを表示部１２２に表示させる。そして、制御部１１により、画像の色調差を算出し、色調差が所定の閾値以上である部分を境界として検出する。

ステップＳ２０４では、制御部１１により、境界部に囲まれた操作キー割当候補領域が存在するか否かを判定する。操作キー割当候補領域が存在すると判定した場合には処理をステップＳ２０５に進め、操作キー割当候補領域が存在しないと判定した場合には操作キー割当領域が存在しない旨の通知を表示部１２２に表示させ、処理をステップＳ２０２に戻す。

ステップＳ２０５では、制御部１１により、操作キー割当候補領域の面積が閾値以上であるか否かを判定する。操作キー割当候補領域の面積が閾値以上であると判定した場合には処理をステップＳ２０７に進める。一方、操作キー割当候補領域の面積が閾値未満であると判定した場合には処理をステップＳ２０６に進め、操作キー割当候補領域を、周囲の閾値以上の面積の操作キー割当候補領域に統合する。

ステップＳ２０７では、制御部１１により、操作キー割当候補領域を操作キー割当領域として設定する。操作キー割当領域の設定が完了すると、図９（ｂ）に示すように、設定された操作キー割当領域を表示部１２２に表示させる。本実施例では、操作キー割当領域が太線の枠で囲われた部分とした場合を示したが、領域毎に色付けをして領域が判るようにしてもよい。

ステップＳ２０８では、制御部１１により、図９（ｃ）に示すように、割り当てる操作キーの選択を要求するメッセージを表示部１２２に表示させる。そして、図４及び図５と同様にタッチパネル部１２１へのユーザの指示に基づいて操作キー割当領域に操作キーを割り当てる。図１０は、本携帯端末が通話可能な携帯電話機である場合に、壁紙画像中の太陽の領域にメニューキー、雲の領域にメールキー、空の領域にＷｅｂキー、山頂の領域に保留キー、山の領域にオンフックキー、湖の領域にオフフックキー、及び森の領域等をクリアキー等のように、携帯電話機として使用する際に必要とする操作キーを割り当てた例を示す図である。また、壁紙画像から設定された操作キー割当領域を除いた領域、具体的には、図１０を用いて説明すると、太陽、雲、山頂、山、湖、及び森の領域を操作キー割当領域とした場合、その操作キー割当領域を除いた領域となる空を、新たな操作キー割当領域として設定することも可能である。

このように、第２の実施形態の携帯端末によれば、制御部１１により色調差を算出することで、操作キー割当領域を自動的に設定することができる。

（第３の実施形態）
次に、本発明による第３の実施形態の携帯端末について説明する。本実施形態の携帯端末は、一つのオブジェクトが複数の色で構成される場合もあることを想定して、操作キー割当領域を自動で設定した後に、操作キー割当領域の統合を手動で行うことができる。例えば、第２の実施形態の携帯端末において、山の山頂に雪がある場合に、山が山頂の雪の部分と麓の部分で分離されてしまうが、第１の実施形態のように山として１つに統合することを行うことができる。また、操作キー割当領域の設定を自動で行うと、操作キー割当領域の数が割り当てたい操作キーの数よりも少なくなる場合もあることも想定して、操作キー割当領域を自動で設定した後に、操作キー割当領域の分割、挿入を手動で行うことができる。

本実施形態の制御部１１は、表示部１２２に、例えば、「領域の編集を行いますか？」といったユーザに対する問い合わせメッセージを表示させる。そして、ユーザの指示に基づいて、操作キー割当領域の編集（統合、分割、又は挿入）を行う。ここで、統合とはユーザが指定した複数の操作キー割当領域を１つの操作キー割当領域とすることをいう。分割とはユーザが指定した領域を新たな操作キー割当領域とすることをいう。挿入とは、ユーザが追加した記憶部１４に記憶されたテンプレート図形、又は手書きによる図形を新たな操作キー割当領域とすることをいう。

制御部１１は、ユーザがあらかじめ割り当てる操作キーの数を指定した場合には、操作キー割当領域の数と割り当てる操作キーの数とを比較し、操作キー割当領域の数が少ない場合には、例えば、「領域の数が足りません。領域の分割又は追加を行って下さい。」といったユーザに対する要求メッセージを表示させてもよい。また、操作キー割当領域の数が割り当てる操作キーの数よりも多い場合には、操作キー割当領域を統合するかの問い合わせメッセージを表示部１２２に表示させてもよい。

次に、本実施形態の携帯端末のキー割り当て動作を図１１から図１３を参照して説明する。図１１は本実施形態の携帯端末のキー割り当て動作を示すフローチャートであり、図１２は操作キー割当領域の統合例を示す図であり、図１３は操作キー割当領域の分割例を示す図である。ステップＳ３０１〜ステップＳ３０７は、図８に示すステップＳ２０１〜ステップＳ２０７と同じであるため、説明を省略する。

ステップＳ３０８では、制御部１１により、図１２（ａ）に示すように、操作キー割当領域を編集するか否かの問い合わせメッセージを表示部１２２に表示させる。ユーザが操作キー割当領域の編集を行う場合には処理をステップＳ３０９に進め、ユーザが操作キー割当領域の編集を行わない場合には処理をステップＳ３１０に進める。

ステップＳ３０９では、制御部１１により、図１２（ｂ）に示すように、統合、分割、又は挿入を要求するメッセージを表示部１２２に表示させる。そして、ユーザの指示に基づいて操作キー割当領域を編集する。図１２（ｂ）に示すように、ユーザが山頂及び麓を、統合したい操作キー割当領域としてスタイラスペンで選択すると、図１２（ｃ）に示すように、山頂及び麓が一つの操作キー割当領域として統合される。なお、図１２（ｂ）は、１つのスタイラスペンＢで山頂及び麓を順に選択した状態を示すものである。また、本実施例では、ステップＳ３０７の次にステップＳ３０８に入る場合について説明したが、一度ステップＳ３０１〜ステップＳ３０７まで行った状態で一旦終了し、ユーザが操作キー割当領域を編集する指示をした後にステップＳ３０８から開始するようにしてもよい。

また、図１３（ａ）に示す画像を壁紙画像として設定した場合、図１３（ｂ）に示すように月、夜空、海の３つの領域が自動で操作キー割当領域として設定される。このとき、割り当てを行いたい操作キーの数が４つであった場合には、操作キー割当領域が足りないので、ユーザの指示に基づいて操作キー割当領域を分割するか、又は新たな操作キー割当領域を挿入する。図１３（ｃ）に示すようにユーザが境界を新たに追加すると、「夜空」は左右２つの操作キー割当領域に分割される。また、図１３（ｄ）に示すようにユーザが新たな図形を挿入すると、この図形を新たな操作キー割当領域として設定する。

ステップＳ３０８〜ステップＳ３１０では、制御部１１により、割り当てる操作キーの選択を要求するメッセージを表示部１２２に表示させ、ユーザの指示に基づいて操作キー割当領域に操作キーを割り当てる。

このように、第３の実施形態の携帯端末によれば、操作キー割当領域を統合、分割、追加するなどの編集をすることができる。また、割り当てに必要な操作キー割当領域数が不足している場合でも、操作キー割当領域を容易に追加することができる。

上述の各実施形態は、個々に代表的な例として説明したが、本発明の趣旨及び範囲内で、多くの変更及び置換ができることは当業者に明らかである。従って、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、第１の実施形態の携帯端末に操作キー割当領域を編集する機能を設けることも可能である。また、例えば、１つの操作キー割当領域に２つの操作キーを対応付け、１度押しの場合に１つ目の操作キー、２度押しの場合に２つ目の操作キーとなるようにしてもよい。

１１制御部
１２入力部
１３撮像部
１４記憶部
１２１タッチパネル部
１２２表示部

Claims

文字情報及び画像情報を表示する表示部と、
前記表示部の前面に配設され、入力を受け付けるタッチパネル部と、
前記表示部に壁紙画像を表示させ、該壁紙画像内の一部の領域を操作キー割当領域として１又は複数を設定し、該操作キー割当領域に特定の操作キーを割り当てる制御部と、
前記操作キー割当領域及び該操作キー割当領域に割り当てられた操作キーを対応付けて記憶する記憶部と、を備え、
前記制御部は、前記タッチパネル部が入力を受け付けた際、該入力を受け付けた位置の前記操作キー割当領域に対応付けた前記操作キーに応じた制御を行い、
前記制御部は、前記操作キー割当領域の設定時に、前記壁紙画像の隣接画素間の色調差を算出し、所定の閾値以上の色調差を有する部分を境界とし、該境界によって閉じられた領域を前記操作キー割当領域として設定し、
前記制御部は、前記境界によって閉じられた領域の面積が所定の閾値未満である場合には、前記所定の閾値以上の面積である周囲の操作キー割当領域に統合することを特徴とする携帯端末。