JP2011137952A

JP2011137952A - Sound output device and program

Info

Publication number: JP2011137952A
Application number: JP2009297364A
Authority: JP
Inventors: Tsutomu Yamaguchi; 勉山口
Original assignee: NEC Casio Mobile Communications Ltd
Current assignee: NEC Casio Mobile Communications Ltd
Priority date: 2009-12-28
Filing date: 2009-12-28
Publication date: 2011-07-14

Abstract

<P>PROBLEM TO BE SOLVED: To output sounds corresponding kinds of operation. <P>SOLUTION: When sounds are output with a pronunciation part 5, prescribed operation is performed with an input part 9 or the like. Thereby a control part 1 recognizes a kind of the operation, a kind of a musical instrument corresponding to the kind of the operation is selected, and the control part controls to output the sound due to the kind of the selected musical instrument with the pronunciation part 5. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、楽音を出力する音出力装置およびプログラムに関するものである。 The present invention relates to a sound output device and a program for outputting musical sounds.

特許文献１のものにおいては、操作キーの押圧により、その操作されたキーの種類に応じたド、レ、ミ…などの音階の音を発音するようにしている。また、操作されたキーの種類に応じて、ドラム音により音を発音することについても示されているが、音の何れかを選択して発音することについては触れられていない。通常は複数の音の何れかを選択して発音できるようにしているが、このように音の何れかを選択して発音させるものでは、キーの操作により音の切替えを行うようにしている。
特開２００８−１１６６２５号公報 In the method of Patent Document 1, by pressing an operation key, a sound of a scale such as “do”, “re”, “mi”, etc. according to the type of the operated key is generated. In addition, although it is shown that a sound is generated by a drum sound according to the type of the operated key, there is no mention about the sound generation by selecting any one of the sounds. Normally, any one of a plurality of sounds is selected so that the sound can be generated. However, in the case of selecting any of the sounds and generating a sound as described above, the sound is switched by operating a key.
JP 2008-116625 A

このように、キーの操作により音の切替えを行うものでは、その切替えの操作が切替えの都度必要であり、また、選択された楽器の種類を表示などで確認する必要があって、選択された楽器の種類を直感的に把握することができないという欠点があった。 As described above, in the case of switching sounds by operating keys, the switching operation is required every time switching is performed, and it is necessary to confirm the type of the selected instrument on the display or the like. There was a disadvantage that the type of musical instrument could not be intuitively grasped.

この発明の課題は、操作に応じた種類の楽器を選択できるようにすることである。 An object of the present invention is to enable selection of a musical instrument of a type corresponding to an operation.

以上の課題を解決するため、請求項１に記載の複数種類の音楽の音色を出力する音出力装置であって、当該装置に対するユーザ操作の種類と楽器の種類とを対応付けて記憶した記憶手段と、当該装置に対するユーザ操作があった際は、その操作の種類を認識する認識手段と、その認識手段で認識した楽器の種類を、前記記憶手段から選択する選択手段とを具備することを特徴とする。 In order to solve the above problems, a sound output device for outputting a plurality of types of music timbres according to claim 1, wherein the storage means stores the user operation type and the musical instrument type in association with each other. And a recognition means for recognizing the type of operation when there is a user operation on the apparatus, and a selection means for selecting the type of musical instrument recognized by the recognition means from the storage means. And

請求項１に記載の発明によれば、操作の種類と対応する楽器を選択することで、操作の種類で楽器の種類を直感的に把握することができことができるようになり、しかも、楽器の種類を切替えることを一々指定する操作が不要となる。 According to the first aspect of the present invention, by selecting a musical instrument corresponding to the type of operation, the type of musical instrument can be intuitively grasped by the type of operation, and the musical instrument The operation of designating switching the type of each one becomes unnecessary.

楽器種類の選択と同時に、その選択された楽器による音を出力するようにしてもよい。 At the same time as selecting the instrument type, the sound of the selected instrument may be output.

楽器種類の選択により、その選択された楽器の操作子を表示し、その任意の操作子に対する操作により、当該操作子に割り当てられた当該楽器種類の音色により音程の音を出力するにしてもよい。 By selecting the instrument type, the operator of the selected instrument may be displayed, and by operating the arbitrary operator, a sound of a pitch may be output using the tone of the instrument type assigned to the operator. .

ユーザ操作の種類は、タッチ操作面に対するタッチ操作であってもよい。 The type of user operation may be a touch operation on the touch operation surface.

ユーザ操作の種類は、装置本体に対する振動操作であってもよい。 The type of user operation may be a vibration operation on the apparatus main body.

ユーザ操作の種類が装置本体に対する振動操作であった場合に、振る方向、振るスピード、振る大きさに応じて楽器の種類を選択するようにしてもよい。 When the type of user operation is a vibration operation on the apparatus main body, the type of musical instrument may be selected according to the direction of shaking, the speed of shaking, and the magnitude of shaking.

ユーザ操作の種類は、装置本体を持った状態でのジェスチャ操作であってもよい。 The type of user operation may be a gesture operation with the apparatus main body held.

ジェスチャ操作は、楽器を演奏する場合の仕草に相当することであってもよい。 The gesture operation may correspond to a gesture for playing a musical instrument.

ユーザ操作の種類は、複数の筐体からななる当該装置本体での開閉スタイル状態の変更操作であってもよい。 The type of user operation may be a change operation of the opening / closing style state in the apparatus main body composed of a plurality of cases.

認識手段による認識は、当該装置が音楽モードに指定されている最中において認識するようにしたことであってもよい。 The recognition by the recognition unit may be that the device recognizes while the music mode is designated.

予め設定された使用条件になったことが検出されたことにより、通常出力する種類の楽器の音に変えて、使用条件に対応する種類の楽器の音を出力するようにしてもよい。 When it is detected that a preset use condition has been detected, the sound of a musical instrument of a type corresponding to the use condition may be output instead of the normal type of musical instrument sound.

予め設定された使用条件は時刻であってもよい。 The use condition set in advance may be time.

予め設定された使用条件は位置であってもよい。 The use condition set in advance may be a position.

この発明によれば、操作に応じた種類の楽器を選択することができる。 According to the present invention, it is possible to select a type of musical instrument corresponding to the operation.

携帯電話機の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of a mobile telephone. 携帯電話機の外観を示した図である。It is the figure which showed the external appearance of the mobile phone. 図３は各種テーブルを示した図である。FIG. 3 is a diagram showing various tables. 演奏モードの全体的な概略動作を示した図である。It is the figure which showed the whole schematic operation | movement of performance mode. 条件に応じた楽器を指定する処理を示す図である。It is a figure which shows the process which designates the musical instrument according to conditions. キー操作以外の操作により楽器音の発音を行う処理を示す図である。It is a figure which shows the process which produces the sound of a musical instrument sound by operation other than key operation.

以下、図を参照して本発明を実施するための最良の形態を詳細に説明する。
（実施形態１）
図１は、本発明の第１実施形態による携帯電話機の構成を示す概略ブロック図である。 Hereinafter, the best mode for carrying out the present invention will be described in detail with reference to the drawings.
(Embodiment 1)
FIG. 1 is a schematic block diagram showing the configuration of the mobile phone according to the first embodiment of the present invention.

図１において、制御部１は、ＣＰＵ（Central Processing Unit）等から構成され、ＲＯＭ(Read-Only Memory) ２が記憶する動作プログラムに従って携帯電話機全体を制御する。通信部３は、図示しない無線基地局を介して、通話、メールなどのデータ通信などを行う。即ち、音声マイクからの音声を取り込み、デジタル信号に変換してアンテナ３‐１から無線基地局に送信する一方、無線基地局からの音声信号をアンテナ３‐１から受信してアナログ信号に変換してスピーカから出力したりする。ＲＡＭ (random access memory)４は、楽器種類切換テーブル、選択楽器種類テーブル、一時記憶メモリなどを含む各種データを記憶するもので、内蔵されるメモリ、取り外し可能な外部メモリのいずれから構成されてもよい。発音部５は楽器と対応する音の出力を行うためのスピーカ、アンプなどを含む。操作部６は、電話番号や、各種データ、モード指示などを入力するもので、テンキーで電話番号を入力したり、タッチ入力装置で名前などの文字入力をしたりするもので、表示部７は、液晶表示器などからなり、アドレス帳や電話番号などの情報や、各種設定画面、撮影された画像などを表示するもので、さらに、カメラ部(図示せず)なども備えら、また、加速度センサ部８は、携帯電話機が振られたことにより所定量以上の加速度が加わったか否かを検出するセンサからなるものであり、ヒンジ回転センサ部９は、ヒンジの回転が所定角度になったか否かを検出するセンサからなるものである。 In FIG. 1, the control unit 1 includes a CPU (Central Processing Unit) and the like, and controls the entire mobile phone according to an operation program stored in a ROM (Read-Only Memory) 2. The communication unit 3 performs data communication such as a call and mail via a wireless base station (not shown). That is, the voice from the voice microphone is captured, converted into a digital signal and transmitted from the antenna 3-1 to the radio base station, while the voice signal from the radio base station is received from the antenna 3-1 and converted into an analog signal. Or output from the speaker. A RAM (random access memory) 4 stores various types of data including a musical instrument type switching table, a selected musical instrument type table, a temporary storage memory, and the like, and can be constituted by either a built-in memory or a removable external memory. Good. The sound generation unit 5 includes a speaker, an amplifier, and the like for outputting sound corresponding to the musical instrument. The operation unit 6 is used to input a telephone number, various data, mode instructions, and the like. The operation unit 6 is used to input a telephone number using a numeric keypad, and to input characters such as a name using a touch input device. It consists of a liquid crystal display, etc., and displays information such as address book and phone number, various setting screens, captured images, etc., and also has a camera unit (not shown), etc., and acceleration The sensor unit 8 includes a sensor that detects whether or not a predetermined amount of acceleration is applied by shaking the mobile phone, and the hinge rotation sensor unit 9 determines whether or not the rotation of the hinge has reached a predetermined angle. It consists of a sensor that detects this.

次に、第１実施形態による携帯電話機の概略動作について図２の外観図を参照し説明する。先ず、図２（ａ）は、表示側筐体１０と操作側筐体２０とが折り畳まれている状態であり、表示側筐体１０の表面には表示部７−１が設けられており、その表示部７−１上にはタッチ入力装置も設けられている。このタッチ入力装置は任意の位置を指でタッチすることで、その位置に応じた入力がなされる。図２（ａ）の場合は、鍵盤のような表示が表示部７−１になされており、その任意の位置を指でタッチすることで、ピアノ、オルガンなどの楽器による音の出力が得られるようになる操作子であり、楽器の種類の選択は鍵盤表示以外の所定の表示位置部をタッチすることで選択ができるようになっている。鍵盤のような表示は楽器演奏モードの指示に応じて文字入力の画面などから切り替えられた表示である。なお、鍵盤のような表示以外にも指定に応じて、例えば、ギターの弦などの表示を行わせて、任意の位置を指でタッチすることで、ギターなどの楽器による音の出力が得られるようになる操作子としてもよい。 Next, the schematic operation of the mobile phone according to the first embodiment will be described with reference to the external view of FIG. First, FIG. 2A shows a state in which the display-side housing 10 and the operation-side housing 20 are folded, and a display unit 7-1 is provided on the surface of the display-side housing 10. A touch input device is also provided on the display unit 7-1. In this touch input device, an arbitrary position is touched with a finger, and an input corresponding to the position is made. In the case of FIG. 2A, a display such as a keyboard is displayed on the display unit 7-1, and sound output from an instrument such as a piano or an organ can be obtained by touching an arbitrary position with a finger. The selection of the type of musical instrument can be made by touching a predetermined display position other than the keyboard display. The display such as a keyboard is a display switched from a character input screen or the like in accordance with an instruction of the instrument performance mode. In addition to the keyboard-like display, according to the specification, for example, a guitar string or the like is displayed, and the sound output by an instrument such as a guitar can be obtained by touching a desired position with a finger. It is good also as an operator which becomes like this.

図２(ｂ）は、ヒンジの縦方向の回転軸部１１の回転によって、表示側筐体１０と操作側筐体２０とを相対的に回転させ縦方向に開いた図であり、表示部７−２とキーボード６とが縦方向に並んでいる。なお、回転軸部１１と回転軸部１２とは一体的に設けられているため一緒に縦方向に回転している。図２(ｂ）の場合は、キーボード６の任意のキーを操作することで、ピアノ、オルガンなどの楽器による音の出力が得られるようになるもので、楽器の種類の選択もキーボード６の任意のキーを操作することでできるようになっている。 FIG. 2B is a view in which the display-side casing 10 and the operation-side casing 20 are relatively rotated by the rotation of the rotary shaft 11 in the vertical direction of the hinge and opened in the vertical direction. -2 and the keyboard 6 are arranged in the vertical direction. In addition, since the rotating shaft part 11 and the rotating shaft part 12 are provided integrally, they rotate together in the vertical direction. In the case of FIG. 2 (b), by operating any key on the keyboard 6, sound output from an instrument such as a piano or organ can be obtained. It can be done by operating the keys.

また、図２(c）は、ヒンジの横縦方向の回転軸部１２の回転により表示側筐体１０と操作側筐体２０とを相対的に回転させ横方向に開いた図であり、表示部７−２とキーボード６とが横方向に並んでいる。この図２(c）の場合も図２(ｂ）の場合と同様に、キーボード６の任意のキーを操作することで、ピアノ、オルガンなどの楽器による音の出力が得られるようになるもので、楽器の種類の選択もキーボード６の任意のキーを操作することでできるようになっている。 FIG. 2C is a diagram in which the display-side casing 10 and the operation-side casing 20 are relatively rotated by the rotation of the rotary shaft portion 12 in the horizontal and vertical directions of the hinge and opened in the horizontal direction. The part 7-2 and the keyboard 6 are arranged in the horizontal direction. In the case of FIG. 2 (c), as in the case of FIG. 2 (b), by operating any key on the keyboard 6, the sound output from an instrument such as a piano or organ can be obtained. The type of musical instrument can also be selected by operating any key on the keyboard 6.

なお、回転軸部１１あるいは回転軸部１２の回転により所定角度を通過した場合は、タンバリン、和太鼓などの楽器による音の出力が得られるようになるもので、回転軸部１１あるいは回転軸部１２の往復回転動作をリズムをとって続けることで、タンバリン、和太鼓などを連続的にリズムをとってたたくのと同じように音を出力できる。 Note that, when the rotation shaft portion 11 or the rotation shaft portion 12 passes through a predetermined angle, a sound output from an instrument such as a tambourine or a Japanese drum can be obtained. The rotation shaft portion 11 or the rotation shaft portion. By continuing twelve reciprocating rotational movements in rhythm, sound can be output in the same way as tambourine, Japanese drums, etc. are continuously rhythmized.

図３に示す楽器種類切替条件テーブル４１と選択楽器種類テーブル４２とは、ＲＡＭ４内に設定自在に各種データを記憶するメモリである。楽器種類切替条件テーブル４１は図３（ａ）に示すように位置情報記憶領域４１‐１と、この位置情報記憶領域４１‐１の１つの位置と対応して複数の時間帯データを記憶する時間帯情報記憶領域４１‐２と、この時間帯情報記憶領域４１‐２と対応して楽器の種類のデータを記憶する楽器種類情報記憶領域４１‐３とからなる。 The instrument type switching condition table 41 and the selected instrument type table 42 shown in FIG. 3 are memories that store various data in the RAM 4 so as to be settable. As shown in FIG. 3A, the musical instrument type switching condition table 41 stores a position information storage area 41-1 and a time for storing a plurality of time zone data corresponding to one position of the position information storage area 41-1. A band information storage area 41-2 and a musical instrument type information storage area 41-3 for storing musical instrument type data corresponding to the time band information storage area 41-2.

選択楽器種類テーブル４２は図３（b）に示すようにヒンジ、キー、振動などのユーザ操作の種類とを対応付けて記憶示す動作情報を記憶する動作情報記憶領域４２‐１と、この動作情報記憶領域４２‐１の１つの位置と対応して複数の楽器の種類のデータを記憶する楽器種類情報記憶領域４２‐２と、この楽器種類情報記憶領域４２‐２と対応して、その楽器を使用するか否かを設定するフラグを記憶するフラグ記憶領域４２‐３とからなる。 As shown in FIG. 3B, the selected musical instrument type table 42 stores an operation information storage area 42-1 for storing operation information indicating and storing user operation types such as hinges, keys, and vibrations, and the operation information. A musical instrument type information storage area 42-2 for storing data of a plurality of musical instrument types corresponding to one position of the storage area 42-1, and a corresponding musical instrument type information storage area 42-2, It consists of a flag storage area 42-3 for storing a flag for setting whether or not to use.

図４〜図６に示すフローチャートの処理は、制御部１とＲＯＭ２に記憶されているプログラムとの協働によるソフトウエア処理により実現される。具体的には、制御部１は、携帯電話機の電源投入時に、ＲＯＭ２からプログラムを読み出して、当該プログラムをＲＡＭ４に展開することで待ち受けの状態となる。制御部１は、モードを判別するステップ（図示せず）が初期の設定では待受け画面となっており、操作部６からのモード指示の入力がなされるまでは待受け画面の状態となっている。そして、この待受け画面の状態からキーボード６を操作して楽器と対応する音を出力する演奏モードの指示の入力を行って、演奏モードを選択することで図４に示す処理を開始する。 The processing of the flowcharts shown in FIGS. 4 to 6 is realized by software processing in cooperation with the control unit 1 and the program stored in the ROM 2. Specifically, when the mobile phone is turned on, the control unit 1 reads a program from the ROM 2 and develops the program in the RAM 4 to enter a standby state. The control unit 1 is in a standby screen when the step for determining the mode (not shown) is initially set, and is in a standby screen state until a mode instruction is input from the operation unit 6. Then, from the standby screen state, the keyboard 6 is operated to input a performance mode instruction for outputting a sound corresponding to the musical instrument, and the performance mode is selected to start the processing shown in FIG.

図４に示すフローチャートの処理は、演奏モードの全体的な概略動作を示した図であり、先ずステップＳ１では音をだすための楽器の種類(音色の種類)を選択する処理がなされる。即ち、キーボード６の任意のキーが操作されるか、あるいはタッチ入力装置の鍵盤表示以外の所定の表示位置部がタッチされることで対応する種類の楽器が指定される。このようにステップＳ１ではマニュアルにより所望する種類の楽器を指定することができる。そして、ステップＳ２では条件に応じた楽器を指定する処理がなされるが、このステップＳ２の楽器を指定する処理の詳細については図６に示す。 The process of the flowchart shown in FIG. 4 is a diagram showing the overall schematic operation of the performance mode. First, in step S1, a process of selecting the type of instrument (tone type) for producing a sound is performed. That is, a corresponding instrument is designated by operating any key on the keyboard 6 or touching a predetermined display position other than the keyboard display of the touch input device. Thus, in step S1, a desired type of musical instrument can be designated manually. In step S2, a process for designating an instrument corresponding to the condition is performed. Details of the process for designating the instrument in step S2 are shown in FIG.

そして、図５のステップＳ２１において、内蔵されたＧＰＳシステム（図示せず）と時計部（図示せず）とから、現在の位置情報と時刻情報とを取得し、次いでステップＳ２２で、その位置情報と対応する(一致する)位置データが楽器種類切替条件テーブル４１の位置情報記憶領域４１‐１記憶されているか判別し、記憶されている場合（ステップＳ２２；ｙｅｓ）にはステップＳ２３へと進み、記憶された位置データと対応して記憶された時間帯データと現在時刻とを比較し、対応する(一致あるいは含まれる)時間帯データの時間帯情報記憶領域４１‐２を特定し、その特定された領域と対応して楽器種類情報記憶領域４１‐３に記憶された楽器種類を一時指定するため一時記憶部（図示せず）に楽器種類データを一時記憶する。 In step S21 of FIG. 5, current position information and time information are acquired from a built-in GPS system (not shown) and a clock unit (not shown), and then in step S22, the position information It is determined whether or not the position data corresponding to (matching) is stored in the position information storage area 41-1 of the instrument type switching condition table 41. If it is stored (step S22; yes), the process proceeds to step S23. The time zone data stored corresponding to the stored position data is compared with the current time, the time zone information storage area 41-2 of the corresponding (matching or included) time zone data is specified, and the specified time zone data is stored. The instrument type data is temporarily stored in a temporary storage unit (not shown) for temporarily designating the instrument type stored in the instrument type information storage area 41-3 corresponding to the area.

また、ステップＳ２２において、位置情報と対応する(一致する)位置データが楽器種類切替条件テーブル４１の位置情報記憶領域４１‐１記憶されていない場合（ステップＳ２２；ｎｏ）にはステップＳ２４へと進み、一時記憶部（図示せず）に楽器種類データが記憶されていれば、楽器種類の一時指定を解除するため、その記憶されている楽器種類データをクリアする。 In step S22, if position data corresponding to (matching) the position information is not stored in the position information storage area 41-1 of the instrument type switching condition table 41 (step S22; no), the process proceeds to step S24. If the instrument type data is stored in the temporary storage unit (not shown), the stored instrument type data is cleared in order to cancel the temporary designation of the instrument type.

そして、図４へと戻ってステップＳ３に進み、キーボード６あるいはタッチ入力装置から演奏をするための入力(音階を選択する入力)が有ったか否かが判別されて、入力がなされていると判別された場合（ステップＳ３；ｙｅｓ）にはステップＳ４へと進み、入力がなされていないと判別された場合（ステップＳ３；ｎｏ）にはステップＳ６へと進む。 Returning to FIG. 4, the process proceeds to step S3, where it is determined whether or not there is an input (input for selecting a scale) for performing from the keyboard 6 or the touch input device. If it is determined (step S3; yes), the process proceeds to step S4. If it is determined that no input is made (step S3; no), the process proceeds to step S6.

ステップＳ４では、楽器の種類の選択を行わせるための操作として、タッチ入力装置の鍵盤の表示位置以外の所定位置を指でタッチしたり、キーボード６の楽器種類の選択用の任意のキーが操作されたか、あるいは、楽器による音の出力を行わせるための操作として、タッチ入力装置の鍵盤の表示位置を指でタッチしたり、キーボード６の音出力用の任意のキーが操作されたか否かが判別され、楽器による音の出力を行わせるための操作がなされたと判別された場合（ステップＳ４；ｎｏ）にはステップＳ５へと進み、楽器の種類の選択を行わせるための操作がなされたと判別された場合（ステップＳ４；ｙｅｓ）にはステップＳ８へと進む。 In step S4, as an operation for selecting the instrument type, a predetermined position other than the display position of the keyboard of the touch input device is touched with a finger, or an arbitrary key for selecting the instrument type on the keyboard 6 is operated. As an operation for causing the musical instrument to output a sound, whether or not the display position of the keyboard of the touch input device is touched with a finger or an arbitrary key for sound output of the keyboard 6 is operated. If it is determined that it is determined that an operation for outputting a sound by the instrument has been performed (step S4; no), the process proceeds to step S5, where it is determined that an operation for selecting the type of the instrument has been performed. If so (step S4; yes), the process proceeds to step S8.

そして、ステップＳ５ではキーボード６あるいはタッチ入力装置により操作されたキーの種類に応じて楽器による音の出力を行わせるが、その際、楽器種類データが一時記憶されているかを確認して、一時記憶されている場合は、その一時記憶されている楽器種類の音の出力を優先させる。また、楽器種類データが一時記憶されていない場合は、動作情報記憶領域４２‐１がキーであり、楽器種類を設定するフラグのオンが記憶されたフラグ記憶領域４２‐３に対応して、楽器種類情報記憶領域４２‐２に記憶されている楽器種類(ピアノかオルガンであるが図３（b）ではビアノが選択されている)の音を出力する。 In step S5, sound is output by the musical instrument according to the type of key operated by the keyboard 6 or the touch input device. At this time, it is confirmed whether the musical instrument type data is temporarily stored, and is temporarily stored. If so, the priority is given to the output of the temporarily stored instrument type sound. When the instrument type data is not temporarily stored, the operation information storage area 42-1 is a key, and the instrument information corresponding to the flag storage area 42-3 in which the flag for setting the instrument type is stored is stored. The sound of the instrument type (piano or organ, but Viano is selected in FIG. 3B) stored in the type information storage area 42-2 is output.

この場合、キーボード６に設けられたテンキー１〜テンキー０(図示せず)に対して、テンキー１は「ド」、テンキー２は「レ」、テンキー３は「ミ」・・・テンキー０は「ミ」の各音階の音が出力されるようになっており、また、タッチ入力装置の鍵盤の表示位置に応じて各音階の音が出力されるようになっている。即ち、ビアノ、オルガンなどの音源データは楽器種類毎に基準音の１種類であるが、その音源データの音の高さがテンキー１〜テンキー０(図示せず)あるいはタッチ入力装置の鍵盤の表示位置に応じて調整されて所望の音階の音が得られるものである。 In this case, with respect to the numeric keys 1 to 0 (not shown) provided on the keyboard 6, the numeric key 1 is “do”, the numeric key 2 is “re”, the numeric key 3 is “mi”, and the numeric key 0 is “ The sound of each scale of “Mi” is output, and the sound of each scale is output according to the display position of the keyboard of the touch input device. That is, the sound source data of Viano, organ, etc. is one type of reference sound for each instrument type, and the pitch of the sound source data is displayed on the numeric keypad 1 to numeric key 0 (not shown) or on the keyboard of the touch input device. The sound of a desired scale is obtained by adjusting according to the position.

また、ステップＳ８では、鍵盤表示以外のタッチ入力装置に対するタッチ位置あるいはキーボード６に対して操作したキーの種類に応じて楽器種類が指定され、この指定された楽器種類が記憶された楽器種類情報記憶領域４２‐２と対応するフラグ記憶領域４２‐３に対してフラグをオンさせ、他方の楽器種類のフラグをオフさせる。例えば、鍵盤表示以外のタッチ入力装置に対するタッチ位置あるいはキーボード６の操作がピアノの選択をする場合であれば、楽器種類情報記憶領域４２‐２のピアノと対応するフラグ記憶領域４２‐３のフラグをオンにして、楽器種類情報記憶領域４２‐２のオルガンと対応するフラグ記憶領域４２‐３のフラグをオフにする。 In step S8, a musical instrument type is designated according to the touch position on the touch input device other than the keyboard display or the type of key operated on the keyboard 6, and the musical instrument type information storage in which the designated musical instrument type is stored. The flag is turned on for the flag storage area 42-3 corresponding to the area 42-2, and the flag for the other instrument type is turned off. For example, if the touch position on the touch input device other than the keyboard display or the operation of the keyboard 6 selects the piano, the flag in the flag storage area 42-3 corresponding to the piano in the instrument type information storage area 42-2 is set. It is turned on, and the flag in the flag storage area 42-3 corresponding to the organ in the instrument type information storage area 42-2 is turned off.

次に、ステップＳ６ではキー操作以外の操作、即ち、携帯電話機を振ったり、ヒンジの回転によって対応する楽器の音を出力する処理がなされるが、このステップＳ６の詳細については図６に示す。 Next, in step S6, operations other than key operations, that is, processing for outputting the sound of the corresponding instrument by shaking the mobile phone or rotating the hinges are performed. Details of step S6 are shown in FIG.

そして、図６のステップＳ６１において、ヒンジが所定角度を傾いた位置を通過したか否かが判断され、ヒンジが所定角度の位置を通過した場合（ステップＳ６１；ｙｅｓ）はステップＳ６２へと進んで、動作情報記憶領域４２‐１がヒンジ回転であり、楽器種類を設定するフラグのオンが記憶されたフラグ記憶領域４２‐３に対応して、楽器種類情報記憶領域４２‐２に記憶されている楽器種類(タンバリンか和太鼓であるが図３（b）ではタンバリンが選択されている)の音を出力する。 Then, in step S61 in FIG. 6, it is determined whether or not the hinge has passed a position inclined at a predetermined angle. If the hinge has passed a position at a predetermined angle (step S61; yes), the process proceeds to step S62. The motion information storage area 42-1 is hinge rotation and is stored in the instrument type information storage area 42-2 corresponding to the flag storage area 42-3 in which the flag for setting the instrument type is stored. Outputs the sound of the instrument type (tambourine or Japanese drum, but tambourine is selected in FIG. 3B).

また、ヒンジが所定角度の位置を通過していない場合（ステップＳ６１；ｎｏ）ステップＳ６３へと進んで、加速度センサ部８で所定量以上の急激な振動が検出されたか否かが判別され、所定量以上の振動が検出された場合（ステップＳ６３；ｙｅｓ）は、ステップＳ６４へと進み、所定量以上の振動が検出されなかった場合（ステップＳ６３；ｎｏ）は、この図６の処理を抜ける。 If the hinge has not passed the position at the predetermined angle (step S61; no), the process proceeds to step S63, where it is determined whether the acceleration sensor unit 8 has detected a sudden vibration of a predetermined amount or more. When the vibration exceeding the fixed amount is detected (step S63; yes), the process proceeds to step S64, and when the vibration exceeding the predetermined amount is not detected (step S63; no), the process of FIG.

そして、ステップＳ６４において、動作情報記憶領域４２‐１が振動であり、楽器種類を設定するフラグのオンが記憶されたフラグ記憶領域４２‐３に対応して、楽器種類情報記憶領域４２‐２に記憶されている楽器種類(マラカス)の音を出力する。 In step S64, the motion information storage area 42-1 is a vibration, and the instrument type information storage area 42-2 is stored in correspondence with the flag storage area 42-3 in which the flag for setting the instrument type is stored. Outputs the sound of the stored instrument type (maracas).

また、ステップＳ６４において所定量以上の振動が検出されなかった場合（ステップＳ６３；ｎｏ）は、ステップＳ６５へと進み、このステップＳ６５でジェスチャの操作が認められればジェスチャの操作に応じた楽器種類の音を出力する(ステップＳ６６)。例えば、ステップＳ６６では、降り方が円を描いているジェスチャ操作であれば羽ばたく音を出したり、降り方が振り下ろすような場合には風の音にしたり、波のようなジェスチャ操作であれば波の音を出したりするようにできる。 If no vibration of a predetermined amount or more is detected in step S64 (step S63; no), the process proceeds to step S65. If the gesture operation is permitted in step S65, the instrument type corresponding to the gesture operation is determined. A sound is output (step S66). For example, in step S66, a flapping sound is generated if the way of getting down is a gesture operation that draws a circle, a wind sound is made if the way of getting down swings down, or a wave action is made if the gesture operation is a wave. You can make a sound.

なお、この実施形態による携帯電話機によれば、単体の楽器による演奏の他に、例えば、タッチ入力によってピアノ演奏を行いながら、携帯電話機を同時に振ってマラカス演奏させたり、キーボード６を操作してオルガン演奏を行いながら、表示側筐体１０を正逆方向に連続的に移動させてヒンジを連続動作させることでタンバリン演奏を同時に行ったりすることもできる。 According to the mobile phone according to this embodiment, in addition to the performance by a single instrument, for example, while performing a piano performance by touch input, the mobile phone is simultaneously shaken to perform the maracas, or the keyboard 6 is operated to operate the organ. While performing, the tambourine performance can be performed simultaneously by continuously moving the display-side casing 10 in the forward and reverse directions and continuously operating the hinges.

また、所定量以上の加速が検知された加速開始から加速終了までの間でマラカスと対応する楽器の音を発音させるが、この場合、加速開始でマラカスの鳴り始めの音とし、加速中間でマラカスを振っている中間点の音とし、加速終了でマラカスの振りを止めたような音となるようにすれば、マラカスを演奏している時の感覚に近づけることができる。 In addition, the sound of the instrument corresponding to maracas is generated between the start of acceleration and the end of acceleration when acceleration of a predetermined amount or more is detected. By making the sound at the midpoint of waving, and making it sound like stopping the swing of maracas at the end of acceleration, it is possible to approximate the feeling of playing maracas.

また、ヒンジによる回転が検知された場合も、回転の所定角度から他の所定角度までの間で和太鼓などと対応する楽器の音を発音させるが、この場合、所定角度で和太鼓の鳴り始めの音とし、中間角度で和太鼓が響いている中間点の音とし、他の所定角度で音をフェードアウトさせれば、和太鼓を演奏している時の感覚に近づけることができる。 Also, when rotation by a hinge is detected, the sound of a musical instrument corresponding to a Japanese drum or the like is generated between a predetermined angle of rotation and another predetermined angle. In this case, the drum starts to sound at a predetermined angle. If the sound is a mid-point sound where the Japanese drum is resonating at an intermediate angle and the sound is faded out at another predetermined angle, the sound can be brought closer to that of a Japanese drum.

さらに、また、所定の指定を予めしておくことで、振る方向、降り方、振るスピード、振る大きさに応じて楽器の種類を選択するようにしてもよい。例えば、振る方向が一定であればカスタネット、振る方向がランダムであればタンバリンにしたり、振るスピードが速ければ小太鼓、振るスピードが遅ければ大太鼓にしたり、振る大きさ(振幅)が大きければマスカラ、振る大きさが小さければ鈴にしたりすることも考えられる。 Furthermore, by making a predetermined designation in advance, the type of musical instrument may be selected according to the direction of swinging, how to descend, the speed of swinging, and the size of swinging. For example, castanets if the direction of shaking is constant, tambourine if the direction of shaking is random, small drums if the speed of shaking is fast, large drums if the speed of shaking is slow, or if the magnitude (amplitude) of shaking is large Mascara, if the size of the shake is small, it may be a bell.

そして、ステップＳ６の処理が終了すると、ステップＳ７へと進んで楽器演奏モードを終了させることの指示がなされたか否かが判別され、楽器演奏モードを終了させることの指示がなされていなければ（ステップＳ７；ｎｏ）ステップＳ２へと戻って処理が続行されるが、楽器演奏モードを終了させることの指示がなされていれば（ステップＳ７；ｙｅｓ） When the process of step S6 is completed, the process proceeds to step S7, where it is determined whether or not an instruction to end the musical instrument performance mode has been issued. S7; no) Returning to step S2 and continuing the process, but if an instruction to end the musical instrument performance mode is given (step S7; yes)

前述してきた実施の形態の携帯電話機を実現するプログラムを可搬記録媒体などに記録し、この記録されたプログラムを可搬記録媒体などから読み出して用い、本発明の新規な機能を実現するようにしてもよい。この場合、プログラムを供給するための可搬記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、磁気テープ、不揮発性のメモリーカード、ＲＯＭカードなど、どのようなものであってもよい。また、プログラムをインターネットを通じて所定のサーバーからダウンロードして本発明の新規な機能を実現するようにしてもよい。 A program for realizing the mobile phone according to the above-described embodiment is recorded on a portable recording medium or the like, and the recorded program is read out from the portable recording medium or the like and used to realize the new function of the present invention. May be. In this case, as a portable recording medium for supplying the program, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a DVD-ROM, a DVD-RAM, a magnetic tape, a non-volatile Any memory card or ROM card may be used. Further, the program may be downloaded from a predetermined server via the Internet to realize the new function of the present invention.

なお、本発明は、電卓、デジタルカメラ、ビデオカメラ、PDA、ノートパソコン、ウェアラブルパソコン、プロジェクタなど、カメラ部を備え楽音を出力する楽音出力装置の全てに用いることができる。
また、２つの操作で１つの楽器の音を出力するようにしてもよく、例えば、キーで音階を指定し、ヒンジの回転がバイオリンの弦を弾く弓の代わりの動作としてもよく、回転を小刻みに正回転、逆回転を繰り返すことでビブラートを効かせたりすることもできる。 The present invention can be used for all musical sound output devices that include a camera unit and output musical sounds, such as calculators, digital cameras, video cameras, PDAs, notebook computers, wearable personal computers, projectors, and the like.
In addition, the sound of one musical instrument may be output by two operations. For example, the scale may be specified with a key, and the rotation of the hinge may be used instead of the bow that plays the string of the violin. Vibrato can be applied by repeating forward and reverse rotation.

また、所定の操作がなされた際に、その操作の種類を認識して、その認識した操作の種類と対応する楽器を選択するだけのものであってもよい。例えば、指揮棒のような装置で、叩くことで打楽器を指定したり、小刻みに振れば鍵盤楽器、大きく振れば弦楽器、楽譜などをなぞれば吹奏楽器などを指定するようにしてもよい。この場合、楽器の指定だけを指揮棒が行って、実際の楽器音による任意の音階の音出力は他の方法で指定することが考えられる。
Alternatively, when a predetermined operation is performed, the type of the operation may be recognized, and a musical instrument corresponding to the recognized type of operation may be selected. For example, a percussion instrument may be specified by tapping with a device such as a conductor, or a keyboard instrument may be specified by swinging in small increments, a stringed instrument may be specified by swinging large, and a wind instrument may be specified by tracing a score. In this case, it is conceivable that the command stick performs only the designation of the musical instrument, and the sound output of an arbitrary scale based on the actual musical instrument sound is designated by another method.

１制御部
４ＲＡＭ
５発音部
７表示部
８加速度センサ部
９ヒンジ回転センサ部 1 Control unit 4 RAM
5 Sound generation section 7 Display section 8 Acceleration sensor section 9 Hinge rotation sensor section

Claims

複数種類の音楽の音色を出力する音出力装置であって、
当該装置に対するユーザ操作の種類と楽器の種類とを対応付けて記憶した記憶手段と、
当該装置に対するユーザ操作があった際は、その操作の種類を認識する認識手段と、
その認識手段で認識した楽器の種類を、前記記憶手段から選択する選択手段と、
を具備することを特徴とする音出力装置。 A sound output device that outputs multiple types of music tones,
Storage means for storing the type of user operation and the type of musical instrument in association with the device;
When there is a user operation on the device, a recognition means for recognizing the type of operation,
A selection means for selecting the type of musical instrument recognized by the recognition means from the storage means;
A sound output device comprising:

前記楽器種類の選択と同時に、その選択された楽器による音を出力するようにしたことを特徴とする請求項１の音出力装置。 2. The sound output apparatus according to claim 1, wherein a sound produced by the selected musical instrument is output simultaneously with the selection of the musical instrument type.

前記楽器種類の選択により、その選択された楽器の操作子を表示し、その任意の操作子に対する操作により、当該操作子に割り当てられた当該楽器種類の音色により音程の音を出力するようにしたことを特徴とする請求項１の音出力装置。 By selecting the instrument type, the operator of the selected instrument is displayed, and by operating the arbitrary operator, the sound of the pitch is output by the tone of the instrument type assigned to the operator. The sound output device according to claim 1.

前記ユーザ操作の種類は、タッチ操作面に対するタッチ操作であることを特徴とする請求項１の音出力装置。 The sound output device according to claim 1, wherein the type of the user operation is a touch operation on a touch operation surface.

前記ユーザ操作の種類は、装置本体に対する振動操作であることを特徴とする請求項１の音出力装置。 The sound output apparatus according to claim 1, wherein the type of the user operation is a vibration operation on the apparatus main body.

前記ユーザ操作の種類が装置本体に対する振動操作であった場合に、振る方向、振るスピード、振る大きさに応じて楽器の種類を選択するようにしたことを特徴とする請求項5の音出力装置。 6. The sound output device according to claim 5, wherein when the type of user operation is a vibration operation on the device main body, the type of musical instrument is selected according to a swing direction, a swing speed, and a swing size. .

前記ユーザ操作の種類は、装置本体を持った状態でのジェスチャ操作であることを特徴とする請求項１の音出力装置。 The sound output device according to claim 1, wherein the type of the user operation is a gesture operation in a state where the device main body is held.

ジェスチャ操作は、楽器を演奏する場合の仕草に相当することを特徴とする請求項7の音出力装置。 8. The sound output device according to claim 7, wherein the gesture operation corresponds to a gesture when a musical instrument is played.

前記ユーザ操作の種類は、複数の筐体からななる当該装置本体での開閉スタイル状態の変更操作であることを特徴とする請求項１の音出力装置。 The sound output device according to claim 1, wherein the type of the user operation is a change operation of an opening / closing style state in the device main body including a plurality of cases.

前記認識手段による認識は、当該装置が音楽モードに指定されている最中において認識するようにしたことを特徴とする請求項１の音出力装置。 2. The sound output apparatus according to claim 1, wherein the recognition by the recognition means is performed while the apparatus is designated as a music mode.

予め設定された使用条件になったことが検出されたことにより、通常出力する種類の楽器の音に変えて、使用条件に対応する種類の楽器の音を出力するようにしたことを特徴とする請求項１の音出力装置。 Since it is detected that a preset use condition has been detected, the sound of a musical instrument of the type corresponding to the use condition is output instead of the normal type of musical instrument sound. The sound output device according to claim 1.

予め設定された使用条件は時刻であることを特徴とする請求項１１の音出力装置。 The sound output device according to claim 11, wherein the preset use condition is time.

予め設定された使用条件は位置であることを特徴とする請求項１１の音出力装置。 12. The sound output device according to claim 11, wherein the preset use condition is a position.

コンピュータを、
装置に対するユーザ操作の種類と楽器の種類とを対応付けて記憶させる楽器種類記憶制御手段、
当該装置に対するユーザ操作があった際は、その操作の種類を認識する認識手段、
その認識手段で認識した楽器の種類を、前記記憶手段から選択する選択手段、
として機能させるためのプログラム。 Computer
Musical instrument type storage control means for storing the type of user operation and the type of musical instrument in association with each other;
Recognizing means for recognizing the type of operation when there is a user operation on the device;
A selection means for selecting the type of the musical instrument recognized by the recognition means from the storage means;
Program to function as.