FI111893B

FI111893B - Menetelmä ja laite puhelimen ohjaamiseksi komennoilla

Info

Publication number: FI111893B
Application number: FI952705A
Authority: FI
Inventors: Petri Haavisto; Kari Laurila; Markku Majaniemi
Original assignee: Nokia Corp
Priority date: 1995-06-02
Filing date: 1995-06-02
Publication date: 2003-09-30
Also published as: EP0746129A2; EP0746129A3; EP0746129B1; US5864603A; DE69629873D1; DE69629873T2; FI952705A0; FI952705A

Description

111893

Menetelmä ja laite puhelimen ohjaamiseksi komennoilla - Förfarande och apparat för beordringsstyming i ett telefon 5 Keksintö koskee menetelmää, jolla voidaan ohjata puhelimen, erityisesti solukko-verkossa käytettävän matkapuhelimen, toimintaa. Erityisesti keksintö koskee menetelmää automaattisen tarkistuksen ja korjauksen suorittamiseksi puhelinyhteyden muodostamisvaiheessa. Jatkossa tullaan sovelluksen kohteena olevasta esimerkkipu-helinlaitteesta käyttämään nimitystä matkapuhelin, jolla tarkoitetaan solukkoverkon 10 puhelinlaitteita (mm. käsipuhelin). Keksintö ei sinänsä mitenkään rajoitu matkapuhelimiin, vaan on yhtä lailla sovellettavissa lankaverkon puhelimissa.

Keksinnön mukainen menetelmä liittyy puhelinlaitteen käyttöliittymän toteutukseen ja jatkossa käyttöliittymää, jossa sovelletaan keksinnön mukaista menetelmää, nimi-15 tetään keksinnön mukaiseksi käyttöliittymäksi. Sitä voidaan edullisesti soveltaa puhelimen puheohjaukseen, jota seuraavassa käytetään esimerkkinä keksinnön toteutuksesta. Keksintö ei kuitenkaan rajoitu puhekomennoilla ohjattaviin käyttöliittymiin, vaan sitä voidaan käyttää myös näppäinkomentoihin perustuvissa käyttöliittymissä.

20

Puhelimen puheohjaus ei sinänsä ole uusi keksintö. Autokäytössä matkapuhelinta on . . usein voitava käyttää kädet vapaana (engl. hands-free) -toiminnossa, jota varten : ·; autossa on oltava kädet vapaana -varustus, johon kuuluu erillinen mikrofoni ja ‘ · · · kaiutin. Puhujan molemmat kädet ovat käytettävissä ajamiseen puhelun aikana. Kä- : ’ · 25 det vapaana -toiminnon etuna on mukavuus ja lisäturvallisuus. Lisääntyneen käyt- :‘ · tömukavuuden vuoksi kädet vapaana -toimintoa käytetään myös toimistossa pöytä- : |' asennuksena (engl. desktop hands-free).

Kädet vapaana -toiminnon käyttökelpoisuutta vähentää se, että puhelua otettaessa 30 numero on yleensä valittava puhelimen näppäinkäyttöliittymää käyttäen. Sama pätee myös puhelimeen vastaukseen. Puhekomennoilla ohjattava puhelin ratkaisee tämän ongelman, sillä puhelua otettaessa tai puhelimeen vastattaessa ei tarvita puhelimen ;;; näppäinkäyttöliittymää.

: : ’ 35 Alalla tunnetaan lukuisia eri tapoja toteuttaa puheella ohjattava puhelimen käyttöliit- :' * ’ tymä. Näitä menetelmiä on kuvattu mm. US-patenteissa US 5 222 121 ja ' ! US 4 928 302. Seuraavassa käsitellään tekniikan tason mukaisia puheohjattavia käyttöliittymiä lähinnä yleisesti sekä eräitä nimettyjen ratkaisujen yksityiskohtia.

2 111893

Kaksi yleisesti esille tulevaa puheohjatun puhelinkäyttöliittymän käsitettä ovat numerovalinta ja nimivalinta. Nimivalinnassa (engl. repertory dialling) käyttäjä valitsee puhelinnumeron etukäteen tehdyn äänitallenteen perusteella. Äänitallenne vastaa 5 puhelinnumeroon liittyvää nimeä, jolloin numeron valinnan voi tehdä numeron haltijan nimen perusteella. Annettava puhekomento koostuu pelkästään yhdestä nimestä, esimerkiksi "John".

Ennen nimikomennon antamista puhelin on saatettava tilaan, jossa se tietää odottaa 10 nimeä. Tämä nimivalintatilaan saattaminen voidaan tehdä joko puhekomennolla tai puhelimen näppäimistöltä. Autoasennuksessa on myös mahdollista tuoda ylimääräinen puhelimen ulkopuolinen ohjausmahdollisuus esimerkiksi auton ohjauspyörän lähelle, jolloin nimivalintatilaan aktivointi tapahtuu helposti.

15 Nimivalintakäyttöliittymään kuuluu olennaisena osana harjoitusvaihe, jossa käyttäjä tallentaa numeroihin liittyvät nimet ääniviesteinä eli taajuus-ja aikakoodattuina signaaleina puhelimen muistiin. Riippuen käyttöliittymän toteutuksesta käyttäjä voi joutua toistamaan nimen useammin kuin kerran puheentunnistuksen kannalta luotettavan tallenteen tekemiseksi. Tunnistusvaiheessa puhelin vertaa puhuttua nimiko-20 mentoa kaikkiin tallenteisiin ja valitsee jonkin tilastollisen vertailun perusteella parhaiten komentoa vastaavan äänitallenteen.

: : *: Koska tunnistuksessa voi aina tapahtua virhe, puhelin yleensä varmistaa tunnistetun : ‘ ‘: nimen jollakin tavalla. Yleensä tämä tapahtuu toistamalla tunnistettu äänitallenne ja 25 pyytämällä käyttäjältä vahvistusta. Kun puhelin on toistanut tunnistuksen tuloksena : löytämänsä äänitallenteen, se odottaa käyttäjältä joko myönteistä tai kielteistä vasta- usta. Jos tunnistus on tapahtunut oikein, käyttäjä sanoo esimerkiksi "yes", jolloin '!:. ’ puhelin aloittaa puhelinyhteyden muodostamisen. Jos taas tunnistus on tapahtunut • väärin, käyttäjä sanoo esimerkiksi "no", jolloin tekniikan tason mukainen puhelin 30 yleensä palaa nimivalinnan alkutilaan. Tähän toimintamalliin tunnetaan US-paten-: tista US 4 928 302 parannus, jossa käyttäjän ei tarvitse vahvistaa oikein tapahtunutta :: : tunnistusta "yes"-komennon kaltaisella myönteisellä vastauksella, koska toistettuaan . . ’. tunnistustuloksena löytämänsä tallenteen puhelin aloittaa puheyhteyden muodosta- . · · ·. misen joko heti tai pienen viiveen jälkeen. Mainitun viiveen tai vielä yhteyden muo- 35 dostamisenkin aikana käyttäjällä on mahdollisuus perua puhelu, jos tunnistus oli ta-*. ‘ pahtunut väärin. Lisäksi esitettyyn menetelmään tunnetaan US-patentista :; US 5 222 121 parannus, jossa puhelin valitsee tunnistuksessa useita tunnistustulok- sia ja toistaa niistä ensin sen, joka parhaiten vastaa tunnistusta. Jos käyttäjä vastaa 3 111893 tähän toistoon negatiivisesti, puhelin valitsee tuloksen, joka vastaa seuraavaksi parhaiten tunnistusta. Patentin US 5 222 121 päävaatimuksessa on yleistetty tämä toiminto siten, että vasteena tietyn puhekomennon kuhunkin toistokertaan puhelin ilmaisee äänitoistona ja/tai näytöllä seuraavan vastaanottajaehdokkaan, kun vastaan-5 ottajaehdokkaat on asetettu johonkin järjestykseen.

Numerovalinnassa (engl. digit dialling) käyttäjä valitsee puhelinnumeron puheko-mennolla, joka muodostuu numerosaqasta. Numero siis puhutaan puhelimelle, joka tunnistaa numerosaijan ja muodostaa yhteyden tunnistamaansa puhelinnumeroon.

10 Ennen puhelinnumeron sanomista puhelin on saatettava tilaan, jossa se tietää odottaa numeroa. Tämä numerovalintatilaan saattaminen voidaan tehdä joko puheko-mennolla tai puhelimen näppäimistöltä. Autoasennuksessa on myös mahdollista tuoda ylimääräinen puhelimen ulkopuolinen ohjausmahdollisuus esimerkiksi auton ohjauspyörän lähelle, jolloin numerovalintatilaan aktivointi tapahtuu helposti.

15

Koska puhelinnumerot voivat sisältää eri määrän numeroita, käyttäjän on päätettävä puhumansa numerosarja jollakin komentosanalla (esim. "dial"), josta puhelin tietää, että numero on päättynyt. Numeron päättyminen voitaisiin periaatteessa päätellä myös numeron jälkeisestä hiljaisuudesta, mutta tällainen menetelmä aiheuttaa viivet- 20 tä ja epävarmuutta erityisesti meluisassa ympäristössä. Alalla tunnetuissa ratkai suissa käytetäänkin yksinomaan numeron päättävää komentosanaa. Numerovalinta-komento voi siis olla esimerkiksi seuraavanlainen: "nine three one two two three : ‘: two three four three dial." •. 25 Numerovalintaa käyttävät puheella ohjattavat puhelimet eroavat toisistaan merkittä- •, ; västi. Yleisimmin käytetyssä menetelmässä numerot on sanottava yksitellen pitäen ‘ . ’ lyhyt tauko numeroiden välillä. Tällaista tunnistusmenetelmää kutsutaan yksittäisten ; sanojen tunnistukseksi (engl. isolated word recognition). Toinen vaihtoehto on sa- • ’ ’ noa koko numerojono ilman taukoja, jolloin menetelmää kutsutaan yhdistettyjen sa- 30 nojen tunnistukseksi (engl. connected word recognition). Yksittäisten numerojen .: : tunnistus on puhelimen puheentunnistusyksikölle paljon helpompaa kuin kokonais- v : ten numerojonojen, joissa numeroiden vaihtumiskohdat ovat tuntemattomat. Käyttä- . . ·. jän kannalta numerojonojen sanominen on kuitenkin luonnollisempi tapa numeron • · ·, valitsemiseen.

35 :. · · Tekniikan tason mukaisissa, numerovalintaan perustuvissa käyttöliittymissä merkit- :... · tävin numeron oikeaan tunnistamiseen vaikuttava tekijä on todennäköisyys sille, että puhelin tunnistaa yksittäisen numeromerkin oikein. Todennäköisyyden vaikutusta 4 111893 voidaan havainnollistaa seuraavalla esimerkillä: Oletetaan, että käyttäjä sanelee täysin sattumanvaraisen yhdeksänmerkkisen puhelinnumeron ja oletetaan lisäksi, että puhelimessa oleva puheentunnistin toimii puhtaasti arvontaperiaatteella, jolloin yksittäisen merkin oikean tunnistamisen todennäköisyys on 0,1. Todennäköisyys, 5 että puhelin tunnistaa koko yhdeksänmerkkisen sarjan oikein, on (0, l)9 = 10-9 eli yksi miljardista. Vaikka puheentunnistinta merkittävästi parannettaisiin niin, että oikean yksittäisen merkin tunnistustodennäköisyydeksi saataisiin 0,8 eli 80%, koko yhdeksänmerkkisen sarjan oikean tunnistamisen todennäköisyys jää silti vaatimattomaan 13 prosenttiin (0,89 « 0,134).

10 Käyttäjän kannalta on turhauttavaa, jos puheohjattu puhelin tunnistaa keskimäärin vain joka seitsemännen puhelinnumeron oikein. Myös näppäinkomentoihin perustuvan käyttöliittymän yhteydessä voi tulla esiin vastaavanlainen ongelma erityisesti huonomuistisilla tai kömpelöillä käyttäjillä: vaikka puhelin tunnistaa näppäinko-15 mennot 100% todennäköisyydellä, käyttäjä voi muistaa puhelinnumeron tai vastaavan alfanumeerisen merkkijonon väärin tai painaa väärää näppäintä.

Tämän keksinnön tavoitteena on puhelimen käyttöliittymän käyttömukavuuden parantaminen. Keksinnön tavoitteena on myös luotettavuuden ja nopeuden parantami-20 nen numerovalinnassa. Keksinnön tavoitteena on edelleen oikean puhelinnumeron tunnistamistodennäköisyyden parantaminen puheohjatussa käyttöliittymässä. Keksinnön tavoitteena on edelleen käyttäjän virheiden korjaaminen puhelinyhteyttä :': muodostettaessa.

> · I

» » 25 Keksinnön tavoite saavutetaan toiminnolla, jossa käyttäjä voi rajata puhelimen te-. : kemän tunnistuksen perusjoukoksi tietyn osan kaikista mahdollisista puhelun vas- > ‘ taanottajista.

< » ' Keksinnön mukaiselle menetelmälle puhelinlaitteen ohjaamiseksi, joka puhelinlaite 30 käsittää ohjainyksikön ja muistivälineet, on tunnusomaista, että siinä käyttäjä toimit-•: : taa tarkastuskomennon mainitulle puhelinlaitteelle, ja vasteena mainittuun tarkas- v : tuskomentoon mainittu ohjainyksikkö vertaa käyttäjän antamaa merkkijonoa mainit- . ·. tuihin muistivälineisiin tallennettuihin vastaaviin merkkijonoihin ja valitsee sen , · · ·. merkkijonon puhelinyhteyden muodostamiseksi, joka vertauksen kohteena olevista • 35 mainittuihin muistivälineisiin tallennetuista merkkijonoista parhaiten vastaa mainit- :’ i tua käyttän antamaa merkkijonoa.

5 111893

Keksinnön mukaiselle puhelinlaitteelle, joka käsittää ohjainyksikön ja muistivälineet, on tunnusomaista, että se käsittää lisäksi - välineet tarkastuskomennon toimittamiseksi käyttäjältä mainitulle ohjainyksikölle, - välineet käyttäjän antaman merkkijonon vertaamiseksi mainittuihin muistivälinei-5 siin tallennettuihin vastaaviin merkkijonoihin vasteena mainittuun tarkastuskomen- toon, ja - välineet sen merkkijonon valitsemiseksi puhelinyhteyden muodostamista varten, joka vertauksen kohteena olevista mainittuihin muistivälineisiin tallennetuista merkkijonoista parhaiten vastaa mainittua käyttäjältä puhelinlaitteelle toimitettua 10 merkkijonoa.

Puhelinnumeron tunnistus on huomattavasti helpompaa, mikäli puhelimelle annettava puhelinnumero kuuluu johonkin ennalta määriteltyyn pienehköön joukkoon.

Tätä havainnollistaa seuraava esimerkki: Oletetaan, että puheohjatun käyttöliittymän 15 käyttäjä tietää, että hänen sanelemansa yhdeksänmerkkinen puhelinnumero on yksi niistä sadasta, jotka ovat puhelimen muistissa. Muistissa olevilla eli muistiin tallennetuilla puhelinnumeroilla tarkoitetaan sekä tässä että jäljempänä kaikkia niitä puhelinnumeroita, jotka ovat tavalla tai toisella puhelimen tiedossa ja joita puhelimen toimintaa ohjaava sähköinen yksikkö voi käsitellä. Saneltuaan numeron käyttäjä il-20 maisee puhelimelle, että tunnistuksen perusjoukkona on käytettävä muistiin tallennettuja puhelinnumeroita. Vaikka tunnistus toimisi arvontaperiaatteella, oikean tunnistuksen todennäköisyys on jo 1/100 = 102 eli kymmenen miljoonaa kertaa pa-; ; rempi kuin yleisen merkkisarjan tunnistuksessa. Kehittyneellä tunnistusalgoritmilla ; 1 ”: ja käyttämällä perusjoukkona muistissa olevia puhelinnumeroita oikean tunnistuksen 25 todennäköisyyttä saadaan merkittävästi kasvatettua.

. ’ . ’ Vastaavasti puhelinkäyttöliittymässä, jossa käyttäjä valitsee puhelun vastaanottajan ‘;;. ‘ antamalla puhelimelle puhelinnumeron tai vastaavan alfanumeerisen merkkijonon ' ·' ‘ näppäimistöllä, pieni virhe kuten yksi väärä merkki voi olla korjattavissa. Keksinnön 30 mukaisessa toiminnassa käyttäjä ilmaisee puhelimelle, että hänen näppäilemänsä :.: ! merkkijonon perusteella puhelimen tulee tehdä tunnistus muistissa olevien merkki- :: : jonojen muodostamasta perusjoukosta, ja puhelin hakee muistista sen tallennetun . . ·. merkkijonon, joka parhaiten vastaa käyttäjän antamaa merkkijonoa.

» · ' 1 * 35 Kun puhelin on tunnistanut aiotun vastaanottajan puhelinnumeron ja toistanut sen :: käyttäjälle puhumalla tai näytöllä tarkistusta varten, käyttäjä voi antaa virheen huo- :,.,: mattuaan erillisen komennon (esim. "check"), jonka jälkeen puhelin vertaa tunnistet tua virheellistä numeroa kaikkiin muistissa oleviin numeroihin ja valitsee seuraa- 6 111893 vaksi vaihtoehdoksi muistista sen numeron, joka lähinnä muistuttaa ensin tunnistettua virheellistä numeroa.

Saman menetelmän toisessa versiossa käyttäjä voi jo numerovalinnan yhteydessä 5 päättää numerojonon erilliseen komentoon (esim. "check"), jonka perusteella puhelin tietää, että komennettu numero on jo puhelimen muistissa. Tunnistusta tehtäessä ei siten edes oteta huomioon numeroita, jotka eivät ole puhelimen muistissa, jolloin tunnistusvirheen mahdollisuus pienenee.

10 Keksinnön mukaista käyttöliittymää käyttävän puhelinlaitteen toimintaa tarkastellaan seuraavaksi yksityiskohtaisesti esimerkin avulla ja viittaamalla oheisiin kuviin, joissa kuva 1 esittää tilakaaviona tekniikan tason mukaista puheohjatun puhelinkäyt-15 töliittymän toiminnan ylintä hierarkiatasoa, kuva 2 esittää tilakaaviona tekniikan tason mukaista puheohjatun puhelinkäyt-töliittymän toimintaa numerovalinnassa, 20 kuva 3 esittää tilakaaviona sinänsä tunnetun periaatteen mukaista puheohjatun puhelinlaitteen siirtymistä keskeytystilan kautta perustilaan, : ‘: kuva 4 esittää tilakaaviona puheohjatun puhelinkäyttöliittymän toimintaa kek- "'; sinnön mukaisessa korjauksessa eli puhelinnumeron tunnistustodennäköi- 25 syyden parantamisessa, ’ . ‘ kuva 5 esittää tilakaaviona sinänsä tunnetun periaatteen mukaista puheohjatun !!. ’ puhelinlaitteen siirtymistä viiveajan jälkeen perustilaan, ja > · · 30 kuva 6 on lohkokaavio puhelinlaitteesta, jossa voidaan käyttää keksinnön mu- i.i : kaista käyttöliittymää.

• I I • · · . . *. Keksinnön taustan selvittämiseksi seuraavassa kuvataan aluksi tekniikan tason mu- , * · ·. kaista puheohjatun puhelinkäyttöliittymän toimintaa viitaten kuviin 1 - 3 ja 5.

'! ‘ 35 Käyttöliittymä on kuvattu hierarkisella tilakaavioesityksellä. Kukin yksittäinen tila • · :‘ : on esitetty suorakaiteella, jonka tummennettuun yläosaan on kirjoitettu tilan identi- » · » fioiva nimi. Mikäli tietty tilan nimi esiintyy eri kuvissa tai saman kuvan eri kohdassa, kysymyksessä on sama tila. Suorakulmion vaaleaan alaosaan on useissa kohdin 7 111893 kirjattu jokin tunnuskoodi, joka vastaa puhelimen dialogia. Kun tilaan saavutaan, puhelin puhuu koodia vastaavan dialogin. Mikäli koodia ei ole kirjattu, puhelin on hiljaa tilaan saavuttaessa. Puhelimen dialogien koodaus on esitetty taulukossa 1.

5 Tilasiirtymät on esitetty nuolilla, joiden keskellä on ympyrä. Mikäli ympyrä on vaalea, siirtymä tapahtuu käyttäjän dialogilla. Ympyrän sisällä oleva koodi kertoo, millä käyttäjän dialogilla siirtymä tapahtuu. On kuitenkin huomattava, että siirtymä tapahtuu vain, kun puhelin tunnistaa kyseisen käyttäjän dialogin oikein. Puhelin tekee tässä tapauksessa tilasiirtymäpäätöksen, joka perustuu käyttäjän dialogista teh-10 tyyn päätelmään. Käyttäjän dialogien koodaus on esitetty taulukossa 2. Mikäli ympyrä on tummennettu, siirtymä tapahtuu muuten kuin käyttäjän dialogin johdosta. Ympyrän sisällä oleva koodi kertoo, millä ehdolla siirtyminen tapahtuu. Muut siir-tymäehdot on esitetty taulukossa 3.

15 Kuvissa esiintyy myös keksinnön kannalta sinänsä epäoleellisia tiloja ja siirtymiä, joihin ei viitata seuraavassa selostuksessa, mutta jotka on esitetty osoituksena keksinnön mukaisten toimintojen rinnastumisesta puhelimen muuhun toimintaan.

Käyttöliittymän ylin hierarkiataso on esitetty kuvassa 1. Puhelin on alustavasti tilas- 20 sa Normal phone 1. Tässä tilassa puhelin toimii kuten tavallinen matkapuhelin eikä sitä voi ohjata puhekomennoilla. Jotta puhekomentojen käyttö olisi mahdollista, puhelin täytyy ensin saattaa vastaavaan tilaan. Tämä tapahtuu näppäinsekvenssillä : : no. 1, jolloin siirrytään aluksi tilaan Voice control 2. Tilassa Voice control 2 puhelin ;: vastaa "Voice control active", jonka jälkeen siirrytään välittömästi tilaan Core state •. 25 3. Tila Core state 3 on puhekäyttöliittymän perustila eli tila, johon esim. puhelun . ·, : loputtua tai tiettyjen muiden toimenpiteiden jälkeen aina palataan.

• · · * · « * · _ ’;;. ‘ Tilassa Core state 3 käyttäjä voi käynnistää useita eri toimenpiteitä puhekomentojen ‘ ’ avulla. Komennolla "Dial by number" voidaan soittaa numerosarjasta muodostuvan 30 puhekomennon avulla. Tällainen operaatio on esitetty kuvassa 2. Aluksi komento :.: : "Dial by number" aiheuttaa siirtymän tilaan Digit dialling 4. Tähän tilaan tultaessa :: puhelin vastaa "Number, please". Käyttäjä voi nyt sanoa koko puhelinnumeron . päättäen sen komentoon "dial", esim. "nine three one three one six five eight seven , · ·. six dial". Tämän jälkeen voi seurata kolme eri tilasiirtymää riippuen tunnistuksen T* 35 onnistumisesta.

•.,.: Mikäli tunnistus on koettu varmaksi, seuraa siirtymä tilaan Dialling <NS> 5. Tähän tilaan tultaessa puhelin vastaa "Dialling" ja luettelee tämän jälkeen tunnistetun nu- 111893 δ merosarjan. Jos käyttäjä ei vastaa komennolla "Cancel", puhelu aloitetaan. Perinteisissä ratkaisuissa käyttäjältä pyydetään varmistus tunnistettuun numeroon, mutta edellä esitellyssä, patentin US 5 222 121 mukaisessa kehittyneemmässä käyttöliittymässä se ei ole tarpeen, jos tunnistus on onnistunut. Käyttäjällä on silti aikaa estää 5 puhelu, jos tunnistus on epäonnistunut. Kun puhelun vastaanottaja nostaa luurin, siirrytään tilaan Call active 6, jossa puhekomennot eivät ole aktiivisia. Mikäli taas käyttäjä sanoo "Cancel", puhelua ei aloiteta, vaan siirrytään kuvan 3 mukaisesti tilaan Interrupt 7, johon tultaessa puhelin vastaa "Operation interrupted". Tätä seuraa välitön siirtyminen tilaan Voice control 2, johon tultaessa puhelin vastaa "Voice 10 control active". Tätä seuraa edelleen välitön siirtyminen puhekäyttöliittymän perustilaan Core state 3. Komennon "Cancel" käyttö on esitetty kuvassa 3, jossa vasemmalla on listattu kaikki tilat, jossa "Cancel"-komentoa voi käyttää. Komennon aiheuttama toimintosarja on aina sama. On huomattava, että komentoa "Cancel" voi käyttää lähes aina.

15

Kuvassa 3 ja kuvassa 5 esiintyy myös keksinnön mukaiseen käyttöliittymäratkaisuun kuuluva tila Check memory, jonka käyttöä selostetaan jäljempänä.

Mikäli tunnistus on koettu epävarmaksi, tilasta Digit dialling 4 siirrytään edelleen 20 kuvan 2 mukaisesti tilaan Verification 8. Tähän tilaan tultaessa puhelin vastaa "Was the number" sekä tämän jälkeen luettelee tunnistetun numerosarjan. Näin käyttäjälle viestitetään, että puhelinnumeron tunnistamisessa on voinut tulla virhe. Niinpä : ’; käyttäjän on oltava erityisen tarkkana kuunnellessaan tunnistettua numerosarjaa.

, Kuultuaan puhelimen vastauksen käyttäjä voi vastata joko "Yes" tai "No". Mikäli * · · _ 25 käyttäjä vastaa "Yes" seuraa siirtymä tilaan Dialling 9. Tähän tilaan tultaessa puhe- • t ; Iin vastaa "Dialling" ja puhelu aloitetaan. Käyttäjällä on jälleen mahdollisuus kes- ,' keyttää toimenpide sanomalla "Cancel" ennen kuin vastaanottaja on nostanut luurin.

;;.: Mikäli käyttäjä tilassa Verification 8 vastaa "No", seuraa siirtymä tilaan Voice cont- ‘ ‘ rol 2, josta jatketaan kuten edellä on kerrottu.

30 :.: : Mikäli tunnistus on epäonnistunut, seuraa siirtymä tilaan Digit dialling II 10. Tällöin ;.: : puhelin vastaa "Number again, please". Tilat Digit dialling II 10 ja Digit dialling 4 . . ·. ovat samanlaiset muutoin kuin epäonnistuneen tunnistuksen tapauksessa. Epäonnis- r v » tuneen tunnistuksen tapauksessa tilasta Digit dialling II 10 siirrytään tilaan Digit ‘’ 35 dialling III 11. Tilaan Digit dialling III 11 tultaessa puhelin vastaa "Number again, • » ;. · please". Tilat Digit dialling III Ilja Digit dialling II10 ovat samanlaiset muutoin ; 11, *· kuin epäonnistuneen tunnistuksen tapauksessa. Epäonnistuneen tunnistuksen tapa uksessa tilasta Digit dialling III 11 siirrytään tilaan Digit error 12. Tilaan Digit error 9 111893 12 tultaessa puhelin vastaa "Unable to recognize number", jota seuraa välitön siirtymä tilaan Voice control 2.

Useissa tiloissa on aikarajat, joiden ylityksen jälkeen siirrytään automaattisesti pu-5 hekäyttöliittymän perustilaan Core state 3. Kyseinen operaatio on esitetty kuvassa 5. Siirtymä tehdään tilan Time-out 36 kautta. Tilaan Time-out 36 tultaessa puhelin vastaa "Time-out", ja tätä seuraa välitön siirtyminen tilaan Voice control 2.

Kuvassa 5 vasemmalla on lueteltu tilat, joiden maksimiaikaraja on 5 sekuntia. Aika-10 raja katsotaan ylittyneeksi, mikäli käyttäjä ei ole sanonut komentoa (tai tallennettavaa tunnistetta) 5 sekunnin sisällä. Kuvassa 11 ylhäällä on lueteltu tilat, joiden maksimiaikaraja on kymmenen sekuntia. Mikäli käyttäjä ei ole kymmenen sekunnin sisällä aloittanut dialogiaan, aikaraja katsotaan ylitetyn.

15 Paluu puhekäyttöliittymän perustilasta Core state 3 normaaliin puhelintoimintaan ilman puheohjausta (tila Normal phone 1) voi tapahtua joko näppäinsekvenssillä no. 2 tai säädettävän maksimiaikarajan ylityttyä. Siirtyminen on esitetty kuvassa 1.

On tunnettua, että puhelinnumeron koqaus jälkikäteen puhekomentosarjan avulla on 20 erittäin vaivalloista. Se on katsottu jopa niin vaivalloiseksi, ettei sitä ole kannattanut sijoittaa käyttöliittymään. Toisaalta puhelinnumeron korjaus yhden ainoan puheko-mennon avulla olisi hyvin helppoa. Keksinnön ansiosta tällainen operaatio on mah-: *: dollista. Seuraavaksi käsitellään keksinnön mukaista puhelinnumeron korjausta vii- täten kuvaan 4.

25 . . Puhelinnumeron korjaus on esitetty tilakaaviona kuvassa 4. Korjaus on mahdollista ’ . ’ tehdä kahdella eri tavalla. Ensimmäisessä tavassa käyttäjä osoittaa jo soittoa tehdes- sään, että puhelimelle annettua puhelinnumeroa lähinnä vastaava numerosaqa tulee '' hakea puhelimen muistista. Tunnistettu numerosarja korvataan siis sitä parhaiten 30 vastaavalla, muistista haetulla numerosaijalla. Näin tehdään, mikäli tiloissa Digit * dialling 4, Digit dialling II10 ja Digit dialling ΠΙ11 käyttäjä päättää numerosarjan komennon "Dial" sijasta komentoon "Check". Komennon "Check" jälkeen seuraa , , ·. siirtymä tilaan Check memory 35, johon tultaessa puhelin vastaa "Dialling" sekä .!! luettelee muistista haetun numerosarjan. Jos käyttäjä ei vastaa tämän jälkeen ko- 35 mennolla "Cancel", puhelu aloitetaan. Tämän toiminnon tarkoitus on helpottaa pu- * » ; , · helimen tunnistustehtävää, mikä kasvattaa oikean puhelinnumeron löytymisen to- dennäköisyyttä.

10 111893

Voidaan ajatella myös tapausta, jossa käyttäjä muistaa puhelinnumeron olevan 931-1234 567, mutta ei ole täysin varma, muistaako hän oikein. Tällöin hän antaa puhe-komennon "Nine three one one two three four five six seven check". Komennon "Check" jälkeen seuraa siirtymä tilaan Check memory 35, johon tultaessa puhelin 5 vastaa "Dialling" sekä luettelee muistista haetun numerosarjan. Jos puhelin ei ole löytänyt käyttäjän luettelemaa puhelinnumeroa, mutta on löytänyt muistista esimerkiksi numeron 931-1233567, puhelimen dialogi on "Dialling nine three one one two three three five six seven". Jos käyttäjä ei vastaa tämän jälkeen komennolla "Cancel", puhelu aloitetaan.

10

Toisessa tavassa käyttäjä voi sanoa komennon "Check" myös tiloissa Dialling <NS> 5 ja Verification 8, jolloin jo tunnistettuja käyttäjälle toistettu numerosarja korvataan muistista haetulla, käyttäjän sanelemaa puhelinnumeroa lähinnä vastaavalla numerosarjalla. Komento "Check" aiheuttaa siirtymän tilaan Check memory 35, ja 15 toimintosarja jatkuu samalla tavalla kuin edellä on kuvattu.

Edellä esitetty puhelimen puhekäyttöliittymä on kaksisuuntainen, eli puhelimelle voidaan antaa puhekomentoja ja puhelin reagoi komentoihin vastauksilla. Nämä vastaukset voivat olla puhevastauksia, jolloin ne joko generoidaan puhesyntetisaat- 20 torilla tai ne voidaan tallentaa puhelimen muistiin etukäteen. Puhevastausten tallentamisessa voidaan edullisesti käyttää jotakin puhekoodausmenetelmää vähentämään tallenteen vaatimaa muistimäärää. Puhelin voi antaa vastaukset myös muun puhelintekniikassa tunnetun ilmaisumenetelmän kuten näyttölaitteen tai äänimerkin avulla.

[ > · 25 Keksinnön mukaista menetelmää voidaan soveltaa myös yksisuuntaisessa käyttöliittymässä, jossa käyttäjä ei saa puhelimelta mitään tietoa numeronvalinnan etenemi- k # ’ .' sestä. Jos tällainen puhelin valitsee käyttäjän antaman puhelinnumeron sijasta sitä ;;,: lähinnä vastaavan, muistiin tallennetun puhelinnumeron, käyttäjä tietää vasta puhe- t · • ‘ ’ lun muodostamisen jälkeen varmasti, niihin numeroon hän on soittanut.

30 i Keksinnön mukaisessa käyttöliittymässä voidaan käyttää joko numerojonojen tun- ' nistusta (connected word recognition) tai yksittäisten numeroiden tunnistusta , (isolated word recognition) tai molempia.

35 Keksinnön kannalta on oleellista, että sen mukaista käyttöliittymää soveltavassa pu-• helimessa on muisti, johon on tallennettu puhelinnumeroita. Puhelinnumeroilla tar- koitetaan tässä yhteydessä kaikkia merkkejä tai merkkijonoja, joita käytetään vastaanottajan identifioimiseksi puhelinyhteyden muodostamisvaiheessa. Tämä muisti 11 111893 voi olla toteutettu monella tavalla: Muisti voi olla puhelinmuistiomainen, jolloin käyttäjä itse erikseen tallentaa numerot muistiin. Muisti voi toimia myös automaattisesti siten, että puhelin tallentaa muistiin numeroita, joihin on onnistuneesti soitettu. Molempia muistityyppejä voidaan käyttää myös rinnakkain. Muisti voi olla aivan 5 riippumaton puheohjatun valinnan yhteydessä käytettävästä äänitallennemuistista.

Edellä esitetyissä esimerkeissä on käytetty yhtä tarkastuskomentoa "check", jonka perusteella puhelin vertaa käyttäjän antamaa puhelinnumeroa kaikkiin muistissa oleviin puhelinnumeroihin. Eräs keksinnön toinen suoritusmuoto soveltaa useampia 10 käyttäjän antamia komentoja samaan tarkoitukseen. On tunnettua, että puhelinlaite ylläpitää muistissa suosituimpien puhelinnumeroiden listaa eli luetteloa, jossa ensimmäisenä on se puhelinnumero, johon on soitettu useimmin, toisena seuraavaksi eniten käytetty numero jne. Keksinnön mukaisesti käyttäjä voi antaa komennon "check" tilalla esimerkiksi komennon "my numbers", jolloin puhelin käyttää tunnis-15 tuksen perusjoukkona esimerkiksi vain kymmentä suosituinta puhelinnumeroa.

Vastaavasti komento "last numbers" komennon "check" tilalla voi ohjata puhelimen käyttämään tunnistuksen perusjoukkona vain tiettyä määrää viimeksi käytetyistä puhelinnumeroista. Vastaavia perusjoukon rajauksia voidaan tehdä hyvin monella tavalla.

20

Edellä on käsitelty keksinnön mukaista menetelmää ja sellaista puhelinlaitteen käyttöliittymää, jossa käytetään keksinnön mukaista menetelmää. Keksintö kohdis-ί tuu jäljempänä seuraavien patenttivaatimusten mukaisesti myös puhelinlaitteeseen, jossa sovelletaan keksinnön mukaista menetelmää. Puhelinlaitteen yksinkertaistettu 25 lohkokaavio on esitetty kuvassa 6. Siinä on ohjauslohko CTRL 101, joka ohjaa pu-. · helinlaitteen toimintaa, ja muistilohko MEM 102, johon voidaan tallentaa puhelin- i » numeroita, äänitallenteita ja alfanumeerisia merkkijonoja. Käyttäjä antaa komentoja ;' ’ ja merkkijonoja puhelinlaitteelle puheena mikrofonin 104 kautta tai näppäinkomen- * ‘ töinä näppäimistöllä 103. Komentojen tunnistamiseksi puhelinlaite sisältää komen- 30 totulkkilohkon COMM.INT 105. Merkkijonojen vertailua ja oikean merkkijonon ; valitsemista varten keksinnön mukaisella tavalla puhelinlaitteessa on vertailulohko ; COMP 106 ja valintalohko PICK 107. Komentotulkki-, vertailu-ja valintalohkot *, 105- 107 sekä puhelinnumeroita tallentava ja muistista lukeva muistinhallintalohko •, MEM.MAN 112 on edullisesti toteutettu osana ohjauslohkoa 101. Puhesignaalien 35 tuottamiseksi puhelinlaitteessa on puhesyntetisaattori SYNT 109 ja kaiutin 108.

1 Näyttösignaalien tuottamiseksi puhelinlaitteessa on näytönohjainlohko DISP lilja näyttö 110.

> I

12 111893

Keksinnön avulla puheentunnistukseen perustuvan numerovalinnan luotettavuus kasvaa ja käyttöliittymä tulee käyttäjäystävällisemmäksi. Keksinnön avulla myös näppäinkomentoihin perustuvan käyttöliittymän käyttöön saadaan uusia käyttäjäystävällisiä piirteitä.

5 1 I * · 13 111893

Taulukko 1 Puhelimen dialogien koodaus.__ "Voice control active11_p40 "Number, please"_p41 "Number again, please"_p42 "Dialling" + NS1_p43 "Dialling"_p44 "Was the number" + NS1_p45 "Unable to recognize number" p46 "Time-out"_p47 "Operation interrupted"_p48 "Name, please"_p49 "Calling" + NM**_p50 NS**_p51 NM**_p52 "Unable to recognize name" p53 "Line open"_p54 "Error in saving"_p55 "Save completed"_p56 "Too similar with" + NM** p57 "Name again, please"_p58___ * NS viittaa puhelinnumeron sanomiseen ** NM viittaa nimen sanomiseen.

5 Taulukko 2_Käyttäjän dialogien koodaus.

numerot ja vastaavat sanat uO-12 "Dial by number"_u!3 "Call by name"_u!4 "My numbers"_u!5 "Answer"_u!6 "Dial"_u!7 "Yes"_u!8 "No"_u!9 "Cancel"_u20 "Next"_u21 "Previous"_u22 "Memory"_u23 "Check"_u24 "Save"_u25 : "Lastnumbers" u26 I f 1 • t • ·

Taulukko 3 Muiden siirtymäehtojen koodaus._ Näppäinsekvenssi no. 1_t80 Näppäinsekvenssino. 2_t81 : .·. Puhelun lopetus -napin painall. t82 Onnistunut tunnistus__t83 . ·: ·. Epävarma tunnistus_t84 Epäonnistunut tunnistus_t85 Välitön siirtyminen_t86 Lopetus viiveellä, 5 s_t87 ; t.# Lopetus viiveellä, 10 s_t88 Lopetus viiveellä, 5 min(sääd.) t89 'Yhteys kunnossa_t90 Lähellä toista äänitunnusta t91

Hyväksytty harjoitustunnus t92 Hylätty harjoitustunnus_t93 • · · II» • I » 1

Claims

111893

1. Menetelmä puhelinlaitteen ohjaamista varten, joka puhelinlaite käsittää - sen toimintaa ohjaavan ohjainyksikön (101), - muistivälineet (102) puhelinnumeroiden tallentamiseksi merkkijonoina, ja 5. välineet (103, 104, 105) käyttäjän antamien komentojen toimittamiseksi mainitulle ohjainyksikölle, ja jossa menetelmässä käyttäjä toimittaa merkkijonon mainitulle puhelinlaitteelle puhelun aiotun vastaanottajan identifioimiseksi ja päättää mainitun merkkijonon tiettyyn komentoon, 10 tunnettu siitä, että mainittu komento voi olla valintakomento (dial) tai siitä eroava tarkastuskomento (check), jolloin - vasteena valintakomentoon (dial) mainittu ohjainyksikkö tunnistaa mainitun merkkijonon merkit merkki kerrallaan ja käyttää tunnistamistaan merkeistä koostuvaa 15 jonoa puhelinyhteyden muodostamiseksi vertaamatta sitä mainittuihin muistivälineisiin tallennettuihin vastaaviin merkkijonoihin, ja - vasteena tarkastuskomentoon (check) mainittu ohjainyksikkö tunnistaa mainitun merkkijonon merkit merkki kerrallaan ja vertaa tunnistamistaan merkeistä koostuvaa jonoa mainittuihin muistivälineisiin tallennettuihin vastaaviin merkkijonoihin sekä 20 valitsee sen merkkijonon puhelinyhteyden muodostamiseksi, joka vertauksen kohteena olevista mainittuihin muistivälineisiin tallennetuista merkkijonoista parhaiten vastaa mainittua käyttäjältä puhelinlaitteelle toimitettua merkkijonoa.

2. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että käyttäjä antaa : '· 25 mainitun puhelinlaitteelle toimitettavan merkkijonon puhekomentona.

• :* 3. Patenttivaatimuksen 2 mukainen menetelmä, tunnettu siitä, että mainittu : y merkkijono on puhelinnumero, jonka käyttäjä sanoo yhtenäisenä numerojonona.

4. Patenttivaatimuksen 2 mukainen menetelmä, tunnettu siitä, että mainittu merkkijono on puhelinnumero, jonka käyttäjä sanoo erillisinä numeroina pitäen näi-. den välissä tauon.

• ‘ 5. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että käyttäjä antaa :35 mainitun käyttäjältä puhelinlaitteelle toimitettavan merkkijonon näppäinkomentona.

* * 6. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että mainittu puhelinlaite käsittää ilmaisuvälineet (108, 109, 110, 111) puhelun muodos- 111893 tautiseen liittyvien tietojen antamiseksi käyttäjälle ja se ilmaisee mainitun vertaamisen jälkeen käyttäjälle, mikä mainittuihin muistivälineisiin tallennettu merkkijono on valittu puhelinyhteyden muodostamiseksi.

7. Patenttivaatimuksen 6 mukainen menetelmä, tunnettu siitä, että mainittu pu helinlaite tuottaa mainitun ilmaisun puheilmaisuna.

8. Patenttivaatimuksen 6 tai 7 mukainen menetelmä, tunnettu siitä, että mainittu puhelinlaite tuottaa mainitun ilmaisun näyttöilmaisuna. 10

9. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että käyttäjä toimittaa mainitun tarkastuskomennon mainitulle puhelinlaitteelle ennen kuin se aloittaa puhelinyhteyden muodostamisen.

10. Jonkin patenttivaatimuksen 1-8 mukainen menetelmä, tunnettu siitä, että käyttäjä toimittaa mainitun tarkastuskomennon mainitulle puhelinlaitteelle sen jälkeen, kun se on aloittanut puhelinyhteyden muodostamisen.

11. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että 20 siinä lisäksi mainittu puhelinlaite tallentaa puhelinnumeron automaattisesti mainittuihin muistivälineisiin, kun mainitulla puhelinlaitteella on puhelinyhteys kyseisen puhelinnumeron identifioimaan puhelinlaitteeseen. I

· * · < » * · ' · ·· 12. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että : *· 25 siinä lisäksi käyttäjä tallentaa puhelinnumeroita mainittuihin muistivälineisiin ilman, •.' · että mainitulla puhelinlaitteella soitetaan kyseiseen numeroon. < t : Y

13. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että vasteena mainittuun tarkastuskomentoon mainittu ohjainyksikkö vertaa mainittua 30 käyttäjän antamaa merkkijonoa kaikkiin mainittuihin muistivälineisiin tallennettuihin vastaaviin merkkijonoihin. • I

* , ;;; 14. Jonkin edellisen patenttivaatimuksen mukainen menetelmä, tunnettu siitä, että I I Y t vasteena mainittuun tarkastuskomentoon mainittu ohjainyksikkö vertaa mainittua : Y 35 käyttäjän antamaa merkkijonoa tiettyyn osaan kaikista mainittuihin muistivälineisiin :' ’ ’ tallennetuista vastaavista merkkijonoista. » » I 111893

15. Jonkin edellisen patenttivaatimuksen mukaisen menetelmän käyttö matkapuhelimessa.

16. Puhelinlaite, joka käsittää 5. sen toimintaa ohjaavan ohjainyksikön (101), - muistivälineet (102) puhelinnumeroiden tallentamiseksi merkkijonoina, ja - välineet (103, 104, 105) käyttäjän antamien komentojen ja merkkijonojen toimittamiseksi mainitulle ohjainyksikölle (101), tunnettu siitä, että se käsittää lisäksi 10. välineet (101) sen tunnistamiseksi, onko käyttäjän antama komento valintakomento vai siitä eroava tarkastuskomento, - välineet (101) puhelinyhteyden aloittamiseksi välittömästi tunnistettua merkkijonoa käyttäen vasteena mainittuun valintakomentoon, - välineet (106) käyttäjän antaman merkkijonon vertaamiseksi mainittuihin muisti-15 välineisiin (102) tallennettuihin vastaaviin merkkijonoihin vasteena mainittuun tar- kastuskomentoon, ja - välineet (107) sen merkkijonon valitsemiseksi puhelinyhteyden muodostamista varten, joka vertauksen kohteena olevista mainittuihin muistivälineisiin (102) tallennetuista merkkijonoista parhaiten vastaa mainittua käyttäjältä puhelinlaitteelle toimi- 20 tettua merkkijonoa.

17. Patenttivaatimuksen 16 mukainen puhelinlaite, tunnettu siitä, että se käsittää i ► ; | välineet (105) puheen tunnistamiseksi. * · · * * i ’· 25

18. Patenttivaatimuksen 17 mukainen puhelinlaite, tunnettu siitä, että se käsittää välineet (105) yhtenäisesti puhuttujen numerojonojen tunnistamiseksi. t I < · , t · : V

19. Patenttivaatimuksen 17 tai 18 mukainen puhelinlaite, tunnettu siitä, että se käsittää välineet (105) numero kerrallaan puhuttujen numerojonojen tunnistamisek-30 si.

, 20. Jonkin patenttivaatimuksen 16-19 mukainen puhelinlaite, tunnettu siitä, että ’;;; se käsittää ilmaisuvälineet (108, 109, 110, 111) puhelun muodostamiseen liittyvien ‘‘‘ tietojen antamiseksi käyttäjälle. sT 35

;‘ 21. Patenttivaatimuksen 20 mukainen puhelinlaite, tunnettu siitä, että se käsittää i » » * · välineet (108, 109) puhesignaalin tuottamiseksi. 1*1· r < » · 111893

22. Patenttivaatimuksen 20 tai 21 mukainen puhelinlaite, tunnettu siitä, että se käsittää välineet näyttösignaalin (110, 111) tuottamiseksi.

23. Jonkin patenttivaatimuksen 16-22 mukainen puhelinlaite, tunnettu siitä, että 5 se käsittää välineet (112) puhelinnumeron tallentamiseksi automaattisesti mainittuihin muistivälineisiin (102), kun mainitulla puhelinlaitteella on puhelinyhteys kyseisen puhelinnumeron identifioimaan puhelinlaitteeseen.

24. Jonkin patenttivaatimuksen 16 - 23 mukainen puhelinlaite, tunnettu siitä, että 10 se käsittää välineet (112) puhelinnumeron tallentamiseksi mainittuihin muistivälineisiin (102) ilman, että mainitulla puhelinlaitteella soitetaan kyseiseen numeroon.