FI114601B - Menetelmä ja järjestelmä kuvan käsittelemiseksi, laite sekä kuvatallenne - Google Patents

Description

114601

Menetelmä ja järjestelmä kuvan käsittelemiseksi, laite sekä kuvatallenne 5 Nyt esillä oleva keksintö kohdistuu menetelmään kuvan käsittelemiseksi, jossa kuvainformaatio tallennetaan digitaalisessa muodossa kuvatallenteeksi, ja kuvatallenteeseen muodostetaan ainakin otsikko-osa, kuvainformaatio-osa sekä lisäinformaatio-osa. Keksintö kohdistuu myös kuvan käsittelyjärjestelmään, joka käsittää välineet kuvan tallen-10 tamiseksi digitaalisessa muodossa kuvatallenteena, joka käsittää ainakin otsikko-osan, kuvainformaatio-osan sekä lisäinformaatio-osan, ja välineet kuvatallenteen käsittelemiseksi. Keksintö kohdistuu vielä laitteeseen, jossa on välineet digitaalisen kuvan käsittelemiseksi ja tak lentämiseksi kuvatallenteena, joka käsittää ainakin otsikko-osan, 15 kuvainformaatio-osan sekä lisäinformaatio-osan, ja välineet kuvatallenteen käsittelemiseksi. Keksintö kohdistuu vielä kuvatallenteeseen, jossa kuvainformaatio on tallennettu digitaalisessa muodossa, ja kuvatallenteeseen on muodostettu ainakin otsikko-osa, kuvainformaatio-osa sekä lisäinformaatio-osa.

20

Digitaalisissa kameroissa, videokameroissa, skannereissa, kuvatallenteissa ja muissa laitteissa, joissa käsitellään kuvia sähköisessä muodossa, optinen kuva muunnetaan sähköiseen muotoon kuva-anturilla, kuten CCD-anturilla (charge coupled device) tai CMOS-anturilla. Täl· , 25 lainen kuva-anturi koostuu useista valoherkistä kuvaelementeistä, jotka : ·' on järjestetty edullisesti matriisi muotoon. Kuva-anturin kuvaelementtien •\ määrä vaikuttaa muodostettavan kuvan tarkkuuteen (resoluutioon).

Kuhunkin kuvaelementtiin muodostuu siihen kohdistuneen valon : määrään verrannollinen varaus tai muu sähköinen suure, joka voidaan . 30 mitata. Valotuksen päätyttyä esim. mekaanisella sulkimella estetään valon pääsy kuva-anturiin. Suljintoiminto voidaan toteuttaa myös sähköisesti lukemalla kuva-anturi riittävän nopeasti, tai käyttämällä sulki-mena esim. nestekidenäyttöä tai muuta levyä, jonka läpinäkyvyyttä voidaan ohjata sähköi sesti.

; 35 2 114601

Kuva-anturin muodostaman analogisen signaalin muuntaminen digitaaliseksi voidaan suorittaa analogia/digitaalimuuntimella. Analo-gia/digitaalimuunnoksen muunnostarkkuus on tyypillisesti 8 bittiä, jolloin saadaan 256 valovoimakkuustasoa kustakin kuvaelementistä. Ih-5 missilmän ominaisuudet huomioonottaen tämä määrä yleensä riittää tarvittavan kuvanlaadun aikaansaamiseksi. Analogia/digitaalimuunti-melta siirretään tämä muunnostulos rinnakkaismuodossa jatkokäsittely-vaiheisiin, kuten tallennettavaksi kuvamuistiin tai videonauhalle.

10 Kuvien tallentamiseen digitaalisessa muodossa on kehitetty useita tal-lenneformaatteja. Nämä käsittävät tavallisesti otsikko-osan sekä kuva-informaatio-osan. Otsikko-osassa on tavallisesti tietoa kuvan tallennusformaatista, kuvalle mahdollisesti suoritetusta tiivistyksestä, resoluutiosta jne. Eräs tunnettu kuvien tallennusstandardi on EXIF (Ex-15 changeable Image File Format), jota mm. useat digitaalikameroiden valmistajat soveltavat digitaalikameroissaan. Tämän standardin mukaisen kuvatallenteen otsikko-osaan tallennetaan mm. kuvan kokoon, resoluutioon, kuvanottoajankohtaan, ja standardiversioon liittyvää tietoa. Kompressoiduissa kuvissa otsikko-osaan tallennetaan tavallisesti vielä 20 mm. kompressoinnin purkamisessa tarvittava informaatio, kuten de-·: kvantisointitaulukko ja dekompressointitaulukko.

.···. Monissa kameroissa on mahdollista määrittää kuvaan tallennettava * » .’t lisäinformaatio, kuten kuvanottoajankohta (päiväys ja mahdollisesti 25 myös kellonaika). Lisäksi käyttäjä voi joissakin kameroissa määrittää ·' ·* vapaamuotoisen tekstin, joka tallennetaan kuvaan. Tällöin kuvia jäl- keenpäin katsottaessa tämä lisäinformaatio on nähtävissä muun kuva-informaation yhteydessä. Tässä järjestelyssä on epäkohtana mm. se, I*·. että lisäinformaatiota ei saa kuvassa näkymättömäksi, vaan se on aina ,··, 30 esillä. Jos käyttäjä haluaa kohteesta kuvan, jossa lisäinformaatiota ei ole näkyvissä, tulisi käyttäjän tällöin ottaa kuva ilman lisäinformaatiota •J.·’ sekä toinen kuva, jossa lisäinformaatio on mukana. Tämä on hankalaa ja kuluttaa tarpeettomasti kameran kivamuistia. Lisäksi samasta koh-’ , teestä peräkkäin otettavat kuvat eivät kuitenkaan välttämättä ole täysin 35 identtisiä. Esimerkiksi liikkuvan tai muulla tavoin muuttuvan kohteen kuvaamiseen tällainen järjestely ei sovellu. Lisäksi käyttäjä saattaa 114601 3 haluta myös sellaisia kuvia, joissa on erilainen lisäinformaatio. Esimerkiksi yhdessä kuvassa esitetään päiväys, toisessa kuvassa esitetään käyttäjän määrittämä teksti, ja kolmannessa kuvassa esitetään kaikki lisäinformaatio. Tämä edellyttää tunnetun tekniikan mukaisia ratkaisuja 5 käytettäessä sitä, että käyttäjä ottaa useita kuvia ja erikseen valitsee kuhunkin kuvaan liitettävän lisäinformaation, mikä hidastaa kuvaamista, kuluttaa kameran muistikapasiteettia ja aiheuttaa lisävaivaa kuvaajalle. Halutun lisäinformaation lisäämiseksi jonkin kuvaformaatin mukaiseen kuvaan voidaan käyttää myös kuvankäsittelyohjelmaa.

10 Myös tässä tapauksessa käyttäjän täytyy käsitellä useita kuvatiedostoja. Mikäli standardeja kuvaformaatteja ei käytetä, on mahdollista käyttää sovelluskohtaisia tiedostomuotoja, jolloin yhden tiedoston käsittely saattaa riittää. Tällaisessa tilanteessa on kuitenkin käytettävä juuri kyseisen sovelluksen tiedostomuotoa. Eräinä esimerkkeinä tällai-15 sista sovelluksista mainittakoon Photoshop® (Adobe Systems Inc. -yhtiön tavaramerkki) ja Powerpoint® (Microsoft Inc -yhtiön tavaramerkki).

Nyt esillä olevan keksinnön eräänä tarkoituksena on aikaansaada pa-20 rannettu kuvan käsittelymenetelmä, jossa kuvan yhteyteen liitetty lisäinformaatio voidaan esityshetkellä valita näkyväksi tai näkymättömäksi.

: ·' Lisäksi jos lisäinformaatio sisältää useita osia, voidaan näistä valita se *: tai ne osat, jotka kulloinkin halutaan esittää kuvassa. Keksintö perustuu siihen ajatukseen, että tallennetaan lisäinformaatio kuvasta erillisenä, ; ·. · * 25 jolloin kuvan esitystilanteessa on valittavissa se, esitetäänkö lisäinfor- * · \.! maatio tai jokin osa siitä kuvassa vai ei. Täsmällisemmin ilmaistuna nyt "* esillä olevan keksinnön mukaiselle menetelmälle on pääasiassa tun nusomaista se, että tallennetaan ainakin yksi lisäinformaatiota sisältävä ' * » ,·' määritystietue kuvatallenteen yhteyteen, jolloin kuvainformaation ; : 30 käsittelyn yhteydessä valitaan, esitetäänkö mainittu ainakin yksi lisäin formaatio kuvan esittämisen yhteydessä. Nyt esillä olevan keksinnön 1 * · mukaiselle järjestelmälle on pääasiassa tunnusomaista se, että jäijes-telmä käsittää välineet ainakin yhden lisäinformaatiota sisältävän määritystietueen tallentamiseksi kuvatallenteen yhteyteen, ja valintavä-35 lineet tallennetun ainakin yhden lisäinformaation valitsemiseksi tarvitta- essa kuvan esittämisen yhteydessä esitettäväksi. Nyt esillä olevan 1 | 4 114601 keksinnön mukaiselle laitteelle on pääasiassa tunnusomaista se, että laite käsittää välineet ainakin yhden lisäinformaatiota sisältävän määri-tystietueen tallentamiseksi kuvatallenteen yhteyteen, ja va lintavälineet tallennetun ainakin yhden lisäinformaation valitsemiseksi tarvittaessa 5 kuvan esittämisen yhteydessä esitettäväksi. Nyt esillä olevan keksinnön mukaiselle kuvatallenteelle on pääasiassa tunnusomaista se, että kuvatallenteeseen on tallennettu ainakin yksi lisäinformaatiota sisältävä määritystietue, jolloin kuvainformaation käsittelyn yhteydessä on järjestetty valittavaksi, esitetäänkö mainittu ainakin yksi lisäinformaatio 10 kuvan esittämisen yhteydessä.

Nyt esillä olevalla keksinnöllä saavutetaan merkittäviä etuja tunnetun tekniikan mukaisiin ratkaisuihin verrattuna. Keksinnön mukaisella menetelmällä voidaan kuvaan tallentaa lisäinformaatiota, joka voidaan 15 esittää tai jättää esittämättä kuvan esittämisen yhteydessä. Tällöin käyttäjän ei tarvitse ottaa samasta kohteista useampia kuvia vain sen vuoksi, että käyttäjä voisi varautua esittämään kuvan joko lisäinformaation kanssa tai ilman sitä. Tällöin kuvien ottaminen on vaivattomampaa ja nopeampaa ja toisaalta käyttäjän ei tarvitse muistaa ottaa 20 sellaisia kuvia, joissa lisäinformaatiota ei ole. Keksinnön mukainen rat-kaisu on käyttökelpoinen myös liikkuvia tai muulla tavoin muuttuvia F: kohteita kuvattaessa ja kuvia esitettäessä voidaan tarpeen mukaan va lita se, esitetäänkö kuviin tallennettua lisäinformaatiota vai ei. Keksin-'*e non mukaisen menetelmän etuna on vielä mm. se, että menetelmän 25 mukaiset kuvat ovat yhteensopivia tunnetun tekniikan mukaisiin kuviin : ·' siten, että laitteella, jossa ei ole keksinnön mukaista lisäinformaation käsittelyominaisuutta, voidaan kuitenkin katsoa kuvia siinä muodossa kun ne on tallennettu, vaikka lisäinformaatiota ei voida käsitellä (esim.

: lisätä tai poistaa lisäinformaatiota).

30

Keksintöä selostetaan seuraavassa tarkemmin viitaten samalla oheisiin piirustuksiin, joissa ‘ , kuva 1 esittää keksinnön erään edullisen suoritusmuodon mukaista 35 laitetta pelkistettynä lohkokaaviona, 5 114601 kuva 2a esittää keksinnön erään edullisen suoritusmuodon mukaisen kuvatallenteen rakennetta pelkistetysti, kuva 2b esittää keksinnön erään edullisen suoritusmuodon mukai-5 sen erään toisen kuvatallenteen rakennetta pelkistetysti, kuvat 3a ja 3b esittävät erästä esimerkkiä kuvasta, jossa keksintöä sovelletaan, 10 kuvat 4a ja 4b esittävät erästä toista esimerkkiä kuvasta, jossa keksintöä sovelletaan, ja kuva 5 esittää vielä erästä esimerkkiä kuvasta, jossa keksintöä sovelletaan.

15

Kuvassa 1 on esitetty keksinnön erään edullisen suoritusmuodon mukainen laite 1. Laite 1 on esimerkiksi kamera tai langaton viestintälaite, mutta on selvää, että keksintöä ei ole rajoitettu ainoastaan tällaisiin laitteisiin. Laite 1 käsittää kuvan muodostusvälineet 2, kuten CCD-kerv 20 non tai CMOS-kennon. Kuvan muodostusvälineissä 2 on edullisesti matriisimuotoon järjestettyjä kuvaelementtejä (ei esitetty), joissa muo- * t : dostetaan edullisesti kuvaelementtiin kohdistuvan valon voimakkuuteen verrannollinen sähköinen tieto, kuten varaus. Nämä sähköiset tiedot * luetaan kuvaelementeistä ja muunnetaan digitaaliseen muotoon analo 25 gia/digitaalimuuntimella 3. Kuvan muodostusvälineet 2 toimivat siis j. valosähköisenä muuntimena. Digitaalinen kuvainformaatio tallennetaan * ·’ muistiin 4 jatkokäsittelyä varten. Värillisten kuvien ottamista varten ku van muodostusvälineet 2 käsittävät tavallisesti kolme kuvaelementtiä j ' jokaista muodostettavaa kuvapistettä (pikseliä) kohden. Tällöin kullakin : 30 näistä kolmesta kuvaelementistä muodostetaan yhden värin informaa tio. Nämä värit ovat tavallisesti punainen, vihreä ja sininen (RGB, Red-Green-Blue). Kukin kuvapiste koostuu siis kolmesta väri-informaatio : : osasta.

< » ; 35 Kuvan 1 mukaisessa laitteessa 1 on myös ohjauslohko 5 laitteen 1 toi mintojen ohjaamiseksi. Ohjauslohko 5 käsittää edullisesti ainakin suo 6 114601 rittimen 5.1 (CPU, Central Processing Unit) ja mahdollisesti myös digitaalisen signaalinkäsittely-yksikön 5.2 (OSP, Digital Signal Processor). Laitteessa 1 on myös laitteen käyttämisessä tarvittavat syöttövälineet 6, kuten käyttönäppäimet tai näppäimistö. Laite 1 voi käsittää myös 5 näytön 7 informaation kuten otetun kuvan tai etsimen näkymän esittämiseksi käyttäjälle.

Joissakin sovelluksissa laite 1 käsittää tiedonsiirtovälineet 8 tietojen siirtämiseksi laitteen 1 ja jonkin toisen laitteen (ei esitetty) välillä. Tie-10 donsiirtovälineet 8 voivat käsittää esim. lähitiedonsiirtovälineet 8.1 lyhyillä etäisyyksillä tapahtuvaa tiedonsiirtoa varten ja etätiedonsiirtoväli-neet 8.2, kuten matkaviestinvälineet pidempiä tiedonsiirtoetäisyyksiä varten. Lähitiedonsiirtovälineiden 8.1 avulla voidaan esimerkiksi kuvia siirtää laitteesta 1 toiseen lähellä olevaan laitteeseen, kuten tietoko-15 neeseen.

Laitteessa 1 voi vielä olla liitäntävälineet 9, johon voidaan liittää esimerkiksi muistikortti 10 kuvien tallentamista varten. Tällöin laitteella 1 otettavia kuvia voidaan tallentaa laitteen 1 sisäiseen muistiin 4 ja/tai 20 muistikorttiin 10.

Lisäksi laite 1 käsittää edullisesti reaaliaikakellon 11, jolla ylläpidetään : : aikatietoa sekä päivämäärätietoa käytettäväksi kuvien yhteydessä li- : säinformaationa jäljempänä tässä selityksessä esitettävällä tavalla. Ku- • 25 van 1 mukaisessa laitteessa 1 on vielä audiovälineet 13.

• I · I * l • | : Seuraavassa selostetaan keksinnön erään edullisen suoritusmuodon • ·' mukaisen menetelmän toimintaa kuvan 1 mukaisessa laitteessa 1. Ku van ottamiseksi käyttäjä suuntaa objektiivin 12 kuvattavaan kohtee-j 30 seen. Laite 1 voi olla varustettu tavanomaisella optisella etsimellä, tai *: etsimenä voidaan käyttää kuvan muodostusvälineitä 2. Mikäli laitteessa \ 1 käytetään etsimenä kuvan muodostusvälineiden 2 muodostamaa in- formaatiota, välitetään kuvainformaatio näytöllä 7 esitettäväksi. Tällöin näytöllä 7 esitettävää kuvaa päivitetään väliajoin. Siinä vaiheessa kun ; . : 35 käyttäjä haluaa ottaa kuvan, painaa hän laukaisunäppäintä 6.1. Tällöin ,,,.: ohjauslohkossa 5 tunnistetaan näppäimen painallus ja suoritetaan ku- * · 7 114601 van ottamisen edellyttämät toimenpiteet Ohjauslohko 5 lähettää kuvan muodostusvälineille 2 komennon kuvan ottamiseksi. Tällöin kuvan muodostusvälineissä 2 suoritetaan kuvaelementtien varausten siirtäminen esimerkiksi siirtorekistereihin riveittäin, sarakkeittain tai kuvaele-5 mentti kerrallaan. Se, miten varausten siirtäminen käytännössä suoritetaan, riippuu mm. siitä, millä tekniikalla kuvan muunnosvälineet on toteutettu. Tämä on alan asiantuntijan tuntemaa tekniikkaa, joten sen tarkempi käsittely tässä yhteydessä ei ole tarpeen.

10 Kunkin kuvaelementin muodostama sähköinen tieto muunnetaan ana-logia/digitaalimuuntimessa 3 digitaaliseksi arvoksi ja tallennetaan muistiin 4. Muistiin 4 on sopivimmin varattu muistialue, jossa on yksi tallennuspaikka kutakin kuvaelementtiä varten, jolloin muunnettu aro tallennetaan sille varattuun kohtaan muistissa. On myös mahdollista, 15 että laite 1 käsittää useampia analogia/digitaalimuuntimia 3, jolloin olennaisesti samanaikaisesti voidaan suorittaa useampi muunnoksia. Esimerkiksi kolmella muuntimella saadaan suoritettua yhden pikselin kaikkien värikomponenttien muunnokset, jotka tallennetaan ao. pikselin eri värikomponenteille tarkoitettuihin muistipaikkoihin.

20 *: Sen jälkeen kun koko kuva-alueen kuvaelementtien sähköiset varauk set on muunnettu digitaalisiksi ja tallennettu, voidaan suorittaa kuva-,· ·. tallenteen muodostaminen. Tämä suoritetaan edullisesti siten, että . muodostetaan tiedosto, jonka rakenne on pääosin jonkin tietyn mallin * · : 25 mukainen. Kuvassa 2a on esitetty keksinnön erään edullisen suoritus- : .*' muodon mukaisen kuvatallenteen 200 rakennetta pelkistetysti. Se kä- : sittää otsikko-osan 201, kuvainformaatio-osan 202 sekä lisäinformaa tio-osan 203. Lisäinformaatio-osa on looginen elementti, joka on tun-; . nettu eri kuvatallennemuodoissa, Lisäinformaatio-osa 203 voi käsittää

I I

; 30 esim. EXIF kenttiä. Lisäinformaatio-osaan 203 voidaan tallentaa • » *·; ·’ kuvaan liittyvää tietoa, kuten päivämäärä ja kellonaika, kuvan tarkkuus, : : tieto siitä, minkä formaatin mukainen kuva on (esim. RGB, YUV), onko : ’ ; kyseessä värikuva vai mustavalkoinen kuva, kuva informaation pakka- ’· ukseen liittyvää tietoa, jne. Kuvainformaatio-osaan 202 tallennetaan : ’ : 35 kuvaelementeistä muodostetut digitoidut arvot joko sellaisinaan tai jollakin pakkausmenetelmällä tiivistetyssä muodossa. Nyt esillä olevan 8 114601 keksinnön mukaisessa järjestelmässä tallennetaan kuvien yhteyteen myös lisäinformaatiota edullisesti lisäinformaatio-osaan 203 muodostettuihin määritystietueisiin 204. Käyttäjä voi tällöin valita, esitetäänkö tämä lisäinformaatio kuvassa vai ei.

5

Kuvan 2a kuvatallenteen esimerkissä on lisäinformaatio-osassa määri-tystietueet 204 kutakin kuvatallenteeseen määritettyä lisäinformaatiota varten. Nämä määritystietueet 204 käsittävät ainakin aluemäärityksen 205, johon on tallennettu tieto lisäinformaation esittämisessä käytettä-10 västä alueesta kuvassa. Alue 205 on edullisesti suorakaide, jolloin aluemääritys ilmaisee esim. aluetta rajoittavien kulmapisteiden koordinaatit, tai jonkin tietyn kulman koordinaatit (esim. vasen yläkulma) sekä alueen leveyden ja pituuden. Aluemäärityksen lisäksi kukin mää-ritystietue 204 käsittää ainakin ensimmäisen lisäinformaatiokentän 206, 15 johon tallennetaan alueen kuvainformaatio tilanteessa, jossa lisäinformaatiota ei esitetä (eli lisäinformaatio ei ole aktivoituna). Lisäksi määri-tystietue 204 käsittää toisen lisäinformaatiokentän 207, joka sisältää tiedon esitettävästä lisäinformaatiosta (eli lisäinformaatio on aktivoituna). Tämä voi olla jo valmiiksi pikselimuotoista (bitmap) tietoa, jolloin 20 toisen lisäinformaatiokentän 207 sisältö voidaan suoraan kopioida ·: aluemäärityksen mukaiseen kohtaan kuvaa tilanteessa, jossa kyseinen *. lisäinformaatio esitetään. Toisen lisäinformaatiokentän 207 sisältö voi » · olla myös tekstimuotoista tai se voi viitata johonkin kuvatallenteen lisä- • * .* informaatioon, esimerkiksi kuvatallenteen tallennus päivään ja/tai • ·· · : 25 kellonaikaan. Vielä eräs mahdollisuus on se, että toisen lisäinformaa- : .· tiokentän 207 määritysten mukainen informaatio esitetään ensimmäi- sen lisäinformaatiokentän 206 päällä. Tällöin ensimmäinen lisäinfor-maatiokenttä määrittää eräänlaisen taustakuvan, jonka päälle toisen : * ·. lisäinformaatiokentän 207 informaatio sijoitetaan.

30 »

Edellä esitetyt ensimmäinen 206 ja toinen lisäinformaatiokenttä 207 määrittävät eräänlaisen kaksitilaisen lisäinformaation esitystavan, jol· loin näytöllä 7 kuvatallenteita esittävä sovellusohjelma valitsee esitettä- • . väksi joko ensimmäisen lisäinformaatiokentän 206 tai toisen lisäinfor- * * 35 maatiokentän 207 sen mukaan, esitetäänkö ao. lisäinformaatio vai ei.

I · S · » · 9 114601

Seuraavassa kuvataan keksinnön erään edullisen suoritusmuodon mukaisessa menetelmässä sovellettavaa lisäinformaation muodostamista kuvien 3a ja 3b esimerkissä. Kuvassa 3a on esitetty eräs laitteella 1 otettu kuva 301. Käyttäjä voi määrittää vapaamuotoista informaatiota 5 302 liitettäväksi kuvaan. Tämä vapaamuotoinen informaatio 302 on esimerkiksi tekstiä. Käyttäjä voi kirjoittaa tämän vapaamuotoisen informaation 302 esimerkiksi syöttövälineillä 6, jolloin teksti tallennetaan toiseen lisäinformaatiokenttään 207. Vapaamuotoisen informaation esityspaikka on kulloisestakin sovelluksesta riippuen joko kiinteä tai 10 esityspaikka voidaan valita joko vapaasti kuvan alueelta tai valitsemalla jokin vaihtoehtoisista esityspaikoista. Kuten jo edellä on todettu, tämä paikka määritetään edullisesti alueena, kuten suorakaiteen muotoisena osana, jonka rajaamalla alueella lisäinformaatio haluttaessa esitetään.

Tätä aluetta on kuvassa 3a merkitty katkoviivoin 304. Kuvassa 3a on 15 esitetty myös toinen lisäinformaatio 303, joka tässä esimerkissä on päiväys. Myös tämän toisen lisäinformaation 303 paikka voi olla kiinteä tai käyttäjän valittavissa. Laitteessa 1 tallennetaan kuvatallenteen lisäinformaatio-osaan 203 määritystietue, jossa on lisäinformaatio sekä tieto lisäinformaation esityspaikasta kuvassa. Kun tällainen lisäinfor-20 maatio määritetään, tallennetaan ensimmäiseen lisäinformaatiokent-tään 206 myös ao. lisäinformaation aluemäärityksen sisällä oleva osa kuvainformaatiota. Käytännössä tämä suoritetaan siten, että kopioidaan kuvainformaatio alueen 304 rajaamasta osasta muistia ensim- * ·* mäiseen lisäinformaatiokenttään 206.

I. 25 i’ Siinä vaiheessa kun kuva halutaan esittää laitteessa 1 tai jossakin toi- : * *: sessa laitteessa, toimitaan keksinnön erään edullisen suoritusmuodon mukaisessa menetelmässä seuraavasti. Tutkitaan kuvatallenteen ot-.. . sikko-osaa sen selvittämiseksi, minkä tyyppisestä kuvasta on kyse. Jos 30 kuva on esim. pakattu (kompressoitu), suoritetaan pakkauksen purka-minen, jossa mahdollisimman tarkoin alkuperäistä kuvaa vastaava kuva pyritään palauttamaan pakatun informaation sekä pakkaukseen ,···, mahdollisesti liittyvien taulukoiden avulla. Tämä kuvainformaatio siir- • · retään laitteen 1 muistiin 4 kuvainformaatiota varten varattuun muisti- » 35 alueeseen. Lisäksi selvitetään, onko kuvatallenteessa lisäinformaatio-:·· osassa 203 määritystietue tai -tietueita 204 lisäinformaatiota varten.

10 114601

Mikäli ainakin yksi määritystietue 204 löytyy, tutkitaan sen sisältöä. Lisäksi käyttäjältä voidaan tiedustella, esitetäänkö lisäinformaatio vai ei. Toisaalta tämä esitystieto voi olla tallennettuna myös määritystietu-eeseen 204. Jos määritystietueen 204 sisältämä informaatio esitetään 5 näytöllä 7, selvitetään määritystietueesta 204 mm. lisäinformaation esityspaikka sekä lisäinformaatiokentät 206, 207. Tällöin kopioidaan esityspaikkaa vastaavaan kohtaan laitteen 1 muistia 4 joko ensimmäisessä 206 tai toisessa lisäinformaatiokentässä oleva kuvainformaatio, eli aluemäärityksen 205 mukainen osa alkuperäistä kuvaa. Lisäksi ao.

10 kohtaan kopioidaan toisessa lisäinformaatiokentässä 207 oleva informaatio, eli vapaamuotoinen informaatio, päiväys, kellonaika tms. Toisaalta tämä lisäinformaatio ei välttämättä ole kuvatallenteessa sellaisenaan kopioitavissa kuvaan, jolloin on tarve suorittaa tarvittava muurv nos, jolla lisäinformaatio saadaan esitettyä ymmärrettävässä muo-15 dossa näytöllä 7. Esimerkiksi jos päiväys on tallennettu ns. ASCII-muodossa, jossa päiväyksen yksi merkki on tallennettuna yhtenä tavuna (8 bittiä), on tämä tieto muunnettava esim. matriisimuotoiseksi pikselimaskiksi, jossa merkin visualisoinnissa tarvittavat pikseli muunnokset huomioidaan. Tällöin pikselimaskin mukaiset kuvapikselit ase-20 tetaan tietyn värisiksi kuvaamaan esitettävää symbolia (esim. numeroa tai kirjainta), jotta ne erottuvat muusta kuvasta. Kuvan 3a esimerkissä on lisäinformaation esittämisessä käytetty mustia pikseleitä, mutta •\ myös muuta väriä voidaan käyttää.

: 25 Jos kuva halutaan esittää ilman lisäinformaatiota, suoritetaan kuvan P ‘ esittäminen normaalisti lukemalla kuvatallenne muistiin ja tekemällä tarvittavat pakkauksen purkamistoimenpiteet ja jos kuva on tallennettu ’ ·’ siten, että lisäinformaatio on näkyvissä, siirtämällä ensimmäisen lisä- informaatiokentän 206 kuvainformaatio aluemäärityksen 205 määritte-j30 lemään kohtaan kuvassa. Kuvassa 3b on kuvan 3a esimerkkikuva 301 ‘' ’; esitettynä ilman lisäinformaatiota 303, 304.

··'·' Jos kuvaa esitettäessä halutaan poistaa näkyvistä (näytöstä 7) yksi tai useampi lisäinformaatio, ei koko kuvaa tarvitse välttämättä lukea uu-35 delleen muistiin, vaan voidaan toimia esim. seuraavasti. Luetaan muis- • · . tiin 4 esitettävänä olevan kuvan kuvatallenteen lisäinformaatio-osasta 11 114601 ensimmäisen lisäinformaatiokentän 206 mukainen kuvainformaatio.

Tämä kuvainformaatio vastaa sisällöltään näytöstä alkuperäistä kuva-informaatiota sillä alueella, jossa poistettava lisäinformaatio on esitetty, eli lisäinformaatio-osan aluemäärityksen sisällä oleva osa kuvasta.

5 Tämän jälkeen esitettävä kuva vastaa alkuperäistä kuvaa poistetun lisäinformaation kohdalta. Kuvassa 3b on esitetty tilanne, jossa molemmat kuvan 3a lisäinformaatiot 302, 303 on poistettu näkyvistä.

Keksinnön mukaisella menetelmällä voidaan toteuttaa monenlaisia 10 vaihtelevan sisältöisiä kuvatallenteita. Eräänä ei-rajoittavana esimerkkinä mainittakoon kuvissa 4a ja 4b esitetty joulukalenterisovellus. Kuvatallenteen kuvainformaatio-osa 202 sisältää Siioin taustakuvan. Tähän taustakuvaan on määritetty avattavia luukkuja edullisesti 24 kappaletta, eli joulukuun 1. päivästä joulukuun 24. päivään. Nämä luukut 15 on toteutettu keksinnön mukaisten lisäinformaatio-osiin 203 liitettyjen määritystietueiden 204 avulla. Tällöin kukin luukku on omana lisäinformaatio-osanaan, joka sisältää ensimmäisen 206 ja toisen lisäinformaatiokentän 207. Ensimmäinen lisäinformaatiokenttä 206 sisältää kuva-informaation, joka vastaa tilannetta, jossa luukku on suljettuna.

20 Ensimmäisen lisäinformaatiokentän 206 sisältö vastaa siis taustakuvan j sisältöä luukun kohdalla. Kuvassa 4a on esitetty tilanne, jossa kaikki luukut ovat suljettuina. Lisäksi ensimmäinen lisäinformaatiokenttä 206 käsittää numeron (1—24) sekä mahdollisesti myös luukun reunaviivan.

Toinen lisäinformaatiokenttä 207 käsittää kuvainformaation, joka on • ·’ 25 tarkoitus esittää, kun kyseinen luukku avataan. Tästä esimerkkinä on * * * kuvassa 4b esitetty luukku nro 15 avattuna. Lisäksi kukin määritys-:' tietue käsittää tiedon, joka ilmaisee, onko luukku suljettu vai avattu.

Luukkujen avaaminen voidaan suorittaa esimerkiksi automaattisesti kalenteritoimintojen avulla, tai käyttäjä voi suorittaa luukkujen avaami-'. : 30 sen syöttövälineillä 6.

Keksintöä voidaan soveltaa myös muunlaisen lisäinformaation yhtey-"'. dessä, josta seuraavassa on mainittu muutama esimerkki kuviin 2b ja 5 liittyen. Kuvissa 2b ja 5 on esitetty kaksi määritystietuetta 204. Nämä ' : 35 määritystietueet 204 käsittävät useampia kuin kaksi lisäinformaatio- kenttää 206, 207. Kolmas lisäinformaatiokenttä 208 sisältää esimer- 12 114601 kiksi puhelinnumeron, sähköpostiosoitteen tai vastaavan sekä tiedon sovelluksesta, joka käynnistetään kun ao. lisäinformaatio aktivoidaan.

Neljäs lisäinformaatiokenttä 209 voi sisältää esim. äänitallenteen, nuotteja, tai tietoa aktivoinnissa suoritettavan jonkin muun toimenpiteen 5 käynnistämiseksi. Eräänä esimerkkinä tällaisesta sovelluksesta mainittakoon kuvassa 5 esitetty tilanne, jossa näytöllä on taustakuva 501 sekä tähän taustakuvaan 501 liitettyä lisäinformaatiota 502, 503. Ensimmäinen lisäinformaatio 502 liittyy esimerkiksi sähköpostin lähettämiseen ja toinen lisäinformaatio liittyy esim. puhepuhelun soittami-10 seen. Tällöin ensimmäisen lisäinformaation 502 määritystietueeseen (ei esitetty) on liitetty aluemääritys sekä neljä lisäinformaatiokenttää, jotka määrittävät mm. seuraavaa: Kohdan, jossa lisäinformaatio esitetään, passiivisen tilan kuvainformaatio (sähköpostia ei ole vastaan-otettu/lähetettävänä), aktiivisen tilan kuvainformaatio (sähköpostia on 15 vastaanotettu tai käyttäjä haluaa lähettää sähköpostia), tieto sähköpostiosoitteesta sekä ääni, joka esitetään sähköpostin vastaanottamisen yhteydessä. Kun käyttäjä havaitsee ensimmäisen lisäinformaation 502 tilanmuutoksen perusteella, että sähköpostia on vastaanotettu, voi käyttäjä lukea sen esimerkiksi osoittamalla tätä lisäinformaatiota 20 502 osoitinlaitteella (ei esitetty) tai vastaavalla sinänsä tunnetulla tavalla. Sähköpostin lähettäminen tiettyyn sähköpostiosoitteeseen : voidaan suorittaa valitsemalla (aktivoimalla) tämä ensimmäinen lisäin- ’ ·* formaatio 502, jolloin laitteessa 1 esitetään ensimmäisen lisäinformaa- : tion määritystietueen toisen lisäinformaatiokentän mukainen kuva sekä 25 käynnistetään sähköpostisovellus sähköpostin kirjoittamista varten.

I· ’ Vastaanottajan osoitteeksi asetetaan edullisesti ensimmäisen lisäin- formaatio-osan 502 neljänteen lisäinformaatiokenttään tallennettu • · * · · ‘ sähköpostiosoite.

• 30 Kuvan 5 esimerkkitilanteen toinen lisäinformaatio 503 liittyy puheluihin, jolloin toisen lisäinformaation 503 määritystietue (ei esitetty) käsittää vastaavasti aluemäärityksen sekä neljä lisäinformaatiokenttää, jotka määrittävät mm. seuraavaa: Kohdan, jossa lisäinformaatio esitetään, passiivisen tilan kuvainformaatio (puhelua ei ole tulossa/soitettavana), 35 aktiivisen tilan kuvainformaatio (puhelu on tulossa tai käyttäjä haluaa iiti. soittaa), tieto puhelinnumerosta sekä ääni, joka esitetään puhelun tul- » · 13 114601 lessa. Tätä toista lisäinformaatiota 503 voidaan vastaavasti käyttää tiettyyn numeroon soitettaessa.

Nyt esillä oleva keksintö soveltuu käytettäväksi erityisesti sellaisten ku-5 vaformaattien yhteydessä, joissa on olennaisesti vakiomuotoinen otsikko-osa ja kuvainformaatio-osa sekä mahdollisuus liittää muuta informaatiota. Tällöin sellaiset laitteet, joissa keksinnön mukaista toimintoa ei ole toteutettuna, voivat silti esittää kuvainformaatio-osan mukaisen kuvan näytöllä ilman lisäinformaatiota. Eräs ei-rajoittava esimerkki täl-10 laisesta kuvaformaatista on JPEG, jota käytetään mm. useissa digitaalikameroissa. JPEG-kuvaformaatti sisältää otsikko-osan sekä kuvainformaatio-osan. Otsikko-osassa on kiinteä osa sekä optionaalinen laajennusosa, jolloin tätä optionaalista laajennusosaa voidaan käyttää keksinnön mukaisten lisäinformaatio-osien tallentamiseen. Kameraso-15 velluksissa optionaalinen laajennusosa käsittää vielä EXIF-määritysten mukaista tietoa, jolla ilmaistaan mm. se, miten JPEG-kuvia tallennetaan kamerassa sekä mahdollista kamerakohtaista lisätietoa.

Keksintöä voidaan soveltaa lukuisissa eri laitteissa ja ohjelmistoissa.

20 Esimerkkeinä mainittakoon kamerat, kamerapuhelimet, kameran ja viestintälaitteen yhdistelmät, kameran ja tietojenkäsittelylaitteen yhdistelmät, valokuva-albumisovellukset, web-selaimet, multimediaviestien v ·* vastaanottamiseen ja/tai lähettämiseen soveltuvat viestintälaitteet, : *tulostimet yms.

25 * > ·

Vaikka edellä keksintöä on esitetty yksittäisten kuvien yhteydessä, keksintöä voidaan soveltaa myös kuvasarjojen, kuten videokuvien '· ·’ yhteydessä. Tällöin kuvainformaatio-osa 202 käsittää useita kuvia (esim. videoesityksen yksittäiset kuvat). Käytännössä näitä kuvia ei 30 välttämättä ole tallennettu yhteen kuvainformaatio-osaan 202, vaan ne on voitu jakaa useampaan kuvainformaatio-osaan 202. Tällaisten I I » •, kuvasarjojen yhteydessä esitettävä lisäinformaatio voi olla myös kuva- sarjan etenemiseen liittyvää tietoa, kuten toistoaika tai kuvan numero I I > i„,; kuvasarjan alusta, jäljellä oleva toistoaika/kuvien lukumäärä jne. Lisä- 35 informaatio voi olla myös esim. musiikkivideoiden yhteydessä esittäjän . nimi, esitettävän kappaleen nimi, laulun sanat esim. karaoke-tyyppi- * » 14 114601 sissä sovelluksissa jne. Tällöin videon katselija voi halutessaan asettaa lisäinformaation (kuten laulun sanat) näkyville tai jättää ne pois näkyvistä.

5 Kuvasarja voidaan myös hankkia esimerkiksi Internet-tietoverkon kautta. Tässäkin tapauksessa kuvasarjaan voi olla liitetty lisäinformaatiota, jonka kuvasarjan katselija voi halutessaan määrittää näkyväksi tai näkymättömäksi.

10 Keksinnön vielä eräässä edullisessa sovelluksessa voidaan lisäinformaation näkyvyyttä rajoittaa esim. siten, että lisäinformaatio on nähtävissä vain maksua vastaan. Tällöin maksun suoritettuaan käyttäjälle annetaan valtuutus, jolla hän saa lisäinformaation näkyviin. Tämä voidaan toteuttaa monella sinänsä tunnetulla tavalla, kuten tunnusluvun 15 avulla. Tällöin vain tunnusluku syöttämällä voidaan lisäinformaatio saada näkyviin. Luonnollisesti keksintö soveltuu myös tilanteisiin, joissa lisäinformaation näkyvistä poistaminen on rajoitettu. Tämä soveltuu erityisesti tilanteisiin, joissa katsojalle tarjotaan esimerkiksi video tutustuttavaksi ilman maksua, mutta katsomisen ajan videokuvan 20 päällä esitetään lisäinformaatiota. Tämän lisäinformaation saa kytket-• tyä pois näkyvistä esim. maksua vastaan. Luonnollisesti edellä esitetyt esimerkit ovat vain ei-rajoittavia, keksinnön käyttökohteita valaisevia esimerkkejä.

> · ;;*t· 25 Nyt esillä olevan keksinnön soveltamisessa tarvittavat toiminnot : voidaan suurelta osin toteuttaa ohjelmallisesti esim. ohjauslohkon 5 ohjelmakoodeina.

On selvää, että nyt esillä olevaa keksintöä ei ole rajoitettu ainoastaan 30 edellä esitettyihin suoritusmuotoihin, vaan sitä voidaan muunnella ; ‘ ‘ oheisten patenttivaatimusten puitteissa.

f · » »

Claims (17)

114601

1. Menetelmä kuvan käsittelemiseksi, jossa kuvainformaatio tallennetaan digitaalisessa muodossa kuvatallenteeksi (200), ja kuvatallentee- 5 seen muodostetaan ainakin otsikko-osa (201), kuvainformaatio-osa(202) sekä lisäinformaatio-osa (203), tunnettu siitä, että tallennetaan ainakin yksi lisäinformaatiota sisältävä määritystietue (204) kuvatallenteen (200) yhteyteen, jolloin kuvainformaation käsittelyn yhteydessä valitaan, esitetäänkö mainittu ainakin yksi lisäinformaatio kuvan 10 esittämisen yhteydessä.

2. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että mainittuun ainakin yhteen määritystietueeseen (204) muodostetaan: aluemääritys (205), joka ilmaisee kohdan kuvassa, jossa 15 määritystietueen (204) mukainen informaatio esitetään, mikäli li säinformaatio on valittu esitettäväksi, ensimmäinen lisäinformaatiokenttä (206), johon tallennetaan aluemäärityksen (205) määrittämän alueen kuvainformaatio tilanteessa, jossa lisäinformaatiota ei esitetä, ja 20 - toinen lisäinformaatiokenttä (207), joka sisältää tiedon esitettä- • västä lisäinformaatiosta. *

3. Patenttivaatimuksen 2 mukainen menetelmä, tunnettu siitä, että , ; tilanteessa, jossa määritystietueen (204) määrittämä lisäinformaatio : 25 esitetään, aluemäärityksen (205) ilmaisemassa kohdassa esitetään i ensimmäisen lisäinformaatiokentän (206) sisältämä kuvainformaatio, ·’, jonka päälle toisen lisäinformaatiokentän (207) määrittämä lisäinfor maatio sijoitetaan.

4. Patenttivaatimuksen 2 mukainen menetelmä, tunnettu siitä, että tilanteessa, jossa määritystietueen (204) määrittämää lisäinformaatiota ei esitetä, aluemäärityksen (205) ilmaisemassa kohdan esitetään . ensimmäisen lisäinformaatiokentän (206) sisältämä kuvainformaatio. ; 35

5. Jonkin patenttivaatimuksen 2—4 mukainen menetelmä, tunnettu : siitä, että ainakin yhden lisäinformaation esittämisen yhteydessä akti- 114601 voidaan sovellus, jolloin mainittu ainakin yksi määritystietue (204) käsittää lisäksi ainakin yhden seuraavista: kolmannen lisäinformaatiokentän (208), joka sisältää aktivoitavaan sovellukseen välitettävää informaatiota, 5. neljännen lisäinformaatiokentän (209), joka sisältää audioinfor maatiota, joka on tarkoitettu toistettavaksi mainitun ainakin yhden lisäinformaation esittämisen yhteydessä.

6. Patenttivaatimuksen 5 mukainen menetelmä, tunnettu siitä, että 10 aktivoitava sovellus on sähköpostisovellus, jolloin mainittu kolmas lisä- informaatiokenttä (208) sisältää sähköpostiosoitteen.

7. Patenttivaatimuksen 5 mukainen menetelmä, tunnettu siitä, että aktivoitava sovellus on puhelusovellus, jolloin mainittu kolmas lisäirv 15 formaatiokenttä (208) sisältää puhelinnumeron.

8. Järjestelmä, joka käsittää välineet (4,10) kuvan tallentamiseksi digitaalisessa muodossa kuvatallenteena (200), joka käsittää ainakin otsikko-osan (201), kuvainformaatio-osan (202) sekä lisäinformaatio- 20 osan (203), ja välineet (5) kuvatallenteen käsittelemiseksi, tunnettu siitä, että järjestelmä käsittää välineet (5, 6) ainakin yhden lisäinfor- ’! maatiota sisältävän määritystietueen (204) tallentamiseksi kuvatallen- . . teen (200) yhteyteen, ja valintavälineet (5, 6) tallennetun ainakin yhden ,· lisäinformaation valitsemiseksi tarvittaessa kuvan esittämisen yhtey- • · ; 25 dessä esitettäväksi. • · I < i

· : ,·’ 9. Patenttivaatimuksen 8 mukainen järjestelmä, tunnettu siitä, että : mainittu ainakin yksi määritystietue (204) käsittää: aluemäärityksen (205), joka ilmaisee kohdan kuvassa, jossa •. ·. 30 määritystietueen (204) mukainen informaatio esitetään, mikäli . i t lisäinformaatio on valittu esitettäväksi, - ensimmäisen lisäinformaatiokentän (206), johon tallennetaan : : aluemäärityksen (205) määrittämän alueen kuvainformaatio '"; tilanteessa, jossa lisäinformaatiota ei esitetä, ja 35. toisen lisäinformaatiokentän (207), joka sisältää tiedon esitettä- : västä lisäinformaatiosta. > 114601

10. Patenttivaatimuksen 9 mukainen järjestelmä, tunnettu siitä, että se käsittää välineet ensimmäisen lisäinformaatiokentän (206) sisältämän kuvainformaation esittämiseksi aluemäärityksen (205) ilmaise- 5 massa kohdassa esitetään, ja toisen lisäinformaatiokentän (207) määrittämän lisäinformaation sijoittamiseksi ensimmäisen lisäinformaatio-kentän (206) sisältämän kuvainformaation päälle.

11. Laite (1), joka käsittää välineet (4, 10) kuvan tallentamiseksi digi-10 taalisessa muodossa kuvatallenteena (200), joka käsittää ainakin otsikko-osan (201), kuvainformaatio-osan (202) sekä lisäinformaatio-osan (203), ja välineet (5) kuvatallenteen käsittelemiseksi, tunnettu siitä, että laite (1) käsittää välineet (5, 6) ainakin yhden lisäinformaatiota sisältävän määritystietueen (204) tallentamiseksi kuvatallerv 15 teen (200) yhteyteen, ja valintavälineet (5, 6) tallennetun ainakin yhden lisäinformaation valitsemiseksi tarvittaessa kuvan esittämisen yhteydessä esitettäväksi.

12. Patenttivaatimuksen 11 mukainen laite (1), tunnettu siitä, että 20 mainittu ainakin yksi määritystietue (204) käsittää: aluemäärityksen (205), joka ilmaisee kohdan kuvassa, jossa määritystietueen (204) mukainen informaatio esitetään, mikäli : : lisäinformaatio on valittu esitettäväksi, ; - ensimmäisen lisäinformaatiokentän (206), johon tallennetaan « » : . 25 aluemäärityksen (205) määrittämän alueen kuvainformaatio * ♦ !! , ’ tilanteessa, jossa lisäinformaatiota ei esitetä, ja \ - toisen lisäinformaatiokentän (207), joka sisältää tiedon esitettä- västä lisäinformaatiosta.

13. Patenttivaatimuksen 12 mukainen laite(1), tunnettu siitä, että se ·. käsittää välineet ensimmäisen lisäinformaatiokentän (206) sisältämän kuvainformaation esittämiseksi aluemäärityksen (205) ilmaisemassa kohdassa esitetään, ja toisen lisäinformaatiokentän (207) määrittämän lisäinformaation sijoittamiseksi ensimmäisen lisäinformaatio-35 kentän (206) sisältämän kuvainformaation päälle. < »» 114601

14. Patenttivaatimuksen 12 tai 13 mukainen laite (1), tunnettu siitä, että se käsittää välineet (5) sovelluksen aktivoimiseksi ainakin yhden lisäinformaation esittämisen yhteydessä, jolloin mainittu ainakin yksi määritystietue (204) käsittää lisäksi ainakin yhden seuraavista: 5. kolmannen lisäinformaatiokentän (208), joka sisältää aktivoita vaan sovellukseen välitettävää informaatiota, neljännen lisäinformaatiokentän (209), joka sisältää audioinformaatiota, joka on tarkoitettu toistettavaksi mainitun ainakin yhden lisäinformaatio-osan (203) esittämisen yhteydessä. 10

15. Kuvatallenne (200), jossa kuvainformaatio on tallennettu digitaalisessa muodossa, ja kuvatallenteeseen (200) on muodostettu ainakin otsikko-osa (201), kuvainformaatio-osa (202) sekä lisäinformaatio-osa (203), tunnettu siitä, että kuvatallenteeseen (200) on tallennettu 15 ainakin yksi lisäinformaatiota sisältävä määritystietue (204), jolloin kuvainformaation käsittelyn yhteydessä on järjestetty valittavaksi, esitetäänkö mainittu ainakin yksi lisäinformaatio kuvan esittämisen yhteydessä.

16. Patenttivaatimuksen 15 mukainen kuvatallenne (200), tunnettu siitä, että kuvainformaatio-osa (202) sisältää yksittäiskuvan.

^ ' * · * · :’ ·* 17. Patenttivaatimuksen 15 mukainen kuvatallenne (200), tunnettu siitä, että kuvainformaatio-osa (202) sisältää kuvasarjan. : 25 • > » · * * m* 114601