04.07.26:

Dette nettstedet er under utarbeidelse og vil endres fortløpende. Derfor vil det til tider være noe rot, innhold som mangler og noen linker som ikke fungerer som de skal

Bakgrunn

øyestyring.no

Bakgrunn

English

Om prosjektet

øyestyring.no er et ideelt, ikke-kommersielt prosjekt som drives av Eyvind Bogstrand, med støtte fra kunstig intelligens (KI) i utviklingsarbeidet. Gjennom arbeidet med prosjektet har det blitt brukt flere KI-modeller, blant annet DeepSeek, Gemini, Kimi, ChatGPT og Claude, både til programmering, språkmodellering og utforming av innhold. Samarbeid med flere kompetente utviklere er under oppfølging, og bidragsytere vil bli presentert på disse sidene etter hvert som avtaler er på plass.

Målet med prosjektet er tredelt, og siden her beskriver bakgrunnen for hvert av de tre hovedsporene: utvikling av en øyestyrt staveapp for mobile enheter, appene som ligger fritt tilgjengelig på nettstedet, og øyestyring.no som informasjons- og opplæringssted.

1. Nettstedet øyestyring.no

Nettstedet er prosjektets samlende ramme. Her formidles all informasjon om prosjektet: bakgrunn, status, dokumentasjon og de appene som er utviklet underveis. Alt innhold er gratis og fritt tilgjengelig, uten reklame og uten innlogging. Ambisjonen er at nettstedet skal fungere som en ressurs for både brukere, pårørende, fagpersoner og andre som er interessert i øyepeking som kommunikasjonsmetode.

2. Staveappen for mobile enheter

Hovedsporet i prosjektet er utvikling av en øyestyrt staveapp for mobiltelefoner og nettbrett. Appen styres med øynene via enhetens frontkamera og leser opp det som skrives med innebygd talesyntese (TTS) på norsk.

Bakgrunnen for prosjektet ligger i en dokumentert utfordring: For mennesker som ikke kan bruke hendene, er tekstinnmatning svært tidkrevende. Behovet for alternative og supplerende kommunikasjonsformer (ASK/AAC) er stort. Verdens helseorganisasjon og UNICEF anslår at mer enn 2,5 milliarder mennesker globalt trenger minst ett hjelpemiddel, og at nesten én milliard mennesker i dag ikke har tilgang til hjelpemidlene de trenger. I mange lavinntektsland er tilgangen til hjelpemidler så lav som tre prosent, mot rundt 90 prosent i høyinntektsland (World Health Organization [WHO] & United Nations Children’s Fund [UNICEF], 2022).

Når det gjelder kommunikasjonshjelpemidler spesifikt, finnes det store anslag på antall mennesker som kan ha nytte av ASK: Internasjonale oversikter basert på Beukelman og Light (2020) opererer med i underkant av 100 millioner mennesker globalt. Felles for disse tallene er at behovet er stort, mens tilgangen til dedikert og kostbar kommunikasjonsteknologi fortsatt er begrenset, særlig utenfor de rikeste landene.

En øyestyrt staveapp på en vanlig mobiltelefon eller et nettbrett krever ingen spesialutstyr utover enheten folk flest allerede eier. Det er dette som er prosjektets premiss: Dersom appen kan gjøres god nok, kan den senke terskelen for øyepeking som kommunikasjonsform betydelig.

Den tekniske løsningen er utviklet med rask øyepeking i tankene. Appen er bygget med rammeverket Flutter og kjører i dag på Android og i nettleser; utgave for iPhone krever tilgang til en Mac for bygging. Et sentralt designvalg er to-trinns utvelgelse av bokstaver: Brukeren velger først blant fem bokstavfelt, deretter blant de fem bokstavene i valgt felt. Dette gir 25 bokstaver i to blikk, og med seks faste kontrollknapper og fem hurtigbokstaver reduseres antall blikk som kreves for å skrive vanlige norske ord. Bokstavene A, G, M, T og Å velges i tillegg ved hjelp av langt trykk (long press – å holde blikket) på grunn av sin plassering i feltet. Hvis ikke måtte blikket til brukeren falle to ganger på samme sted etter hverandre. En språkmodell med rundt 9000 norske ord, statistisk prediksjon av neste bokstav og automatisk fullføring av ord skal bidra til å øke skrivehastigheten ytterligere. Målet på sikt er at en trent bruker skal kunne nærme seg 60–80 prosent av normal talehastighet.

Prosjektet har også en praktisk dimensjon knyttet til tilgjengelighet: Fordi løsningen er bygget på vanlig forbrukerelektronikk og åpen kode, kan den i prinsippet brukes og videreutvikles hvor som helst, også i land hvor spesialisert utstyr er utilgjengelig.

3. Appene på nettstedet

«Stavetavla»

Dette er en tidlig iterasjon av selve hovedsporet i prosjektet, altså en app for ASK-brukere. Denne er et HTML-script som kjører på nettsiden. Man kan bruke sin øyestyrte enhet for å teste denne, eller bruke den for å skrive inn tekst og lese opp høyt hva man ønsker å si – også i plenumssituasjoner (for eksempel møter, forelesninger og alle andre sammenhenger). Den har også innebygd knapp for å kopiere tekst, slik at denne kan limes inn i andre applikasjoner.

«Opplæringsapp»

Denne og «Litt mindre teit app» er i hovedsak den samme appen. Imidlertid har jeg i sistnevnte app lagt til bildet av den analoge tavla for å gjøre det lettere for nybegynnere å koble appen til prinsippet for bruk av tavla. Knappene blinker, og setninger og ord velges fra et lite utvalg.

«To av appene i prosjektet»

Mirroreyes og Partnermirroreyes – prototyper.

Her vises prinsippene og sammenhengen mellom siden som brukeren av tavla ser, og siden som kommunikasjonspartneren ser. Disse tidlige versjonene har ingen prediktivitet innebygget. Vi ser at både plasseringen av bokstavene og plasseringen av feltene er speilvendt.

«Litt mindre teit app»

Som beskrevet over er denne lik «Opplæringsapp» i prinsipp. Den åpnes i tillegg i fullskjerm og avsluttes med tilbaketast eller ESC.

4. øyestyring.no som opplæringssted

Det tredje hovedsporet er å gjøre nettstedet til et opplæringssted for bruk av øyepeketavler – både de analoge, papirbaserte tavlene og de digitale løsningene. Her finnes øvelser, veiledning og informasjon rettet mot brukere, pårørende og fagpersoner. Målgruppen er alle som ønsker å lære seg øyepeking som kommunikasjonsmetode, enten man bruker en utskrift av en papirtavle, en nettbrett-app eller den pågående staveappen for mobil.

Som en del av dette sporet lenkes det også til nasjonale fagressurser, blant annet Statpeds veiledningsmateriell om vurdering av øyestyring til kommunikasjon.

Test-sjekkliste for Stavetavla

Takk for at du tester! Kryss av det som passer – avkryssingen settes automatisk inn i tilbakemeldingsfeltet nedenfor, hvor du kan skrive fritt i tillegg. Det er ingen fasit – alle observasjoner er nyttige.

Hva tester du med?

1. Komme i gang

2. Staving

3. Forslag mens du skriver

4. «✨ Fullfør setningen» (KI-forslag)

5. Les opp og kopier

6. Presisjon og øyestyring (kun hvis du bruker øyestyring)

7. Skjerm og layout

8. Til slutt

Skriv gjerne fritt i meldingsfeltet nedenfor: Hva fungerte best? Hva fungerte dårligst? Én ting du ville endret først?

Tilbakemelding

Tester du appene eller har du innspill til prosjektet? Skriv gjerne en kort tilbakemelding – den sendes direkte til prosjektet.

Referanser

  • Beukelman, D. R., & Light, J. C. (2020). Augmentative and alternative communication: Supporting children and adults with complex communication needs (5. utg.). Paul H. Brookes.
  • World Health Organization, & United Nations Children’s Fund. (2022). Global report on assistive technology. World Health Organization. https://www.who.int/publications/i/item/9789240049451