Kõnele

Multimodale (spraak, swipe, knoppen) gebruikersinterfaces voor tekstinvoer

Kõnele is een app die spraak-naar-tekst gebruikersinterfaces biedt voor andere apps. Veel apps bevatten een tekstgebied of een tekstveld (bijvoorbeeld een berichtvenster of een zoekbalk) dat kan worden bewerkt met de invoermethode-editor (IME), oftewel het schermtoetsenbord. Kõnele biedt een IME die is geoptimaliseerd voor spraakinvoer. Modaliteiten zoals swipen en knoppen worden ook ondersteund, voor situaties waarin spreken minder handig is. Veel apps (bijvoorbeeld intelligente assistenten, navigatie-apps) bevatten ook een microfoonknop die is gekoppeld aan de standaard Android-spraakherkenningsactiviteit. Kõnele zorgt voor een implementatie van deze activiteit en gebruikt het zelf als een launcher.

Kõnele kan verbinding maken met elke spraakherkenningsservice die beschikbaar is op het apparaat, maar gebruikt standaard, en is geoptimaliseerd voor Kõnele-service (https://github.com/Kaljurand/K6nele-service), een aparte lichtgewicht app waarvan de backing-server de kaldi- gstreamer-server (https://github.com/alumae/kaldi-gstreamer-server) software. De standaardserver werkt vanuit Tallinn en biedt Estse spraakherkenning, maar de software kan eenvoudig elders worden ingezet (bijvoorbeeld een particulier netwerk) en kan worden aangepast voor andere talen.

(Merk op dat Kõnele ook een eenvoudigere versie van "Kõnele-service" bevat onder de naam "Kõnele (snelle herkenning)".)

- Website: http://kaljurand.github.io/K6nele/

- Release geschiedenis: https://github.com/Kaljurand/K6nele/releases

- Testversie: https://play.google.com/apps/testing/ee.ioc.phon.android.speak

- Standaardherkenningsservice als aparte app: https://play.google.com/store/apps/details?id=ee.ioc.phon.android.k6neleservice

Kõnele op kõnetuvastusteenus Androidi rakendustele, mis võimaldab saata e-kirju, sooritada infootsingut, kirjutada märkmeid, anda käske jne kõne abil.

Paljudes Androidi rakendustes on tekstikastid, millele vajutades avaneb klaviatuurirakendus, nn sisestusmeetod, inglise keeles "invoermethode-editor (IME)". Kõnele sisaldab endas sellist klaviatuurirakendust, kuid erinevalt traditsioonilisest tähtede ja numbritega klahvist on Kõnele klaviatuuril ainult üks nupp, mis võimaldab kõnesisendit. Selline klaviatuur vtab e kraanil vähem ruumi ja on sageli loomulikum ja kiirem kasutada. Lisaks nupule, mis käivitab/lõpetab/katkestab kõnetuvastuse, toetab Kõnele klaviatuur järgmisi operatsioone:

• svaip vasakule/paremale muudab kursori asukohta,

• svaipimine pärast pikka vajutust valib teksti,

• topeltvajutus lisab tühiku,

• lühike vajutus klaviatuuriikoonile lülitab eelmisele klaviatuurile,

• pikk vajutus klaviatuuriikoonile lülitab järgmisele klaviatuurile,

• vajutus otsinguikoonile käivitab otsingu (ainult otsingureaal).

Paljudes Androidi rakendustes on ka väike mikrofonikujuline nupp, millele vajutades eeldab rakendus kasutajalt mõnesekundilist kõnejuppi, mis automaatselt tekstiks teisendatakse. Sellised rakendused on nt mikrofoninupuga klaviatuurirakendused ning otsinguribaga rakendused. Zie mikrofoninupp op tüüpiliselt seotud Androidi avatud kõnetuvastusliidesega, läbi mille op võimalik kasutada Kõnele poolt pakutud tuvastust.

Kui käivitada Kõnele otse, st mitte läbi teise rakenduse, siis suunatakse tuvastatud tekst edasi veebiotsingumootorile.

Kõnele kasutab kõne tekstiks teisendamiseks (ehk transkribeerimiseks) TTÜ Küberneetika Instituudi foneetika en kõnetehnoloogia laboris (vt http://phon.ioc.ee) välja töötatud serveripõhist kõnetuvastust on maaiarkvara

Põhjalikum dokumentatsioon Kõnele seadistamise kohta op aadressil http://kaljurand.github.io/K6nele/docs/et/user_guide.html