ByteNest ENHrvatski Dogovorite besplatan poziv

Studija slučaja 06Komunikacija za djecuHrvatskaU tijeku

AAC aplikacija za komunikaciju

Slikovne kartice koje govore pravilnim hrvatskim, za autističnu djecu.

Komunikacijska knjiga otvorena na stranici Hrana: slikovne kartice za kruh, sir, jaje, juhu, keks i čokoladu, jezičci mapa u bojama sa strane te traka za rečenicu na dnu s tekstom Hoću Keks i gumbom za izgovor
Zaslon Brze rečenice s tri spremljene rečenice (dijete je gladno, želi sok, ide spavati), svaka prikazana svojim slikovnim karticama; srednja je označena zeleno dok se izgovara
Komunikacijska knjiga usred rečenice i spremljena rečenica dok se izgovara.

Aplikacija za autističnu djecu, od početka rađena za hrvatski. Kartice govore unaprijed snimljenim glasom koji poštuje hrvatsku gramatiku ili glasom samih roditelja, uz obiteljske fotografije. Dijete uči uz kartice, dodiruje spremljene rečenice i slaže nove u komunikacijskoj knjizi. Izrađena s logopedom.

Uloga
Dizajn i izrada
Suradnja
S logopedom
Status
U tijeku
Proces
Dosad sedam krugova povratnih informacija

Zadatak

Kartice koje izrađuju ljudi koji poznaju dijete.

AAC je kratica za potpomognutu komunikaciju: slikovne kartice koje dijete dodirne kako bi reklo što želi. Aplikacija dolazi sa stotinama kartica i unaprijed snimljenim glasom koji svaku riječ izgovara u obliku koji hrvatska gramatika traži; taj se glas ponovno snima uz ElevenLabs ili sustav za sintezu govora otvorenog kôda. Roditelji koji to žele snimaju vlastiti glas i dodaju vlastite fotografije. Dizajniramo je i izrađujemo s logopedom, s podacima na uređaju i bez SDK-⁠ova trećih strana.

Karta sustava

Kako se sve uklapa

Arhitektura AAC aplikacije za komunikacijuAplikacija dolazi s glasovnim paketom: stotine slikovnih kartica, svaka riječ snimljena u svakom obliku koji hrvatska gramatika traži, a gramatički modul bira pravi oblik prije nego što se rečenica izgovori u dječjem načinu. Roditelji umjesto toga mogu dodati vlastite fotografije i snimiti vlastiti glas u roditeljskom načinu zaštićenom PIN-om. Sve se sprema u lokalnu SQLite bazu na mobitelu, uz sigurnosnu kopiju i vraćanje iz zip datoteke.01 LJUDI02 RODITELJ03 UREĐAJ04 DIJETE05 LJUDIGlasovni paketstotine kartica,snimljen svaki oblikGramatički modulbira oblik kojirečenica tražiDječji načinkartice, rečenice,komunikacijska knjigaDijetedodiruje kartice,čuje rečenicuRoditeljisvoje fotografije,svoj glasRoditeljski načinzaštićen PIN-ommape, karticeLokalna bazadrift / SQLitebez tuđih SDK-ovaKopija ivraćanjejedna zip arhivamigracije sheme123 Arhitektura AAC aplikacije za komunikacijuAplikacija dolazi s glasovnim paketom: stotine slikovnih kartica, svaka riječ snimljena u svakom obliku koji hrvatska gramatika traži, a gramatički modul bira pravi oblik prije nego što se rečenica izgovori u dječjem načinu. Roditelji umjesto toga mogu dodati vlastite fotografije i snimiti vlastiti glas u roditeljskom načinu zaštićenom PIN-om. Sve se sprema u lokalnu SQLite bazu na mobitelu, uz sigurnosnu kopiju i vraćanje iz zip datoteke.01 LJUDI02 RODITELJ03 UREĐAJ04 DIJETE05 LJUDIGlasovni paketstotine kartica,snimljen svaki oblikGramatički modulbira oblik kojirečenica tražiDječji načinkartice, rečenice,komunikacijska knjigaDijetedodiruje kartice,čuje rečenicuRoditeljisvoje fotografije,svoj glasRoditeljski načinzaštićen PIN-ommape, karticeLokalna bazadrift / SQLitebez tuđih SDK-ovaKopija ivraćanjejedna zip arhivamigracije sheme123
Karta sustava: AAC aplikacija za komunikaciju. Četiri faze pokraj nje opisuju svaki sloj riječima.
  1. 1
    Gotov glas koji govori pravilnim hrvatskimStotine gotovih kartica; svaka se riječ izgovara u obliku koji rečenica traži
  2. 2
    Ili glas i fotografije same obiteljiU dijelu zaštićenom PIN-⁠om roditelji snimaju svoj glas i dodaju vlastite slike
  3. 3
    Sve ostaje na mobiteluBaza SQLite (paket drift), bez SDK-⁠ova trećih strana, a sve stane u jednu zip datoteku
  4. 4
    Tri najteža dijelaMala aplikacija, velika odgovornost

Tri najteža dijela

Mala aplikacija, velika odgovornost

  1. Hrvatska gramatika, kako treba

    Izgovorena rečenica mora biti na pravilnom hrvatskom, a riječi se mijenjaju prema ulozi u rečenici: jabuka postaje jabuku nakon Hoću. Gramatički modul bira pravi oblik za svaku karticu u rečenici, a glasovni paket sadrži snimku svakog oblika, pa aplikacija nikad ne izgovori pogrešan nastavak.

  2. Sigurnosna kopija kojoj roditelji mogu vjerovati

    Snimke roditelja ne smiju nestati kad se mobitel izgubi ili zamijeni. Jedna zip datoteka sadrži kopiju baze napravljenu dok aplikacija radi te svaku fotografiju i glasovnu snimku, a aplikacija je prije vraćanja najprije provjeri.

  3. Raspored koji se nikad ne mijenja

    Kartice moraju ostati ondje gdje ih je dijete naučilo tražiti. Mreža kartica nikad se ne preslaguje, postavke su iza PIN-⁠a, izvan dječjeg dohvata, a automatizirani testovi provjeravaju kontrast prema WCAG-⁠u i ima li font sve potrebne znakove.

Na zaslonu

Za dijete i za roditelje

Komunikacijska knjiga otvorena na stranici Osnovno: kartice za da, ne, još, gotovo, pomoć i hoću na stranici nalik bilježnici, jezičci mapa u bojama sa strane i prazna traka za rečenicu na dnu
Knjiga: stranica po mapi, jezičci za listanje i traka u kojoj se slaže rečenica.
Mapa Osjećaji: šest slikovnih kartica za sretan, tužan, ljut, uplašen, umoran i bolestan
Kartice za učenje: mapa Osjećaji.
Obrazac za novu karticu: dodavanje slike, upis riječi, snimanje glasa ili dodavanje videa, s prekidačima za skrivanje kartice ili označavanje da nije dostupna
Roditelj izrađuje karticu: svoja fotografija, riječ, vlastiti glas.
Roditeljske postavke: paketi od 330 i 560 kartica, sigurnosna kopija i vraćanje svih mapa, kartica i snimki u jednoj datoteci te veličina dječje mreže
Roditeljske postavke: paketi kartica, sigurnosna kopija, veličina mreže.

Tehnologije

  • Flutter
  • Riverpod
  • drift
  • SQLite
  • go_router
  • Accessibility tests

Naša uloga: dizajn i izrada, s logopedom.

Dogovorite besplatan poziv Natrag na sve projekte