Naslov
Aplikacija za praćenje gesta pomoću duboko kvantiziranih neuronskih mreža korištenih u terapijskim vježbama za ruke
(Application for gesture tracking using deep quantized neural networks used in therapeutic exercises for hands)

Autori
Čelan, Bruno

Vrsta, podvrsta i kategorija rada
Ocjenski radovi, diplomski rad, diplomski

Fakultet
Fakultet elektrotehnike i računarstva

Mjesto
Zagreb

Datum
19.02

Godina
2021

Stranica
34

Mentor
Kovačić, Zdenko

Ključne riječi
konvolucijska neuronska mreža ; kvantizacija ; binarna kvantizacija ; praćenje gesta ruku ; detekcija ruku
(convolutional neural network ; quantization ; binary quantization ; hand gesture tracking ; hand detection)

Sažetak
Računalni vid vrlo je važan dio interakcije čovjek-stroj (HMI). Korištenje strojnog učenja u računalnoj obradi vida otvara nove primjene poput praćenja i prepoznavanja ljudi koji mogu ili ne mogu ući u određene zgrade, pomaganje u dijagnosticiranju autizma kod djece itd. U ovom je radu cilj poboljšati iskustvo fizikalne terapije kako za liječnike tako i za pacijente. Za detekciju ruku u slici korištena je YOLO konvolucijska neuronska mreža. Probana binarna kvantizacija je pokazala odlične rezultate na klasifikacijskim problemima, dok je na problemu detekcije bilo baš obratno. U prepoznavanju dobro izvođenja vježbi testirano je par metoda 2d CNN sa LSTM i 3d CNN-ovi, tu su 3d CNN pokazali kao dosta precizniji modeli, ali ujedno i kompleksniji. Tako da bi trebalo probati utjecaj binarne kvantizacije na 3d CNN modele da bi se mogli koristi u ovom problemu.

Izvorni jezik
Hrvatski

Znanstvena područja
Elektrotehnika, Temeljne tehničke znanosti

POVEZANOST RADA