hrvatski

Aplikacija za praćenje gesta pomoću duboko kvantiziranih neuronskih mreža korištenih u terapijskim vježbama za ruke

Računalni vid vrlo je važan dio interakcije čovjek-stroj (HMI). Korištenje strojnog učenja u računalnoj obradi vida otvara nove primjene poput praćenja i prepoznavanja ljudi koji mogu ili ne mogu ući u određene zgrade, pomaganje u dijagnosticiranju autizma kod djece itd. U ovom je radu cilj poboljšati iskustvo fizikalne terapije kako za liječnike tako i za pacijente. Za detekciju ruku u slici korištena je YOLO konvolucijska neuronska mreža. Probana binarna kvantizacija je pokazala odlične rezultate na klasifikacijskim problemima, dok je na problemu detekcije bilo baš obratno. U prepoznavanju dobro izvođenja vježbi testirano je par metoda 2d CNN sa LSTM i 3d CNN-ovi, tu su 3d CNN pokazali kao dosta precizniji modeli, ali ujedno i kompleksniji. Tako da bi trebalo probati utjecaj binarne kvantizacije na 3d CNN modele da bi se mogli koristi u ovom problemu.

konvolucijska neuronska mreža ; kvantizacija ; binarna kvantizacija ; praćenje gesta ruku ; detekcija ruku

nije evidentirano