27
Združevanje senzornih informacij pritiskovne merilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor: prof. dr. Marko Munih Ljubljana, maj 2016 Predstavitev doktorske disertacije

Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

  • Upload
    others

  • View
    9

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Združevanje senzornih informacij pritiskovne merilne podloge ter

inercialnih in magnetnih merilnih enot

Andraž Rihar

Mentor: prof. dr. Marko Munih

Ljubljana, maj 2016

Predstavitev doktorske disertacije

Page 2: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Vsebina predstavitve

• Uvod

Supine

Trunk

Head

• Merilni sistem CareToy

• Metodologija

• Evalvacija sistema

• Sklep

• Izvirni prispevki

Page 3: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Analiza razvojnih vzorcev

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Campbell et al., 1995

• Zgodnje otroštvo– Doseganje razvojnih mejnikov

• Klinične metode testiranja– AIMS, TIMP, Bayley III – Ekspertno znanje– Subjektivnost

• Analiza razvojnih vzorcev– Prepoznavanje razvojnih motenj– Zgodnja diagnoza– Vadba za optimalen razvoj

Page 4: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Senzorno podprta analiza

Stahl et al., 2012

Teitelbaum et al., 1998

• Video analiza

• Optoelektronski sistemi

• Elektromagnetni sistemi

• Pospeškometri

• Pritiskovne plošče

• Pritiskovne merilne podloge

Lee et al., 2008

Karch et al., 2008

Heinze et al., 2010Kyvelidou et al., 2010

Dusing et al., 2009

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 5: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Senzorni sistemi

Potrebujemo• Objektivnost

• Neinvazivnost

• Točnost

• Enostavnost uporabe

• Hitra predpriprava

• Možnost pogostih meritev

• Neomejenost na klinično okolje

Pomanjkljivosti• Zastiranje pogleda

• Osvetlitev

• Veliko število markerjev

• Ožičenje

• Ne nudijo informacij o legi

• Ne nudijo informacij o telesni drži

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 6: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Pritiskovna merilna podloga Inercialne in magnetne merilne enote (IME)

Predlagana kombinacija senzorjev

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

EU FP7 projekt CareToy A Modular Smart System for Infants’ Rehabilitation At Home based on Mechatronic Toys

Page 7: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Analiza in združevanje podatkovKlasifikacija drže odraslih• Izločanje značilk („PCA“)

• Dvojni intenzitetni profil

• Podporni vektorji („SVM“)

• Najbližji sosedje („kNN“)

• Skriti model Markova („HMM“)

Verhaert et al., 2011

Huang et al., 2010

Grimm et al., 2012

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 8: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Analiza in združevanje podatkovKlasifikacija drže dojenčkov• Izločanje značilk (spremenljivi

geometrijski momenti)• Linearni, kvadratični,

SVM in kNN klasifikator

Analiza telesne drže• Ekstenzija in fleksija trupa

Boughorbel et al., 2010

Dusing et al., 2005

š

1

12

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 9: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Senzorno podprto okolje CareToy

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

• Konzorcij EU FP7 projekta CareToy (2012-2015)

• Strojna oprema

• Klinično podprt protokol vadbe

7 partnerjevItalija, Slovenija, Nemčija, Danska

(SSSA, UL-LR, UHAM, FSM, HEC, MR&D, STM)

- Cilji vadbe- Položaji

Page 10: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Obdelava in združevanje podatkov

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Senzorni sistemi

IME

Merilni podlogi

Igrače

Video kamere

Ocena motoričnih sposobnosti

Aktivnost

Gibanje

Lega

Stabilnost

Izziv ?

Page 11: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Obdelava in združevanje podatkov

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Obdelava podatkov IMEObdelava podatkov merilnih podlog

Izračun sigma točk

Napoved – Procesni model

Popravek – Merilni model

Page 12: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Združevanje senzornih podatkov

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

• Prilagoditev kontrasta

• Centralni momenti

• Uteženo vrednotenje

Page 13: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Nadaljnja obdelava podatkov

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Algoritem zornega kota

Sledenje poziciji odtisa

Dvodimenzionalni intenzitetni profil

Lega rok in možnost izrisa

Page 14: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Analiza aktivnosti igrač

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 15: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Ocena motoričnih sposobnosti

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

1. Gibanje trupa

• ROMφ• vφ

2. Lega in gibanje rok

• Pdel

• Vdel

• vH

• SAL• sH,CT

Page 16: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Ocena motoričnih sposobnosti

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

3. Orientacija podlakti

• IMED

• PMED

• PLATDvig glave

• Ndvig • sGL • vGL • dGL,M-L

4. Gibanje glave

Page 17: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Ocena motoričnih sposobnosti

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

5. Analiza igranja z igračo

• Delež prijemanja

• Delež dotikanja

• Delež igranja

• RMSdCOP

• PCOP

• ROMCOP,M-L

• ROMCOP,A-P

6. Gibanje COP

J. E. Deffeyes, R. T. Harbourne, A. Kyvelidou, W. A. Stuberg in N. Stergiou, “Nonlinearanalysis of sitting postural sway indicates developmental delay in infants,” Clinical Biomechanics, vol. 24, št. 7, str. 564–570, 2009.

Page 18: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Razpoznava delov telesa

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

RGB v YCbCr

RGB in YCbCr filter

Obdelava in razpoznava

Page 19: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Evalvacija CareToy okolja

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

• Preliminarna študija uporabe merilnega sistema

• Validacija z optoelektronskim merilnim sistemom Optotrak

• Naključna kontrolna študija (RCT)

Page 20: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Preliminarna študija uporabe sistema

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 21: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Validacija s sistemom Optotrak

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 22: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Naključna kontrolna študija (RCT)

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Igrača na sredini loka

Igrača na steni

Igrača na sredini loka

Page 23: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Sklepne ugotovitve

• Izreden potencial sistema in metod– Analiza aktivnosti otrok– Vadba motoričnih sposobnosti

• Nadaljnje delo– Dodatna analiza podatkov (Sgandurra et al.)

– Večja populacija otrok

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

G. Sgandurra, L. Bartalena, F. Cecchi, G. Cioni, M. Giampietri, G. Greisen, A. Herskind, E. Inguaggiato, J. Lorentzen, J. B. Nielsen et al., “A pilot study on early home-based intervention through an intelligent baby gym (caretoy) in preterm infants,” Research in developmental disabilities, vol. 53, str. 32–42, 2016.

Page 24: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Izvirni prispevki disertacije

• Metoda združevanja podatkov merilne podloge ter IME za določanje tridimenzionalne orientacije trupa dojenčka

• Zasnova senzorno podprtega računalniškega modela za analizo in oceno gibanja glave dojenčka

• Evalvacija sistema za ocenjevanje motoričnih sposobnosti rok dojenčkov

Uvod Merilni sistem CareToy Metodologija Evalvacija sistema Sklep

Page 25: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Prispevki udeležencev projekta CareToy• SSSA in STM – strojna oprema

• FSM in HEC – klinični del (protokol), izbor otrok in meritve, interpretacija rezultatov

• UHAM – implementacija koncepta telerehabilitacije

• UL, FE, LR– dr. Tadej Beravs – IME– mag. Janko Kolar – programska oprema (delovanje CareToy)– Jure Pašič – programska oprema (UKF, preračun kotov orientacije,

analiza igrač)– prof. dr. Matjaž Mihelj in prof. dr. Marko Munih – zasnova projekta,

merilnega sistema, smer zasnove algoritmov in parametrov– ostali člani LR– Andraž Rihar – ostali algoritmi obdelave in združevanja podatkov

Page 26: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Iskrena zahvala

A Modular Smart System for Infants’ Rehabilitation At Home based on Mechatronic Toys

EU FP7 projekt CareToy pogodba ICT-2011.5.1-287932

Jure Pašič Janko Kolar Matjaž Mihelj               Marko Munih

Page 27: Združevanje senzornih informacij pritiskovnemerilne ... · Združevanje senzornih informacij pritiskovnemerilne podloge ter inercialnih in magnetnih merilnih enot Andraž Rihar Mentor:

Hvala za vašo pozornost!