VIRTUAALITODELLISSUUDEN JA LISÄTYN TODELLISUUDEN MAHDOLLISUUDET TERVEYDENHUOLLOSSA Projektipäällikkö Toni Oja HUS-Tietohallinto Terveys ja talouspäivät 2017
VIRTUAALITODELLISUUS (VR) Virtuaalitodellisuus eli VR (Virtual Reality) on tietokonesimulaation tuottamien aistimusten avulla luotu keinotekoinen ympäristö, jota katsotaan virtuaalilasien avulla. Virtuaalitodellisuus voi joko pyrkiä simuloimaan jotakin todellista ympäristöä tai se voi luoda täysin kuvitteellisen ympäristön. Virtuaaliympäristö on kolmiulotteinen ja se tuntuu täysin aidolta, sillä syvyysvaikutelma, korkeus ja perspektiivi tuntuvat samalla tavalla kuin luonnossa. Myös äänimaailma, tuntopalaute ja hajut on mahdollista toteutta.
LISÄTTY TODELLISUUS (AR) AR:ssa (Augmented Reality) käyttäjää ei haluta irrottaa oikeasta maailmasta, vaan käyttäjä tyypillisesti käyttää läpinäkyviä älylaseja. Lasien näkökenttään tuodaan todellisuutta täydentävää tietoa katsottavasta kohteesta tai ympäristöstä. AR-lasit voivat myös sisältää asentoantureita, joiden avulla esim. reaalimaailman kohteen päälle/sisälle voidaan käyttäjän näkökentässä projisoida tietoa ko. kohteesta.
Dedikoidut VR-järjestelmät VIRTUAALITODELLISUUDEN LAITTEET NYT HTC Vive, Oculus Rift ja muita tulossa Tietokone + silmikko, jossa oma näyttö kummallekin silmälle stereoskooppista kuvaa varten Tilassa oleva majakat, joiden avulla sijaintitieto välittyy. Silmikko (pitkällä) johdolla kiinni tietokoneessa, tosin langattomuus yleistyy jo. Kädessä pidettävät langattomat ohjaimet VR-interaktiota varten Silmikon ja ohjainten paikka- ja asentotiedot välittyvät tietokoneella pyörivälle VR-sovellukselle Matkapuhelinta hyödyntävät laitteet Samsung Gear, Google Cardboard ym. Silmikko johon laitetaan matkapuhelin sisälle Puhelimen näyttö näyttää eri kuvaa eri silmille Puhelimissa on sisäänrakennetut kiihtyvyysanturit, joista asentotieto saadaan sovellukselle Rajoitettu mahdollisuus interaktioon VR-maailmassa
MICROSOFT HOLOLENS LISÄTYN TODELLISUUDEN LAITTEITA Hololens mahdollistaa videokuvan seuraamisen sekä ohjeiden ja hologrammien asettamisen käyttäjän näkökenttään. Toimii itsenäisenä laitteena käsi, liike ja puheohjauksella PUHELIMET JA TABLETIT Useat uudemmat puhelimet ja tabletit mahdollistavat jo lisättyä todellisuutta hyödyntävien sovellusten käytön.
AR/VR-LAITTEIDEN OHJAAMINEN Hanskat tai kevyemmät anturit Kustomoidut ohjaimet (esim. instrumentit) Ääni- ja liikeohjaus
3D-YMPÄRISTÖN LUOMINEN
AR/VR KÄYTTÖKOHTEITA Toimistotyö Toimistotyön tekeminen VR/AR-laitteilla Hallinta virtuaalinäppäimistöllä, ääni- ja liikekomennoilla, tai normaalin näppäimistön ja hiiren avulla. Rajapinnat potilastietojärjestelmiin mahdollisia Parannetut käyttöliittymät potilastietojärjestelmiin: Esim. samaan aikaan esillä 3D-malli, röntgenkuva, potilastiedot ja testitulokset Virtuaalineuvottelutila, jossa voi hyödyntää kaikkia VR-palveluita.
AR/VR KÄYTTÖKOHTEITA Hoito ja diagnostiikka Virtuaalitodellisuuden hyödyntäminen terapiassa esim. paniikki- ja ahdistushäiriöiden hoito tai rauhoittumisharjoitukset Hoidon läpikäynti potilaan kanssa Toisen lääkärin konsultaatio, esim. 360-kuvalla ja VRlaitteilla varustetut leikkaussalit tai etänä tapahtuva potilashoito AR-lasien avulla. Luuston, elimien tai kudoksien tutkiminen VRympäristössä Leikkaussuunnittelu, leikkauksen läpikäynti VRympäristössä myös useamman ammattilaisen kesken
AR/VR KÄYTTÖKOHTEITA Kivunhoito, kuntoutus ja toiminnallinen tuki Virtuaalitodellisuus tarjoaa mahdollisuuden immersiiviseen kokemukseen, jota voidaan hyödyntää esimerkiksi kivunhoidossa kivuliaiden toimenpiteiden tai hoidon aikana Kuntoutuspotilaille pystytään luomaan potilaan kuntoutussuunnitelman mukainen ympäristö, jossa potilas voi parantaa toimintakykyään Erilaisten apuvälineiden, kuten sähköpyörätuolin ohjaaminen AR-laseja hyödyntäen.
AR/VR KÄYTTÖKOHTEITA Ensihoito ja pelastustoimi Kenttätilanteesta voidaan luoda virtuaalinen ympäristö, jossa tilannetta voidaan johtaa ja suunnitella Kriisitilanteen jälkipurku 360-ympäristössä Kenttätilanteita voidaan harjoitella helposti ja realistisesti virtuaaliympäristössä Lääkärin konsultointi kenttähenkilökunnan toimesta Kriisitilanteessa pystytään välittämään reaaliaikaisesti 360- videokuvaa tilannejohtoon tai sairaalaan, jolloin tapahtuneesta saa paremman tilannekuvan.
AR/VR KÄYTTÖKOHTEITA Suunnittelu Tilojen suunnittelu: Kun käy oikeasti tilassa, ymmärtää paremmin tilan käytön Tilojen käytön ja toimintaprosessien suunnittelu Proteesien, graftien ym. suunnittelu Toimenpiteiden suunnittelu ja kehittäminen
AR/VR KÄYTTÖKOHTEITA Opetus, koulutus ja ohjaus Leikkausten seuraaminen virtuaalilaseilla tai älylaseilla. Laitteiston käyttökoulutus; leikkausrobotit tai lääkintälaitteet Virtuaalinen leikkauspöytä Toimenpiteiden opettaminen Anatomian opetus Simulaatiot mahdollisimman aidontuntuisessa ympäristössä. Potilasohjaus; leikkaukseen tulevan potilaan hoitopolku, fysioterapia ja toimintaterapia, sairauksiin liittyvä havainnollistaminen
AR/VR-KEHITYSPROJEKTEJA HUS:SSA Hus-tietohallinnossa AR/VR:ään liittyvä pilotti tammikuussa 2017 yhteisyössä ADE oy:n ja terveyskylä-hankkeen kanssa. 236 osallistujaa, 40 pilottikertaa Kyselyllä selvitettiin kokemuksia, halua hyödyntää omassa työssä ja mahdollisia käyttökohteita Kyselyyn vastasi noin 50% osallistuneista Testilaboratorio VR/AR-ratkaisuihin liittyen aloittaa Biomedicumissa 1.9.2017 Lukuisia VR/AR-teknologiaan keskittyneitä yrityksiä mukana. Kohtaamis-, esittely- ja testauspaikka terveydenhuollon ammattilisille, opiskelijoille, tutkijoille ja yrityksille Kampusalueen ytimessä. Nuorisopsykiatrian pilotti ADE Oy:n kanssa Virtuaalilasien käyttö osana kognitiivista psykoterapiaa (sosiaaliset fobiat)
AR/VR-KEHITYSPROJEKTEJA HUS:SSA Ensimmäinen VR/AR-leikkaus Töölön Neurokirurgian ja Nokian yhteistyönä kesäkuussa 2017 Mahdollistaa lähes rajattoman määrän osallistujia Pää- ja kaulakeskuksen pilotti yhteistyössä Disiorin kanssa. 3D-analyysiohjelmistoa luunmurtumien diagnosointiin ja hoitoon (Leuan ja Silmän alueen murtumat) Voidaan käyttää sekä tekoälyn (AI) että virtuaalisen visualisoinnin (AR ja VR) sovelluksissa. Kivunhoitoon ja palovammoihin liittyviä hankkeita suunnitteilla.
(Digi Capital, 2015) VR/AR- MARKKINOIDEN KASVU
LINKKEJÄ JA LISÄTIETOA http://www.hel.fi/static/kanslia/innovaatiorahasto/loppuraportti-kotihoidon-virtuaalihoitajaksi.pdf http://www.vrs.org.uk/virtual-reality-healthcare/ http://medicalfuturist.com/augmented-reality-in-healthcare-will-be-revolutionary/ https://www.forbes.com/sites/quora/2017/02/06/how-will-virtual-reality-change-the-healthcare-industry/#4b295e12429e http://www.virtuaalimaailma.fi/ - uutiskirje https://www.microsoft.com/microsoft-hololens/en-us https://about.sharecare.com/press-releases/sharecare-acquires-virtual-reality-company-transform-patient-engagement-medicaleducation Hakusanoja: augmented reality in healthcare, AR healthcare, virtual reality in healthcare, virtuaalitodellisuus terveydenhuolto, lisätty todellisuus terveydenhuolto, AR medicine, VR medicine
KIITOS!