Back to search

BIA-Brukerstyrt innovasjonsarena

HoloCare Cloud

Alternative title: HoloCare Cloud

Awarded: NOK 14.8 mill.

Project Number:

296570

Project Period:

2019 - 2023

Funding received from:

Location:

Through HoloCare Cloud, we have developed a fully scalable platform for holographic visualisation of medical image data from CT to hologram, using AI technology. The platform is intended to support clinicians in surgical planning. In this project, we have focused on two areas of highly specialised surgery: repair of congenital heart defects and tissue-saving surgery for cancerous liver tumours. However, the platform is designed in a way that is scalable and can be built upon and adapted for use in other clinical areas in the future. The project consists of three main parts: 1. Establishment of a secure cloud solution for processing image data with associated applications for holographic visualisation and interaction. 2. Establishment of an AI solution for converting medical images to holograms. 3. Technical and clinical validation of the platform.  Within the framework of the project, the platform has been completed. It has already been tested through user studies and clinical trials at hospitals both nationally and internationally, with good results. The platform is also currently undergoing a regulatory approval process for commercial clinical use, both in the US (FDA) and the EU (MDR CE). The first approval is expected already in Q3 2023. The project is owned by Sopra Steria with the Intervention Center at Oslo University Hospital as a research partner and Microsoft as project partner. A separate company (HoloCare AS) has been established to own and further manage the project results at the end of the project period.

Gjennom HoloCare Cloud har vi utviklet en fullverdig skalerbar plattform for holografisk visualisering av medisinske bildedata. Plattformen gjennomgår for øyeblikket en regulatorisk godkjenning for kommersiell klinisk bruk. Plattformen er allerede testet gjennom brukerstudier og kliniske studier på sykehus både nasjonalt og internasjonalt, med gode resultater. Det er lansert flere publikasjoner fra Oslo Universitetssykehus (OUS) som bekrefter nytteverdien til løsningen. Det er planlagt flere publikasjoner i 2023 basert på de seneste kliniske studiene. Og vi er kjent med at flere sykehusmiljøer ønsker å gjennomføre flere studier så snart løsningen er lansert. Med utgangspunkt i blant annet prosjektresultatene fra HoloCare Cloud har HoloCare AS søkt om både NFR-midler, UK-midler og Horizon-midler. Løsningen har fått svært mye oppmerksomhet og interesse i sykehusmiljøer og forsikringsselskaper globalt, både gjennom egen markedsføring og publikasjoner i Sopra Steria, OUS, Microsoft og HoloCare AS. HoloCare AS forventer de første inntektene i løpet av Q3/Q4 2023.

HoloCare Cloud, er en skyløsning som skal tilby kommersialiserbar klinisk visualisering for planlegging av -og veiledning under laparoskopisk leverreseksjon og kirurgisk behandling av medfødte hjertefeil hos barn, ved bruk av holografiske 3D-briller og maskinlæring for automatisert bildesegmentering. Våre tjenester skal via en sikker oppkobling mot en skyløsning muliggjøre en global markedsplass for norskutviklede løsninger for pasientspesifikk holografisk visualisering. Per i dag går standard visualisering av pasientens anatomi for diagnostikk og planlegging av operasjon ut på å bla gjennom snittbilder fra volumopptak fra CT og MR på todimensjonale skjermer. I de tilfellene hvor en ønsker en 3D-modell av et organ, vises denne også som et manipulerbart objekt på 2D-skjermer, eller stereoskopisk på 3D skjermer og ved bruk av polariserte briller. I HoloCare har vi utviklet prototyp-løsninger som benytter Microsoft HoloLens til å visualisere og manipulere 3D-objekter som hologram. Disse ”proof of concept” applikasjonene gir brukeren en helt annen virkelighetsopplevelse av pasientens spesifikke anatomi enn det dagens 3D-visualisering på flatskjerm gjør. HoloCares løsninger åpner dermed opp for en helt ny måte å kommunisere visuell informasjon på, samtidig som den muliggjør en unik form for samhandling mellom brukerne. Prosjektet HoloCare Cloud har til hensikt å videreføre våre «proof of concept»-applikasjoner for Mixed Reality-basert visualisering av 3D-anatomi for kirurgisk planlegging og navigasjon ved henholdsvis laparoskopisk leverreseksjon og reparasjon av medfødt hjertefeil. Disse prototypløsningene skal legges inn i en kommersiell løsning basert på skytjenester og automatisert generering av 3D-modeller for effektiv distribusjon og oppdatering til kunde, med så strømlinjeformet brukeropplevelse som mulig. Prosjektet er et samarbeid mellom Sopra Steria, Microsoft og Oslo Universitetssykehus.

Funding scheme:

BIA-Brukerstyrt innovasjonsarena