Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Convegno Annuale AISIS
Risultati di una ricerca internazionale
nell’utilizzo di modelli di valutazione
multidimensionale degli impatti della CCE
Valeria D. Tozzi
Vice Direttore master MiMS SDA Bocconi
Responsabile area di ricerca PDTA(percorsi diagnostico terapeutici e assistenziali)
CERGAS Bocconi
Greta Nasi
Professore Associato, Università Bocconi di Milano
Co-responsabile scientifico del CERGAS eHealth Research Program
Direttore Area Public Management e Policy SDA Bocconi School of Management
Gruppo di lavoro n° 2 : 2013
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Agenda
•
La valutazione dell’innovazione
•
La valutazione della CCE
•
Esempi di valutazione
•
I limiti dei modelli mono-dimensionali
•
Verso un modello di misurazione degli impatti multidimensionale e multi-scopo
•
Alcuni esempi di modelli multidimensionali
•
Considerazioni finali
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
La valutazione dell’innovazione
La valutazione dell’innovazione può essere valutata a due livelli:
Aziendale
Di sistema
Performance
Impatti
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
La progettazione di un sistema di
misurazione della performance
Tre assunti di partenza:
 Valutare la performance è necessario
 Valutare la performance è difficile
Misurare
Obiettivi
Valutare
Risultati
Risorse
Monitorare
Analizzare
Dati
di contesto
4
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Cosa misurare?
Necessità di definire un modello condiviso di rappresentazione della realtà
Outcome
Output
Processi
Influenze esterne
Input
5
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Cosa misurare?
Necessità di definire un modello condiviso di rappresentazione della realtà
Bisogni
Fiducia
Outcome
Obiettivi
Output
Processi
Input
Influenze esterne
Aisis - 2013
6
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
La valutazione della CCE
I principi dell’economia aziendale suggeriscono che, nel valutare
l’innovazione, è necessario:
•contestualizzare la definizione degli obiettivi in modo coerente
rispetto al contesto di riferimento e alla tipologia di azienda;
•definire e misurare il valore atteso da ciascun stakeholder con
interessi concreti in una specifica pratica d’innovazione.
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Si riportano di seguito alcuni esempi di valutazione di sistemi di
Cartella Clinica Elettronica, emersi da una ricognizione dei
modelli esistenti a livello internazionale.
Per ciascun esempio si riportano:
Autore e titolo
Overview del framework
Momento di valutazione
Commenti/ criticità
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Monitorare
HIMSS
EMR Usability
Assessment
Valutazione
rispetto agli
utenti dei
sistemi di
CCE
HIMSS (2011) Promoting Usability in Health
Organizations: Initial Steps and Progress Toward a
Aisis - 2013
Healthcare Usability Maturity Model
Per quali
stakeholder?
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Misurare
HIMSS
EMR ROI
Calculator
Valutazione
impatti
economicofinanziari
Strumento online disponibile at
http://www.himss.org/files/HIMSSorg/ROI_Calc.html
Quale
dimensione?
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Misurare
The Department of Health of
the Republic Of China,
Taiwan
Performance indicators of
electronic medical record
projects
Valutazione dei valori
effettivi di utilizzo rispetto a
target di risultato
Sun (2013 ) The Performance Evaluation on the
Electronic medical records project of the HealthCare Systems: A Case Study from the National
Audit Office of The Republic of China, Taiwan
Aisis - 2013
Quale
dimensione?
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Valutare
Kaiser Permanente
Elenco benefici incrementali
per i diversi soggetti
Quale
strumento?
Hudson P.(2007) Kaiser Permanente HealthConnect™ The
Substance, Strategy, and Impact of Kaiser Permanente’s
Aisis - 2013
Electronic Health Record (EHR) System
Crane and Porter (2007) An Overview
of Kaiser Permanente: Integrated
Health Care and Population
Management
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Analizzare, Monitorare,
Misurare, Valutare
Mayo Clinic
Mayo Integrated
Clinical Systems
(MICS) Evaluation
Process
Algoritmo per la
valutazione degli
impatti
Quale livello
di
complessità?
Aisis - 2013
Presentazione The Mayo Clinic EMR:
What, When, How, Why? – June 28,
2007, David Mohr, MD
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Esempi di valutazione
Analizzare
California Healthcare
Foundation
EMR Evaluation Tool
Tool excel per la
valutazione di diversi
prodotti di CCE
Strumento excel disponibile per il
download at
http://www.chcf.org/publications/20
03/10/emr-evaluation-tool-anduser-guide
Quale
momento di
valutazione?
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Alcune criticità emerse dai modelli presentati
Focus sul
singolo
stakeholder
Focus su una
singola
dimensione
Focus un unico
momento della
rilevazione
Individuazione
dello strumento
della
valutazione
Livello di
complessità di
utilizzo
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Modelli Multidimensionali
Qualità
Utilizzo
Benefici Netti
Canada Health
Infoway
Benefits Evaluation
Framework
Aisis - 2013
Canada Health Infoway (2013) The emerging
benefits of electronic medical record use in
community-based care
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Modelli Multidimensionali
Risparmi di tempo
Riduzione dei costi
Efficienza
Qualità dell’informazione
Miglioramento delle azioni
diagnostico-terapeutiche
Cucciniello, Caccia
Nasi (2009)
Risk Management
Efficacia
organizzativa
Efficacia sui processi
Efficacia organizzativa
Modello di
misurazione degli
impatti della CCE
Aumento della soddisfazione
Empowerment del paziente
Qualità del
servizio
Capacità di risposta
Grado di coordinamento tra
trutture in hospital e outpatient
VALORE
DEL
SERVIZIO
Empowerment
paziente
Efficacia della
cura
Ottimizzazione
risorse
Accountability
Information management
Clinical
Governance
Qualità
Formazione strategica in tema di
innovazione
Clinical Audit
Aisis - 2013
18
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Considerazioni Conclusive:
Obiettivi e target di risultato
Due strumenti semplici ma al contempo meccanismi di leadership potenti
Devono essere usati non solo per rispondere ad adempimenti formali
Per comunicare priorità, problemi e motivare attraverso attenzione e feedback
Per evidenziare dove e perché il risultato cambia
Un progetto di cartella clinica deve produrre risultati attorno a obiettivi specifici e
rappresentare output intermedi e problemi relativi
E’ il primo passo per procedere alla misurazione più ampia degli impatti a livello
di sistema sanitario
Aisis - 2013
Associazione Italiana Sistemi Informativi in Sanità
Valutazione del Valore derivante dall’utilizzo di ICT in Sanità
Considerazioni finali
e il livello di sistema?
Emerge la necessità di sviluppare modelli in grado di
evidenziare il contributo che tali sistemi possono dare a livello
sistemico, valutando gli impatti della condivisione di informazioni
e obiettivi tra i molteplici attori del sistema sanitario
Aisis - 2013