Ciencia y validación

Probamos más que precisión. Probamos utilidad y seguridad.

Evaluamos la calidad de los datos, el rendimiento del algoritmo, el proceso clínico y si la gente entiende el resultado correctamente como preguntas separadas.

AhoraExamen clínico y de expertos

Tareas limitadas y criterios predefinidos.

SiguientePilotos bajo supervisión clínica

Probando el proceso y la seguridad antes de reclamar un efecto.

PublicacionesSólo después de un resultado reproducible

Con métodos, limitaciones y conflictos de interés.

ArtículoNo hay número sin pruebas

Las reclamaciones no deben adelantarse a las pruebas.

Marco de validación

Cuatro niveles independientes

La fuerza en un nivel no puede ocultar la debilidad en otro.

01 / Técnica

¿El sistema funciona correctamente?

Versiones, acceso, resiliencia y auditoría.

02 / Analítico

¿Se han extraído los datos correctamente?

Completeness, units, timing and reproducibility.

03 / Clínica

¿El resultado es útil para un médico?

Relevancia, seguridad y pruebas justificativas.

04 / Human

¿El resultado es comprensible?

Las limitaciones no deben crear falsa confianza.

Etapas de aprobación

De código a caso de uso clínico

01

Pruebas técnicas

La característica existe y pasa pruebas.

Eso no es suficiente para uso clínico.
02

Examen de expertos

Se definen el uso previsto y los modos de funcionamiento peligrosos.

Los límites se establecen con antelación.
03

Estudio de evaluación

La muestra, el estándar de referencia y los criterios se definen antes de que comience el estudio.

No ajustarlos después de ver el resultado.
04

Piloto clínico

Probamos la operación dentro de un flujo de trabajo real bajo supervisión especializada.

El acceso se limita a los participantes piloto.
05

Lanzamiento

Se definen los usuarios, el monitoreo y un método de devolución.

La calidad también se supervisa después del lanzamiento.

Lo que midemos

Un piloto prueba el proceso

Las métricas están acordadas antes de que comience.

Datos
Historia completa
Errores de transformación
Proporción que requiere revisión manual
Proceso
Tiempo de preparación
Tiempo de revisión
Seguimiento completado
Seguridad
Tasa de sugerencias inseguras
Calidad de entrega a un médico
Violaciones de las normas
Comprensión
Comprensión médica
Comprensión de pacientes
Confíe en el flujo de trabajo

La transparencia

Se publicarán pruebas

Protocolos, versiones, resultados y limitaciones, después del examen. Todavía no se dispone de datos sobre la eficacia pública.

BIOS acoge la validación independiente.

Un caso de uso. Un dueño. Criterios mensurables.