IA médica · canada
Brechas de validación en la IA de imágenes de garganta: Light AI mantiene suspendidas las actividades clínicas de Strep A
Evaluar el riesgo de infección a partir de una fotografía de la garganta exige demostrar primero la fiabilidad del sistema completo en la consulta. Light AI revisará el modelo, los datos y el método de captura de imágenes; aún no hay un nuevo calendario para los estudios clínicos ni para la solicitud ante la FDA.
Capturar una imagen de la garganta y utilizar inteligencia artificial para ayudar a evaluar la probabilidad de una infección por estreptococo del grupo A es el uso que QuickScan Strep A aspira a llevar a la consulta. Sin embargo, que las imágenes puedan convertirse en un indicio clínico fiable depende de la validación del sistema completo. Light AI anunció el 2 de octubre que las pruebas objetivas disponibles aún no son suficientes para respaldar un mayor despliegue clínico y que mantendrá suspendidas las actividades clínicas relacionadas.
QuickScan Strep A es un software como dispositivo médico diseñado para analizar fotografías de la garganta mediante aprendizaje automático y ayudar a los profesionales sanitarios a evaluar casos de sospecha de faringitis por estreptococo del grupo A. Según la descripción previa del producto proporcionada por la empresa, ofrece apoyo a la toma de decisiones clínicas sobre la probabilidad de infección. Esta actualización vuelve a centrar la atención en una cuestión fundamental: ¿puede la configuración actual del producto cumplir de forma consistente los requisitos en la población y el entorno de uso previstos?
La revisión preliminar de la empresa detectó brechas en las pruebas que respaldan el rendimiento del sistema completo. La cobertura del mismo acontecimiento elaborada por S&P Capital IQ y publicada en MarketScreener también señaló que la revisión abarca los conjuntos de datos, la adquisición y el procesamiento de imágenes, la validación del software, así como la usabilidad, la ciberseguridad y la documentación del sistema de calidad. Esto significa que las cuestiones pendientes de aclaración abarcan tanto el modelo como los procedimientos operativos reales y no pueden resumirse únicamente en el rendimiento del algoritmo.
A continuación, Light AI organizará una evaluación independiente para examinar la robustez del modelo de aprendizaje automático existente y de sus conjuntos de datos, y después determinará si las brechas pueden subsanarse mediante modificaciones o un nuevo entrenamiento, o si será necesario desarrollar el sistema de nuevo. La empresa aún no ha determinado si la tecnología subyacente puede alcanzar el rendimiento previsto, ni ha publicado el tamaño de la muestra, la composición de la población o datos actualizados de rendimiento diagnóstico que permitan evaluar externamente la magnitud de las brechas.
El método de captura de imágenes también podría cambiar. La empresa está evaluando alternativas más controladas que el método actual de captura mediante teléfonos inteligentes y completando los controles de diseño, el sistema de calidad y la validación del sistema en su conjunto. Esta orientación indica que las condiciones de adquisición de las imágenes también forman parte de los elementos pendientes de validación; el anuncio aún no especifica qué equipos se utilizarán ni explica en qué medida las diferencias en la captura de imágenes afectan a los resultados.
Hasta que estos trabajos permitan establecer que el sistema está preparado para su uso clínico, las actividades de viabilidad en Nueva Zelanda y el estudio clínico previsto en Estados Unidos seguirán suspendidos, y tampoco se reanudarán la validación clínica externa ni los trabajos para avanzar hacia la presentación de una solicitud ante la FDA. Se trata de una decisión de la empresa basada en su evaluación interna; el anuncio no indicó que la FDA hubiera ordenado la suspensión. La empresa no puede ofrecer actualmente un calendario revisado para los estudios o la solicitud.
Light AI declaró que la licencia existente de dispositivo médico de clase II de Health Canada sigue vigente y que está evaluando con asesores regulatorios las obligaciones regulatorias derivadas de esta revisión. La vigencia de la licencia coexiste con la conclusión de la empresa de que las pruebas actuales son insuficientes, lo que también deja más claro el siguiente paso clave: primero debe determinarse cómo corregir el modelo y la arquitectura de captura de imágenes y, después, decidir cuándo retomar los estudios clínicos a partir de los resultados de la validación del sistema completo.