La aplicación de la inteligencia artificial (IA) está creciendo rápidamente y se está entrelazando cada vez más con nuestra vida diaria y con industrias de alto riesgo como la atención médica, las telecomunicaciones y la energía. Pero un gran poder conlleva una gran responsabilidad: los sistemas de IA a veces cometen errores o dan respuestas inciertas que pueden tener graves consecuencias.
Themis AI del MIT, cofundada y dirigida por la profesora Daniela Rus del laboratorio CSAIL, ofrece una solución innovadora. Su tecnología permite que los modelos de IA “sepan lo que no saben”. Esto significa que los sistemas de IA pueden indicar por sí mismos cuándo no están seguros de sus predicciones, lo que ayuda a prevenir errores antes de que causen daños.
¿Por qué es tan importante?
Muchos modelos de IA, incluso los avanzados, a veces pueden exhibir las llamadas “alucinaciones”: dan respuestas incorrectas o infundadas. En sectores donde las decisiones tienen un gran peso, como el diagnóstico médico o la conducción autónoma, esto puede tener consecuencias desastrosas. Themis AI desarrolló Capsa, una plataforma que aplica la cuantificación de la incertidumbre: mide y cuantifica la incertidumbre de la salida de la IA de una manera detallada y confiable.
¿Cómo funciona?
Al enseñar a los modelos la conciencia de la incertidumbre, pueden proporcionar a las salidas una etiqueta de riesgo o confiabilidad. Por ejemplo: un coche autónomo puede indicar que no está seguro de una situación y, por lo tanto, activar una intervención humana. Esto no solo aumenta la seguridad, sino también la confianza de los usuarios en los sistemas de IA.
capsa_torch.wrapper()
, donde la salida consiste tanto en la predicción como en el riesgo:
Conclusión
El equipo del MIT demuestra que el futuro de la IA no solo se trata de volverse más inteligente, sino también, y lo que es más importante, de funcionar de manera más segura y justa. En NetCare, creemos que la IA solo se vuelve verdaderamente valiosa cuando es transparente sobre sus propias limitaciones. Con herramientas avanzadas de cuantificación de la incertidumbre como Capsa, usted también puede poner en práctica esa visión.