La aplicación de la inteligencia artificial (IA) está creciendo rápidamente y se entrelaza cada vez más con nuestra vida diaria y con industrias de alto riesgo como la atención médica, las telecomunicaciones y la energía. Pero un gran poder conlleva una gran responsabilidad: los sistemas de IA a veces cometen errores o dan respuestas inciertas que pueden tener graves consecuencias.
Themis AI del MIT, cofundada y dirigida por la profesora Daniela Rus del laboratorio CSAIL, ofrece una solución innovadora. Su tecnología permite a los modelos de IA “saber lo que no saben”. Esto significa que los sistemas de IA pueden indicar por sí mismos cuándo no están seguros de sus predicciones, lo que ayuda a prevenir errores antes de que causen daños.
¿Por qué es esto tan importante?
Muchos modelos de IA, incluso los avanzados, a veces pueden mostrar las llamadas “alucinaciones”, es decir, dan respuestas erróneas o infundadas. En sectores donde las decisiones tienen un gran peso, como el diagnóstico médico o la conducción autónoma, esto puede tener consecuencias desastrosas. Themis AI desarrolló Capsa, una plataforma que aplica la cuantificación de la incertidumbre: mide y cuantifica la incertidumbre de la salida de la IA de una manera detallada y confiable.
¿Cómo funciona?
Al dotar a los modelos de conciencia de incertidumbre, pueden proporcionar a las salidas una etiqueta de riesgo o fiabilidad. Por ejemplo: un coche autónomo puede indicar que no está seguro de una situación y, por lo tanto, activar una intervención humana. Esto no solo aumenta la seguridad, sino también la confianza de los usuarios en los sistemas de IA.
capsa_torch.wrapper()
, donde la salida consiste tanto en la predicción como en el riesgo:
Conclusión
El equipo del MIT demuestra que el futuro de la IA no solo se trata de ser más inteligente, sino también de funcionar de manera más segura y justa. En NetCare, creemos que la IA solo se vuelve verdaderamente valiosa cuando es transparente sobre sus propias limitaciones. Con herramientas avanzadas de cuantificación de la incertidumbre como Capsa, usted también puede poner esa visión en práctica.