Применение искусственного интеллекта (ИИ) стремительно растет и все глубже проникает в нашу повседневную жизнь и в критически важные отрасли, такие как здравоохранение, телекоммуникации и энергетика. Но с большой силой приходит и большая ответственность: системы ИИ иногда допускают ошибки или дают неуверенные ответы, которые могут иметь серьезные последствия.
Themis AI от MIT, сооснователем и руководителем которой является профессор Даниэла Рус из лаборатории CSAIL, предлагает новаторское решение. Их технология позволяет моделям ИИ «знать, чего они не знают». Это означает, что системы ИИ могут сами указывать на неуверенность в своих прогнозах, что позволяет предотвратить ошибки до того, как они нанесут ущерб.
Почему это так важно?
Многие модели ИИ, даже самые передовые, иногда могут демонстрировать так называемые «галлюцинации» — они дают ошибочные или необоснованные ответы. В отраслях, где решения имеют большой вес, таких как медицинская диагностика или автономное вождение, это может иметь катастрофические последствия. Themis AI разработала Capsa — платформу, которая применяет количественную оценку неопределенности (uncertainty quantification): она измеряет и количественно оценивает неопределенность результатов работы ИИ детальным и надежным образом.
Как это работает?
Внедряя осведомленность о неопределенности в модели, можно снабжать их выходные данные меткой риска или надежности. Например, беспилотный автомобиль может указать на неуверенность в определенной ситуации и инициировать вмешательство человека. Это не только повышает безопасность, но и укрепляет доверие пользователей к системам ИИ.
capsa_torch.wrapper() где вывод состоит как из прогноза, так и из риска:

Заключение
MIT Команда показывает, что будущее ИИ заключается не только в повышении интеллекта, но и, прежде всего, в обеспечении более безопасного и справедливого функционирования. В NetCare мы верим, что ИИ становится по-настоящему ценным только тогда, когда он прозрачен в отношении собственных ограничений. С помощью передовых инструментов количественной оценки неопределенности, таких как Capsa, вы также можете воплотить это видение в жизнь.