Microsoft выпускает инструменты управления ИИ-агентами

Главная идея заключается в том, что по мере роста автономности ИИ возрастает необходимость в системах надзора. Новый toolkit позволяет компаниям задавать ограничения, отслеживать действия ИИ-агентов и предотвращать нежелательное поведение.
Инструменты ориентированы на бизнес-сценарии, где ИИ выполняет задачи в финансовых системах, разработке, аналитике и управлении данными.
Компания подчёркивает, что будущее ИИ связано не только с мощностью моделей, но и с безопасностью их использования. Поэтому управление агентами становится отдельным направлением в корпоративных технологиях.