Исследование показывает, что успех ИИ агентов на длительных задачах может быть описан простой математической моделью с постоянной скоростью отказов, что ведет к экспоненциальному убыванию вероятности успеха увеличением продолжительности задачи.
Успех по времени для ИИ агентов удваивается каждые 7 месяцев, но модель показывает значительный разрыв между 50% и 80% уровнем успеха.
Используемая модель постоянной скорости отказов предполагает, что способность ИИ агентов выполнять задачу связана с наличием множества последовательных подзадач, в каждой из которых есть вероятность неудачи.
На основании постоянной скорости отказов можно сделать прогнозы для временных горизонтов с различными уровнями успеха (например, 90% и 99%).
Get notified when new stories are published for "🇷🇺 Hacker News Русский"