Когда модель уходит на покой — миграция LLM в 22 555 коммитах
Саммари
Приложения на коммерческих LLM-API живут по расписанию провайдера: от года до двух недель. Работа измеряет, что реально происходит в момент отключения модели — и обнаруживает, что 82% миграций случаются слишком поздно, когда код уже сломался.
Из этого следует: срок уведомления провайдера — практический индикатор риска. Короткое окно (дни–недели) означает, что слоя абстракции у вас фактически нет.
На практике для Revit-инструментов: если агент вызывает LLM для классификации или планирования, идентификатор модели в конфиге надо вынести в переменную окружения и завести проверку версии при старте — иначе отключение модели превращается в инцидент у пользователя.
Важный нюанс: 8% меняют провайдера при миграции. То есть «у нас есть abstraction layer» на практике не означает, что им можно пользоваться в кризисе.