IT-компания рассказала о неожиданных сбоях в LLM-конвейере закупок
Отечественная IT-компания выявила шесть критических точек отказа в своём LLM-конконвейере для автоматического поиска и анализа закупок, большинство из которых оказались связаны не с промтами, а с инфраструктурой и данными.
Система компании занимается автоматизированным поиском тендеров, ежедневно сканируя данные с шестнадцати закупочных площадок. После первичной фильтрации названий, новые заявки поступают на этап предварительной оценки, где недорогая языковая модель определяет их релевантность. Для тендеров-кандидатов далее выкачивается полная документация, которую средняя LLM обрабатывает, собирая единый контекст.
Выявленные проблемы были связаны с ошибками парсинга, изменениями в форматах данных на площадках, нестабильностью работы агрегатора и неверной обработкой объёмной документации. Опыт компании демонстрирует, что внедрение ИИ в бизнес-процессы требует комплексного подхода к надёжности всех компонентов системы, а не только оптимизации моделей или промтов.


Комментарии (0)
Без регистрации. Комментарии проверяются автоматически перед публикацией.
Пока нет комментариев. Будьте первым!