IT-компания рассказала о неожиданных сбоях в LLM-конвейере закупок
Отечественная IT-компания выявила шесть критических точек отказа в своём LLM-конконвейере для автоматического поиска и анализа закупок, большинство из которых оказались связаны не с промтами, а с инфраструктурой и данными.
Система компании занимается автоматизированным поиском тендеров, ежедневно сканируя данные с шестнадцати закупочных площадок. После первичной фильтрации названий, новые заявки поступают на этап предварительной оценки, где недорогая языковая модель определяет их релевантность. Для тендеров-кандидатов далее выкачивается полная документация, которую средняя LLM обрабатывает, собирая единый контекст.
Выявленные проблемы были связаны с ошибками парсинга, изменениями в форматах данных на площадках, нестабильностью работы агрегатора и неверной обработкой объёмной документации. Опыт компании демонстрирует, что внедрение ИИ в бизнес-процессы требует комплексного подхода к надёжности всех компонентов системы, а не только оптимизации моделей или промтов.
Часто задаваемые вопросы
В чем заключается проблема LLM-конвейера?
Проблема заключается в шести критических точках отказа, которые мешают автоматизированному поиску и анализу закупок, в основном из-за инфраструктурных и данных проблем.
Какие этапы включает LLM-конвейер компании?
Конвейер включает ежечасное сканирование 16 закупочных площадок, фильтрацию по названию, предскоринг с помощью недорогой LLM, выкачивание документации и её обработку средней LLM.
Какие причины сбоев были выявлены в LLM-конвейере?
Причины включают ошибки парсинга, изменения в форматах данных на закупочных площадках, нестабильность агрегатора и некорректную обработку больших объёмов документации.
Источник: Habr · Rusability ИИ


Комментарии (0)
Без регистрации. Комментарии проверяются автоматически перед публикацией.
Пока нет комментариев. Будьте первым!