Инженер Хабра протестировал производительность n8n с 60 млн токенов LLM

В рамках инженерного эксперимента автор на Хабре исследовал возможности платформы n8n для обработки больших объёмов данных, используя модель stealth/ox-alpha. Целью стало определение производительности и масштабируемости n8n при работе с крупными языковыми моделями (LLM) и значительным числом параллельных операций.

В ходе работы было задействовано 127 нод в n8n, через которые прошло 60 миллионов токенов. Этот тест помог оценить, как платформа справляется с нагрузкой при интенсивном использовании LLM-инструментов в сочетании с регулярными выражениями для гибридного извлечения данных.

Результаты эксперимента демонстрируют практический потенциал n8n для автоматизации сложных рабочих процессов, связанных с обработкой естественного языка. Это может быть полезно для разработчиков, работающих с анализом больших текстовых массивов и интеграцией LLM в свои системы.