Manticore Search 29.9.0: новые функции для векторов и производительности

Обновление Manticore Search 29.9.0 значительно расширяет возможности работы с векторными эмбеддингами. Теперь поддерживаются так называемые «chunked auto-embeddings» и «multi-vector auto-embeddings», что позволяет более гибко работать с большими текстовыми блоками и несколькими векторными представлениями для одного документа. Кроме того, появилась возможность задавать ограничения на входные данные для моделей, генерирующих эмбеддинги.

В новой версии также оптимизирован механизм доступа к колоночным атрибутам: по умолчанию включён mmap-доступ. Это изменение направлено на повышение общей производительности системы за счёт более эффективного использования оперативной памяти при работе с большими объёмами данных. Разработчики также внесли ряд исправлений, касающихся гибридного поиска, поиска ближайших соседей (KNN), пакетной загрузки данных и группировки результатов, что повышает стабильность и точность работы поискового движка.

Среди других новшеств — поддержка идентификаторов в формате UTF-8. Это облегчает работу с данными на различных языках и расширяет возможности интеграции Manticore Search в проекты с международной аудиторией. Все эти изменения делают платформу более мощной и удобной для решения сложных задач по поиску и анализу данных.