
Улучшенный векторный поиск по длинным документам: стратегии чанкинга внутри Manticore Search
Модель эмбеддингов читает только первые несколько сотен токенов документа, а остальное молча отбрасывает. Теперь Manticore Search сам разбивает длинные документы при INSERT: добавьте chunk_strategy к векторному столбцу и выберите одну из пяти стратегий чанкинга. Без отдельного этапа предобработки и без библиотек для разбиения текста. На нашей документации ...









