
UC Berkeley は RAG システム向けのオープンソースベクトルインデックス LEANN を発表しました。MarkTechPost によると、縮小されたグラフを格納し、埋め込みはクエリ処理時に再計算します。
В описанном сценарии индекс для 60 млн фрагментов уменьшает объём с 201 до 6 ГБ. При этом заявлено соответствие точности HNSW на уровне 90% полноты поиска при использовании 4 вместо 188 ГБ, но поиск занимает секунды.
このアプローチの価値は、ストレージ容量と応答速度のトレードオフにあり、提供されている資料は独立した情報源によるもので、テスト条件の完全な検証には注意が必要です。
編集部コメント
なぜ重要か
予想される影響は、遅延を犠牲にしてスペースを節約するインデックスへの関心が高まること。特に速度要件が低いシナリオでの注目度が高い。コード、テスト方法、独立した比較結果の公開が次の検証サインになるだろう。宣称された結果が他のデータセットや負荷でどれだけ再現性があるかには大きな不確実性がある。