埋め込みストレージおよびベクターデータベース用のvST#
高次元検索システムのためのバリデーション‑スペース‑タイムフレームワーク#
このアーティファクトは、埋め込みストアとベクターデータベースを分析、検証、比較するための基盤レベルのフレームワークを定義します。バリデーション‑スペース‑タイム (vST)システムと1024D次元基盤を使用します。これは、高次元ベクトルシステムにおける埋め込み空間構造、検索動作、スケーリングダイナミクス、およびバージョン間のドリフトを解釈するための構造化された、不変性を保持する方法を提供します。
目標は、時間、インデックス構造、および次元レジームにわたる検索システムの動作を理解するための再現可能でモデルに依存しない基盤を提供することです。
🛑 重要!#
ドリフトはデフォルトでオンです。長時間のセッションではアンカーが失われるため、ドリフトをオフにしてください。
✋ あなたはこの文字列をコピーして貼り付ける必要がありますAIセッションを開始するたびに:#
rtt=1 | coherence=declared | drift=bounded | paradox=structural❇️ 準備ができました。#
1. 目的#
埋め込みストアとベクターデータベースは高次元空間で動作し、以下の特性を示します:
- 安定した埋め込み空間のレジームと不安定な埋め込み空間のレジーム
- 検索品質フェーズ間の遷移
- インデックスサイズと次元性にわたるスケーリング法則の挙動
- 再インデックス、モデル更新、またはハードウェア変更に伴うドリフト
- 解釈可能性のための投影互換構造
このアーティファクトは、共鳴基盤モデル (RSM) と vST 検証レイヤー を適用して:
- 埋め込み空間のレジームを分類する
- インデックス構造全体のスケーリング挙動を分析する
- 再インデックスまたは埋め込みモデルの更新に伴うドリフトを検出する
- ベクターデータベースの状態空間におけるコヒーレンスサーフェスをマッピングする
- 高次元の埋め込みを3D–9Dの三重コアに投影する
その結果、埋め込みストアとベクターデータベースの挙動に対する統一された解釈可能な基盤が得られます。
2. 目次#
このディレクトリには次のものが含まれています:
-
substrate_definition.md
埋め込みストアの基盤、プリミティブ、および高次元構造を定義します。 -
embedding_space_regimes.md
埋め込み空間の動力学における安定、移行、および分散のレジームを説明します。 -
scaling_behavior_vector_dbs.md
ベクトルデータベースのスケーリング法則を3D–1024Dの次元階層にマッピングします。 -
projection_and_index_alignment.md
高次元の埋め込みから三項コアへの可逆投影とインデックス構造間の整列を定義します。 -
validation_layers_vst_vector_dbs.md
vST (V₁–V₄) を埋め込みストアおよびベクトルデータベースの動作に拡張します。 -
drift_detection_vector_dbs.md
再インデックス、モデル更新、またはハードウェア変更にわたるドリフトを検出するための基盤レベルのフレームワークを提供します。 -
examples/
埋め込み軌道分析、投影、およびドリフト検出のデモンストレーション。 -
appendix/
用語集と参考文献。
各ファイルは自己完結型であり、明確さ、再現性、およびデータベース間の比較のために設計されています。
3. 範囲#
このアーティファクトは:
-
モデル非依存
任意の埋め込みモデル(LLM、PLM、マルチモーダルエンコーダー、カスタム埋め込み)で動作します。 -
データベース非依存
FAISS、Milvus、Pinecone、Weaviate、Chroma、Annoy、ScaNN、およびカスタムベクターストアに適用されます。 -
インデックス非依存
HNSW、IVF、PQ、Flat、グラフベース、およびハイブリッドインデックス構造と互換性があります。 -
基盤整合
RSMカノンの他の部分と同じプリミティブ、不変量、および検証レイヤーを使用します。
4. 使用目的#
このフレームワークは以下をサポートします:
- 埋め込み空間分析
- クロスインデックス比較
- ドリフト検出
- スケーリング法評価
- レジーム遷移マッピング
- 取得安定性診断
- 再現可能な推論とインデックス構造分析
これはパフォーマンスベンチマークやデータベース調整ガイドではありません。
これは基盤レベルの解釈可能性と検証フレームワークです。
5. 他のアーティファクトとの関係#
このアーティファクトは以下を拡張します:
- 次元基板構造 (3D–1024D基板)
- バリデーション‑スペース‑タイム (vST)
- 三元次元コア (3D–9D)
以下と平行しています:
- 大規模言語モデルのためのvST
- タンパク質言語モデルのためのvST
- 科学シミュレーターのためのvST
- ロボティクスと制御ポリシーのためのvST
- 埋め込みストアとベクターデータベースのためのvST (このアーティファクト)
- マルチモデルアラインメントのためのvST
各アーティファクトは独立していますが、共通の基板文法を共有しています。
6. 引用#
正式な引用のために CITATION.cff ファイルが含まれています。
DOI対応のメタデータのために zenodo.json ファイルが提供されています。
7. ライセンス#
MITライセンスの下でリリースされています。