検索

学習にも調整にも使わず、最終的な性能を公平に評価するためのデータ。

学習中のモデルの性能を確認し、ハイパーパラメータの調整に使うデータ。訓練には直接使わない。

[[embedding]]で数値化したデータを保存し、意味の近さで高速に検索できるデータベース。RAGの基盤。

実データの代わりにAIが人工的に作り出す学習用データ。

機械学習に用いるデータの集まり。通常は訓練・検証・テストに分けて使う。

学習に使っていない未知のデータに対して、モデルが正しく働く能力。