インデックスへスキップ

GLOSSARY

モデルマージ

複数のファインチューン済みモデルの重みを一つに統合する手法。追加の学習コストなしでスキルを混ぜられます。

同じベースのファインチューン同士は骨格を共有するため、重みを平均・タスク算術・TIES マージで統合でき、複数のスキルを持つ一つのモデルになります — 数学チューターとコーダーが一つのファイルに、学習コストゼロで。オープンコミュニティは頻繁にマージし、mergekit が標準ツールキットです。

注意点は干渉です。矛盾するスキルは混濁したハイブリッドを生み、ベンチマークは良くても使うと劣るマージもあります — 評価が依然すべてを決めます。マージにはモデルの系譜とライセンスの未解決問題もあり、商用出荷前の確認が必要です。

関連する用語

この技術を使うツール

関連カテゴリー