用語集/テクノロジーとAI/生成AI

知識蒸留

ちしきじょうりゅうKnowledge distillation

既存の「教師」モデルの出力や振る舞いを手がかりに、別の「生徒」モデルを学習させる技術。元の学習素材を直接使わなくても、能力の一部が伝わり得る。

既存のモデルを教師とし、その出力などを利用して別のモデルを訓練する手法。教師に近い振る舞いを、異なる規模や設計のモデルで実現するために使われる。元の学習データ学習データがくしゅうデータTraining DataAIがパターンや特徴を学ぶために使うデータ。音楽では楽曲や音声などが対象になり得るが、個別サービスの収集内容や利用条件は、開示資料などによる確認が必要となる。用語集で詳しくをそのまま移すこととは異なる。

音楽生成では、作曲や編曲、音の生成に関する振る舞いがどのように伝わるかが論点になる。今回の訴状は、旧モデルが無許諾の録音から得た能力をv6へ渡したと主張しているが、これは原告側の主張であり、侵害の認定ではない。

知識蒸留という技術名だけで適法・違法が決まるわけではない。日本で議論する場合も、教師モデルの来歴、実際に使った情報、生成物の内容、適用される法制度を分けて考える必要がある。

RELATED関連する用語

合成データごうせいデータモデルの重みもでるのおもみ

IN ARTICLESこの用語が出てくる記事