strategy-fusionを行わないモデルでablationする - Githubissues

sts11142 / model_based_misc

0 stars 0 forks source link

strategy-fusionを行わないモデルでablationする #7

Open sts11142 opened 2 weeks ago

sts11142 commented 2 weeks ago

何との比較か

cfm-ours1 ctx-knowledge-once-strategyモデル

models-CFM-Ours_ver1 3 drawio

前提

より後段でfusionするほど影響が大きいことは確認済み
一見すると壊れそうなモデルだが、結果上は大きく壊れることはなく、むしろ上手くいっている
- 戦略ベクトル：外挿位置がより後段の方が、人手評価の数値に改善が見られる

確認したいこと

そもそもstrategy fusionが結果にどの程度良い影響を与えているのか？
- baselineでは検証済みのablationだが、cfmモデルではまだ未検証だった

sts11142 commented 2 weeks ago

結果でた