宝くじ仮説の概要とGemma 4 E2Bの再学習を伴わない枝刈り実験
宝くじ仮説をきっかけに、Gemma 4 E2Bを再学習せずに枝刈りした。M3・16GBのMacで行列ごと・全体・ランダムの3方式を比較し、WikiText-2のperplexityと劣化が急になる範囲を記録する。
COLLECTION
宝くじ仮説をきっかけに、Gemma 4 E2Bを再学習せずに枝刈りした。M3・16GBのMacで行列ごと・全体・ランダムの3方式を比較し、WikiText-2のperplexityと劣化が急になる範囲を記録する。