is_amplify_history 和 restrict_self_attn 问题

[571129857]

is_amplify_history: false
restrict_self_attn: false
大佬，现在的配置文件中这两个参数默认配置都是false，想请教下现在的base权重使用这两个训练策略了吗？

[SHYuanBest]

is_amplify_history: false restrict_self_attn: false 大佬，现在的配置文件中这两个参数默认配置都是false，想请教下现在的base权重使用这两个训练策略了吗？

感谢关注！消融实验的时候用了