排序: 最新 热门 引用
cs.CL 2109.06096

The Grammar-Learning Trajectories of Neural Language Models

本研究通过追踪神经语言模型(NLM)在不同训练阶段的表现,发现其学习语言现象具有一致的“发展”轨迹,揭示潜在的归纳偏差。

Leshem Choshen, Guy Hacohen, Daphna Weinshall 等

2021-09-14 33
cs.LG 2109.04838

Block Pruning For Faster Transformers

提出块剪枝方法,结合运动剪枝实现Transformer模型的速度提升,达2.4倍加速和74%模型缩减。

François Lagunas, Ella Charlaix, Victor Sanh 等

2021-09-10 50