Listen

Description

本期播客讨论了通过推测解码实现Transformer模型的快速推理,这是一种在不改变输出的情况下加速自回归模型采样的方法。