Meta AI发布多token预测技术

Meta AI的法国团队推出了一种新型大模型，采用多token预测技术，在编程和算法任务上表现出色。这种方法通过并行预测多个未来token，增强了模型对长距离依赖的理解，并在某些情况下加快了推理速度。尽管在自然语言任务上的提升有限，但这一创新为大模型的未来发展打开了新思路。
来源：https://mp.weixin.qq.com/s/GuIqBdj4MteR9eBlTesdBA