OpenCoder：全面开源的高性能代码大语言模型

OpenCoder 是一项由墨尔本大学和复旦大学的研究人员主导的项目，推出了一系列高性能的代码大语言模型（CodeLLM）。该项目不仅在性能上可与领先模型媲美，还全面开源了模型权重、训练数据和数据处理流程，旨在推动代码 AI 的可复现发展。关键技术包括高质量的数据清洗、合成数据的使用及两阶段微调策略。OpenCoder 在多个评估基准上显著超越了现有开源模型，展现了卓越的多语言性能。
来源：https://mp.weixin.qq.com/s/qu-g7S_bWhtQXeqRob_gFQ