完胜GPT-4，秒杀闭源模型！Code Llama神秘版本曝光Meta开源的Code Llama即将迎来大波二创，WizardCoder以73.2%的胜率碾压GPT-4。OpenAI员工爆出Llama 3能打GPT-4...
完胜GPT-4，秒杀闭源模型！Code Llama神秘版本曝光
Meta开源的Code Llama即将迎来大波二创，WizardCoder以73.2%的胜率碾压GPT-4。OpenAI员工爆出Llama 3能打GPT-4，仍将开源。
发布仅2天，Code Llama再次引爆AI编码的变革。
还记得Meta在Code Llama论文中出现的能够全面持平GPT-4的神秘版本Unnatural Code Llama吗？
大佬Sebastian在自己博客里做出解释：
是使用了1万5千条非自然语言指令对Code Llama- Python 34B进行微调之后的版本。
Meta通过在论文里隐藏这样一条非常隐蔽的信息，似乎是想暗示开源社区，Code Llama的潜力非常大，大家赶快微调起来吧！
于是刚刚，基于Code Llama微调的WizardCoder 34B，在HumanEval基准上，直接打败了GPT-4。
具体来说，WizardCoder以73.2%的胜率碾压GPT-4的3月份版本（67%）。
另外，WizardCoder 34B的性能超过了最新版本GPT-3.5，以及Claude 2。
编程大模型WizardCoder，是由微软联合香港浸会大学在6月发布的。据称，微调的13B/7B版本即将推出。
英伟达顶级科学家Jim Fan表示，这基本上是「Unnatural Code Llama」的开放版本。
虽然基准数据看起来不错，但HumanEval只测试了窄分布，可能会过度拟合。自然场景下的数据测试才是真正重要的。编码基准需要重大升级。
Code Llama神秘版本诞生？网页链接
版权声明： 发表于 2023-08-28 8:13:55。
转载请注明：完胜GPT-4，秒杀闭源模型！Code Llama神秘版本曝光Meta开源的Code Llama即将迎来大波二创，WizardCoder以73.2%的胜率碾压GPT-4。OpenAI员工爆出Llama 3能打GPT-4... | AI 時.空 | AiTime.Space
转载请注明：完胜GPT-4，秒杀闭源模型！Code Llama神秘版本曝光Meta开源的Code Llama即将迎来大波二创，WizardCoder以73.2%的胜率碾压GPT-4。OpenAI员工爆出Llama 3能打GPT-4... | AI 時.空 | AiTime.Space
暂无评论...