零一万物回应“抄袭LLaMA”:尊重开源社区反馈,将更新代码


11月14日,钛媒体App报道称,李开复的ai企业开源模型被指完全使用了LLaMA架构,只修改了两个张量名。对此,万物表示:GPT是业内公认的成熟建筑,Llama对GPT做了总结。大型R&D模型的结构设计以GPT成熟的结构为基础,并借鉴了业内顶尖水平的公开成果。因为大规模模型技术的发展还处于起步阶段,符合行业主流的结构更有利于整体的适应和未来的迭代。同时,团队在对模型的理解和训练上做了大量的工作,继续探索模型结构的本质突破。万件事还表示,在大量训练实验的过程中,由于实验执行的需要,对代码进行了重命名,并将尊重开源社区的反馈,更新代码,更好地融入变形金刚生态系统。