全球首个芯片设计开源大模型诞生,5年重塑5000亿美元半导体行业
在Semicon West 2024大会上,Aitomatic携手FPT Software推出了SemiKong,这是全球首个专为芯片设计打造的AI开源大模型。SemiKong针对半导体行业的特定任务进行了优化,其性能超越了现有的通用大模型,例如GPT和Llama 3。该模型的代码和权重已在Hugging Face和GitHub上公开,便于公众获取。全球首个芯片设计开源大模型诞生,5年重塑5000亿美元半导体行业!
Aitomatic的CEO Christopher Nguyen强调,这一开源举措在历来因保密文化著称的半导体行业中是前所未有的。他认为,通过开源分享基础研究的成果,其长期益处远超保密所能带来的价值,同时也鼓励在更具体的层面进行专有创新和竞争。Christopher Nguyen还对参与这一开创性合作的AI Alliance成员表达了感谢,并对Llama-3等开源基础模型以及LeCun等人的贡献给予了高度评价。
SemiKong基于Llama 3 Instruct进行了微调,拥有8B参数,它的训练流程包括领域知识预训练、指令数据集自我微调及模型合并与量化。实验证明,SemiKong在半导体领域的基准测试中优于多数通用语言模型,为芯片公司提供了定制化专有模型的强大基础。它在精确度、相关性及半导体工艺理解方面展现出了显著提升。
业界越来越认同,即便是规模较小的模型,在特定领域的应用也能超越更大型的通用模型。SemiKong凭借其8B参数量,不仅加速了半导体行业的创新步伐,还有望显著降低成本,从而促使更强大、价格更亲民的消费电子产品面世。Aitomatic正利用SemiKong开发特定领域的AI代理,以解决复杂制造问题。
未来规划中,更强版本的SemiKong预计今年12月推出,而针对特定工艺的模型则将于9月面世。这一系列进展标志着半导体行业正式步入一个由人工智能驱动的新时代。AI Alliance的开放合作模式被广泛认为是推动此类创新的关键,多位行业领袖对此给予了高度评价,认为SemiKong是人工智能在半导体制造业应用的重要里程碑,预示着一个充满可能性的新纪元的到来。FPT Software作为合作伙伴,期待这一模型能促进全球人工智能与半导体技术的深度融合,并巩固其在行业中的领先地位。
全球首个芯片设计开源大模型诞生,5年重塑5000亿美元半导体行业。