英特尔发布了“英特尔PyTorch v2.3扩展”,以继承早期v2.1衍生的扩展。随着这一针对PyTorch 2.3的更新扩展,英特尔正在围绕大型语言模型(LLM)推出更多优化。
“英特尔PyTorch扩展”仍然是英特尔优化的下游软件,可通过PyTorch框架最大限度地提高英特尔CPU性能。“英特尔PyTorch扩展”附带了更多AVX-512 VNNI优化、英特尔AMX支持、英特尔XMX对英特尔dGPU的支持,以及其他改进,可最大限度地增强英特尔硬件上的PyTorch功能。
随着v2.3的扩展,出现了新的大型语言模型优化功能,该功能名为LLM优化API,用于对常用LLM进行模块级优化,更新捆绑的Intel oneDNN神经网络库,添加TorchServer CPU示例、其他LLM性能优化,以及改进的警告和日志记录信息。
Those making use of PyTorch on Intel platforms can find the updated open-source extension on GitHub.
© 版权声明
本文中引用的各种信息及资料(包括但不限于文字、数据、图表及超链接等)均来源于该信息及资料的相关主体(包括但不限于公司、媒体、协会等机构)的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理!
THE END