手机跑大模型提速4-5倍!微软亚研院开源新技术 有CPU就行

手机跑大模型提速4-5倍!微软亚研院开源新技术 有CPU就行

有CPU就能跑大模型,性能甚至超过NPU/GPU!没错,为了优化模型端侧部署,微软亚洲研究院提出了一种新技术——T-MAC。这项技术主打性价比,不仅能让端侧模型跑得更快,而且资源消耗量更少。咋做到的??在CPU上高效部署低比特大语言模型一般来说,要想在手机、PC、树莓派等端侧设备上使用大...
第四范式与临港集团战略合作:华东区域总部落户拟定,还包括多项共建项目

第四范式与临港集团战略合作:华东区域总部落户拟定,还包括多项共建项目

决策类AI市场参与者、港股上市公司第四范式(06682.HK)将在临港集团相关园区合作建立“三中心一平台”,即人工智能产业赋能中心、人工智能创新研发中心、人工智能创投孵化中心、国际数据及算力综合服务平台。澎湃新闻记者从临港集团方面获悉,近日临港集团与第四范式举行了战略合作签约仪式。双方将开展深度战略...
  • 1
  • 共 1 页