美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。
苹果基础模型的建模概述苹果官方发布论文
苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。
苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。
一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。
今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。
包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。
心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。
谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。
今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。
谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。
尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。
“虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块‘肥肉’,但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。”潘攻愚分析称。
Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。
凡注有"环球传媒网 - 环球资讯网 - 环球生活门户"或电头为"环球传媒网 - 环球资讯网 - 环球生活门户"的稿件,均为环球传媒网 - 环球资讯网 - 环球生活门户独家版权所有,未经许可不得转载或镜像;授权转载必须注明来源为"环球传媒网 - 环球资讯网 - 环球生活门户",并保留"环球传媒网 - 环球资讯网 - 环球生活门户"的电头。
- 苹果在谷歌芯片上训练AI,打响抛弃英伟达GP2024-07-30
- 晋商银行太原富力华庭社区支行终止营业,102024-07-30
- 视点!晋商银行太原富力华庭社区支行终止营2024-07-30
- 世界热头条丨晋商银行太原富力华庭社区支行2024-07-30
- 存款“降息”连锁反应立竿见影 银行大额存2024-07-30
- 存款“降息”连锁反应立竿见影 银行大额存2024-07-30
- 中煤财险苦熬七年,终迎第二任总经理!中煤2024-07-30
- 中国人寿财险深耕田间地头 护航“三农”发2024-07-30
- 西平县嫘祖镇组织开展2024年“多彩假期‘2024-07-30
- 上海:集中资源打造兼具投资、运营功能的国2024-07-30
- 全球视点!港股大众公用盘中一度涨超40% 2024-07-30
- 中金:以旧换新有望拉动下半年大型家电零售2024-07-30
- 周皓:黄金兼具金融和消费属性,企业应根据2024-07-30
- 周皓:黄金兼具金融和消费属性,企业应根据2024-07-30
- 暑期旅游市场“量涨价跌”:供需调整下的价2024-07-30
- 推动科技创新力向产业竞争力转化2024-07-30
- 国家统计局:上半年文化企业发展平稳向好2024-07-30
- 2023年我国“三新”经济增加值相当于国内生2024-07-30
- 未来生活新伙伴:讯飞星火大模型V4.0,智能2024-07-30
- 西藏:2023年数字经济增加值规模创历史新高2024-07-30
- 今头条!各地以工业景点为抓手 探索实践工2024-07-30
- 环球滚动:英国财政大臣:上届政府留下220亿2024-07-30
- 西平县柏苑街道扎实开展反诈宣传进社区活2024-07-30
- 外媒:黎巴嫩南部遭以色列无人机袭击 致12024-07-29
- 天天观热点:高温天气催热宠物“降温经济”2024-07-29
- 美国马里兰州一购物中心发生枪击致1人死亡2024-07-29
- 2024年中国网络文明大会将于8月28日至29日2024-07-29
- 今日报丨在成都,美国华裔青少年盯上“老玩2024-07-29
- 世界微速讯:飞抵虹桥国际机场 第7架国产2024-07-29
- 跨越三千里,共护“小候鸟”平安过暑假2024-07-29
资讯
焦点
- 上海:集中资源打造兼具投资、运营功能的国有资本投资运营专业平台和高能级基金管理机构
- 中金:以旧换新有望拉动下半年大型家电零售恢复增长 看好海信家电、海尔智家及TCL电子|天天最资讯
- 热门:省联社改革更进一步!25家银行拟合并组建河南农商银行
- 【全球独家】南阳市卧龙区法院开展家庭教育普法宣传活动
- 邓州市体育事业发展中心召开社会领域团体专项监督治理工作会 焦点要闻
- 驻马店市驿城区老街街道:环境卫生整治 擦亮“幸福和谐星”底色
- 驻马店市卫健委组织专家组莅临西平县妇幼保健院检查指导妇幼健康相关项目工作
- 14一15岁叛逆期厌学怎么办 天天实时
- 焦点资讯:驻马店开发区金河办事处小界牌社区:加强水域巡查 筑牢“安全防线”
- 视焦点讯!快看!“机器狗”来了 守护万家清凉