当前位置: 首页 > news >正文

首次使用“非英伟达”芯片!OpenAI租用谷歌TPU,降低推理计算成本

OpenAI近期开始租用谷歌TPU芯片,这是该公司首次大规模使用非英伟达芯片。除了OpenAI外、苹果、Safe Superintelligence和Cohere等公司也一直租用谷歌云的TPU。

英伟达的芯片主导地位正被侵蚀,OpenAI租用谷歌TPU,为首次大规模使用“非英伟达”芯片。

周六,据媒体报道,作为全球最大的人工智能芯片客户之一,OpenAI近期开始租用谷歌的TPU芯片为ChatGPT等产品提供算力支持,这是该公司首次大规模使用非英伟达芯片。

据知情人士透露,此次合作安排使得OpenAI缓解对微软数据中心的依赖,同时为谷歌的TPU提供了挑战英伟达GPU市场主导地位的机会。OpenAI希望通过谷歌云租用的TPU芯片降低推理计算成本。

随着ChatGPT付费订阅用户从年初的1500万增长至超过2500万,加上每周数亿免费用户的使用,OpenAI的算力需求正在快速攀升。

值得一提的是,越来越多公司正在开发推理芯片以减少对英伟达的依赖并长期降低成本。亚马逊和微软,以及OpenAI和Meta等大型AI推理芯片都已启动自主研发推理芯片的计划,微软造芯计划受挫,Maia 100目前仅用于内部测试,Braga的AI 芯片面临至少六个月的延迟,且预计其性能将远低于英伟达Blackwell芯片。

OpenAI需求激增推动转向谷歌芯片

OpenAI主要通过微软和甲骨文租用英伟达服务器芯片来开发训练模型并为ChatGPT提供算力。 据了解,该公司去年在此类服务器上的支出超过40亿美元,其中训练和推理成本各占一半,预计2025年在AI芯片服务器上的支出将接近140亿美元。

谷歌TPU转向的直接推动因素是今年早些时候ChatGPT图像生成工具的爆红,这给OpenAI在微软的推理服务器带来了巨大的压力。为了应对不断增长的计算需求和成本压力,OpenAI首先寻求了谷歌云的支持。

据谷歌云员工透露,谷歌虽然向该竞争对手开放其强大的TPU芯片,但还是会将更强大的TPU保留给自己的AI团队开发,然后供Gemini模型使用。

谷歌大约10年前就开始研发TPU芯片,并从2017年开始向训练自有AI模型的云客户提供这一服务。除了OpenAI外、苹果、Safe Superintelligence和Cohere等公司也一直租用谷歌云的TPU,部分原因是这些公司的一些员工在谷歌工作,熟悉TPU的运作方式。

据知情人士透露,同样是全球最大AI芯片客户之一的Meta近期也考虑使用TPU。

此外,谷歌云还向其客户出租英伟达支持的服务器,因为英伟达芯片是行业标准,这样做带来的收益仍然比出租TPU多得多。开发者对控制这些芯片的专用软件更加熟悉。谷歌此前已向英伟达订购了超过100亿美元的最新Blackwell服务器芯片,并于今年2月开始向部分客户提供。

http://www.lqws.cn/news/579511.html

相关文章:

  • 成像光谱遥感技术中的AI革命:ChatGPT在遥感领域中的应用
  • (LeetCode 每日一题) 594. 最长和谐子序列 (哈希表)
  • redis相关内容以及安全知识
  • 开疆智能CCLinkIE转Canopen网关连接UV紫外灯配置案例
  • python包管理工具uv VS pip
  • iOS 接口频繁请求导致流量激增?抓包分析定位与修复全流程
  • 人工智能和云计算对金融未来的影响
  • 力扣 hot100 Day30
  • 键盘第一下无反应
  • Armbian 25.5.1 Noble Gnome 开启远程桌面功能
  • CMake中WIN32和CMAKE_HOST_WIN32的使用差异
  • Pytest pytest_runtest_makereport 钩子函数:测试失败信息收集与处理 —— Python 实践
  • (5)pytest-yield操作
  • Python量化金融:从数据到策略的工程实现
  • Serverless 架构入门与实战:AWS Lambda、Azure Functions、Cloudflare Workers 对比
  • CH32H417 替代 Cypress FX3 及优势探讨
  • RF100:多领域目标检测基准数据集(猫脸码客第284期)
  • Ubuntu更换Home目录所在硬盘的过程
  • 多重性校正:临床试验统计的关键防线
  • 文心大模型正式开源,开启AI普惠新时代
  • langchain从入门到精通(二十)——自定义文档加载器使用技巧及Blob 方案介绍
  • 佰力博科技与您探讨阻抗谱测量的基本原理和测量方法
  • web服务器搭建nginx
  • [特殊字符]【联邦学习实战】用 PyTorch 从 0 搭建一个最简单的联邦学习系统(含完整代码)
  • Python-Word文档、PPT、PDF以及Pillow处理图像详解
  • Objective-c把字符解析成字典
  • Python 数据分析与机器学习入门 (六):Seaborn 可视化技巧,图表更美观
  • 车间管理系统架构深度解析:高可用设计+工具技术选型指南
  • 机器学习,支持向量机svm和决策树xgboost介绍
  • WINDOWS最快布署WEB服务器:apache2