白鲸出海—让中国互联网服务世界

{{user_info.user_name}}
您当前是白鲸会员
开通VIP,享受更多服务
会员到期时间:{{user_info.expire_date*1000 | formatDatebyDay}}
合作查看次数: {{users_vip_equities.view_cooperation || 0}}次
合作发布次数: {{users_vip_equities.release_cooperation || 0}}次
公司查看次数: {{users_vip_equities.view_company || 0}}次
报告下载次数: {{users_vip_equities.download_book || 0}}次
鲸币数量:{{user_info.jingbi}}
发布
当前位置:白鲸出海 > 资讯 > 正文

谷歌云开启GPU算力狂飙,驱动AIGC时代加速到来

卫小京  • 

随着人工智能的飞速发展,尤其是大型 AI 模型、AIGC 的崛起,对 AI 算力产生了巨大的需求。以 GPU 为核心的算力供给,已经成为大模型、AIGC 乃至整个智能产业发展的关键基础设施。因此,对于有志于在大模型产业掘金的企业,寻找到合适的算力合作伙伴,是其发展业务的重要基础。那么,应该如何筛选 GPU 算力合作伙伴呢?

作为全球云计算巨头的谷歌云,在 GPU 算力供应方面有三大优势:算力供应充足,在全球主要区域都有 GPU 现货;能提供多款高端 GPU,包括 A100、L4 等;价格实惠,能帮用户节省超过 50% 的成本。

全球大量 GPU 现货,多款高端 GPU

进入 2023 年,ChatGPT 为代表的大模型应用以极快的速度渗透进各行各业,极大的增加了对 AI 算力的需求,“算力荒”现象日益凸显,甚至出现 GPU“一芯难求”的困境。全球各个互联网巨头、云厂商、AI 企业等都加入了抢购 GPU 的行列,典型的如马斯克紧急抢购 1 万块 GPU。就国内市场来看,国内云厂商拥有超过 1 万枚 GPU 的企业预计不超过 5 家,然而有 GPU 算力需求的企业则早已超过 10 万家,且这个数据还在快速增长。快速膨胀的算力需求,让云厂商的 GPU 算力供应捉襟见肘。巨头的处境尚且如此,中小型 AI 企业尤其是创业公司的算力短缺现象则更加严重。

在这样的算力短缺环境中,拥有大量 GPU 储备的谷歌云无疑是一个很好的合作伙伴。目前,谷歌云可以提供共 7 种类型的英伟达 GPU,涵盖 A100、L4、T4、V100、K80、P100、P4,可满足多样化的应用需求。

是5.png

谷歌云所支持的英伟达 GPU 类型

并且,谷歌云的 GPU 不仅种类丰富,供应能力也全球领先。以 A100 GPU 的 A2 机型为例,谷歌云可覆盖亚太、欧洲、北美的 8 个 Region,15 个 zone;其他类型 GPU 则可覆盖 21 个 region,51 个 zone。对于有出海需求的企业,谷歌云可在全球为其提供充足的 GPU 算力供应,支撑其业务的全球化布局。

是6.png

谷歌云的全球计算资源分布

需要指出的是,要更好推动大模型、AIGC 产业的发展,GPU 不仅要量足,还要质优,即不断提升 GPU 计算性能。谷歌云在提供先进 AI 算力方面,一直走在行业前列。2023 年 4 月 4 日,谷歌云率先发布业界首个由英伟达最新型号 L4 Tensor Core GPU 驱动的云虚拟机 G2,专为 AIGC 等大型推理 AI 工作负载而构建。

根据测算,如果从英伟达 T4 GPU 切换到 L4 GPU,可以获得 2 -4 倍的性能提升;通过从英伟达A10G GPU 切换到具有 L4 GPU 的 G2 实例,用户可以节省 40% 的成本。作为通用 GPU 产品,G2 实例还有助于加速其他工作负载,在 HPC、视频转码方面、模型训练和应用方面提供显著的性能改进。此外,谷歌云持续构建 HPC 云上解决方案,为用户的高性能计算业务提供澎湃的算力支持。

极致性价比,可为用户节省超 50% 算力成本

无论是大模型的训练还是推理应用,都异常的“烧钱”。以引爆市场的 ChatGPT 为例,其模型训练需要用到上万块 GPU,耗资上亿美元。此外,在其日常运营过程中,据半导体研究公司 SemiAnalysis 的首席分析师 Dylan Patel 测算,ChatGPT 每天的运营成本预计高达 70 万美元。依据国盛证券发布的《ChatGPT 需要多少算力》报告,训练一次大模型的成本介于 200 万美元至 1200 万美元之间,这对于大模型、AIGC 创业公司以及其他AI应用公司而言,是一个不可忽视的门槛。

为了推动 AI 应用尤其是大模型应用的发展,谷歌云在降低 GPU 算力成本方面做了大量的工作,可以帮助用户大幅节省算力成本。

那么,谷歌云是如何实现如此大幅度的成本节省的呢?具体来看,谷歌云通过自定义实例规格、Spot 实例选用、多种折扣模式等方式,来帮助客户降低算力成本。

1、灵活配置 GPU 资源,自定义机型、实例规格

与其他云厂商将 GPU 与云主机进行了封装和绑定不同,谷歌云以直通模式将 GPU 提供给用户,以便用户直接控制 GPU 及其关联的内存,也实现了 GPU 与 Compute Engine 解耦。除了 A100 和 L4 系列外任何类型的 GPU,均可与 N1 系列的所有规格进行自定义搭配,可实现高达 96vCPU、624GB 算力内的任意选择,灵活满足不同规模用户的需求。

是7.png

谷歌云 英伟达 V100 类型主机可用规格

是8.png

V100 GPU 资源灵活选择示例

谷歌云除 A2 与 G2 以外配备 GPU 的云主机,均可以自定义实例规格,使得用户可以根据实际需求来定制 CPU 和内存的规格。用户在进行算力选择时,不局限于比率,也不必选择超过实际需求的较高规格,从而避免额外费用。

是9.png

谷歌云主机自定义规格界面示例

2、Spot 实例选用

谷歌云提供 Spot 实例选用服务,Spot 虚拟机使用过剩的 Compute Engine 容量,提供与常规计算实例相同的机器类型、选项和性能。Spot 是一种适合批处理作业和容错工作负载的计算实例,对于 Stable Diffusion 类可容错型应用,可以承受可能的实例抢占,使用 Spot 虚拟机可以节省高达 91%  的费用。

3、多种折扣模式

为了进一步降低用户的算力成本,谷歌云还为用户提供多种折扣模式。具体来看,谷歌云推出持续使用折扣、基于资源的承诺使用折扣、灵活承诺使用折扣三种模式,三种模式均无需预付,并且可以叠加使用。

持续使用折扣模式下,Compute Engine 为使用时间超过结算月份的 25% 且未获得任何其他折扣的资源,提供持续使用折扣 (SUD),该折扣随着使用量的增加而增加。对于运行整个月的虚拟机实例,通过持续使用折扣可以获得高达 30% 的资源成本净折扣。

对于 Compute Engine,虚拟机实例在购买 1 年期或 3 年期的承诺后,谷歌云还提供基于资源的承诺使用折扣、灵活承诺使用折扣两种方式。

基于资源的承诺使用折扣(或基于资源的 CUD),适用于资源使用量稳定、可预测的用户和场景,该折扣适用于 vCPU、内存、GPU、本地 SSD、单租户节点和软件许可。通过基于资源的承诺使用折扣,用户的硬件最高可获得 70% 的折扣,软件最高可获得 79% 的折扣。

Compute Engine 灵活承诺使用折扣,基于支出金额的 CUD,灵活 CUD 不限制该 Cloud Billing 帐号内的项目和区域,适用于任何通用和计算优化机器类型的 vCPU 和内存。通过灵活承诺使用折扣,用户 1 年期承诺的每小时支出金额可享受 28% 的折扣,3 年期承诺的每小时支出金额可享受 46% 的折扣。

企业客户可以综合应用谷歌云提供的各种优惠策略,来降低其算力成本。据测算,相对于市场上其他云厂商提供的同类 GPU 产品,谷歌云提供的 GPU 服务价格普遍要低几十个百分点。例如,谷歌云的 A100 80GB 产品同比便宜 22%;A100 40GB 产品同比便宜 28%;T4 产品同比便宜 47%。此外,谷歌云还独家提供 L4 产品,并且也维持了超低售价。

发.png

此外,谷歌云的 Compute Engine 会根据 Cloud Monitoring 在过去 8 天中收集的系统指标,自动生成成本优化建议,用户可以采用这些建议来调整实例机器类型的容量,帮助优化虚拟机实例的资源利用率,将成本优化做到极致。

以谷歌云的某客户为例,据测算,基于谷歌云的成本节省策略,该客户整体可节省 58.1% 的成本。其中,通过 Spot 实例可节省 18.3% 的成本,通过自定义机型可节省 10% 的成本,通过承诺使用折扣可节省 21.4% 的成本,通过持续使用折扣可节省 8.4% 的成本。

发2.png

谷歌云 Compute Engine 成本优化参考模型

4、通过 WebEye 购买 GPU,可获得专属折扣

值得指出的是,除了上面提到的成本节省策略外,用户还可通过 WebEye 得到专属 GPU 算力购买折扣,获得比谷歌云官网更优惠的价格。

WebEye 是谁,凭什么有这个“特权”呢?

WebEye作为业界领先的数据智能企业,可为客户提供多样化的公有云及其生态资源服务,包括上云咨询、云迁移、运维托管、云转售等。WebEye 是中国大陆地区率先获得 Google Cloud Managed Service Provider(MSP)资质的合作伙伴,并获得 2021 Google Cloud 年度最佳突破伙伴奖。

发3.png

为了进一步降低算力成本,使得更多的企业和研究机构有能力参与到 AI 的开发和应用中来,推动 AI 技术的普及和应用,WebEye 与谷歌云携手合作,通过 WebEye 可以获得更优惠的价格。

例如,通过 WebEye 购买谷歌云资源,A2 标准机器类型的 SPOT 价格低至 1.1 美元/小时、A2 Ultra 机器类型价格低至 1.58 美元/小时、G2 标准机器类型价格低至 0.21 美元/小时;NI 标准器类型价格低至 0.13 美元/小时。

更多惊喜,敬请扫描下图海报二维码,获得更多优惠大礼包。

微信图片_20230606112553.png


文章信息来自于数据猿,不代表白鲸出海官方立场,内容仅供网友参考学习。对于因本网站内容所引起的纠纷、损失等,白鲸出海均不承担侵权行为的连带责任。如若转载请联系原出处。

友情提醒:白鲸出海目前仅有微信群与QQ群,并无在Telegram等其他社交软件创建群,请白鲸的广大用户、合作伙伴警惕他人冒充我们,向您索要费用、骗取钱财!


分享文章

扫一扫 在手机阅读、分享本文

23471
{{votes}}
分享文章

扫一扫 在手机阅读、分享本文

23471
{{votes}}

要回复文章请先登录注册

与CEO聊合作

(备注姓名、公司及职位)