竞争加重!报谈:亚马逊劝说云客户辩认英伟达,改用自家芯片

发布日期:2024-12-09 15:14    点击次数:132

与其他云奇迹提供商一样,亚马逊租用给开发者和企业的奇迹器主要适用的是英伟达AI芯片。然则媒体报谈,亚马逊如今正试图劝服这些客户转而使用由亚马逊自研AI芯片驱动的奇迹器。

The Information报谈,亚马逊芯片部门Annapurna的业务开发负责东谈主Gadi Hutt默示,包括苹果、Databricks、Adobe和Anthropic在内的一些但愿找到英伟达芯片替代决议的科技公司,也曾在测试亚马逊最新的AI芯片,并取得了令东谈主饱读励的限制。

Hutt在亚马逊AWS年度客户大会默示:“客岁,东谈主们运行意志到,‘嘿,亚马逊在AI芯片上的投资是负责的。’本周,更多东谈主肯定这是一个竟然且抓续的插足。”

分析觉得,要是亚马逊概况将客户开销滚动到其自研的奇迹器芯片上,由于这些芯片部分因为耗电量远低于英伟达芯片而对云客户愈加低廉,这将擢升亚马逊的利润率。此外,这也能退却英伟达通过径直向企业出租其芯片奇迹器,霸占更多云商场份额。

英伟达在AI芯片领域的主导地位一直难以撼动,这部分归因于其芯片比包括亚马逊、微软和谷歌在内的竞争敌手出产的芯片更坚韧,同期,软件开发者风俗于使用英伟达特有的Cuda编程说话为其芯片编写软件。

尽管如斯,Hutt和其他亚马逊高管本周默示,大客户正在寻求更低廉的替代决议。AWS CEO Matt Garman默示,使用亚马逊的AI芯片资本比英伟达的旗舰H100芯片低30%到40%,但能终了同等性能。

咫尺,亚马逊也曾在开发传统奇迹器芯片方面设立了一定的影响力,并成效劝服客户租用这些芯片。连年来,AWS客户越来越多地使用亚马逊的Graviton奇迹器芯片,而不是由英特尔和AMD提供芯片的奇迹器,因为Graviton频繁性价比更高。

举例,企业软件公司Databricks也曾成为Graviton的进军客户,其高管Naveen Rao默示,经营使用亚马逊的新AI芯片以镌汰运行软件的资本。

亚马逊开发芯片(包括AI芯片Trainium)的举措是其更庸碌计谋的一部分,这一计谋旨在将经营的“基本构件”——从奇迹器到云软件——扶持为低价的通用商品。肖似地,亚马逊CEO Andy Jassy本周文书了一款由亚马逊打造的新对话式AI模子,他默示,其性能与Anthropic和OpenAI的最新模子格外,但价钱却低了三倍以上。

Hutt还谈到了公司的新Trainium芯片,以及AWS正在为Anthropic建造的一套超等经营奇迹器集群。Anthropic是OpenAI的竞争敌手,亦然AWS连年来营收增长的进军孝顺者之一,咫尺是AWS上最多使用英伟达奇迹器的客户之一。

 

以下是媒体采访Gadi Hutt的对话节选:

1. 使用Trainium2(亚马逊芯片的最新版块),为什么你们要专注于把这款芯片卖给那些在英伟达芯片上耗尽弘大的公司?

Hutt:那些关注机器学习资本的客户,频繁是耗尽较大的客户,包括苹果、Adobe、Databricks等,还有一些资金充裕的初创公司,比如Poolside和Anthropic。

对他们来说,要道讨论是“每1好意思元能得回些许性能”。还有许多其他客户,咱们称之为“经久客户”,他们有多样情势相称允洽咱们的芯片。但也许他们每月的耗尽唯独1000好意思元,这种情况下不值得工程师插足时间去探索这种选项。

本色上,在Trainium2生命周期的这个阶段,我并不寻求劝诱上百万个客户。就机器学习而言,咱们还处于相称早期的阶段。东谈主们还在尝试攻克通用东谈主工智能(AGI)和多样种种的念念法,这个领域还在不停演变。

咱们弗成从第一天起就相沿通盘的用例。要是客户尝试运行一些无法平常职责的东西,这会是一种相称倒霉的体验。因此,咱们专注于听取最大客户的需求,“嘿,这是咱们需要的”,而这通常是对通盘商场往日需求的一个很好的预测。

2. Trainium2在来岁的方针是什么?

Hutt:当咱们部署大王人芯霎时,咱们的方针是确保它们被充分利用。是以咱们当先需要与这些大客户合营,外汇百科然后再扩张到我所说的“经久客户”。对咱们这些制造芯片的东谈主来说,成效的掂量圭表是确保通盘芯片王人被充分利用。无论是10个客户照旧1000个客户,数目是次要的。

这是场马拉松,而不是短跑。跟着时间的推移,咱们但愿看到越来越多的客户。我不会在里面制定方针,端正要启用些许客户。咱们更关注的是确保为客户提供合适的器用和性能,收受率当然会随之提高。

3. 为什么第一代Trainium芯片莫得成效本质?第二代有什么不同?

Hutt:当先,这是咱们的第一款覆按芯片。你不错望望Trainium1(2022年发布)与Graviton1(2019年发布)的对比,通常的故事。Graviton1本色上是为了启用通盘生态系统,包括软件生态系统,并确保咱们为客户构建了正确的居品。

Trainium1的客户(包括亚马逊里面的团队)匡助咱们强化了软件,但职责仍未完成。在相沿更多职责负载方面,咱们还有好多职责要作念。不外,咫尺咱们不错说,咱们对Trainium2概况相沿的职责负载感到相称安适,包括大型说话模子(LLM)、民众模子、多模态模子以及经营机视觉模子。

这需要时间,何况很复杂。要是很容易,更多东谈主早就作念到了。

3. AWS的客户是否在讨论来岁遴荐租用Trainium2照旧英伟达的Blackwell芯片?

Hutt:客户可爱有遴荐的余步。咱们的职责是确保咱们的芯片即使与英伟达的最新芯片比拟,也依然具有劝诱力,咫尺如实如斯。

趁便说一句,咱们还莫得见到72芯片的Blackwell系统插足使用,但假定英伟达概况委用,Trainium2依然会更具资本效益。

Trainium3(瞻望2025年底发布)的经营才智是Trainium2的四倍,因此客户了解咱们的发汗道路图。他们有信心觉得,这是一个值得投资的地点,不然他们不会遴荐它。

4. 你觉得英伟达GPU的需求是否会发生变化?

Hutt:有好多客户念念使用英伟达芯片,不肯了解Trainium芯片。要是你是袖珍GPU消费者,每次相识使用10、20、30以至100个GPU,莫得能源去改动近况。即使每月能省下几千好意思元,你可能也更惬心让工程师去作念别的事情。

当客户怜惜资本问题时,频繁是在他们运行扩大领域时,但大领域的客户并未几。是以对咱们来说,这些芯片是经久投资,以确保咱们为客户提供遴荐。要是客户遴荐使用它们很好,但要是不遴荐,咱们依然是运行GPU的最好平台。

咱们的软件锻练度会跟着时间的推移而提高,但愿届时会有更多客户遴荐使用Trainium。但GPU对咱们来说亦然一项好业务,咱们在卖好多。是以,要是客户但愿咱们为他们提供GPU,咱们会永恒这样作念。

5. 使用Trainium芯片是否会提高AWS的利润率?

Hutt:咱们不会潜入利润率的具体情况,但咱们在这些芯片上并莫得失掉。业务必须有存在的真谛,不然咱们不会在这里投资。

6. 客户何时运行对Trainium2感意思?

Hutt:我铭刻与Poolside(一家AI编码助手初创公司)的第一次会议。当咱们向他们展示Trainium2的规格时,他们说,“好吧,这恰是咱们需要的。”

7. Anthropic的超等经营机集群情势Rainier的耗电量是些许?

Hutt:咱们莫得潜入具体数据。但我不错告诉你,它比等效的GPU恶果高50%。

8. 超等经营机何时能在Anthropic插足使用?

Hutt:Rainier情势很快就会完成,咱们也曾在建造中。他们不错渐渐运诳骗用部分集群,而不需要比及临了一颗芯片上线后再使用。跟着集群扩张,他们不错渐渐加多使用量。

9. Anthropic是否是唯独不错使用Rainier情势的公司?

Hutt:是的,仅供Anthropic使用。

咱们正在开荒更多的产能,以得志其他客户使用Trainium的需求。咫尺,短期内需求大于供应。是以第一季度将相称弥留,跟着产能加多证券配资平台app,情况会有所改善。

风险教唆及免责条目 商场有风险,投资需严慎。本文不组成个东谈主投资提倡,也未讨论到个别用户荒谬的投资方针、财务景色或需要。用户应试虑本文中的任何认识、不雅点或论断是否合乎其特定景色。据此投资,职守骄傲。