初创公司Groq推AI芯片500tokens/秒爆火，贾扬清：Groq成本或是英伟达H100的30倍

作者：钛媒体快报发布时间：2024-02-21

钛媒体App2月21日消息，一家名为Groq的初创公司在AI圈爆火。主要因其自研的LPU芯片在AI推理技术上，通过优化架构和减少内存瓶颈，实现了高效率和低延迟，在处理大模型时的速度远超英伟达GPU，每秒生成速度接近500tokens，而GPT-4仅40tokens。...【查看原文】

相关资讯

英伟达“超级大金矿”！H100 GPU售价是成本的近10倍【附GPU芯片市场发展情况】

随着AI大模型的爆火，英伟达的GPU供不应求，外媒此前表示英伟达的订单迅速增加，乃至已经排到2024年。其中，性能最强的AI训练H100GPU更是成为抢手货，外媒Tomshardware报道，英伟达今年内计划出售超过55万块H100加速卡，不过这种说法还没有被得到英伟达证实。

英伟达 AI大模型

前瞻网 2023-08-18

关注兔英伟达H100至尊版速度提10倍

关注兔靠着满屏的「生成式 AI」，手握一块支撑 ChatGPT 算力、提速 10 倍的 H100 NVLINK 芯片，老黄就差把这几个字写在脸上 ——「我是赢家」。AI 的 iPhone 时刻已经到来，第四次科技革命就要开启，而手握 A100 和 H100 的英伟达，或成最大赢家。在 GTC 大会上，老黄宣布了英伟达在 GPU、加速库、计算光刻、云平台上的亮眼进步，更是放出豪言 —— 英伟达就是要做 AI 圈的台积电！现在已经有人猜测，今天的演讲都是在 H100 上用 AIGC 模型生成的。ChatGPT

ChatGPT AIGC

靛酊嬭翊 2023-03-22

向英伟达发起挑战的Groq是什么来头？简单科普新型AI芯片LPU

在如今的人工智能领域，「GPU is All You Need」已经逐渐成为共识。没有充足的 GPU，连 OpenAI 都不能轻易升级 ChatGPT。

英伟达 OpenAI AI芯片人工智能 ChatGPT

机器之心 2024-03-07

英伟达稳坐AI芯片市场领导地位，A100/H100系列引领风潮

英伟达 AI芯片人工智能

驱动中国 2024-01-31

英伟达H100两大买家变心！要买AMD最新AI芯片

财联社12月7日讯（编辑周子意）Meta、微软和OpenAI公司周三（12月6日）在AMD投资者活动上表态，未来他们将会使用AMD最新的人工智能（AI）芯片Instinct MI300X。图形处理器（GPU）对于创建和部

英伟达微软 OpenAI AI芯片融资

2023-12-07

近期资讯

11700亿，福建首富曾毓群，预定2025最大港股IPO

港交所将迎来一个重磅IPO。

融资中国 2024-12-31

一个人成熟的最大标志，是不再为虚荣心买单

情绪价值，永远都是实际价值不够时的替代品，牢记这一点。

张良计 2024-12-31

7 亿意外之财砸中 150 个打工人？英伟达花重金收购 AI 平台，到手就大方开源了

12月30日，英伟达表示在克服一系列监管阻力之后，已完成对以色列 AI 初创公司 Run:ai 的收购，并宣布了开源同名 AI 平台的计划。

AI前线 2024-12-31

Ilya布局末日倒计时？奥特曼与谷歌大佬揭秘2025年ASI降临时间表

谷歌开发者暗示，我们直接进入ASI的可能性，正在逐月增加！Ilya早就看到了这一点，因为扩展测试时计算的成功，证明目前的路径能够到达ASI。与此同时，AI学会自我改进、取代人类研究员的未来似乎也愈发逼近，到时再拔网线来得及吗？

新智元 2024-12-31

低空经济起势，下一步该解决哪些问题？

智研工软助推低空经济，AirEdge平台促进合规开发。

36氪VClub 2024-12-31

部分热门车次已售罄，春运火车票今起开抢，你买到回家车票了吗？

你抢到回家车票了吗？

36氪的朋友们 2024-12-31

窑鸡才是广西人的社交货币，没吃过别说来过广西

广西人有自己的“科目四”

上流UpFlow 2024-12-31

手机AI帮你点咖啡，App们同意了吗？

让AI真正走入手机生态，我们是否准备好了？

36氪的朋友们 2024-12-31

谋杀？OpenAI吹哨人的成长与死亡警钟

高速发展的科技时代，个体的声音和权利依然至关重要。

亿欧网 2024-12-31

“国产英伟达”们，扎堆上市

硬件实力提升，洗牌竞争加剧

财经天下官方账号 2024-12-31

初创公司Groq推AI芯片500tokens/秒爆火，贾扬清：Groq成本或是英伟达H100的30倍

推荐体验

相关资讯

英伟达“超级大金矿”！H100 GPU售价是成本的近10倍【附GPU芯片市场发展情况】

关注兔英伟达H100至尊版速度提10倍

向英伟达发起挑战的Groq是什么来头？简单科普新型AI芯片LPU

英伟达稳坐AI芯片市场领导地位，A100/H100系列引领风潮

英伟达H100两大买家变心！要买AMD最新AI芯片

近期资讯

11700亿，福建首富曾毓群，预定2025最大港股IPO

一个人成熟的最大标志，是不再为虚荣心买单

7 亿意外之财砸中 150 个打工人？英伟达花重金收购 AI 平台，到手就大方开源了

Ilya布局末日倒计时？奥特曼与谷歌大佬揭秘2025年ASI降临时间表

低空经济起势，下一步该解决哪些问题？

部分热门车次已售罄，春运火车票今起开抢，你买到回家车票了吗？

窑鸡才是广西人的社交货币，没吃过别说来过广西

手机AI帮你点咖啡，App们同意了吗？

谋杀？OpenAI吹哨人的成长与死亡警钟

“国产英伟达”们，扎堆上市

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响