Groq AI:LPUで推論速度革命を起こすスタートアップの軌跡と技術

元Googleエンジニアが設立したGroqがLPU技術でAI推論速度を18倍高速化。創設者ジョナサン・ロスの背景と2024年急成長の理由を解説。

Groq AI:LPUで推論速度革命を起こすスタートアップの軌跡と技術

AI推論の高速化において、GPU一強の市場に挑戦するスタートアップがある。Groqは独自のLanguage Processing Unit(LPU)技術により、従来のGPUと比較して最大18倍の推論速度を実現し、AI業界に変革をもたらしている1

2024年2月にソーシャルメディア上でGroqのベンチマークテストが話題となって以降、開発者コミュニティでの採用が急速に拡大している。同社の開発者数は2024年8月時点で36万人を超え、資金調達額は28億ドルの企業価値評価を受けるまでに成長した2

Groqの軌跡と創設者の背景

会社設立と初期の歩み

Groqは2016年に元Googleエンジニアたちによって設立された。創設者のジョナサン・ロス(Jonathan Ross)は、GoogleのTensor Processing Unit(TPU)の主要設計者の一人として、AI専用チップの開発に深く関わっていた経験を持つ3

ロスはGoogle Xの初期段階である「Rapid Eval Team」に参加し、Alphabetの新規事業創出にも携わった。また、深層学習の第一人者であるヤン・ルカン(Yann LeCun)の下で学んだ学術的背景も持っている。2024年にはTIME誌の「AI分野で最も影響力のある100人」に選出されるなど、業界での評価も高い4

技術開発と企業成長

当初、GroqはTensor Streaming Processor(TSP)と呼んでいたASICを開発していたが、後にLanguage Processing Unit(LPU)と名称を変更した。2022年3月にはデータフロー技術で知られるMaxeler Technologiesを買収し、技術基盤を強化した5

2023年8月には、サムスン電子のテキサス州テイラー工場において、4ナノメートルプロセスでの次世代チップ製造パートナーシップを発表した6

LPUの技術的特徴と競争優位性

GPUとの根本的な違い

Groqの最大の技術的差別化要因は、グラフィックス処理用に設計されたGPUとは異なり、AI推論と言語処理専用に設計されたLPUアーキテクチャにある7

比較項目Groq LPU従来のGPU
推論速度最大480トークン/秒40トークン/秒(ChatGPT-3.5)
エネルギー効率GPU比10倍効率的基準値
メモリ帯域幅80TB/s(オンダイ)外部メモリ依存
SRAM容量230MB/チップ限定的
実行方式決定論的非決定論的

技術的優位性の詳細

LPUの主要な技術的優位性は以下の点にある:

1. メモリアーキテクチャ 外部メモリへのアクセスがAI推論を遅らせる要因であることを認識し、Groqはチップあたり230MBのSRAMと80TB/sのオンダイメモリ帯域幅を実現している8

2. 決定論的実行 LPUアーキテクチャは決定論的であり、すべての実行ステップがクロックサイクル単位まで完全に予測可能である。

3. プログラマブル・アセンブリライン設計 GPUの「ハブアンドスポーク」アプローチとは異なり、Groqのプログラマブル・アセンブリライン・アーキテクチャは、言語処理タスクに特化した効率性を提供する9

2024年の急速な人気とその理由

バイラル効果と技術実証

2024年2月、Groqの公開ベンチマークテストがソーシャルメディア上で注目を集め、一夜にして業界で話題となった。ArtificialAnalysis.aiのベンチマークでは、Groqの Llama 2 Chat(70B)APIが241トークン/秒を達成し、他のホスティングプロバイダーの2倍以上の速度を記録した10

開発者エコシステムの急成長

Groqの開発者採用は驚異的なペースで成長している:

  • 2024年3月: GroqCloudが正式ローンチ
  • 2024年4月: 7万人の新規開発者、1万9000の新規アプリケーション
  • 2024年8月: 36万人の開発者がGroqCloud上でアプリケーション構築11

この成長について、ロスCEOは「新しいハードウェアプラットフォームの採用としては、これまでで最も速いペース」と述べている12

「Inference as a Service」の市場定位

Groqは「Inference as a Service」という独自の価値提案により、ChatGPTとは異なる市場セグメントを開拓している。エンドユーザー向けのチャットボットではなく、開発者がリアルタイムAIアプリケーションを構築するためのインフラストラクチャを提供している13

資金調達と事業拡大

2024年8月、GroqはBlackRock Private Equity Partnersが主導するシリーズDラウンドで6億4000万ドルを調達し、企業価値28億ドルの評価を受けた14。さらに、サウジアラビア王国から15億ドルのインフラ拡張資金も確保している15

ロスCEOは「2025年末までにグローバルAI推論市場の半分を獲得する」という野心的な目標を掲げており、実際に多くのスタートアップがGroqのインフラストラクチャを利用していると報告している16

今後の展望と課題

Groqの技術は推論タスクにおいて優位性を持つ一方で、モデル訓練においてはGPUが依然として主流である。しかし、AI アプリケーションの多くが推論段階で実行されることを考慮すると、Groqの市場機会は大きいと考えられる。

同社が目指す「人間の主体性を保持するAI時代」というミッションの下、低コストで高速な生成AI計算へのアクセスを提供し続けることで、AI開発の民主化に貢献する可能性がある17

GPU一強の市場において、専用設計されたLPUアーキテクチャによる差別化戦略は、AI推論の未来を変える可能性を秘めている。今後も同社の技術革新と市場拡大が注目される。

Sources

  1. 18x Faster AI Inference than GPU: Groq LPU Sets New AI Benchmark - LinkedIn(性能比較データ)
  2. AI chip startup Groq rakes in $640M to grow LPU cloud - The Register(資金調達と開発者数)
  3. About Groq - Fast AI Inference - Groq公式(会社設立とジョナサン・ロスの背景)
  4. Jonathan Ross: The 100 Most Influential People in AI 2024 - TIME誌(業界での評価)
  5. Groq - Wikipedia - Wikipedia(企業買収と技術開発の歴史)
  6. Groq’s $20,000 LPU chip breaks AI performance records - CryptoSlate(製造パートナーシップと技術仕様)
  7. What is a Language Processing Unit? - Groq公式(LPU技術の詳細説明)
  8. LPU Vs GPU: Can Groq Change The Destiny Of AI? - Dataconomy(技術アーキテクチャの比較)
  9. Groq vs. Grok and Grokking the NVIDIA GPU vs LPU Contest - Resource Erectors(アーキテクチャ設計の詳細)
  10. Groq AI chip system goes viral and rivals ChatGPT - Cointelegraph(2024年のバイラル現象)
  11. Insights from VB Transform 2024 with Jonathan Ross - Groq公式(開発者採用数)
  12. The Rise of Groq: Slow, then Fast - Chip Strategy(CEO発言と成長指標)
  13. About Groq - Fast AI Inference - Groq公式(事業戦略と市場定位)
  14. AI chip startup Groq rakes in $640M to grow LPU cloud - The Register(シリーズD資金調達)
  15. AI model-optimized chip developer Groq receives $1.5B commitment from Saudi Arabia - SiliconANGLE(サウジアラビアからの資金)
  16. Demand for Real-time AI Inference from Groq Accelerates Week Over Week - PR Newswire(市場目標と利用状況)
  17. About Groq - Fast AI Inference - Groq公式(企業ミッションと将来展望)

最新のAIニュースを毎日お届けしています。

RSSで購読する 更新をいち早くチェックできます。

他のキーワードで探す →