Groqは、AI推論の速度と効率を革新するプラットフォームとして注目を集めています。特に、Llama 3.1のようなオープンに利用可能なモデルに対する超低遅延の推論能力は、クラウド展開におけるAI技術の進歩を象徴しています。GroqCloud™は、2024年2月のローンチ以来、数千の開発者に利用されており、無料のAPIキーを通じて即座にインテリジェンスを提供します。
Metaの創設者兼CEO、Mark Zuckerberg氏も、Groqの技術に対する興奮を表明しており、オープンソースへのコミットメントがAIにおける革新と進歩を促進していると述べています。Groqは、OpenAIのような他のプロバイダーからの移行を容易にするため、わずか3行のコード変更で互換性を提供します。これにより、開発者は迅速にGroqの高速推論を活用することができます。
独立したベンチマークによると、Groqは基本的なオープンに利用可能なモデルに対して瞬時の速度を実現しています。LLAMA、MIXTRAL、GEMMA、WHISPERなどの主要なオープンAIモデルをサポートし、AIチップスタートアップとしてNvidiaに挑戦する存在となっています。
Groqの技術は、MetaのVP兼チーフAIサイエンティスト、Yann LeCun氏からも高く評価されており、AIチップブームの中でこの小さなスタートアップを救い、現在では28億ドルの評価を得るに至りました。