業界・業務から探す
導入目的・課題から探す
データ・AIについて学ぶ
News
Hakkyについて
ウェビナーコラム
◆トップ【ニュース】
AI

執筆者:Hakky AI

xAI、独自の大規模言語モデル「Grok-1」をオープンソース化

ニュースの要点

info
3行まとめ
  • xAIは独自の大規模言語モデル「Grok-1」の重みとアーキテクチャーをオープンソースで公開した。
  • 「Grok-1」は3140億のパラメータを持つMoEモデルであり、計算効率が向上する特徴がある。
  • 公開された「Grok-1」は商用・非商用を問わず、誰でも自由に使用、変更、配布することができる。

ニュース詳細

xAIは3月17日、同社が2023年11月5日に発表した独自の大規模言語モデル(LLM)「Grok-1」の重みとアーキテクチャーをオープンソース(Apache-2.0 license)で公開しました。

「Grok-1」は、3140億のパラメータを持つMixture-of-Experts(MoE)というアーキテクチャを採用したモデルです。このモデルは大量のテキストデータで学習されており、計算効率が向上する特徴があります。MoEには複数の「エキスパート」と呼ばれる独立したニューラルネットワークが存在し、各トークンに対して最も適切なエキスパートが選択されて処理されます。

「Grok-1」はファインチューニング前のベースモデルであり、そのままではChatGPTのようにチャット形式で利用することはできません。しかし、イーロン・マスク氏の宣言通りオープンソース(Apache 2.0ライセンス)でGitHubにて公開されるため、商用・非商用を問わず、誰でも自由に使用、変更、配布することができます。

出典

2025年06月12日に最終更新
読み込み中...