ホームページ  >  記事  >  テクノロジー周辺機器  >  先進的な大規模言語モデルの開始、AI戦争深化へのメタ公式発表

先進的な大規模言語モデルの開始、AI戦争深化へのメタ公式発表

WBOY
WBOY転載
2023-04-12 15:58:03771ブラウズ

先進的な大規模言語モデルの開始、AI戦争深化へのメタ公式発表

ザッカーバーグ氏はソーシャルメディアで、Facebook AI Researchが開発したLLaMAは「現時点で最高レベルの」大規模言語モデルであり、その目標は研究者の進歩を支援することであると述べた。人工知能 (AI) における彼らの研究。

「大規模言語モデル」(LLM) は、大量のテキスト データを消化し、テキスト内の単語間の関係を推測できます。コンピューティング能力の進歩と入力データセットとパラメータ空間の継続的な拡張に伴い、LLM の機能もそれに応じて向上しました。

現在、LLM はテキスト生成、質問応答、文書の要約などを含むさまざまなタスクを効率的に実行できることが証明されています。ザッカーバーグ氏は、LLMには数学的定理の自動証明やタンパク質構造の予測など、より複雑な側面でも大きな発展の可能性があると述べた。

最近人気のある ChatGPT は、LLM を使用して構築されたチャットボットであることは言及する価値があります。 ChatGPTはGPT3.5でサポートされており、OpenAI 175Bパラメータ基本モデルに基づいて学習されたLLMであり、175Bは学習データから学習・蓄積された内容です。

Meta は公式 Web サイトの紹介文で、LLaMA には 7B、13B、33B、65B の 4 つの基本モデルがあり、ほとんどのベンチマーク テストで GPT3.5 の前身である GPT3-175B よりも優れており、LLaMA-65B は同等の性能を備えていると述べています。業界最高の Chinchilla-70B および PaLM-540B と対戦します。

以上が先進的な大規模言語モデルの開始、AI戦争深化へのメタ公式発表の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

声明:
この記事は51cto.comで複製されています。侵害がある場合は、admin@php.cn までご連絡ください。