ゲートニュース速報、4月24日—DeepSeekは、MITライセンスのもとでオープンソースのV4シリーズモデルをリリースしました。重みは現在Hugging FaceおよびModelScopeで利用可能です。このシリーズには2つのモーダル・エキスパート (MoE)モデルが含まれています。V4-Proは総パラメータ1.6兆で、1トークンあたり490億が有効化され、V4-Flashは総パラメータ2840億で、1トークンあたり130億が有効化されます。両方とも1,000,000トークンのコンテキストウィンドウをサポートします。
アーキテクチャには3つの重要なアップグレードがあります。圧縮されたスパース注意 (CSA) と大幅に圧縮された注意 (HCA) を組み合わせたハイブリッド注意メカニズムにより、ロングコンテキストのオーバーヘッドを大幅に削減—V4-Proの1Mコンテキストにおける推論FLOPsはV3.2のわずか27%であり、推論中に歴史情報を格納するためのKVキャッシュ (VRAM) はV3.2の10%にとどまります。従来の残差接続に代わり、層間の信号伝播の安定性を高めるマニフォールド制約付きハイパーコネクション (mHC)。そして、より速い学習収束のためのMuonオプティマイザです。事前学習では32兆トークン以上のデータを使用しました。
事後学習は2段階のアプローチを採用します。まず、教師あり微調整 (SFT) とGRPO強化学習によりドメイン固有のエキスパートを訓練し、その後オンライン蒸留によってそれらを単一モデルに統合します。V4-Pro-Max (最高推論モード)は、トップクラスのコーディングベンチマークを備え、推論およびエージェントタスクにおけるクローズドソースのフロンティアモデルとのギャップを大幅に縮めた、最強のオープンソースモデルであると主張しています。V4-Flash-Maxは、十分な計算予算がある場合にProレベルの推論性能を実現しますが、純粋な知識および複雑なエージェントタスクにおいてはパラメータ規模によって制約を受けます。重みは混合精度のFP4+FP8で保存されます。
免責事項:このページの情報は第三者から提供される場合があり、Gateの見解または意見を代表するものではありません。このページに表示される内容は参考情報のみであり、いかなる金融、投資、または法律上の助言を構成するものではありません。Gateは情報の正確性または完全性を保証せず、当該情報の利用に起因するいかなる損失についても責任を負いません。仮想資産への投資は高いリスクを伴い、大きな価格変動の影響を受けます。投資元本の全額を失う可能性があります。関連するリスクを十分に理解したうえで、ご自身の財務状況およびリスク許容度に基づき慎重に判断してください。詳細は
免責事項をご参照ください。
関連記事
OpenAIはChatGPT向けに高度なアカウントセキュリティを提供開始
高度なアカウント セキュリティを開始
木曜日、OpenAI は ChatGPT 向けの新しいオプトイン設定「高度なアカウント セキュリティ」を導入しました。これは、より強力な保護を求めるユーザー、またはデジタル攻撃のリスクがより高い状況にあるユーザー向けに設計されています。同社は、新機能が、人々が――どのようにしているかに対する対応として作成されたと述べました。
CryptoFrontier4分前
X(旧Twitter)が20年間で最大の広告プラットフォームのアップグレードを迎え、xAIが介入し、AIによる意味ベースの広告配信が中核となる
X は 2026 年 4 月から、20 年来で最大規模の広告プラットフォーム再構築を実施すると発表し、基盤技術を作り直し、xAI を組み合わせます。新プラットフォームは AI 主導で効果を最適化し、意味と状況に基づく広告を中核として、操作の利便性と出稿・配信の管理を向上させます。広告を、リアルタイムの文脈における商業的なシグナルへ変えることを目標とし、さらに Everything App 戦略と連携して X のエコシステムのビジネス・エンジンとなることを目指します。
ChainNewsAbmedia3時間前
OpenAIの支援を受けた1Xがカリフォルニアに58,000平方フィートの工場を開設、初年度に1万台のロボットを目標
ブルームバーグによると、ノルウェーで設立されたOpenAIの支援を受けたロボティクス・スタートアップである1X Technologiesは、カリフォルニア州ヘイワードに58,000平方フィートの製造施設を開設し、大量生産される消費者向けのヒューマノイドロボットでリードすることを目指している。
この施設では、10,000台のロボットを生産する予定で、その
GateNews5時間前
ホワイトハウス、4月30日に米国の各機関へ複数のAIプロバイダーの利用を指示するAI政策メモ案を作成
PANewsが4月30日に引用した情報源によれば、ホワイトハウス当局者は、幅広い人工知能(AI)政策の覚書を作成しており、米国政府の各機関に対して複数のAIサービス提供事業者を採用し、特定のベンダーへの依存を避けるよう指示している。さらに、その覚書は、委託を受けたすべてのAI企業に対しても要求している。
GateNews6時間前
中国の国家インターネット情報弁公室、4月30日にAIアプリケーションの混乱を抑えるための4か月キャンペーンを開始
CCTVニュースによると、中国の国家インターネット情報局は4月30日、AIアプリケーションの混乱に対処するため、全国規模の4か月間のキャンペーンを開始しました。この取り組みは2つの段階に分けて展開され、行方不明のモデル登録、プラットフォームの安全性や審査能力の不足などの問題を対象としています。
GateNews6時間前
フォアフロント・テックが $100M のIPO価格設定を完了、NasdaqはコードFTHAUのもと上場
ChainCatcherによると、特別目的買収会社(SPAC)のForefront Techは4月30日に1億ドル規模のIPOの価格決定を完了し、ティッカーシンボルFTHAUのもとでNasdaqに上場する予定です。同社は、調達資金を用いてブロックチェーン、フィンテック、人工知能分野における合併・買収(M&A)の機会を追求する考えです。
GateNews8時間前