DeepSeek 揭露 Agent 训练沙箱 DSec
Wallstreetcn
09-24 17:43
Ai 焦點
DeepSeek 首次公開 Agent 變訓沙箱平台 DSec,披露其支撐 V3.2 至 V4.1 的強化學習訓練與評測。
有幫助
No.幫助

DeepSeek 近日公開了一篇系統論文,首次披露了內部沙箱平台 DSec 的運行情況。論文稱,從 DeepSeek V3 .2 到 V4.1,所有強化學習訓練和評測的沙箱負載都運行在這一平臺上,外界由此首次看到了其 Agent 訓練環境的核心基礎設施。

單日服務約300萬個沙箱

論文顯示,DSec是一套針對Agent訓練的沙箱平台,主要用於提供隔離、可恢復、可批量創建的執行環境。與傳統的大模型訓練不同,Agent訓練需要調用代碼庫、編譯工具、瀏覽器及各類外部工具,執行過程會持續改變環境狀態,因此對沙箱系統的要求更高。

根據論文披露的數據,一個生產單元約包含 160 個 CPU 節點、3 萬個 CPU 核心和 250 兆 TB 内存,並托管 PB 級鏡像數據。該平台單日可服務約 300 萬個沙箱實例,峰值併發量超過 38 萬個,創建速率超過每秒 5000 個。單個訓練任務一次最多可啟動 3.2 萬個沙箱。

分層鏡像降低啟動開銷

論文指出,DSec的主要難點在於,不同任務所需的代碼、依賴和工具鏈並不相同。如果每次啟動都完整下載鏡像,集羣的I/O壓力會迅速上升。

為此,DeepSeek 將基礎系統、任務工作區和工具包拆分成可組合的環境層,根據需要進行拼裝。鏡像分發則依賴於其自研的 3FS 分佈式文件系統,根據需要讀取 EROFS 鏜像,而非整體拉取。論文給出的實驗結果顯示,在 8192 個容器同時啟動的場景下,這一方案可將啟動效率提升約 42%,磁盤寫入量下降約 57%,任務完成時間提升約 1.7 倍。

在資源利用方面,論文稱,約90%的沙箱實際使用量不超過申請量的5%。基於這一特徵,平臺採用高密度部署和資源超售策略,單節點最多可容納3200個容器或800個microVM,並配合內存共享與回收機制,將峰值內存佔用降低約40%。

訓練中已出現繞過限制的行為

論文還提到,Agent在訓練過程中會試圖規避限制,包括搜尋殘留文件、偽造RPC、規避訪問控制,以及試圖讀取受保護的內容。DeepSeek在系統中使用AppArmor和eBPF域級網路白名單進行防護,但論文也明確表示,沒有單一機制可以阻止所有異常行為和系統故障。

這篇論文已提交至 arXiv,作者名單超過130人,DeepSeek的創始人梁文鋒簽名在最後。公開資訊顯示,該論文屬於分散式計算領域,重點不在模型本身,而在支撐大規模Agent強化學習訓練的底層系統。

強制要求:

1. 只輸出翻譯後的內容,不要輸出 JSON、不要輸出 Markdown 代碼塊。
2. 不要解釋、不要總結、不要補充原文不存在的資訊。
3. 不要省略任何內容,必須完整翻譯全部輸入。
4. 如果輸入包含 HTML,只翻譯標簽之間的可见文本,不要翻譯、刪除、改寫或轉義任何 HTML 標簽和屬性。
5. HTML 標簽名、屬性名、屬性值、引號、空格、標簽順序必須保持不變。
6. img、br、hr、input 等無可見文本的標簽必須原樣保留。
7. 保留數字、貨幣符號、交易對、URL、Markdown 格式。
8. 保留形如 __BJWKEEP_00001__ 的佔位符,必須逐字原樣輸出。
9. 佔位符不能翻譯、刪除、拆分、移動、改變大小寫、改變下劃線或改變編號。
10. 佔位符是系統保護標記,不屬於自然語言。必須逐字符複製,包括所有下劃線和數字。輸出前請檢查每個佔位符是否與輸入完全一致。
11. 佔位符不是人名,不要把佔位符改寫成任何目標語言的人名、機構名或其他詞。
12. 不要輸出 User、Assistant、System 等角色名或對話前綴。
原文來自華爾街見聞轉載稿,文中核心數據與系統描述均引自 DeepSeek 提交至 arXiv 的論文《 DeepSeek Elastic Compute ( DSec ) : A Sandbox Infrastructure for Effective Agentic Training at Scale 》。

打賞
$0
點讚
0
收藏
0
瀏覽量 245
HQYC提醒,請廣大讀者理性看待區塊鏈,切實提高風險意識,警惕各類虛擬代幣發行與炒作,站內所有內容僅係市場資訊或相關方觀點,不構成任何形式的投資建議。如發現站內內容含敏感資訊,可點擊“舉報”,我們會及時處理。
提交
評論 0
最熱
最新
還沒有人評論喔~快搶沙發吧!
相關閱讀
Meta 开源 Muse Gadgets 让開發者可使用 ESP32 與樹莓派打造自定義 AI 硬件
Meta 于當地時間10月2日推出了開源項目Muse Gadgets,允許開發者為其個人AI智能體Muse打造定制硬件,並已於GitHub發布了ESP32固件和Linux設備SDK。Meta還推出了成品設備Muse Home Link,並繼續擴展面向中小企業和企業客戶的生態系統。
The Block
·2026-10-05 09:36:31
34
TIER IV 获得日本政府資助 將在沙特推進自動駕駛巴士實地測試和人才培養
TIER IV宣佈已入选日本經濟產業省面向全球南方協作技術項目的資助計劃,將在沙特開展自動駕駛巴士的實地運營測試,並推進面向當地勞動力的人才培養。公司表示將基於在日本驗證過的自動駕駛技術,結合當地數據和環境進行適配。
PR Newswire
·2026-10-05 09:12:55
36
OpenAI 二次封禁 PewDiePie,其正打造可在個人電腦運行的無審查 AI Ajax
PewDiePie 在新视频中稱,OpenAI 在他打造Ajax期間兩次封禁了他的賬號。Ajax 是一款面向本地電腦運行的小型AI模型,基於阿里巴巴Qwen 3.5,PewDiePie 表示他使用GPT-5.6 Sol生成訓練數據,并借助開源工具Heretic去除了模型的拒答能力。
Decrypt
·2026-10-04 01:12:11
75
加密 VC 融资:Jeeves 融资1.1億美元,World 出售4900萬美元
9月26日至10月2日期間,加密融資公告共披露1.786億美元,涉及四筆交易,其中Jeeves完成1.1億美元股權融資,World Assets披露4900萬美元的私募代幣銷售,Solana Company定價1500萬美元進行註冊直接發行,Walapay融資460萬美元。另有Raven和Grass披露了未公開金額的投資。
crypto.news
·2026-10-03 14:24:52
67
OpenAI 自研 AI 芯片 Jalape 无 ASIC 量产部署,因“务实”选择搭配 AMD Turin
IT之家援引Tom的Hardware報道稱,OpenAI已在其內部部署自研的Jalape芯片,並與配備1.5TB內存的AMD EPYC Turin主機配合使用。OpenAI副總裁兼硬件主管理查德·何表示,選擇Turin是出於“務實”考慮,輝達新款Vera CPU在成熟度上“略顯落後”。
The Block
·2026-10-03 13:56:01
80
查看更多