DeepSeek 弹性计算 (DSec)

计算机科学 > 分布式、并行和集群计算 arXiv:2609.22978 (cs) [提交于 2026 年 9 月 19 日] 标题：DeepSeek Elastic Compute (DSec)：用于大规模有效代理训练的沙箱基础设施 作者：Jialiang Huang 、 Hongxuan Tang 、 Jingchang Chen 、 Yuxuan Liu 、 Yixiao Chen 、 Yuan Cheng 、 Yi Tao 、 Jingli Zhou ,陈宇鹏、陈浩宇、王嘉瑞、林胜凯、张楚奇、滕李腾、郭连、付喆、高文军、王一松、赵亮、王泽浩、谢子伟、郭永强、丛培新、高子怡、于水平、徐汉伟、吴作凡、任志周、周雨阳、博伟张志寰,朱启浩,王雷,林天乐,韩宇,胡杰文,杨德建,杨硕,陆尚浩,陈少元,邱俊杰,沙张丽,钟银民,吴永通,王世宇,刘伟,徐秉正,陈龙浩,杜秋实,黄玉珍,马世荣,王耀辉,陈明树,熊同瑞,Y.C.严浩文、梁浩芬、张小康、曾伟豪、徐润鑫、王培宜、朱金华、张若雨、杨文凯、唐奇、余继平、野田、潘瑞哲、丁洪辉、刘晓东、罗凌霄、邵志宏、吴雨涵、陆吉白、刘文、张浩灵、胡景成, 叶耀阳, 林超凡, 张兆晨, 佟佳楠, 吴恒旭, 李志豪, 王一成, 王路耀, 白玉卓, 付凌跃, 徐瑞凡, Y.Z.王宗林、魏明奇、沉海洋、张成远、金潮、张自立、杨瑞红、徐新波、周健、朱瑞东、郭雨哲、潘泽伦、聂少恒、李二航、林书涵、刘峥、陈安硕、吕子龙、曹思诺、于睿、王楚浩、俊毅郭俊晓、陈凯峰、叶孟浩、李俊贤、吴迪、马海洋、王逸伦、杨浩然、蔡一再、刘世春、王一平、孙俊波、徐世成、毕晓、何英、张一超、张明星、张立跃、黄盼盼、梁文峰等（未显示另外 31 位作者）查看标题为 DeepSeek Elastic Compute (DSec)：大规模有效代理训练的沙箱基础设施的论文的 PDF，作者为 Jialiang Huang 和其他 130 位作者。查看 PDF HTML（实验）摘要：大型语言模型 (LLM) 的大规模代理训练和评估依赖于隔离的有状态执行环境，在该环境中模型检查存储库、调用工具、执行命令并与特定于任务的服务交互。这些工作负载会大量创建沙箱，涵盖异构功能和隔离要求，在长时间交互中保留状态，并从重用有限的大型图像语料库中提取数据。因此，支持它们需要一个弹性执行平台，而不是单个沙箱运行时。本报告介绍了 DeepSeek Elastic Compute (DSec)，这是一个生产沙箱平台，通过统一的 SDK 公开 FnCall、容器、microVM 和全 VM 沙箱后端。 DSec 协调整个集群的放置和生命周期管理，从独立版本化的层组成环境，结合内存共享、回收和 CPU 调度以实现高密度执行，并根据需要从集群范围的分布式文件系统 Fire-Flyer 文件系统 (3FS) 加载图像数据。 DSec 与强化学习 (RL) 框架共同设计，将状态推出执行与可抢占式 GPU 训练分离，协调沙箱生命周期与训练，以在回收空闲资源的同时保留推出状态，并减少代理不当行为（例如奖励黑客）。单个生产规模的 DSec 单元跨越约 160 个节点，每天为约 300 万个沙箱提供服务；在生产中，它支持超过 380,000 个并发沙箱，并维持每秒超过 5,000 个沙箱创建。我们的评估和部署经验表明，这些机制减少了环境设置和映像分发开销，提高了内存效率，并在高密度过度使用下保持对延迟敏感的性能。评论：31页，13张图。此版本对早期版本进行了大幅扩展，其两页扩展摘要经过了 ACM SIGOPS ATC 2026 操作系统轨道的第一轮审查主题：分布式、并行和集群计算 (cs.DC) 引用为：arXiv:2609.22978 [cs.DC]（或此版本的 arXiv:2609.22978v1 [cs.DC]） https://doi.org/10.48550/arXiv.2609.22978 arXiv 通过 DataCite 发布的 DOI（待注册） 提交历史记录 发件人：Wenfeng Liang [ 查看电子邮件 ] [v1] 2026 年 9 月 19 日星期六 12:20:26 UTC (504 KB) 全文链接：访问论文：查看标题为 DeepSeek Elastic Compute 的论文的 PDF (DSec)：用于大规模有效代理训练的沙箱基础设施，作者：Jialiang Huang 和其他 130 位作者 查看 PDF HTML（实验）TeX 源代码 查看许可证 当前浏览上下文：cs.DC < 上一页 | 上一页 | 下一页下一页 > 新 |最近 | 2026-09 更改浏览方式：cs 参考文献和引文 NASA ADS Google Scholar 语义学者 加载中... BibTeX 格式