蚂蚁百灵开源 Ling-3.1-flash AI 模型,最高支持 1M 上下文
The Block
Ai 注目
蚂蚁百灵昨日宣布开源 Ling-3.1-flash 模型,总参数约 560B、每个 Token 激活约 25B,最高支持 1M 上下文。文章还介绍了其公开评测表现、本地部署量化方案、长上下文并行推理方案,以及 OpenRouter 和 Ling Studio 的限时优惠价格。
役立つ
No.ヘルプ

蚂蚁百灵昨日宣布开源 Ling-3.1-flash 模型。Ling-3.1-flash 总参数约 560B,每个 Token 激活约 25B,最高支持 1M 上下文。

在 Artificial Analysis 的公开评测中,Ling-3.1-flash 的智能指数为 41,输出速度约为每秒 210 Token。

针对本地部署,团队对 routed experts 采用 MXFP4 量化、dense 层保持 block-FP8,权重占用从约 534GB 降至 292GB。在对应的 Hopper GPU 测试配置中,服务部署由 8 卡降至 4 卡,让具备服务器级 GPU 的团队以更少卡数运行模型;实际需求仍随上下文、并发量和服务配置而变。

针对长资料处理,团队提供长上下文并行推理方案(PCP / DCP);工具调用也加强了对 JSON Schema 的支持,方便与现有业务接口对接。

企业知识问答、办公助手常要先读取较长资料,用户仍希望尽快看到回复。团队通过算子融合与 DSpark 投机解码减少推理开销:在平均输入约 25.47K Token、输出约 224 Token、缓存命中率为 76% 的模拟生产请求中,8 卡 Hopper 配置下的平均首 Token 时间为 604 毫秒,相邻输出 Token 平均间隔为 3.28 毫秒。这为长资料输入后的交互响应提供测试参考。

持续提供服务的业务系统,还需要在固定 GPU 预算内评估单实例能承接多少请求。在平均输入约 8.5K Token、输出约 800 Token 的 4 卡 Hopper 吞吐测试中,模型达到约 1.36 QPS,同时满足首 Token 时间 P50 小于 3 秒、相邻输出 Token 间隔 P90 小于 70 毫秒的测试约束。这为自有部署的容量规划提供参考。

在线体验方面,Ling-3.1-flash 目前提供限时 2.5 折优惠,优惠后价格如下:

  • OpenRouter(美元计价):输入 0.075 美元;输出 0.225 美元;缓存读取 0.015 美元。
  • Ling Studio(人民币计价):输入 0.5 元;输出 1.5 元;缓存读取 0.1 元。

IT之家附开源链接:

  • Hugging Face:https://huggingface.co/inclusionAI/Ling-3.1-flash
  • ModelScope:https://modelscope.cn/models/inclusionAI/Ling-3.1-flash

相关阅读:《蚂蚁百灵发布 Ling-3.1-flash 模型:约 560B 总参数、25B 激活参数》

チップ
$0
いいね
0
保存
0
閲覧数 19
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
黄仁勋回忆当年联系台积电的曲折经历
据《商业内幕》报道,黄仁勋回忆称,英伟达早年为联系台积电曾多次打电话未获回电,后来写信给张忠谋才最终建立联系。张忠谋邀请他赴台参观后,黄仁勋最终选择台积电;台积电15日公布第三季度净利润增长69%,创下7,631亿新台币纪录。
The Block
·2026-10-16 08:36:37
1
苹果首款触控 MacBook Pro 有望本月登场,配 M7 Pro / Max 的完全体需等到 2027 年
彭博社马克·古尔曼在最新一期播客中称,苹果已基本停止研发 M6 芯片,资源正转向 M7 系列。报道称,M6 主要用于 Mac mini、iMac 和入门级 14 英寸 MacBook Pro,而即将发布的 OLED MacBook Pro 将先搭载现有 M5 Pro 和 M5 Max;M7、M7 Pro、M7 Max 及 M7 Ultra 则分别预计在 2027 年至 2028 年陆续推出。
The Block
·2026-10-16 08:36:34
0
Meta 发布 Muse Spark Open,宣称为美国最强开源 AI 模型
Meta 发布开放权重 AI 模型 Muse Spark Open,官方称其为迄今能力最强的美国开放权重模型。该模型采用原生多模态架构,支持 1M token 上下文窗口,并已上线多个 API 平台和云端模型库供开发者使用。
The Block
·2026-10-16 08:36:33
0
不只是CoreWeave,数据中心债券正遭到“集体抛售”
据英国《金融时报》报道,数据中心债券市场正经历全面抛售,从承租给Meta、微软、英伟达的大型项目融资债券,到CoreWeave等新兴云计算公司发行的债务,价格普遍下跌。Gartner预测,若AI基础设施投资维持当前轨迹,到2032年可能有逾4万亿美元资产面临减值风险;安联集团首席投资官则警告,数据中心债券正迎来“物竞天择”时刻。
Wallstreetcn
·2026-10-16 08:26:42
11
Cal AI 依靠一小批网红实现病毒式增长
Cal AI 创始人 Zach Yadegari 在 TechCrunch Disrupt 上表示,公司通过招募大量网红推广品牌,推动应用在两年内获得病毒式传播,营收超过 3000 万美元,并于 3 月被 MyFitness 收购。他还谈到新创业公司 Persona 的融资和产品方向。
TechCrunch
·2026-10-16 08:07:27
8
もっと見る