【AI 资讯】DeepSeek开源推理框架、ElevenLabs发布实时语音、NVIDIA 用 AI 模拟手术

今天的 AI 变化从模型能力延伸到实时交互、训练基础设施、推理软件和开发工具链,一起来看看吧!

Scarlett

Scarlett

2026-10-27

【AI 资讯】DeepSeek开源推理框架、ElevenLabs发布实时语音、NVIDIA 用 AI 模拟手术

今天的 AI 动态有一个共同方向:能力升级不再只发生在模型参数里,也发生在实时交互、训练基础设施、推理软件和开发工具链中。对团队而言,真正需要判断的不是哪条新闻最热,而是哪种变化会改变自己的产品边界和工程成本。

1. ElevenLabs 发布 Eleven Realtime:语音 Agent 直接进入推理轮次

ElevenLabs 发布 Eleven Realtime speech-to-speech 模型,官方称其目标是在约半秒开始说话,同时处理需要口语推理的问题。它面向客服、陪练、电话工作流和实时协作等对打断与反馈速度敏感的场景。大版本 v1 Max 面向客服和要分步处理的任务,小版本 v1 Mini 面向更便宜的日常对话。官方给出的成绩是:Max 平均 0.57 秒开始出声,语音推理题答对 98.8%。

ElevenLabs 发布 Eleven Realtime:语音 Agent 直接进入推理轮次

0.57 秒是它在自己测试里的出声时间,不是接上你的网络、电话和业务系统之后的承诺。真正要试的是打断以后能不能接话、查资料或调用工具时会不会突然变慢,以及吵环境和长对话还稳不稳。

Introducing Eleven Realtime: a simpler way to build natural voice agents
Eleven Realtime is a new class of Speech to Speech models for voice agents that sound natural. Available in ElevenAgents and the Realtime API.

2. DeepSeek 开源 DeepInfer:推理基础设施成为新的开放层

DeepSeek 宣布将内部推理框架 DeepInfer 全面开源,并同步开放生产级 Token 编解码组件 deepseek-recipe。现有官方材料将重点放在大规模模型推理和性能优化工作流,而不是新模型发布。

DeepInfer 是现在用来大规模跑 DeepSeek-V4.1-Flash 的框架,Apache 2.0 许可;recipe 负责把外部请求转成模型能读的格式,再把结果转回去,和官方接口的处理方式对齐,MIT 许可。

目前只支持 NVIDIA SM100 和华为昇腾 950,也只支持 V4.1-Flash。缓存、预填充和解码拆开部署、负载均衡,都还没放进这次开源。

https://github.com/deepseek-ai/DeepInfer

3. Meta 公布 Prometheus:训练集群开始按完整系统设计

Meta 官方介绍了位于美国俄亥俄州的 Prometheus 超集群。第一阶段已经建成,用来训练 Muse 基础模型,其中包括 Muse Wonder。现在有几十万张 GPU,分在多栋楼里,靠光纤连成一台机器;官方的下一步目标是大约 100 万张。

卡多不等于训练快。一张卡出问题,整次训练都可能慢下来。Meta 说,训练 Muse Wonder 时,预训练有 85% 以上的时间在做有效计算,强化学习超过 90%;平均大约每 4.7 万卡时才中断一次。这是它自己集群上的成绩。100 万张是还没达到的目标。

Inside Prometheus: Meta’s Journey to a Gigawatt-Scale Supercluster
With the recent release of the Muse family of foundational models, we want to take you inside the infrastructure that has made it all possible. The first phase of Prometheus, our gigawatt-scale sup…

4. OpenAI 收购 Orchestra Bio:不再只卖模型,开始做行业软件

OpenAI 宣布已收购 Orchestra Bio,一个帮生物制药团队协调药物开发的平台,并计划把团队和技术并入自己的生命科学产品 Rosalind。Rosalind 原来主要帮科学家分析问题、看实验结果、安排下一步实验;Orchestra 补上的是项目推进:研究做到哪一步、哪里延误,以及一个环节出问题后,后面哪些工作会受影响。

官方表明,在美国一种新药从早期研究到获批平均要 10 到 15 年。中间要跨很多部门和外部伙伴,用的系统也常常连不起来,所以进展慢,也容易被打断。OpenAI 想用 AI 帮忙盯这些进度。比如一批生产失败、可能耽误临床试验时,AI 先找出受影响的安排,把情况汇总起来,并比较几种补救办法;要不要调整,仍由人决定。药会不会因此更快到患者手里,现在还只是目标。

OpenAI 收购 Orchestra Bio
OpenAI 正在收购 Orchestra Bio,将 AI 驱动的运营能力引入生命科学研发,帮助生物制药团队加快药物开发,推进新疗法。

5. NVIDIA 把生成式仿真带入临床手术训练

NVIDIA 发布 Cosmos3-H-Dreams,面向腹腔镜胆囊切除术研究,把临床手术视频、机器人运动学和器械动作作为条件,生成后续手术场景。官方还开放了 checkpoint、训练配方和流式推理运行时,并提供两步和四步版本。

NVIDIA 把生成式仿真带入临床手术训练

它适合用来研究动作策略、生成训练轨迹和在真实设备实验前做低成本验证,但不能被当作经过临床验证的手术系统。生成画面逼真并不等于组织响应在物理上正确,医疗使用仍需要外科专家评估、真实设备验证和独立安全审查。

6. TorchNeuron 公开测试:PyTorch 代码可以指向 AWS 的 Trainium

PyTorch、AWS 和 Hugging Face 官方材料确认 TorchNeuron 进入 public beta。它为 AWS Trainium 提供原生 PyTorch 后端,覆盖 eager、torch.compile、分布式 API 以及 Transformers、Diffusers 等生态工作流,并采用 Apache 2.0 许可。

对使用 Trainium 的团队来说,迁移重点可能从专用编译链适配,转向算子覆盖、后端成熟度、性能调优和云资源成本评估。public beta 不代表所有模型和生产负载都已经与 CUDA 工作流无差异,仍应通过自己的模型和真实服务负载验证。

AWS announces TorchNeuron: Native PyTorch Support for AWS Trainium (Public Beta) - AWS
Discover more about what’s new at AWS with AWS announces TorchNeuron: Native PyTorch Support for AWS Trainium (Public Beta)

今日总结

这几条放在一起看,AI 产品正在从「调用一个模型」,变成「把模型放进一套能跑起来的系统」。语音要重新看打断和等待,手术模拟要把动作和画面绑在一起,训练集群要看有效计算而不只是卡数,推理框架和芯片后端则决定模型能不能以可控的成本跑。

昨日回顾

  1. Claude OSS Scanner:让 AI 持续帮开源项目找漏洞
  2. MiniMax M3.1 Flash:面向高频 Agent 任务的快模型
  3. OpenAI:AI 开始读懂几十年前的 COBOL 代码
  4. Meta 发布 Muse Glimmer:30B 开放权重模型面向消费级硬件
  5. FLUX 3 Max:视频生成继续追求更短等待时间
【10.20 AI 资讯】Claude 为开源项目找漏洞、MiniMax M3.1 Flash 发布、OpenAI 开始攻克 COBOL
今日 AI 热点已送达~来看看有没有你关注的资讯吧!

扫码加入 HiFox AI 内测群,及时获取 最新 AI 资讯~

Explore more

【今日 AI 资讯】OpenAI 发布网络安全模型 GPT-6 Cyber,Gemini Omni 1.2 Flash 降价 30%、Inkling 2 Small 即将开源

【今日 AI 资讯】OpenAI 发布网络安全模型 GPT-6 Cyber,Gemini Omni 1.2 Flash 降价 30%、Inkling 2 Small 即将开源

OpenAI 发布 GPT-6 Cyber;Google 将 Gemini Omni 1.2 Flash 视频时长提升到15秒并降价;Inkling 2 Small 同步更新....快来看看吧!

2026-11-06

【今日 AI 资讯】GPT Images 2.6 发布、OpenAI 收购浏览器公司 Pierre、Gemini Computer Use 正式可用

【今日 AI 资讯】GPT Images 2.6 发布、OpenAI 收购浏览器公司 Pierre、Gemini Computer Use 正式可用

今天的 AI 不满足于只当个「聊天对象」了:它想搬进浏览器里办公,想自己看屏幕、动鼠标,想把设计稿直接长成代码,连找漏洞都搞出了流水线。模型反倒成了配角.....来看看今天发生了什么吧!

2026-11-05

【今日 AI 资讯】模型 Crouton Alpha 限时免费、OpenAI 员工用 Codex 造硬件、Claude 插件可自动连 MCP

【今日 AI 资讯】模型 Crouton Alpha 限时免费、OpenAI 员工用 Codex 造硬件、Claude 插件可自动连 MCP

今日看点:匿名模型免费一周却不署名;OpenAI 用模型造硬件,卡在工厂公差;Anthropic 把 Claude 插件授权省成自动连接;另有化学信息学工作流和一套后训练方案......

2026-11-04