跳到正文
10月23日周五
  1. MIT Technology Review · AI22

    EXL 谈如何设计可持续演进的 AI 服务框架

    EXL 提出企业 AI 的竞争优势正从选模型转向围绕模型构建的服务框架(serving harness),即架构、内存管理、调度与推理优化的工程系统。其主张先按业务负载确定约束再定架构,并以 KV cache 随并发与上下文增长导致的 GPU 显存瓶颈为例,强调先测量再优化。框架还应便于吸收新模型与新硬件,使换模型成为评估与配置决策而非架构重建。

10月22日周四
  1. MIT Technology Review · AI18

    Celonis 首席科学家 Devavrat Shah 谈企业 AI 为何需要上下文感知

    Celonis 企业 AI 首席科学家 Devavrat Shah 提出“决策智能”,认为 AI 智能体必须理解任务在业务流程中的角色与约束,否则会遗漏关键限制、造成高昂错误或浪费算力。他建议企业先连接现有流程与数据,构建上下文层让智能体在护栏内运行并输出可人工审核的建议,再从具体业务决策切入验证提速与价值。

10月21日周三
  1. Latent Space36

    SF Compute CEO Evan Conrad 谈可编程数据中心与 GPU 算力交易市场

    SF Compute 正在把 GPU 算力做成可交易市场,并亲自承担物理交付:买家拿到的是可用算力而非现金结算。CEO Evan Conrad 称,公司从转租集群扩展到自建云运营能力,按中断性、恢复速度、GPU 代际与网络配置等约束撮合订单。他认为 NVIDIA 因缺乏中立性难以自建此类交易所,并提到可动态切分 InfiniBand 网络结构。

10月20日周二
  1. MIT Technology Review · AI18

    企业 AI 的新经济学:从 token 成本转向有效产出成本

    企业 AI 的衡量重点正从 token 或 GPU 小时单价转向"每个有用产出的有效成本",即完成可实际使用的工作所需的平台、模型、运营与容量总成本。企业可选择自建栈、按需消费或集成私有 AI 平台三条路径,HPE Private Cloud AI 将调度、模型选择、GPU 分区和 KV-cache 管理作为运营杠杆,并配套 90 天前置工程师服务。

10月15日周四
10月14日周三
10月8日周四
10月7日周三
  1. Simon Willison38

    EmbeddingGemma 2 采用 Apache 2.0 许可证

    EmbeddingGemma 2 采用 Apache 2.0 许可证,Simon Willison 认为嵌入模型不应使用闭源、专有、仅托管的形式。嵌入模型通常需计算并存储数千乃至数百万条嵌入向量,一旦供应商停供专有模型,用户就得为重新计算这些已存向量付费。他更愿意付费使用托管版本,同时保留在停供时自行运行开放权重版本或另寻供应商的余地。

10月4日周日
  1. Simon Willison38

    Simon Willison:按量付费服务需要默认硬性预算上限,AWS 已推出支出限额

    Simon Willison 呼吁按量付费的 API 和服务默认设置硬性预算上限,即达到每月 $X 后直接切断并返回错误,而非仅发警告邮件。他指出 AWS 已在 9 月 16 日推出月度支出限额功能,项目达到限额后当月暂停,但目前仅向有限客户开放;Google Cloud 则在 7 月推出了 Spend Caps。

10月2日周五
  1. MIT Technology Review · AI12

    以自主 AI 重塑企业智能:MIT Technology Review 报告解析“智能体转型”

    MIT Technology Review 报告指出,2026 年全球 AI 投资将达 2.5 万亿美元,同比增长 44%,但多数企业仍未能靠 AI 实现营收增长,智能散落在各部门孤岛中。报告将 AI 从工具转向运营模式的转变称为“智能体转型”,主张先重构流程与数据基础设施,再选择模型,并以可组合架构和 AI 主权控制应对多云与数据驻留限制。

10月1日周四
  1. NVIDIA Blog15

    NVIDIA AI 工厂如何实现投资回报最大化:高产出、长寿命、通用性

    NVIDIA 提出 AI 工厂投资回报取决于三个要素:每兆瓦产出能力、硬件使用寿命和 token 需求,并以产出、耐用、通用三大特性对应。SemiAnalysis AgentX 数据显示,Vera Rubin NVL72 每兆瓦吞吐量比 GB300 NVL72 高 30 倍以上,在 DeepSeek V4 Pro 上每百万 token 成本低至 45 倍。

9月29日周二
9月28日周一
  1. Import AI32

    Import AI 474:柏拉图式心智空间、太空中的 TPU、智谱启动外层 RSI 循环

    Import AI 474 期关注三项内容:Michael Levin 提出心智是来自"柏拉图式模式空间"的非物理模式,身体与机器只是其进入物理世界的接口。智谱(Zhipu)启动了一个"外层 RSI 循环",探索递归自我改进。此外还讨论了将 TPU 部署到太空,以及机器人领域正为 LLM 时刻做准备、但缺少通用算法。

7月7日周二
  1. Berkeley AI Research38

    智能免费之后怎么办?面向智能体、由智能体运行、由智能体构建的数据系统

    伯克利 EPIC Data Lab 提出近零推理成本时代数据系统面临三大挑战:面向智能体的数据系统、由智能体运行的数据系统、由智能体构建的数据系统。GPT-4 级能力从 2023 年初约 $30/百万 token 降至如今不到 $1,部分厂商已低于 $0.10,推理价格年降幅在 9x 到 900x 之间,中位数约 50x。