一次推理输出约 22 TB：所谓“5 万亿上下文”的物理模型到底在计算什么

导读

物理模型为什么会需要万亿级上下文？Accelerated Understanding 的两位创始人解释，他们处理的是三维空间网格随时间变化的状态点：每个空间方向取一千点，再预测一千个时间步，就有一万亿个位置。团队希望一个模型学习多个物理领域的共同结构，使用 neural operator 支持不同网格分辨率，并一次预测完整的时间过程，减少逐步预测中的误差累积。训练数据主要由数值模拟器生成，课程从简单方程和粗网格逐渐走向复杂条件；偏微分方程还可提供每个位置的误差反馈。工程师早期可用低分辨率探索，接近设计定稿时再提高精度。超大样本则需要跨机器拆分模型和数据，模拟结果最终仍要面对真实设备的测量条件。