知识碎片 · 001

离线渲染:一帧可以算 8 小时

为什么电影里一帧可以算 8 小时,而游戏每秒必须画 60 帧?
以及——到底有没有「在线渲染」这回事?

程序化路径追踪渲染的玻璃球、金属球与棋盘地面
PATH-TRACED · 128 SPP760 × 430
THE 30-SECOND ANSWER

先给结论:
三个词,别混着用

「离线」和「实时」是同一根时间轴上的两端;「在线」说的是算力放在哪。 把它们放在同一张图上,很多绕人的说法会立刻清楚。

01
A / 时间维度

离线渲染

Offline Rendering

把每一帧慢慢算好、写进硬盘,再按 24 / 30 fps 播放。快慢取决于你愿意等多久。

02
B / 时间维度

实时渲染

Real-time Rendering

画面必须跟上输入和时钟,通常 16.7 ms 一帧。算不完就掉帧、降分辨率、降画质。

03
C / 空间维度

「在线」渲染?

Online / Cloud Rendering

不是标准对立词。多数时候指渲染发生在云端或远端——既可能是离线农场,也可能是云游戏。

直接回答

有「在线渲染」这个说法,但它不是「离线渲染」的反义词。真正的反义词是「实时渲染」。 「在线」只回答另一个问题:这一步是在你面前算,还是在网络另一端算?

离线、实时、在线三个词的二维关系图:横轴为时间预算,纵轴为算力位置,四个象限分别是本地离线渲染、云渲染农场、本地实时渲染、云游戏与像素流
图 01 / 18 把「时间预算」当横轴、「算力位置」当纵轴,四个象限各有一个真实存在的产品形态。「在线渲染」只落在右半边,不构成第三种算法。
Offline / 一帧
秒 ~ 小时
电影、动画、建筑表现
Real-time / 一帧
16.7 ms
60 fps 的硬预算
Cloud / 位置
远端
农场或云游戏
标准对立词
实时
不是「在线」
01 / 05
WHERE THE WORD COMES FROM

「离线」不是断网,
是「不在直播链路里」

Offline / online 这组词比 3D 渲染老得多。它们最早来自信号处理与电视制作: online 指设备接在实时信号链路上,offline 指不在直播回路里、可以事后处理。

到了图形学,意思被沿用下来:离线渲染(offline rendering)也叫预渲染(pre-rendering)或批处理渲染(batch rendering)。 它把场景交给渲染器,一帧一帧算,结果写进磁盘;播放时只是把已经算好的图按顺序放出来。 整个过程可以跑一整晚,可以排队,可以失败重来,也可以拆到几百台机器上。

反过来,实时渲染(real-time rendering)的关键不是「电脑更快」,而是它处在一个 带截止时间的闭环里:玩家输入 → 更新场景 → 渲染 → 显示,下一帧又从头开始。 如果这一帧算不完,你没法说「等我十分钟」,只能掉帧、降低分辨率,或者少算一点。

离线与实时的分界线,不是机器快慢,而是:这一帧有没有一个「必须现在交出来」的截止时间。 — 全文最值得记住的一句话
所以,离线渲染可以联网

它可以用云、可以连网、可以一边渲染一边打游戏。「离线」描述的是交付方式,不是网络状态。 真正不能做的事只有一件:要求它「立刻回应你的操作」。

离线渲染五段流水线:资产准备、场景与动画、材质与灯光、逐帧计算、合成输出;第 4 段最耗时
图 02 / 18 离线流水线的前三段都可以反复修改;真正烧时间的是第 4 段「逐帧计算」。帧与帧互不依赖,所以能大规模并行。
先分清离线渲染实时渲染
交付物文件 / 序列帧 / 视频屏幕上的连续画面
硬截止时间没有,或只按项目排期有,16.7 ms(60 fps)
失败代价重渲一帧或一段掉帧、卡顿、晕动症
典型硬件CPU / GPU 农场、云端本机 GPU、主机、手机
画质策略堆样本、堆反弹、堆细节预计算、近似、降噪、取舍
典型场景电影、动画、建筑、广告游戏、VR、交互展示、云游戏
02 / 05
TWO PIPELINES, TWO CLOCKS

一条通向文件,
一条通向屏幕

离线是把画面「生产」出来,实时是把画面「维持」下去。 两者的工程目标不同,所以优化手段、硬件选择和失败模式也完全不同。

A离线:一次只关心一帧

渲染器拿到场景、摄像机、时间点,算出这一帧的像素,写盘,然后处理下一帧。 它不需要知道上一帧显示在哪,也不需要在一秒内回来。于是可以把单帧质量推到硬件允许的极限: 几千 spp、几十次光线反弹、真实的景深与运动模糊、体积参与介质。

代价是「等待」。一张 4K 电影帧在普通机器上跑几天并不罕见; 所以行业用渲染农场把几万帧拆开并行,用排队换吞吐。

B实时:一秒钟要循环 60 次

实时渲染被夹在「输入」和「显示」之间。它必须在 16.7 ms 内完成逻辑、剔除、提交、着色、后处理, 然后把帧交给显示器。任何一个环节超时,玩家都会立刻感知到。

所以实时引擎的核心工作不是「把画面算到最真」,而是「在预算内做最划算的近似」: 烘焙光照、屏幕空间反射、低样本光追 + 时域降噪、动态分辨率。

实时渲染六段流水线:输入、逻辑物理、剔除、提交绘制、GPU 着色、后处理;底部是 16.7 毫秒预算条
图 03 / 18 实时流水线是一个闭环,没有「渲染完了再播放」这一步。16.7 ms 不是建议值,而是 60 fps 的物理上限。
对数时间轴:实时区在 4 到 33 毫秒,离线区从 1 秒到 10 小时;90 分钟电影 24fps 共 129600 帧
图 04 / 18 注意横轴是对数刻度。8.3 ms 与 8 小时之间不是「慢一点」,而是差了约一百万倍。这个差距决定了两种完全不同的工程文化。
Total frames
129,600
单机渲染
14.8 年
1000 台机器
5.4 天
总机时
129,600 机时
拖动滑杆做数量级演示,不含传输、合成、返工和农场调度损耗。真实项目里,返工往往才是最大的时间黑洞。
关键区别

实时渲染不是「低配版离线渲染」。它是一套不同的问题定义: 在 16.7 ms 的硬预算里,怎么让画面看起来尽可能好、同时不崩。

03 / 05
ALGORITHMS ARE NOT THE DIVIDE

离线 ≠ 光线追踪,
实时 ≠ 光栅化

这是最常见的第二个误会。离线/实时是「时间约束」,光栅化/光线追踪是「求像素的方法」。 两个维度可以自由组合,只是历史上它们恰好各自流行。

左右对比:光栅化把三角形投影到屏幕并做深度测试;光线追踪从相机穿过像素发射光线,计算交点、阴影和反射
图 05 / 18 光栅化从物体出发,问「你覆盖了哪些像素」;光线追踪从像素出发,问「你看见了什么」。方向相反,没有谁更「高级」。

A光栅化:为实时而生

把三角形投影到屏幕,判断覆盖了哪些像素,插值属性,逐个像素着色,再用 z-buffer 解决遮挡。 它的计算量与「屏幕像素 × 被覆盖的三角形」相关,天然适合 GPU 的大规模并行。

阴影、反射、全局光照不是它的强项,但可以用 shadow map、屏幕空间反射、光照贴图、探针等一整套技巧补出来。

B光线追踪:为「正确」而生

从相机穿过每个像素发一条光线,找到最近交点,再在交点处发阴影射线、反射射线、折射射线。 它直接模拟光的路径,所以反射、阴影、折射是「顺便」算出来的。

代价是每条光线都要和场景求交。没有加速结构(BVH)时慢到不可用;有了 BVH 和 GPU 光追单元,才逐渐进入实时领域。

组合 A
离线 + 光栅化 / REYES
RenderMan 的经典 micropolygon 管线、卡通渲染、部分预览渲染。不是只有路径追踪才叫离线。
组合 B
离线 + 路径追踪
电影、动画、建筑表现的主流选择。时间预算允许它把渲染方程采样到很低方差。
组合 C
实时 + 光栅化
绝大多数游戏。用极快的可见性计算 + 大量美术与预计算技巧,把画面做到「看起来对」。
组合 D
实时 + 光线追踪
RTX、Lumen、硬件光追。只发少量光线,剩下的交给降噪器、时域复用和预计算。
渲染方程示意图:表面点 P 的法线、半球入射方向、出射方向,以及渲染方程公式
图 06 / 18 所有「真实感渲染」最后都在逼近这个积分。离线用大量样本估计它;实时用近似、预计算和少量样本 + 降噪估计它。
一句话

判断一个项目是离线还是实时,看交付约束;判断它用的是什么算法,看渲染器怎么求可见性和光照。这两件事不要互相替代。

04 / 05
WHERE THE QUALITY COMES FROM

不是「谁更真」,
而是「谁有时间把积分算完」

路径追踪用随机样本估计渲染方程。样本越多,噪声越低;但噪声下降的速度是 1 / √N——想把噪声减半,样本要翻四倍。这就是离线愿意等、实时等不起的数学原因。

路径追踪渲染:玻璃球的折射、金属球的反射、棋盘地面的软阴影和高光
图 07 / 18 这张图由本页附带的本地路径追踪器渲染:760 × 430,128 spp。玻璃、金属、软阴影、面光源高光都是同一条积分自然给出的,不需要为每种效果单独写一套技巧。
离线渲染同一场景,1 采样每像素,噪点明显
1 spp
SAMPLES / PIXEL 图 08–12 / 18 · 点击切换 →
每个像素只发 1 条光线。积分只被估计了一次,画面像下雪。
只有直接光照的康奈尔盒:阴影很黑,暗部没有颜色溢出
加入全局光照的康奈尔盒:阴影被间接光提亮,白色球体染上红绿墙的颜色
仅直接光 全局光照
图 13–14 / 18 拖动中间的滑块。左边只有直接光照,阴影死黑;右边加入多次反弹后,暗部被间接光提亮,白球也染上了红墙和绿墙的颜色。这就是「全局光照」的肉眼含义。
噪声 ∝
1 / √N
样本翻 4 倍,噪声减半
实时典型
1–4 spp
再靠时域复用 + 降噪
离线常见
百–万 spp
按镜头和预算决定
单帧差距
100×
量级,不是倍数

离线多出来的时间,具体花在哪?

  • 更多采样:把 Monte Carlo 噪声压到肉眼不可见。
  • 更多反弹:让颜色在墙面、皮肤、烟雾之间真实地来回弹。
  • 更贵的材质:次表面散射、毛发、多层清漆、薄雾。
  • 更准的摄像机:真实景深、运动模糊、镜头畸变。
  • 更高分辨率:4K / 8K / 立体双眼,采样数不降。
  • 可重来:导演改一个灯,整段重渲,不必现场救火。
  • 可验证:同一镜头跑多版本,比较不同材质与灯光。
  • 降噪之后:仍保留比实时更多的细节与稳定性。
实时不是「不算 GI」

实时引擎同样想要全局光照,只是会用光照贴图、探针、屏幕空间、低样本光追 + 降噪等更聪明的近似。 它不是不算,而是用更少的样本和更多的假设去算;假设不成立时,就会出现漏光、反射缺失、拖影等伪影。

05 / 05
WHAT “ONLINE RENDERING” ACTUALLY MEANS

「在线渲染」
到底是不是一个东西?

是,但它描述的是「渲染发生在哪里」,不是「渲染用什么算法」。 所以它可以和离线组合,也可以和实时组合——这正是它最容易被误解的地方。

A
在线 + 离线

云渲染农场

Cloud Render Farm

把工程上传,云端几百台机器按帧拆开算,算完下载序列帧。本质仍然是离线渲染,只是把「慢慢算」外包了。

B
在线 + 实时

云游戏 / 像素流

Cloud Gaming / Pixel Streaming

云端 GPU 实时渲染,编码成视频流回来,本地只负责解码和显示。实时发生在远端,你拿到的是画面,不是文件。

C
在线 + 网页

网页在线渲染器

Web-based Renderer

浏览器里打开就能用,可能跑在本地 WebGL / WebGPU,也可能把任务提交到远端。「在线」在这里更接近「免安装、打开即用」。

在线渲染的两种形态:上半部分是云渲染农场上传场景、云端离线渲染、下载帧;下半部分是云游戏输入上传、云端实时渲染、视频流回本地
图 15 / 18 两条「在线」路线,交付物完全不同:上面交付的是文件,下面交付的是视频流。把它们都叫「在线渲染」没有错,但必须补一句是哪种。
最容易混的一句

在线 ≠ 实时。云渲染农场是「在线 + 离线」;云游戏是「在线 + 实时」。 判断一个服务属于哪种,不要看它有没有网页,看它最终交给你的是文件还是可交互的画面。

维度云渲染农场云游戏 / 像素流
交付物序列帧 / 视频文件实时视频流
时间约束分钟到天,可排队30–110 ms 端到端
渲染方式离线路径追踪 / 光栅化实时光栅化 + 光追
网络要求能上传资产、下载结果低延迟、稳定带宽
计费方式按核时 / 节点时按订阅时长 / 流量
失败表现任务失败,重跑卡顿、花屏、输入延迟

那英文里到底怎么叫?

在图形学的标准分类里,最稳定的两个词是 offline rendering 和 real-time rendering。 「online rendering」并不是一个像前两者那样明确的学术分类,它更多出现在云渲染产品、网页工具和商业宣传里。 学术语境下,如果你说「在线渲染」,最好补一句:是云端离线农场,还是云端实时串流。

顺带一提,计算机系统里还有「online algorithm(在线算法)」的说法,指的是输入逐步到达、算法必须即时决策。 这和图形学的「在线渲染」不是同一个概念,别把两个「online」混在一起。

更准确的问法

不要问「离线还是在线」,改问三件事:① 最终要文件还是实时画面?② 有没有交互?③ 算力在本机还是云端? 三个答案一出来,方案基本就定了。

EXTRA / 01
THEY ARE CONVERGING

不是二选一,
是两条正在汇合的河

实时引擎在借用离线渲染的算法,离线渲染在借用实时引擎的交互与预览。 硬件变快之后,边界没有消失,但确实变模糊了。

画质、时间、成本的不可能三角:电影优先画质与时间,游戏优先时间与成本,云游戏优先时间与画质
图 16 / 18 三种典型取舍。技术进步做的是把整个三角形放大,而不是让三边矛盾消失。所以「离线 vs 实时」会长期共存。
六类应用场景:电影与 VFX、3D 动画与广告、建筑与产品可视化、3A 游戏、VR 与 AR、云游戏与车载 HMI
图 17 / 18 同一家公司可能同时用两条路线:建筑事务所用离线出效果图,用实时做漫游;游戏公司用实时做玩法和过场,用离线做宣发 CG。
离线与实时渲染发展时间线:1975 Phong 着色、1995 玩具总动员、1999 GeForce 256、2018 RTX 实时光追、2022 UE5 Lumen、2023 游戏内路径追踪
图 18 / 18 两条线并不是平行发展的:实时一直在追赶离线的画质,离线一直在借用实时的硬件与交互。今天的高端实时画面,已经是十年前的离线质量。

A实时正在「离线化」

UE5 的 Lumen 用屏幕空间 + 距离场 + 低样本光追做动态 GI;Nanite 用虚拟几何体把影视级资产直接塞进实时场景; RTX 硬件光追让游戏可以每帧发百万级光线;AI 降噪把「少量样本」变成可用画面。

B离线正在「实时化」

虚拟制片用 LED 墙 + 实时引擎在现场出背景;导演可以在实时预览里改灯、改机位; 离线渲染器也开始提供交互式预览、GPU 加速和云端即时反馈。

不变的东西

只要还有人愿意为「更好看」多等一小时,离线就不会消失;只要还有人需要「立刻回应」,实时就不会被取代。 变的只是同一段时间里能买到多少画质。

三问定路线

QUESTION 01

需要实时交互吗?

玩家输入、VR 头显、参数化漫游——只要画面必须跟着操作立刻变,就是实时。

→
QUESTION 02

交付物是文件吗?

电影、动画、效果图、广告片——只要最终交付的是序列帧或视频,就可以离线慢慢算。

→
QUESTION 03

算力放在哪?

本机够不够、要不要上云、能不能接受排队和传输——这决定「在线」与否,而不是离线与否。

你的目标优先路线原因
电影 / 动画 / 高精度静帧离线画质上限最高,时间可以按项目排期
3A 游戏 / 主机 / VR实时必须在 16.7–11.1 ms 内完成,交互优先
建筑 / 产品配置器混合离线出图,实时做可交互展示
云游戏 / 云 VR实时 + 在线渲染在云端,视频流回终端
影视级过场 / 宣发 CG离线不要求交互,质量与可控性优先
EXTRA / 02
COMMON MISCONCEPTIONS

六个常见误解,
一次拆掉

✕ MYTH 01
离线渲染就是断网渲染
不是。离线指不在实时回路里。它可以联网、上云、用渲染农场,只是不要求「现在立刻出画面」。
✕ MYTH 02
实时渲染就是画质低
不准确。它受预算限制,但在预算内可以非常惊艳。它的问题是「必须取舍」,不是「只能难看」。
✕ MYTH 03
在线渲染 = 实时渲染
错。在线说的是位置。云渲染农场是「在线 + 离线」,云游戏才是「在线 + 实时」。
✕ MYTH 04
离线渲染 = 光线追踪
错。离线也可以用光栅化 / REYES。反过来,实时也能用光线追踪。算法与时间约束是两个维度。
✕ MYTH 05
采样翻倍,画质就翻倍
不会。噪声按 1/√N 下降:样本翻 4 倍,噪声才减半。这就是离线也要精打细算的原因。
✕ MYTH 06
GPU 快,所以离线要消失了
不会。硬件变快后,大家会把省下的时间继续堆到更高分辨率、更复杂材质和更真实的物理上。

最后,把这几个词带走

光栅化把几何体投影到屏幕、逐像素填色。实时渲染的主力。
光线追踪从相机发射光线求交,自然得到阴影、反射、折射。
路径追踪用随机路径估计渲染方程,物理正确,离线主力。
采样 / spp每像素发射多少条光线。越多越干净,噪声按 1/√N 降。
全局光照光线在物体之间多次反弹后的间接照明,暗部与颜色溢出的来源。
降噪用空间/时域信息抹掉低样本噪声,实时与离线都在用。
渲染农场成百上千台机器按帧拆任务并行渲染,离线管线的吞吐核心。
像素流云端渲染 + 视频编码,把画面实时推给远端终端。
烘焙把光照预先算进贴图,运行时直接查表,实时省算力的常用手段。
ONE SENTENCE TO TAKE AWAY

离线渲染买的是「时间」,
实时渲染买的是「此刻」。

「在线渲染」不是第三种渲染,它只是说:这笔买卖发生在网络另一端。 所以,下次再听到这三个词,先问自己——这一帧,有没有一个必须现在交出来的截止时间?

参考 / GAMES101 PBRT · Physically Based Rendering Real-Time Rendering, 4th ed. Unreal Engine Lumen / Nanite Docs NVIDIA RTX Real-Time Ray Tracing RebusFarm / 瑞云渲染 公开资料

知识碎片 · 001 · 离线渲染与实时渲染
图片:本地程序化路径追踪 + 手绘 SVG · 无外部图片依赖

返回渲染管线专栏 返回目录