假设你要开一家专门做“AI视频宴席”的餐厅。主厨Sora、可灵、Pika个个都是米其林级别——让它们做一道菜(生成一条视频),要同时开几十口灶台(GPU显卡),等上好几分钟,月底账单更是吓人。更麻烦的是,如果是短视频平台,每天要“出菜”几万道,成本直接决定你是盈利还是破产。 这篇文章的使命,就是教会你如何既保住宴席档次,又把后厨开销压下来。我们从头盘点:哪些环节在偷偷烧钱(成本构成)、怎么给大厨精简工具箱(模型压缩)、怎么让帮厨配合作业(并行加速)、怎么把熬好的高汤反复利用(缓存复用)、怎么让餐桌翻台率更高(调度优化)、甚至把部分菜品外包给私厨(端侧部署),最后还会教大家做一份“成本体检报告”(评估体系)。读完你就会明白:视频生成的算力账单虽然昂贵,但每一分钱都有省下来的空间。

岗位关联

对多模态AI工程师而言,掌握视频生成的成本构成与优化手段,是让方案从“能跑通Demo”走向“能商业化落地”的必修课——它直接决定你的技术能否以可接受的成本进入真实业务。

目录
  1. 可视化演示
  2. 成本构成
  3. 模型压缩
  4. 并行加速
  5. 缓存复用
  6. 调度优化
  7. 端侧部署
  8. 评估体系
  9. AI 应用场景
  10. Python 演示
  11. 常见误区
  12. 面试题

可视化演示

展示扩散模型计算成本分解、多种优化策略效果及去噪步数与质量权衡,支持模式切换。

本节配有交互动效(进入视口后自动加载,约 3KB)。

视频生成计算成本分解 紫色为去噪迭代计算,扩散模型核心开销占总成本60%+ 青色为时序注意力,帧间关联建模开销随帧数平方增长 总FLOPs = 步数 × 帧数 × 单步UNet计算量 扩散模型迭代去噪是视频生成最主要的计算瓶颈

成本构成

走进一家餐厅,月底老板会对账:厨师工资、食材进货、水电气、餐具折旧,每笔都要落到纸面上。视频生成的账单同样要分门别类地看,否则你只看到“好贵”两个字,却不知道贵在哪里。Sora、可灵、Pika这类扩散Transformer(DiT)架构的模型,生成一秒钟视频就要跑几百上千次神经网络推理,每一步都在烧钱。

账单上最显眼的一行是GPU算力。训练阶段要租几十甚至几百张显卡,推理阶段每次生成也要占用整块GPU。其次是显存,视频特征图比文本大得多,显存不够就得换更贵的卡。再往后是时间——生成时长越长,机时费越高;还有端到端链路,包括视频编解码、文本编码、图像后处理等“备菜环节”。

把这几项写成一个公式,就是餐厅的“总账单模型”:

看懂了账单结构,优化才有了靶子。就像餐厅老板先算出“食材成本占60%”才决定去批发市场砍价,视频生成团队也应该先盘点:我的账单里GPU算力占了几成?显存又占几成?这样后面每一招优化,都能算得清到底省了哪笔钱。

C总=Ngpu×Ph×ThC_{\text{总}} = N_{\text{gpu}} \times P_h \times T_h
总成本 = GPU张数 × 每卡每小时单价 × 总占用小时数。三条边任何一条缩短,账单都会明显变薄。
  1. GPU 数量 N_gpu一次生成任务实际使用的显卡块数。卡越多并行能力越强,但每多一张卡就多一份租金。
    NgpuN_{\text{gpu}}
  2. 单卡时价 P_h每块卡运行一小时的租赁价格。A100、H100这类高端卡按小时计价,选型直接决定单价。
    PhP_h
  3. 占用时长 T_h从加载模型到视频帧全部生成的累计机时,正比于视频秒数、帧率与分辨率。
    Th=生成总时间(秒)3600T_h = \frac{\text{生成总时间(秒)}}{3600}

模型压缩

一位大厨的刀具箱里可能有三十把刀,但日常真正用的不超过五把——剩下的只是占地方。视频生成模型也带着一身“用不上但占内存”的赘肉。比如一个13B参数量的视频生成模型,光权重文件就要占用约26GB显存(FP16精度下),还没开始算,显存就先吃掉一大半。

压缩模型的第一招是参数量化,像把精细菜谱换成速记版:原来每个权重用16位浮点数(FP16)表示,现在用8位整数(INT8)表示,显存直接砍半,计算速度也更快。第二招是知识蒸馏,让一个大师傅把自己的做菜心得教给徒弟,徒弟(小模型)味道接近师父,但身板小得多。第三招是结构剪枝,把那些“几乎没客人点”的参数当成多余配菜直接去掉,模型变瘦,效果损失有限。

量化对显存的压缩效果可以用一个简洁的比例公式描述:

给大厨减负不等于降低厨艺。量化和剪枝的精髓,是把精度用在刀刃上——重要的注意力层保留高精度,次要的卷积层用低精度,就像贵重的和牛整块入菜,边角料打成肉糜做酱汁,整体口感几乎不变,成本却降了一大截。

Mq=M0×bqb0M_q = M_0 \times \frac{b_q}{b_0}
压缩后的显存 ≈ 原显存 × 新比特数 ÷ 原比特数。从16比特量化到8比特,显存占用就降到原来的一半。
  1. 原始显存 M_0FP16精度下模型权重与中间激活(激活值)占用的显存大小。
    M0M_0
  2. 量化比特数 b_q压缩后每个参数的数值精度,视频生成中常用INT8甚至INT4。
    bqb_q
  3. 原比特数 b_0未压缩时的基准精度,一般取16比特(FP16)。
    b0b_0

并行加速

一位厨师再快,一桌三十道菜的宴席也忙不过来。后厨的解法是请帮厨:有人专门切配,有人专门掌勺,有人专门摆盘。视频生成同理,单张GPU的算力有限,想要缩短生成时间、提高每秒出片量,就要让多张显卡协同工作。

并行有几种基本“分工模式”。数据并行像多口锅同时煮同一种汤——每张卡各跑一份完整模型,处理不同的视频请求,适合提高吞吐量。张量并行像一只牛全队人分头切——把权重矩阵切成几块分到不同卡上,协同完成一次计算,适合单卡放不下的超大模型。流水线并行则像备菜、炒菜、摆盘的流水线,各卡负责模型的不同层,轮流接力。大型视频生成系统往往采用混合并行,几种模式组合使用。

并行不是无代价的,卡与卡之间的通信就像帮厨之间要互相喊话递料,这部分时间省不掉。Amdahl定律刻画了这种“人多不一定快”的边界:

后厨请帮厨的原则是“分工合理,避免添乱”。数据并行、张量并行、流水线并行组合使用时,要像大厨给帮厨派活一样,充分考虑通信开销和负载均衡——否则人越多,厨房越挤,出菜反而更慢。

S=11−P+PNS = \frac{1}{1 - P + \frac{P}{N}}
加速比 = 1 ÷(串行比例 + 并行比例 ÷ 处理器数量)。当串行部分占20%时,哪怕用100张卡,加速也不可能超过5倍。
  1. 并行比例 P可拆成多个处理器同时执行的部分占比。视频生成中大部分计算可并行,但仍有串行环节。
    PP
  2. 处理器数量 N参与并行的GPU卡数。
    NN
  3. 串行比例 1-P必须顺序执行的部分,如视频帧间依赖、通信同步等。
    1−P1 - P

缓存复用

真正讲究的餐厅,灶台上永远有一锅熬了八小时的老汤。任何一道菜需要高汤,直接舀一勺就行,不用重新熬。视频生成里的“老汤”,就是KV缓存(Key-Value Cache)。

视频模型在生成每一帧时,自回归式的注意力机制都会重新计算前面所有帧的Key和Value矩阵——这相当于每做一道菜都把高汤从头熬一遍,极度浪费。KV缓存的做法是:把已经算好的Key、Value保存在显存里,后续帧直接复用。生成第100帧时,只需要算第100帧的新内容,前99帧的成果都从缓存里取。

类似的智慧还有跨帧复用:同一镜头中相邻帧的画面高度相似,可以复用部分中间特征,不必每帧都从零计算。条件缓存则适用于“同一个提示词批量生成多条视频”的场景,把文本编码结果缓存下来复用。预热加载则像开业前先把炉子烧热——提前把模型权重加载到显存,避免用户等待冷启动。

复用带来的节省,可以用一个比率来量化:

老汤的意义不只是省时间,还让味道更稳定。KV缓存让每一帧的生成都站在前人的肩膀上,视频越长,节省越可观。不过要记得:老汤也得占冰箱空间,KV缓存同样吃显存,这块成本要在“缓存复用”与“显存开销”之间做好权衡。

R省=1−LnewLtotalR_{\text{省}} = 1 - \frac{L_{\text{new}}}{L_{\text{total}}}
节省比例 = 1 − 本次新计算量 ÷ 总计算量。复用得越多,L_new 越小,节省越高。
  1. 新增计算量 L_new本次新生成帧所需的标记数量(Token数),对应需要新做的计算量。
    LnewL_{\text{new}}
  2. 总计算量 L_total包含历史帧标记在内的完整序列长度。
    LtotalL_{\text{total}}
  3. 节省比例 R_省复用带来的重复计算削减比例,越接近1说明复用越彻底。
    R省R_{\text{省}}

调度优化

餐厅最怕什么?不是客人多,而是餐桌空着、厨房闲着。如果每道菜都单独开一灶,10道菜就要用10口锅;但如果把4道可以同时做的菜合并到一口大锅里,效率和成本完全不同。视频生成服务里的“拼桌”,就是动态批处理(Dynamic Batching)。

当多个用户的视频生成请求几乎同时到达时,与其让GPU一个个串行处理,不如把请求攒一攒,让同尺寸的请求合并成一个批次(Batch)一起算。一次前向传播同时出多条视频,GPU利用率大幅提升,单条视频的均摊成本随之下降。连续批处理更进一步:一批里有些请求提前结束,立刻插入新的请求补齐空位,像餐厅翻台一样不让任何计算单元闲着。

弹性伸缩则是应对客流波动的策略——白天高峰多租几十张GPU,深夜低谷释放掉,只留基本容量。云上GPU按小时计费,弹性伸缩能让“账单跟随真实负载”而非“按峰值买单”。优先级调度则为付费高的VIP任务插队,把有限的算力分配给价值最高的请求。

批处理场景下的吞吐优化,可用如下公式建模:

翻台率高了,同样一张桌子一天能接待三拨客人,利润自然上来。动态批处理和弹性伸缩的本质,就是让GPU这张“餐桌”永远坐满客人——算力不空转,就是最大的省钱。

T吞吐=B×NsTwT_{\text{吞吐}} = \frac{B \times N_s}{T_w}
吞吐量 = 批大小 × 每批完成的任务数 ÷ 批次耗时。批越大、耗时越短,单位时间产出的视频越多,单条均摊成本越低。
  1. 批大小 B一次合并处理的请求数量,通常受显存容量限制。
    BB
  2. 任务数 N_s一个批次内实际成功完成生成的视频条数。
    NsN_s
  3. 批次耗时 T_w从批次开始计算到全部生成完成的总耗时。
    TwT_w

端侧部署

有些菜品不需要后厨做。比如一份凉菜或一杯饮品,在吧台顺手就能完成,何必惊动大厨和灶台?视频生成也一样,如果把所有请求都送到云端GPU跑,既要付算力费,还要忍受网络传输延迟。把一部分能力搬到“私厨”——手机、电脑等端侧设备——是降本的又一利器。

端侧部署的难点在于,手机芯片的算力和显存远不如云端GPU。为此需要轻量模型,把大模型蒸馏成能在手机上实时跑的袖珍版本;借助硬件加速,利用手机内置的NPU、GPU进行视频编解码和部分推理计算;端云混合则是“快菜端侧做,大菜云端做”——简单的风格迁移、短视频特效在端侧完成,高难度的长视频生成仍提交云端;离线生成则在网络空闲或算力便宜时提前把视频生成好缓存起来,用户端拿到的只是成品。

端侧与云端的延迟差异,可以用一个简单公式表达:

私厨的解围,让餐厅不再把所有订单压在主厨身上。端侧部署的关键是“按菜分灶”:简单任务在端侧即时响应,复杂任务走后厨精工细作——用户感知到的速度变快了,云端的算力账单也瘦了一圈。

L总=L计算+L传输+L解码L_{\text{总}} = L_{\text{计算}} + L_{\text{传输}} + L_{\text{解码}}
总延迟 = 端侧/云端计算延迟 + 网络传输延迟 + 视频解码延迟。端侧部署可省去传输延迟,但计算延迟可能升高,需要权衡。
  1. 计算延迟 L_计算模型推理本身花费的时间,端侧算力弱会导致这一项偏高。
    L计算L_{\text{计算}}
  2. 传输延迟 L_传输数据在设备与云服务器之间往返的时间,端侧部署时这一项趋近于零。
    L传输L_{\text{传输}}
  3. 解码延迟 L_解码生成结果编码为视频流并在设备上解码播放的耗时,与硬件编解码能力相关。
    L解码L_{\text{解码}}

评估体系

做了这么多优化,省了多少、值不值得,不能靠感觉,要靠一份“成本体检报告”。就像餐厅老板每月复盘:客单价多少、食材成本率是否健康、顾客满意度有没有下滑。视频生成的评估体系,就要同时盯住成本和质量两块仪表盘。

单次成本指标是最直接的仪表:生成一条5秒720p视频,用了多少GPU时、折合多少钱?这个数字可以横向对比不同优化方案。但只盯成本会翻车——把画质压到马赛克级别当然便宜,用户不买账。因此还需要质量权衡,用FID、SSIM、VQA等指标评估生成视频的清晰度、真实感和语义一致性。

把两块仪表盘合二为一,就是性价比模型:

体检报告不是贴在墙上的装饰。调优闭环的意思是:每月生成一批测试视频,测成本、测画质、算性价比,然后根据结果决定下一个优化周期重点做量化还是做批处理、加缓存还是换调度策略。餐厅靠数据把毛利率从40%做到60%,视频生成团队靠同样的循环把单条视频成本从几元压到几角——这份报告,就是一切降本决策的罗盘。

V=QCV = \frac{Q}{C}
性价比 = 视频质量得分 ÷ 单条视频成本。理想状态是质量不掉、成本下降,让 V 稳步上升。
  1. 质量得分 Q由FID、SSIM、VQA等指标综合得到的视频质量评分。
    QQ
  2. 单条成本 C生成一条视频的算力成本,综合GPU时价、模型大小、批处理效率等因素。
    CC
  3. 性价比 V每一元钱换来的质量分数,是成本优化是否成功的最终裁决。
    VV

AI 应用场景

短视频平台批量内容生成

阶段:推理部署与成本优化

解决的问题:平台每天要生成数万条短视频素材,传统做法每条视频单独请求GPU,算力浪费严重,单条成本居高不下。AI方案通过将生成模型量化压缩到INT8、引入动态批处理合并请求,并利用KV缓存复用相同提示词的中间结果,把GPU利用率从三成提升到七成以上。

具体案例:某短视频工具App上线“AI一键成片”功能,在模型压缩和批处理优化前,单条5秒视频的算力成本约0.6元;优化后降至0.15元,日生成量从2万条提升到10万条,成本反而下降60%。

广告营销素材大规模生产

阶段:模型选型与端云协同部署

解决的问题:广告公司需要为不同渠道生成大量风格化视频素材,过去全部依赖云端GPU渲染,费用高且交付周期长。AI方案采用端云混合部署:轻量化模型在本地完成滤镜、转场等基础效果,云端只处理高难度的主体生成,再配合离线生成提前缓存热门模板。

具体案例:某电商大促期间,运营团队用端侧模型为500个商品生成展示视频,云端只负责其中20%的高复杂度场景,整体素材生产成本降低约55%,素材上线时间从平均3小时缩短到20分钟。

云端视频生成SaaS按次计费

阶段:资源调度与成本核算

解决的问题:云端视频生成服务按调用次数收费,若底层算力成本控制不住,利润空间就被吞噬。AI方案建立弹性伸缩策略——高峰期自动扩容GPU集群,低谷期缩容到最小规模;同时通过成本评估体系对每次生成的性价比进行实时统计,自动分配算力。

具体案例:一家提供“文本生成视频”API的服务商,接入弹性调度和成本评估后,GPU资源利用率从45%提升到80%,在保证生成质量的前提下,API定价下调30%,反而通过更大的调用量实现了总营收翻倍。

Python 演示

python42 行
class VideoCostEstimator:    def __init__(self, gpu_price_yuan_per_hour, gpu_count):        self.gpu_price = gpu_price_yuan_per_hour        self.gpu_count = gpu_count        self.total_hours = 0.0        self.total_cost = 0.0     def _base_time(self, duration_sec, resolution_level):        return duration_sec * 0.01 * resolution_level     def generate(self, count, duration_sec, resolution_level,                 batch_size=1, quant_bits=16):        base = self._base_time(duration_sec, resolution_level)        quant_ratio = quant_bits / 16.0        batch_ratio = 1.0 / max(batch_size, 1)        hours = base * count * quant_ratio * batch_ratio / 3600.0        cost = hours * self.gpu_price * self.gpu_count        self.total_hours += hours        self.total_cost += cost        return cost     def report(self):        return self.total_cost, self.total_hours  def main():    base = VideoCostEstimator(30, 8)    opt = VideoCostEstimator(30, 8)     for i in range(20):        base.generate(1, 5, 2)        opt.generate(1, 5, 2, batch_size=4, quant_bits=8)     b_cost, b_hours = base.report()    o_cost, o_hours = opt.report()    print('未优化方案: %.2f 元, %.2f GPU时' % (b_cost, b_hours))    print('优化方案:   %.2f 元, %.2f GPU时' % (o_cost, o_hours))    print('节省比例:   %.1f%%' % ((1 - o_cost / b_cost) * 100))  if __name__ == '__main__':    main()
目的:模拟视频生成成本估算器,对比“无优化方案”与“量化+批处理优化方案”在生成20条5秒视频时的算力成本差异。
  1. self.total_hours = 0.0初始化累计GPU机时,每个方案独立记账,像餐厅的两本账本。
  2. _base_time(duration_sec, resolution_level)根据视频时长和分辨率计算单条视频的基础生成耗时,分辨率越高耗时越长。
  3. quant_ratio = quant_bits / 16.0量化比率:8比特相对16比特为0.5,代表计算量减半。
  4. batch_ratio = 1.0 / max(batch_size, 1)批处理摊薄系数:一次合并4条请求,单条的均摊耗时变为四分之一。
  5. hours = base * count * quant_ratio * batch_ratio / 3600.0总机时将时长转成小时,综合量化与批处理的节省效果。
  6. cost = hours * self.gpu_price * self.gpu_count用成本公式 C = N×P×T 计算最终账单。
  7. for i in range(20):模拟20次生成任务,分别用两种配置跑完整个流程。
  8. print('节省比例: %.1f%%' % ((1 - o_cost / b_cost) * 100))输出优化方案相对基准方案的总成本节省百分比。

常见误区

误区视频生成的时候,把帧率从30fps降到15fps,生成成本应该也降一半吧?反正视频短一半,钱肯定省一半。

正解视频生成的账单不是按帧数线性算的。除了DiT主干的计算量,还有文本编码、VAE解码、视频后处理等固定开销,这部分不会因为帧数减少而消失。就像餐厅做饭,备菜、生火、刷锅的成本是固定的——你少炒一道菜,柴火钱不会少太多。

为何常见:直觉上“量减半、价减半”最容易理解,但忽略了软件栈中大量固定成本。

误区INT8能省一半显存,那INT4不是更香?量化比特越低越好,最好直接压到1比特,成本降到最低。

正解过度量化会让视频生成出现明显画质劣化——画面模糊、颜色断层、运动不连贯。量化的本质是用精度换空间,必须在画质指标(FID、SSIM)和成本之间找平衡点。就像高汤浓缩过头会变苦,压缩到极限的模型也会“变味”。

为何常见:看到量化带来的显存节省立竿见影,容易忽视画质这一隐性成本,等用户投诉才发现得不偿失。

误区既然一张卡太慢,那就上100张卡,速度应该提升100倍!卡越多,生成越快,成本平摊下来更便宜。

正解Amdahl定律告诉我们,串行部分(通信同步、帧间依赖、调度开销)是并行加速的天花板。串行占20%时,100张卡的极限加速比不到5倍。盲目加卡只会让通信开销爆炸,甚至出现“卡越多越慢”的负优化。要先分析哪些环节能真正并行,再决定卡的数量。

为何常见:生活经验里“人多好办事”深入人心,但忽略了AI计算中通信和同步的代价。

误区KV缓存能避免重复计算,那缓存越多越好,最好把视频每一帧的所有中间结果全存下来。

正解KV缓存吃的是显存,缓存量过大反而可能撑爆显存,导致系统被迫降级或换更贵的卡。生成60秒视频时,KV缓存可能占到GB级显存。正确做法是做“预算管理”:给缓存设上限,用最近最少使用(LRU)策略淘汰老缓存,在复用的收益和显存的成本之间取最优值、取得平衡。

为何常见:只看到缓存带来的计算节省,忽视了缓存本身的存储开销,就像囤了一冰箱剩菜,电费比菜钱还贵。

面试题

Q1. 视频生成成本中占比最高的通常是哪一项?

单选题 · easy

  • A.GPU算力开销← 正确答案
  • B.存储带宽成本
  • C.数据标注人力
  • D.网络传输费用

答案:A。视频生成的核心是密集的神经网络推理,每一帧都要经过扩散模型的多次迭代计算,GPU算力是绝对的大头。存储、标注、传输虽然存在,但相对GPU的租赁和能耗成本只是零头。就像餐厅账单里食材和人力最贵,而不是纸巾和牙签。

Q2. 将模型权重从FP16量化为INT8,显存占用理论上约降为原来的多少?

单选题 · easy

  • A.两倍左右
  • B.四分之一
  • C.一半左右← 正确答案
  • D.保持不变

答案:C。量化节省的显存比例正比于比特数变化。FP16用16比特表示一个参数,INT8只需8比特,8÷16=0.5,所以显存约降为原来的一半。这正是量化公式 M_q = M₀ × b_q/b₀ 的直接应用。

Q3. 下列哪些属于模型压缩的常用方法?

多选题 · mid

  • A.参数量化← 正确答案
  • B.知识蒸馏← 正确答案
  • C.结构剪枝← 正确答案
  • D.增加训练数据

答案:ABC。参数量化降低数值精度,知识蒸馏用小模型学大模型,结构剪枝剔除冗余参数,三者都是经典的模型压缩手段。增加训练数据不会压缩模型,反而会增加训练成本。方法各有所长,实践中常组合使用。

Q4. 张量并行指的是把模型按什么维度拆分到多张卡上?

单选题 · mid

  • A.按时间步切分
  • B.按权重张量切分← 正确答案
  • C.按样本数量切分
  • D.按视频帧切分

答案:B。张量并行是把权重矩阵(张量)按行或列切分到不同GPU,协同完成矩阵乘法。数据并行是按样本切分,流水线并行是按层切分,按时间步和视频帧切分都不是主流的并行维度。

Q5. KV缓存的主要作用是什么?

单选题 · easy

  • A.减少训练数据量
  • B.复用注意力中间结果← 正确答案
  • C.提升视频压缩码率
  • D.增加模型的层数

答案:B。自回归生成时,每一帧的注意力计算都要用到历史帧的Key和Value矩阵。KV缓存把算过的K/V存下来供后续帧复用,避免重复计算。就像提前熬好的老汤,每道菜直接用,不必重新熬。

Q6. 动态批处理能给视频生成服务带来哪些收益?

多选题 · mid

  • A.提高GPU利用率← 正确答案
  • B.摊薄固定开销成本← 正确答案
  • C.降低算法复杂程度
  • D.减少模型参数量

答案:AB。动态批处理把多个请求合并成一批计算,一次前向传播服务多条视频,GPU利用率提升,固定开销被摊薄到更多任务上。它不改变算法复杂度,也不减少模型参数,只是更高效地利用现有算力。

Q7. 端侧部署视频生成模型时面临的最大挑战是什么?

单选题 · hard

  • A.用户操作界面设计
  • B.网络带宽速度慢
  • C.算力与显存受限← 正确答案
  • D.视频分辨率太高

答案:C。手机等端侧设备的算力和显存远小于云端GPU,动辄几十GB的视频生成模型无法直接运行。端侧部署的核心挑战就是如何通过轻量化、蒸馏、硬件加速等手段,把模型压进端侧有限的算力与显存中。网络带宽和界面设计不是主要瓶颈,分辨率高也同样是算力问题的一部分。

Q8. “生成一条视频的算力成本”属于哪类指标?

单选题 · easy

  • A.质量指标
  • B.成本指标← 正确答案
  • C.时延指标
  • D.吞吐指标

答案:B。单条视频的算力成本直接衡量钱花多少,是成本指标。质量指标看的是画质和语义一致性,时延指标看响应快慢,吞吐指标看单位时间处理多少请求。成本指标是优化效果的“记账本”。

Q9. 以下哪些措施能有效降低视频生成推理成本?

多选题 · hard

  • A.模型参数量化压缩← 正确答案
  • B.动态批处理复用算力← 正确答案
  • C.引入KV缓存复用← 正确答案
  • D.无限提高视频分辨率

答案:ABC。量化压缩降低显存和计算量,动态批处理提升GPU利用率,KV缓存避免重复计算——三者都能实实在在降低成本。无限提高视频分辨率只会让计算量暴增,成本反而飙升,方向完全相反。

Q10. Amdahl定律指出,若某系统串行部分占20%,用100张卡并行,加速比极限约为多少?

单选题 · extreme

  • A.接近100倍
  • B.接近50倍
  • C.接近5倍← 正确答案
  • D.接近20倍

答案:C。套用 Amdahl 公式 S = 1/(1-P+P/N) = 1/(0.2+0.8/100) = 1/0.208 ≈ 4.8,逼近5倍。即使并行部分占80%,100张卡也无法突破串行20%的天花板。这提醒我们,优化串行部分往往比无限加卡更划算。