一个 78 兆的视频文件,被压缩到不到 1 兆,画面里的人脸和文字却完好无损
一个 78 兆的视频文件,被压缩到不到 1 兆,画面里的人脸和文字却完好无损。 按传统视频工业的常识,这根本不可能。 从 H.264、H.265 到最新的 AV1,视频压缩的物理极限就在那里。 一旦把码率砍掉百分之九十八,任何画面都会崩塌成一团无法辨认的马赛克。 它凭什么不糊? 大部分人以为是找到了某种更厉害的数学压缩算法。 不是算法变聪明了。 是它彻底换了一台机器。 传统视频压缩走了四十年的老路,底层全靠香农在 1959 年奠定的率失真理论。 从电视信号到流媒体,所有编码器都在做同一件事:像素级残差搬运。 画面变动了,就记录像素挪动的位移;光影变化了,就计算前后两帧的数值误差。 在这个框架下,传输的是现实的像素拷贝。 高频细节最占带宽,人脸的睫毛、文字的边缘、皮肤的纹理,全是第一批被算法扔掉的残差。 想把体积压小 78 倍,唯一的代价就是画面彻底模糊。 这台名为神经差分的新机器,直接绕开了率失真曲线。 它的灵感来自生物视网膜神经元。 人眼看世界,从来不逐行逐像素地扫描全景。 视网膜神经节细胞只对亮度突变和动态边缘产生电脉冲。 神经差分系统也是如此:它只提取并传输最稀疏的结构差分信号。 被压缩送出的那 1 兆数据里,根本没有完整的人脸,也没有清晰的笔画。 那些逼真的细节,全是在接收端用本地神经网络实时重构出来的。 这对应了计算机视觉学者 Blau 与 Michaeli 在 2018 年提出的感知失真权衡理论。 数学上的完全保真,与人类眼中的超高感知画质,在极低码率下无法兼得。 神经压缩没有把原始像素压得更小。 它把传输任务,变成了一场端侧的生成任务。 这并不是没有代价的魔法。 数据传输的带宽税被免掉了,但本地设备的算力税翻了数倍。 原本几块钱的解码芯片搞不定它,必须依赖专门的神经处理单元。 复杂的动态场景里,这种靠概率生成的画面还会出现漂移的伪影和帧不稳定。 但它指明了流媒体演进的分水岭。 当物理带宽逼近香农极限,算力在终端变得极其廉价,未来的视觉传输不再是搬运现实。 只要发过去最精简的差分骨架,剩下的世界,让本地芯片自己画出来。
相关 / RELATED
JSON导出 / EXPORT
订阅 · SUBSCRIBE
每周一封信号简报,重大进展可选即时推送。