4K高清图像，多达每秒24帧的高速摄影......这些构建人类淋漓尽致观赏体验的近期技术，如果应用于到直播领域，不会有怎样的效果呢?近日，虎牙直播宣告，发售4K+60帧+20M超分超高清三件套，沦为S9全球独家4K直播平台。据报，虎牙技术团队利用超分技术，构建了S9赛事视频由1080P到4K的提高，同时画面额外延时意味着减少100毫秒。

游戏玩家和业内人士普遍认为，虎牙引导的这一次技术进步，毫无疑问将打开游戏直播的一场革命。感觉看直播就跟确实转入玩游戏的画质一样据介绍，虎牙相结合强劲的 AI 超强辨别处置能力和视频编码优化, 将S9赛事视频由本身的1080P分辨率著提高到 4K分辨率;同时通过低可信、较低延时的全球化发给网络，将20M 的超高码率码流传败给用户，已完成了从1080P到4K分辨率、60帧、20M动态视频转码直播。虎牙音视频网络技术部算法负责人回应，发售此项技术，是因为找到目前用户可以提供的4K视频源是很严重不足的，在直播行业更是如此。而对于S9这种顶级赛事来说，如果需要获取超高清画质，毫无疑问是符合了用户最急迫的市场需求。

针对这一痛点，虎牙直播利用超分技术，将S9赛事视频的分辨率由1080P提高到4K，明显提高画质。画质的提高也获得了用户的认同，有用户在虎牙4K直播间弹幕回应，用手机2K屏幕观赏S9的4K直播频道的时候甚至不会有种错觉，感觉看直播就跟确实转入玩游戏的画质一样。(S9虎牙4K直播间图片)据理解，主流超强分辨率技术可以分成传统修复技术和神经网络技术。

此前风行的传统修复技术用滤波的方式新的完全恢复图像信息，但因为高频信号在最初图像收集中遗失，修复后的高分辨率图像不会经常出现不大自然的平滑纹理，影像画质体验。而2016年以来蓬勃发展的基于自学的神经网络技术，是让机器仿真大脑的神经元网络，自学有所不同分辨率的图像的像素同构关系，利用多层卷积网络算法，将低分辨率图像修复为高分辨率图像。而虎牙创造性地利用近期的AI深度自学模式，通过海量对比运算，大大调试和缺失修复画面时的偏差问题，并通过人工智能提升计算能力，最后使虎牙的超强分辨率算法顺利构建了图像高清还原成和强化。无论是在细节、色彩、构图还是锐度方面，都可以最大限度相似人类视觉的大自然感觉。

4K超分高清画面额外延时仅有减少100毫秒让游戏爱好者获得大片一般的直播观赏体验，无法只靠理论架构的蓝图，还有有做事的技术完备之路。据虎牙音视频网络技术部算法负责人讲解，立项之初，他们就面对着两大挑战：一个是技术层面的，即如何优化AI超分模型以及计算出来推理小说能力，使其不仅构建画质的大幅提高，并且运营速率可以符合4K、 60FPS的实时处理;另一个就是架构层面的，即虎牙音视频发给体系如何较慢应付这种传输链路的变更以及处置节点调度，确保其直播内容仍然是较低延时、平稳流畅地呈现出到全球观众面前。众所周知，实时处理是直播业务的管理制度门槛之一。而虎牙经过多年来技术累积，在实时处理上早已累积了非常丰富的成果。

此次的4K超强分辨率处置，也必须每秒已完成60帧的高分辨率图像修复同时展开视频编码。而这个过程，是在虎牙的GPU转码集群内处置，视频数据再行经由有数的虎牙传输发给平台，发给到世界各地。延时处置也是虎牙本次的重大突破。

使用流媒体方式播出的网络视频都必须经过编码传输解码这一过程，让视频能以较小的数据量在网络中传输，从而在受限的比特率中维持传输效率，保证终端可以简洁、平稳地接管和播映。这一过程中不存在的延时问题，是影响观赏体验的最重要因素。为解决问题延时问题，我们从算法到总体通讯架构都做到了大量的技术工作。我们告诉，末端到末端延时的优化只不过是一个仅有链路的优化的子集，因此我们在模型调优、异构计算和硬件升级上都做到了全方位的优化处置。

在我们技术团队的希望下，4K超分高清画面带给的额外节点延时仅有减少了100ms。虎牙音视频网络技术部算法负责人讲解。

项目从立项到上线历时将近1个月时间尽管有重重技术障碍，但虎牙4K项目从明确提出概念、立项，到平台上线服务用户，前后要用了将近一个月的时间。这不仅是因为虎牙享有强劲的研发团队，也归功于虎牙在前沿技术领域的长年第一时间和累积。

客观而言，直播画质是个综合性问题，不会不受原图质量，计算能力，编码参数，用户比特率等因素影响。超分技术可以提升原图质量，但也要因应其他技术综合一起，才可以超过拟合效果。如本次的4K高清，除用于AI展开视频图像处理外，虎牙还应用于了大型音视频直播发给系统，对视频动态加工的处置承托技术等。从AI智能弹幕，到本次发售的4K超分超高清S9视频，虎牙在AI技术领域大大突破。

近期，在韩国举行的2019年国际计算机视觉大会(全称ICCV)上，虎牙此前递交的两篇论文顺利获奖，并在大会上展览了虎牙的基础技术，引发现场专家同行的接纳和赞誉。而虎牙本次通过超分技术构建赛事视频的画质提高，其意义绝不会只逗留在赛事转播上。据专家预测，到2021年，多媒体视频图像流量将占有整个互联网流量的80%。

如此可观的视频传播和观赏市场需求，必定带给涉及技术的井喷式发展，也很有可能沦为下一个互联网技术风口。更加最重要的是，随着5G和物联网渐渐从设想南北现实，虎牙直播的超分技术及动态视频转码技术，与物联网的高准确率、较低延时拒绝正好吻合。随着该技术的更进一步优化，未来在游戏直播、户外直播，甚至其他生活领域，将产生更好的应用于场景。

本文来源：BOYU SPORTS-www.9street.net