快手行业首个云渲染系列技术推动5G大规模商业化

  • 2020-07-31 10:54
  • 中国经济网

原创标题:快速行业首个云渲染系列技术推动5G大规模商业化

今天,快手在2020中国国际数字互动娱乐展(ChinaJoy)上率先发布了基于5G网络的云渲染技术。该技术基于短视频服务场景,为用户提供有趣的体验。这只快速的手提供了两个展览:如何训练你的龙和第二次转变。这两个展览具有沉浸感强、体验生动的特点,受到了广大参展者的追捧。

本次快速展示展示的云渲染技术充分发挥了5G高带宽、低延迟的优势,释放了云强大的计算能力,克服了本地计算能力不足的缺点,达到了云实时渲染、5G低延迟传输和本地实时显示的目的。

为了给用户提供好莱坞级的视觉体验,《如何训练你的龙》综合应用了多项自主开发的技术,包括基于物理的渲染、真实世界的物理模拟、基于体素的流体建模与渲染系统、大规模图形处理器粒子系统和YCNN推理引擎。许多先进技术和大量子时代资源的使用导致本地设备不能提供足够的计算能力和存储空间。随着5G技术的出现,云模拟成为可能,解决了上述问题。同一个屏幕上有数百万张脸,真实的光影效果,华丽的粒子效果,逼真的头发模拟,逼真的交互体验,高精度的人工智能推理,流畅细腻的图片,精致震撼的特效,为短片特效行业树立了标杆。

第二种转换是基于CycleGAN和UGATIT框架实现的。在实践中,快手优化和提升了算法的鲁棒性、模型效果、数据准备效率和时间序列稳定性。服务器端全图像二维技术支持人像、背景和多人效果。通过端云协作的技术方案,服务器运行的结果以直播的方式显示,为用户提供了更清晰、更有质感的二次转换。

为了更好地适应5G网络,快手音像部开发了自己的网络传输协议和实时编解码技术,并采用快手自建的SDN网络,通过基于UDP协议的高清视频低延时通信技术,实现了对云中捕获的本地视频的实时回声。将用户在手机上采集的视频实时发送到云端,利用服务器强大的硬件资源进行渲染,然后将渲染结果实时发送到用户的手机上进行显示。

快速手云渲染技术充分结合移动终端和服务器的硬件能力,实现更复杂的操作,将充分挖掘5G网络未来的应用价值,在视频内容制作、直播、小游戏等应用场景中发挥重要作用。

头条推荐
图文推荐