5G+超高清视频联合研发实验室
本实验室致力于面向5G超高清视频邻域的前沿技术问题和产业需求,联合福建省产业领军企业,发挥校企合作、产教融合、协同创新优势共同成立。主要研究邻域包括5G多媒体通信、无线弱网环境传输、超高清视频编解码、视频画质修复增强以及机器视觉等。为地方产业需求及多学科交叉研究提供平台。
实验室现有研究人员10人,其中专家教授2人、副教授4人。已获十余项横纵项科研课题,立项金额近百万。团队累计发表核心及以上论文十余篇、发明专利等知识产权多项。
配图一(两图重叠):
配图二:超高清视频标准
配图三:5G应用场景
基于深度学习优化的超高清智能编码
超高清标准的视频每秒将产生高达12~48Gb的数据量,给压缩编码的效率和性能带来前所未有的挑战。实验室在研究采用先进的HEVC/AVS3编码技术高标准研发的同时,探索基于人工智能技术智能感知编码探究进一步提高系统的压缩效果和编码速度,研发具备智能编码技术的超高清编码引擎。
配图一:自适应感知编码(请扣除背景或重新按图作图)
配图二:感官增强智能编码(请重新按图作图)
基于卷积神经网络和生成对抗网络的画面增强
采用生成对抗网络GAN针对视觉感兴趣区域进一步增强提升效果。生成对抗网络包括生成模型和判别模型两个部分,训练过程采用二人零和博弈的思想。生成模型以重制的超分图像作为输出。判别网络将原始高分辨率图像和生成网络生成的增强超分图像作为输入,判别结果作为输出。生成网络和判别网络互相对抗更新模型参数,当判别网络无法区分输入图像是原始高分辨率图像还是超分图像时,生成对抗网络就完成了图像重建任务。
公网+专网5G超高清视频传输
结合5G通信和超高清视频前沿技术解决移动性和超高清回传两大挑战,实现超高清视频的大带宽、低延时、高可靠直播。5G大带宽、低时延的特性能够同时保证不同场景对实时性和移动性的高要求,为广电直播、远程制播带来革命性的升级,为广大用户带来更好的体验。
采用SA建网模式的5G网络上行速率约200Mbps,可实现常规的8K视频(通常码率在100~160Mbps)回传。借助时域与频域复用的“超级上行”技术,则能够实现高达350Mbps 左右的上行通路。这样的传输能力,能够在许多场合中省去超高清直播车,实现现场采集编码直接传输至后方演播室,给直播领域带来革命性的影响。
配图一:典型应用
配图二:5G+4K直播终端
项目光彩重生获第十届“锐智杯”福建省大学生智能设计大赛中斩获多个奖项。使用基于CNN和GAN训练全自动上色模型,并使用Intel OpenVINO高性能AI推理优化加速、Intel QuickSync技术的高性能视频编解码加速,实现对不同类型的黑白图像或视频上色,让黑白图像光彩重生。
在2021年4月第四届数字中国建设峰会上,三大运营商和国家广电总局设立的5G+4K/8K超高清视频产业成为展览会上重点展示板块。福州理工学院与福建省广播影视集团联合展出本项目成果“5G+4K超高清视频传输系统”作为5G+4K/8K应用范例亮相国家广电总局智慧广电展馆。


第四届数字中国峰会展会
设备参与拍摄的真人秀节目
福州市博讯网络科技有限公司作为该项目系统的合作方成功应用实验室研发成果至2021年湖南芒果TV真人秀项目中。参与录制的节目有我的狼朋友、勇敢的时间、明星大侦探等。
- 上一篇:大学物理实验室(三) 2023/2/10
- 下一篇:模拟产房 2023/2/9

