模糊视频秒变高清 联合科研团队创新算法揽CVPR四冠

2019-07-02
来源:香港商报网

  

中科院深圳先进院、商汤科技、香港中文大学、南洋理工大学组成的联合团队获得Workshop NTIRE 2019 视频复原比赛冠军。

  【香港商报网讯】记者林丽青报道:计算机视觉领域内最负盛名的学术会议——IEEE国际计算机视觉与模式识别会议(CVPR)近日在美国加州举行,会上颁发了Workshop NTIRE 2019 视频复原比赛相关奖项。由中国科学院深圳先进技术研究院、商汤科技、香港中文大学、南洋理工大学组成的联合团队研发的一套EDVR算法,包揽了该比赛四个赛道的全部冠军,且每个结果都大幅领先赛道第二名。

  此次视频复原比赛包含两个视频去模糊和两个视频超分辨率赛道。所谓视频去模糊,是将画面模糊的视频还原成清晰视频,而视频超分辨率则是将低清的小视频复原为高清的大视频。“与图像复原相比,视频复原有大量的时空冗余信息可利用,”联合团队成员、深圳先进院数字所多媒体集成技术研究中心董超博士说,“因此,清晰度能够比单一图像复原更高,相应的难度也更大。”

  在将EDVR算法与目前行业内最好的图像超分辨率算法RCAN对同一视频进行处理时,可明显看到EDVR算法能够还原出更多细节,这是因为传统图像算法仅将视频的每一帧进行了单一的图像复原,而EDVR算法则连续用了7帧画面的信息来恢复一帧图像。多帧图像对齐后,便需要将挖掘出的时空信息进行融合,EDVR算法中发明的多个模块很好地解决了这两大问题。“这两个步骤是所有视频底层处理的基础,解决了这两个问题再做视频的去模糊和超分辨率都可以。”董超表示,这也是为什么团队用一套算法便拿下了四个赛道的原因。

  视频算法用途广

  据董超介绍,该算法在视频直播、高清电视、手机拍摄、视频监控等领域均潜藏巨大的需求量。近日,该团队已公布所使用的算法论文,并将代码全部开源。董超表示,将深度学习用于视频复原是近两年刚刚兴起的新技术,技术难度大、门槛高,将代码开源是希望引领技术潮流,让更多团队进入该领域,共同发展计算机视觉技术。

  这支在国际顶级计算机视觉大赛中脱颖而出的队伍,由深圳先进技术研究院、商汤科技、香港中文大学和南洋理工大学组成,专注于底层计算机视觉,包括图像和视频的超分辨率、去噪与增强等技术。

深圳先进院多媒体集成技术研究中心团队,左四为数字所所长乔宇

  今年1月,深圳先进院与商汤科技合作成立“未来视觉技术联合实验室”。据联合实验室负责人、数字所所长乔宇介绍,该实验室将围绕复杂视觉信息的深度分析与理解方法,以及其它AI前沿技术研究、新产品开发、技术平台建设、人才培养等多层面展开广泛、深入合作,共同推进人工智能技术在各行业领域的示范应用和产业化协同发展。 

 

[责任编辑:程向明]
网友评论
相关新闻