全球顶级计算机视觉赛事,成者AI算法实验室斩获佳绩
近日,成者CZUR人工智能算法实验室作为NTIRE2022的参赛新秀,荣获高动态范围成像(HDR)任务赛道1第五名!
图解:NTIRE 2022
NTIRE (New Trends in Image Restoration and Enhancement) 可谓是计算机图像修复领域最具影响力的赛事之一,今年是第七届,主要聚焦图像修复和增强技术,代表相关领域的趋势和未来发展。正因为如此,每年都会吸引大量来自科技界、学术界的关注者及重量级参赛者。
受限高动态范围成像(HDR)挑战赛旨在从多个低动态范围(LDR)观测数据中估计HDR图像,这些数据可能存在曝光不足或曝光过度的区域以及不同的噪声。挑战赛由两个方向组成,目标是探索高效的HDR模型和技术方案,以达到实用化的使用需求。
此次参加挑战赛两个方向分别有197个队伍、168个队伍。其中科技界的队伍包括:网易、腾讯、旷视、字节跳动、蚂蚁、小米、京东方、成者CZUR等;学术界的队伍包括:清华大学、中科院、中国科学技术大学、上海交通大学、中山大学、爱丁堡大学、帝国理工、南丹麦大学等。成者CZUR作为比赛新秀从众多挑战者中脱颖而出,获得挑战赛赛道1的第五名,这是成者CZUR第一次向国际AI竞赛发起冲击,也展示出成者CZUR在人工智能领域及图像修复领域的综合实力名列前茅。
图解:赛道1:保真度排名
此次挑战的重点是开发高效的多帧HDR重建方法。成者CZUR参赛团队选择了赛道1——保真度(低复杂度约束),此赛道实行严格的低复杂度限制,要求所有提交的方法在测试输入张量的大小(3,3,1900,1060),即(序列长度,通道,宽度,高度)上必须小于200GMACs。所有方法都需要在模型定义范围内进行任何预处理或后处理,如伽玛校正、归一化、曝光对齐、下采样等,最后根据保真度指标对提交的方法进行排名。
成者CZUR凭借着对图像增强领域技术的积累,提出利用Transformer结合对齐注意力模块进行HDR重构。它包括一个用于特征提取的卷积特征提取器和一个用于HDR重构的解码器。
成者CZUR团队使用ADNet的一部分建立了卷积特征提取器,包括曝光对齐、金字塔、级联和可变性(PCD)对齐模块以及空间注意力模块。decoder部分采用了最近提出的Restormer架构。为了进一步降低模块的复杂性,该团队使用深度可分离卷积取代了一些常规卷积层。在训练方法上,采用了渐进式训练调优。
图解:由成者CZUR团队提出的使用PCD+Attention+Restormer多帧高动态范围成像重建结构
成者CZUR 将赛事中相关技术应用在旗下成册智能扫描仪产品中。成者2015年推出全球首创的第一台全类型智能扫描仪,开创了快速成册扫描的新品类,并一直引领了智能成册扫描仪的行业发展。如今,相关技术的应用让成者智能扫描仪的扫描成像、视频演示等效果更为优秀,结合独创“激光辅助立体展平技术”,实现从技术核心层面提升产品体验!同时在成者即将发布的智能会议办公新品,也将会有相关技术的加持。
成者NTIRE2022参赛信息
参赛组织:成者CZUR
参赛团队:成者人工智能算法实验室
参赛成员:李灏为、胡阳、邹保珠
参赛方法:Multi-frame High Dynamic Range Image Recon- struction using Transformer
关于成者人工智能算法实验室
成者人工智能算法实验室伴随成者CZUR一起成立和成长,主要致力于研究计算机视觉、音视频协同处理,落地AI创新产品。成者人工智能算法实验室运用AI技术为产品体验的提升优化提供有效的解决方案,其独创的“激光辅助立体展平技术”、“文档增强处理”、“AI姿态识别技术”, “会议音频增强”等核心技术,已应用在成者旗下各系列书刊成册智能扫描仪、AI高拍仪、智能坐姿仪中。
未来,成者人工智能算法实验室将持续进行AI算法研发投入,深度与硬件、软件融合,打造具有产业特色、行业知名、具备核心竞争力的AI算法实验室。
赛后小采访
Q1:你好,灏为,请问当初为什么会选择参加NTIRE2022国际计算机视觉大赛?
A:对于NTIRE已经关注很久了,在过去的几年一直没有合适的时机参赛。我们在图像增强做了多年,成功地应用在了多款产品,有自己的一些积累,前段时间正好在做HDR相关的工作,时机也合适,与团队沟通过后就决定报名参加。另外是验证下“Transfomer based”会逐渐成为图像增强领域有竞争力的方法” 的预估, 果然今年很多队伍采用了这样的方法。总结而言,是为了与时俱进。
Q2:参加这次比赛给团队制定了什么样的目标以及遇到什么样的困难?
A:没有设定目标,主要是想让团队上“战场”学习一下。困难算不上,遇到问题,思考、解决问题。
Q3:通过这次比赛,你认为给你和你的团队带来的收获是什么?
A:最直观的收获就是验证了我们的一些想法。同时也强化团队追求“State-of-Art”的精神,因为算法领域变化是很快的,唯有与时俱进,加速奔跑,才能保持一点点优势。赛跑的过程中会产生“热爱”,只有热爱,我们才能持续地做好一些事情。
Q4:请问成者算法实验室的使命是什么?
A:致力于AI创新, 深耕办公垂直领域,做好算法产品。AI最大的价值,不是停留在实验室,而是找到合适的场景和产品,去改善每个普通人的日常。