近日, 由CVPR主办的MAI(Mobile AI Workshop)分会近期在线上举行。作为图像领域,影响力的赛事之一,本届MAI 2021挑战赛由华为、OPPO、MTK、SAMSUNG、苏黎世理工共同主办。参赛队伍聚集了华为、百度、商汤、Horizon等国内外,AI团队。大华股份图像算法部dh_isp 团队提出的轻量化网络一举摘得ISP赛道,,充分展示了大华在图像增强领域的开拓创新的实力。
不同于部署于云端,由于存储空间、功耗及算力资源限制,神经网络模型在移动设备和嵌入式设备上的存储与计算是一个巨大的挑战。轻量化网络旨在保持模型精度基础上进一步减少模型参数量和复杂度。轻量化网络既包含了对网络结构的探索,又有例如知识蒸馏、剪枝等模型压缩技术的运用,推动深度学习技术在移动端,嵌入式的应用落地,在智能家居、安防、自动驾驶、智慧海洋等领域都有重要贡献。
Learned Smartphone ISP Challenge竞赛致力于促进业内使用深度学习的方法替代传统ISP模块,对相机获得的RAW数据直接转换为RGB图像,以获得更好的成像效果,同时也能够解决传统ISP模块依赖大量人工经验调参的难题。
在大赛中,大华dh_isp团队基于自身在ISP领域的积累,通过深入分析任务的特点和痛点,提出、高效、高性能的网络,网络设计立足于图像重建任务特性,并基于图像任务采取了特殊的损失函数和训练方式,使网络在耗时最小的情况下,获得很好的主观效果,在综合排名中,以明显的优势获得桂冠,彰显了大华图像成像、图像增强、轻量化网络设计等领域的技术积累及开拓创新能力。
(大华自研AI降噪技术,明显提升画面清晰度,还原细节和色彩)
据了解,大华股份作为智慧物联行业头部企业,深耕ISP技术近十年,多年的产品迭代使大华的ISP团队积累了深厚的技术功底。伴随着AI相关技术的蓬勃发展,如何利用AI进行底层(low-level)图像处理以带来更好的图像质量深受行业研究关注。AI+降噪、插值、去模糊、超分辨率,乃至于AI+ISP在研究、竞赛中都带来了显著的进步。大华图像算法团队立足于自身在传统ISP领域的技术积累,开发了全图以及感兴趣区域的AISP图像处理技术,进一步提升了图像效果,为终端用户提供更优异的视觉体验。