近日,我校信息与控制工程学院青年教师王秉路副教授的研究成果“Learning pixel-adaptive weights for portrait photo retouching”(为人像照片修饰学习像素自适应权重)被国际顶级期刊Pattern Recognition(模式识别,中科院分区:SCI一区TOP期刊)收录,论文第一作者为王秉路副教授,西安建筑科技大学为该论文第一完成单位。
在记录有意义的时刻的照片中,人经常充当一个重要的角色,人们通常对类似的场景拍摄多张照片。然而,由手机或相机直接拍摄的原始照片的质量很容易受到天气、灯光和拍摄设备等的影响。同时,在同一场景下对同一主体拍摄的多张照片的色调也可能变得不同。因此,论文中提出了一个被称为“人像照片修饰”的照片修饰任务,以强调人体区域的优先性和群体层面的一致性。
对一个像素的上下文信息进行建模的直观方法是选择一个k×k的图像区块,并预测像素适应性的权重来结合查找结果。然而,上下文像素可能与中心像素表现出不同的亲和力。因此,论文中提出了一个局部上下文感知模块(LAM,Local-context Aware Module),通过学习像素自适应的局部注意力掩码,扩大同质像素(如两个人像像素)的影响,抑制异质像素(如一个人像像素和一个背景像素)。此外,考虑到每张照片都有一个肖像遮罩,论文中构建ground-truth亲和图并应用像素监督来进一步提高局部注意力遮罩的质量。所提出的LAM探索上下文线索,预测像素自适应权重,并为图像自适应LUT权重带来补充信息。因此,所提出的方法可以有效地整合查找表的结果,实现高质量的修饰效果。人像照片修饰任务的另一个要求是保持一组照片的色温和色调的一致性。为此,论文中设计了一个简单而有效的群组风格感知模块(GAM,Group-style Aware Module),使一组照片具有一致的色温和色调。
Pattern Recognition是国际知名的模式识别领域期刊,由荷兰阿姆斯特丹大学教授C.H.Chen于1968年创办。该期刊每年共出版12期,并备有在线电子版。涵盖了计算机视觉、模式识别、图像处理、机器学习、人工智能等多个领域,发表的论文涉及理论、方法、应用等不同方面。
文章链接: