我在读论文的时候常常有一些辅助理解论文的词汇看不懂,为了它单独看一篇论文又不值得。我就自己查了查,总结在这里了。
Deep High Dynamic Range Imaging with Large Foreground Motions - ECCV2018
我在这篇里面写了一些对这篇论文的主干理解。其中有些词汇的概念不太清楚。通读过程中记了下来在这里分享,希望能帮到别人。
词汇概念列表
- Camera response function(CRF)这是啥?
- Radiometric calibration 辐射配准是啥?
- Radiance vs Reflectance 这俩的区别是啥?
- Brightness vs Luminance 两个词具体表现有啥区别?
- Gamma function 什么是γ方程?
- Image registration 什么是图像配准?
- Parallax effect 这个叫视差效应,什么意思呢?
其中1 - 3都跟传感器的知识有关,是数字成像的一部分。他是发生在图像处理之前的。其实做图像处理不一定需要知道这些,不过既然论文里提到了,顺便了解一下也无妨。
-
Camera response function(CRF)这是啥?
CRF是光照的量与图片像素数值关系的方程,可以用一条曲线表示。其中光照的量可以用曝光时间来表示。每个照相机的CRF都不一样。原因很复杂,跟使用吸收光子的材料,感光元件,电路制作工艺等等都有关。大学的光电原理会讲一点基础细节。当然我不是机电的只知道一点点皮毛。这里原因可以简单的理解为相机的吸收光子的材料不同。有的是硅,有的是别的材料,那么产生的像素数值肯定会有区别了。 -
Radiometric calibration 辐射配准是啥?
数字成像有一系列复杂的校准步骤。Radiometric calibration 是数字图像预处理的步骤之一。这一步是矫正从传感器得到的原始数字图像数值(digital number value)到at-sensor反射或辐射值。比如根据太阳光照角度,摄像头到物体表面的距离等来矫正。这里有一些矫正的知识。这里是youtube视频包括数字图像预处理知识。两个讲的角度不太相同但包含的内容是一样的。 -
Radiance vs Reflectance 这俩的区别是啥?
辐射和反射,这里就能帮助理解上一问了。
先说辐射。这是遥感可以直接接收的光的数值。他等于是说传感器能’看到‘多少光。当光射向一个物体时,不是所有的光都会落到物体上。大气环境有折射,会吸收一部分光。所以实际观测的光辐射比光源射出的要低。
反射是光打在物体上对反射回来的比值,也叫反射率。实际的反射率也收到阴影和反射方向的影响。这里可以找到一些解释。 -
Brightness vs Luminance 两个词具体表现有啥区别?
读和写论文的时候总是懵逼。这俩词有啥区别呢?简单来说就是主观和客观的区别。一般来说luminance这个词更专业一点,是指光照强度。他是一个客观的通过仪器可以测量的属性,单位是cd/m2。而brightness是亮度。是一个通过人眼感受到光主观的属性。这个属性没有精确的测量。这里有一些解释。 -
Gamma function 什么是γ方程?
这个最简单,就是个数学方程。数学方程不像前面的工业步骤,这东西没有’发明他是干什么用的‘一说(也有可能是我不知道啊)。
化简之后的方程就是γ(x) = (x - 1)! 原是方程和化简步骤可以在这里找到,有视频解释。
写到这可以看出,其实论文里说的radiometric calibration和gamma function不是真正意义上的辐射配准和伽马方程,他们写的只是CRF。
-
Image registration 什么是图像配准?
图像配准经常在医学图像里用到。给出一系列图片,这些图片的一部分有微小的位移。那么在处理图片之前需要把它们按照一定的坐标轴给对齐,就是图像配准。比如核磁共振图片,连拍不同曝光度的图片等。配准的方法有很多,论文里提到的optical flow也可以达到配准的效果。同时optical flow还可用来干别的,比如移动的物体追踪等。 -
Parallax effect 这个叫视差效应,什么意思呢?
论文最后提出单应变换(homography transformation)有可能产生其他的问题,比如parallax effect。这个叫视察效应。简单来说就是在你移动的时候,由于其他静止物体离你距离不同,你感觉他们的移动速度也不一样。比如你坐火车,离你很近的栏杆会搜搜的快速闪过,而远处连绵起伏的山峰却移动的很缓慢。这也是一种2.5D动画制作的技术,在这里有视频介绍。
Deep High Dynamic Range Imaging of Dynamic Scenes
词汇概念列表
non-rigid motion transformation.
就是非刚性变换。放射变换(affine transformation)分刚性和非刚性两种。
刚性指的物体的形状和大小不变的变换,只变物体的位置。比如translation-平移,rotation-旋转,reflection-对称。
非刚性指的是变换物体的大小和/或形状。比如shear-推拉,scaling/dilation-等比整体放大缩小,non-uniform scaling 非均匀放大缩小。
这里一开始就有变换的定义。这里和这里有一部分变换的示意图。这里和这里是别人问的问题,可以作参考。
网友评论