学技术 | 摄像头的工作原理
本篇为大家简单介绍摄像头的工作原理，请大家指正。
1、工作原理：
景物通过镜头（lens）生成的光学图像投射到图像传感器（sensor）表面上，然后 sensor 感光像 素点转为电信号，经过 a/d（模数转换）转换后变为数字图像信号，再送到数字信号处理芯片（dsp） 中加工处理，再通过数据口传输到手机或电脑中处理，通过显示屏（display）就可以看到图像了。
2、数据格式：
数字信号处理(dsp)sensor阵列输出的信号，在每个像素上都只是单色的，需要用相邻像素的色彩去猜测本像素的其他色彩。这个由传感 器直接输出的，每个像素只有单色信息的数据，叫做 raw rgb 数据。而 dsp 的目的，就是把 raw rgb 数据，去通过计算和后期加工，变成真正的 rgb 或 yuv 格式的数据。简而言之，dsp 的主要工作， 就是把 raw rgb 格式转换成 rgb 格式或者是 yuv 格式。
isp(image signal processing)或dsp(digital signal processing)， 图像信号处理，就是处理图像的器件。isp/dsp将由 sensor 输出的原始信号处理成通用的成像数据，这些 处理过的成像数据可以直接被 ap 处理器或者 mtk、高通的基带芯片来使用，至于这些通用的图像格式 数据，是再处理还是显示还是保存，这就看各个平台的应用需求。
rgb 数据: 理论上任何颜色都可以用红(r)绿(g)蓝(b)三种基本颜色混合而成。rgb称为三基色。rgb 格式有 rgb565，rgb24， argb32 等几种标准。大家都知道，在数据传输中，一个字节是 8 个比特。rgb565：共 16 比特， 占两个字节。其中 5 个比特表示 r，6 个比特表示 g，剩下来 5 个比特表示 b，所以一共可以表 示的颜色数为 2^16 = 65536 色， 其中红色 r 和蓝色 b 可表示为 32 种不同值，而绿色 g 可以表示 为 64 种不同值；rgb24：共 24 比特，占三个字节。其中 rgb 三种颜色各种 8 个比特位， 所 以一共可以表示的颜色数为 2^24 = 1677 万色，每种颜色可表示成 256 种不同值；argb32：共32 比特，占四个字节。其中 rgb 三种颜色各占 8 比特，剩下来 8 比特表示 alpha 通道值， 所以一共可以表示的颜色数为 2^24 = 1677 万色，每种颜色可表示成 256 种不同值。但是因为加了 alpha 值，所以每种颜色还可以另外显示为 256 种不同的透明度。
yuv的原理是把亮度与色度分离，研究证明,人眼对亮度的敏感超过色度。利用这个原理，可以把色度信息减少一点，人眼也无法察觉这一点。yuv三个字母中，其中y表示明亮度（luminance）也就是灰阶值；而u和v表示的则是色度（chrominance），作用是描述影像色彩及饱和度，用于指定像素的颜色。采用yuv色彩空间的重要性是它的亮度信号y和色度信号u、v是分离的。
yuv 数据和标准 rgb 数据互相转换公式：
y = 0.299r + 0.587g + 0.114b
u = 0.147r - 0.289g + 0.436b
v = 0.615r - 0.515g - 0.100b
r = y + 1.14v
g = y - 0.39u - 0.58v
b = y + 2.03u
raw数据：ccd/cmos感受光线后输出的原始数据只有灰度数据，因为滤光层关系每个灰度数据只表示一种颜色的强度，所以 raw 数据就是传感器输出的原始图像数 据，其中的颜色信息是不完整的，不通过计算插值出其他颜色信息的话，是还原不出完整图像的。
3、图像输出：
目前市面上的平台厂商，例如 mtk、高通、展讯、全志、安霸等都有自己的图像处理引擎，其实就 是一块封装了 isp 以及其他功能的芯片。这块芯片的主要作用，是处理原始图像数据(raw)。pre-isp 部分称之为前端影像处理，是把原始图像数据处理为通用图像数据的最关键的一个部分。各 家的图像处理引擎中，最核心的也就是这个 pre-isp 的部分，对应着不同的图像数据的转换和处理方式。其实简单地说 pre-isp 就是一个调整图像的过程(类似 ps 的过程)。这个和在电脑上用 photoshop 或者光影魔术手去给你的图像拉曲线，调色调等是一样的过程。只不过 isp 是直接处理 raw-rgb 数据 的，这个原始数据虽然是不完整的 rgb 颜色数据，但是没有失真和画质损耗，处理 raw-rgb 数据，所带 来的画质损失是最小的。而经过 pre-isp 处理过的数据，即 rgb 或者 yuv 数据，虽然有了完整的颜色 信息，但是画质已经有了一定的损耗。如果再把这个 rgb 或 yuv 数据编码压缩成 jpg 格式，画面细节的 损耗就更大了。而我们一般是直接使用出片的 jpg 文件去更进一步的处理，在手机上或者导出到电脑上进一步修改，这就是第三次对画质进行了损坏。
阻尼振荡波模拟器的校准方法
虚拟化和云计算之间的关系
高通收购NUVIA之后CPU的重大转变
压力变送器选用必知参数
箱包展∣国际箱包展∣意大利箱包展∣意大利皮革展∣德国包袋展∣
学技术 | 摄像头的工作原理
矩阵LED调光器可在RGBW LED中实现精确的色彩控制和图案制作
人工智能+大数据为什么受到了老年人的认可
矩阵式转换器AC直接方式的控制方法
云服务器是高效灵活的选择
产品推荐 | 红外光源OPT-IXX-IR系列
波音公司正在考虑研发767宽体飞机用于货运市场
国内首家公测一加推出AndroidPBeta版
区块链+金融，落地如此难，这家公司为何这么有把握
Delta并联机械臂实现电磁铁搬运功能
用CD4017B制作多路脉冲分配器
单细胞+转录组测序揭示GABA信号调控神经发生
测试治具和工装夹具的区别是什么
无人驾驶的未来，究竟长什么样？
滞环比较器在电源中的应用
1、工作原理：
景物通过镜头（lens）生成的光学图像投射到图像传感器（sensor）表面上，然后 sensor 感光像 素点转为电信号，经过 a/d（模数转换）转换后变为数字图像信号，再送到数字信号处理芯片（dsp） 中加工处理，再通过数据口传输到手机或电脑中处理，通过显示屏（display）就可以看到图像了。
2、数据格式：
数字信号处理(dsp)sensor阵列输出的信号，在每个像素上都只是单色的，需要用相邻像素的色彩去猜测本像素的其他色彩。这个由传感 器直接输出的，每个像素只有单色信息的数据，叫做 raw rgb 数据。而 dsp 的目的，就是把 raw rgb 数据，去通过计算和后期加工，变成真正的 rgb 或 yuv 格式的数据。简而言之，dsp 的主要工作， 就是把 raw rgb 格式转换成 rgb 格式或者是 yuv 格式。
isp(image signal processing)或dsp(digital signal processing)， 图像信号处理，就是处理图像的器件。isp/dsp将由 sensor 输出的原始信号处理成通用的成像数据，这些 处理过的成像数据可以直接被 ap 处理器或者 mtk、高通的基带芯片来使用，至于这些通用的图像格式 数据，是再处理还是显示还是保存，这就看各个平台的应用需求。
rgb 数据: 理论上任何颜色都可以用红(r)绿(g)蓝(b)三种基本颜色混合而成。rgb称为三基色。rgb 格式有 rgb565，rgb24， argb32 等几种标准。大家都知道，在数据传输中，一个字节是 8 个比特。rgb565：共 16 比特， 占两个字节。其中 5 个比特表示 r，6 个比特表示 g，剩下来 5 个比特表示 b，所以一共可以表 示的颜色数为 2^16 = 65536 色， 其中红色 r 和蓝色 b 可表示为 32 种不同值，而绿色 g 可以表示 为 64 种不同值；rgb24：共 24 比特，占三个字节。其中 rgb 三种颜色各种 8 个比特位， 所 以一共可以表示的颜色数为 2^24 = 1677 万色，每种颜色可表示成 256 种不同值；argb32：共32 比特，占四个字节。其中 rgb 三种颜色各占 8 比特，剩下来 8 比特表示 alpha 通道值， 所以一共可以表示的颜色数为 2^24 = 1677 万色，每种颜色可表示成 256 种不同值。但是因为加了 alpha 值，所以每种颜色还可以另外显示为 256 种不同的透明度。
yuv的原理是把亮度与色度分离，研究证明,人眼对亮度的敏感超过色度。利用这个原理，可以把色度信息减少一点，人眼也无法察觉这一点。yuv三个字母中，其中y表示明亮度（luminance）也就是灰阶值；而u和v表示的则是色度（chrominance），作用是描述影像色彩及饱和度，用于指定像素的颜色。采用yuv色彩空间的重要性是它的亮度信号y和色度信号u、v是分离的。
yuv 数据和标准 rgb 数据互相转换公式：
y = 0.299r + 0.587g + 0.114b
u = 0.147r - 0.289g + 0.436b
v = 0.615r - 0.515g - 0.100b
r = y + 1.14v
g = y - 0.39u - 0.58v
b = y + 2.03u
raw数据：ccd/cmos感受光线后输出的原始数据只有灰度数据，因为滤光层关系每个灰度数据只表示一种颜色的强度，所以 raw 数据就是传感器输出的原始图像数 据，其中的颜色信息是不完整的，不通过计算插值出其他颜色信息的话，是还原不出完整图像的。
3、图像输出：
目前市面上的平台厂商，例如 mtk、高通、展讯、全志、安霸等都有自己的图像处理引擎，其实就 是一块封装了 isp 以及其他功能的芯片。这块芯片的主要作用，是处理原始图像数据(raw)。pre-isp 部分称之为前端影像处理，是把原始图像数据处理为通用图像数据的最关键的一个部分。各 家的图像处理引擎中，最核心的也就是这个 pre-isp 的部分，对应着不同的图像数据的转换和处理方式。其实简单地说 pre-isp 就是一个调整图像的过程(类似 ps 的过程)。这个和在电脑上用 photoshop 或者光影魔术手去给你的图像拉曲线，调色调等是一样的过程。只不过 isp 是直接处理 raw-rgb 数据 的，这个原始数据虽然是不完整的 rgb 颜色数据，但是没有失真和画质损耗，处理 raw-rgb 数据，所带 来的画质损失是最小的。而经过 pre-isp 处理过的数据，即 rgb 或者 yuv 数据，虽然有了完整的颜色 信息，但是画质已经有了一定的损耗。如果再把这个 rgb 或 yuv 数据编码压缩成 jpg 格式，画面细节的 损耗就更大了。而我们一般是直接使用出片的 jpg 文件去更进一步的处理，在手机上或者导出到电脑上进一步修改，这就是第三次对画质进行了损坏。
阻尼振荡波模拟器的校准方法
虚拟化和云计算之间的关系
高通收购NUVIA之后CPU的重大转变
压力变送器选用必知参数
箱包展∣国际箱包展∣意大利箱包展∣意大利皮革展∣德国包袋展∣
学技术 | 摄像头的工作原理
矩阵LED调光器可在RGBW LED中实现精确的色彩控制和图案制作
人工智能+大数据为什么受到了老年人的认可
矩阵式转换器AC直接方式的控制方法
云服务器是高效灵活的选择
产品推荐 | 红外光源OPT-IXX-IR系列
波音公司正在考虑研发767宽体飞机用于货运市场
国内首家公测一加推出AndroidPBeta版
区块链+金融，落地如此难，这家公司为何这么有把握
Delta并联机械臂实现电磁铁搬运功能
用CD4017B制作多路脉冲分配器
单细胞+转录组测序揭示GABA信号调控神经发生
测试治具和工装夹具的区别是什么
无人驾驶的未来，究竟长什么样？
滞环比较器在电源中的应用