利用手持摄像机图像通过卷积神经网络实时进行水稻检测
part/1
摘要
在本研究中，研究者提出了一种有效的深度卷积神经网络(dcnn)结构，利用手持照相机拍摄的照片来检测水稻的生长阶段(dvs)。用不同的策略对dcnn模型进行了训练，并与传统的时间序列green chromatic coordinate (time-series gcc)方法和手工提取的特征组合支持向量机(mf-svm)方法进行了比较。此外，还研究了不同角度的图像、模型训练策略和对dcnn模型预测的解释。利用所提出的两步微调策略训练的dcnn模型得到了最优结果，整体精度为0.913，低平均绝对误差为0.090。
结果表明，以大角度拍摄的图像包含更有价值的信息，使用多角度拍摄的图像可以进一步提高模型的性能。两步微调策略极大地提高了模型对视角随机性的鲁棒性。解释结果表明，从图像中提取生物气候学相关特征是可能的。本研究提供了一种生物气候学检测方法来实时利用手持照相机图像，并对在现实场景中使用深度学习有了一些重要的见解。
part/2
相关背景
本研究的假设是，作物表型的特征可以通过分析图像被机器学习捕捉到，而传统上可以通过观察被农业专家识别。然而，对作物生物气候学检测的深度学习研究仍然非常有限。yalcin（plant phenology recognition using deep learning: deep-pheno. in 2017 the sixth international conference on agro-geoinformatics (pp. 1–5). https://doi.org/10.1109/agro-geoin formatics.2017.8046996）应用dcnn，使用固定角图像对生长阶段进行分类。bai等人（rice heading stage automatic observation by multi-classifier cascade based rice spike detection method. agricultural and forest meteorology, 259, 21360–270. https://doi.org/10.1016/j.agrformet.2018.05.001）使用支持向量机和dcnn来区分水稻穗的图像斑块。检测到的穗状斑块的数量决定了水稻的走向阶段。
以上两项研究集中在固定的角度和位置的图像上，而小农户可以以随机的角度和位置拍摄图像。为了方便处理这些随机图像，有必要开发一种通用的方法。从多个角度拍摄的图像中提取最大的生物气候学信息将是很吸引人的。还需要一种通过降低图像视角不确定性的影响的训练策略来提高深度学习方法的性能。
part/3
研究地域
实验地域（23° 5′ 52″–23° 7′ 23″ n, 108° 57′ 7″–108° 58′ 34″ e）位于中国广西宾阳县。该地区的160公顷土地被划分为800多个地块，由当地农民管理。该地区的年平均降水量约为1600毫米，平均气温为21°c。随机选取70块地块，利用管理的12块地块进行分析。
part/4
研究框架
data collection and processing
为了利用在不同视角度拍摄的图像进行现象学识别，选择了摄影方向和重力方向之间的四个垂直方向：0°(a)、20°(b)、40°(c)和60°(d)，如下图a。
在研究区域，大部分地块通过钻机移植。当在播种方向拍摄图像时，两排水稻之间的土壤会被很好地捕捉到，而在其他方向，图像捕捉到的土壤会较少。摄影方向和播种方向之间的三个水平方向（分别为0°(a)、45°(b)和90°(c)，以避免钻孔的影响（如图b)）。每次观察都拍摄了12张照片，并在距地面1.5米处大致手工控制视角。当地农民对70块地的图像采集被部署了7次。构建了一个具有622个观测结果的数据集，其中包含7464个图像，并使用其中7320个进行分析。其他的图像的质量很差，无法使用。根据dvs将610项观察结果分为10组，每组进一步分为训练（60%）、验证（20%）和测试（20%）组。
data augmentation
数据增广的策略
the cropping scheme of three datasets
上图显示从原始图像裁剪的图像块。裁剪后，数据集的结果分布比原始分布更均匀。
deep convolutional neural network approach
part/5
实验结果
上表是time-series-gcc方法的acc/mae。
(a) confusion matrix yielded by the bb set; (b) confusion matrix yielded by the dc set.
mf-svm方法的acc/mae。
a–d are results yielded by18 features from one channel, 54 features from 3 channels, 108 features from 6 channels, and 270 features from 15 channels, respectively.
上图中的a, b, c, d分别表示0°, 20°, 40°和60°。
不同拍摄角度的照片比较
最终结果：
关于乒乓球/羽毛球运动状态识别手表的设计
机器人在医疗保健行业的应用优势
LTC6752脉冲展宽器电路/单稳多谐振荡器
集微指数跌1.64% 卓胜微去年净利润大增112.69%
基于555 IC的PWM控制器电路图
利用手持摄像机图像通过卷积神经网络实时进行水稻检测
针对无铅回流焊接工艺的思考
大数据时代的冷数据该怎么处理
如何维护红外光谱仪？
基于扩散模型的图像生成过程
快速检测有毒有害物的十大技术
广东做了哪些准备迎接5G的到来
电流输出电路技术为您的模拟工具箱增添多功能性
特斯拉欲利用宁德时代闲置设备扩充电池产能，提升MEGA竞争力
最长99周！2022芯片交期再拉长！需求前置、疯狂扩产，供应过剩为时尚早
iphone8什么时候上市？iphone8最新消息：iPhone8草图再次曝光，延期到12月开卖
LM339窗口比较器分析
【了不起的芯片】3D封装：我很能装，只是有点难装
单身经济消费潜力巨大 壁挂洗衣机市场来了
全球硅晶圆市场出现复苏迹象，中国5G业务发展拉动其行业发展
摘要
在本研究中，研究者提出了一种有效的深度卷积神经网络(dcnn)结构，利用手持照相机拍摄的照片来检测水稻的生长阶段(dvs)。用不同的策略对dcnn模型进行了训练，并与传统的时间序列green chromatic coordinate (time-series gcc)方法和手工提取的特征组合支持向量机(mf-svm)方法进行了比较。此外，还研究了不同角度的图像、模型训练策略和对dcnn模型预测的解释。利用所提出的两步微调策略训练的dcnn模型得到了最优结果，整体精度为0.913，低平均绝对误差为0.090。
结果表明，以大角度拍摄的图像包含更有价值的信息，使用多角度拍摄的图像可以进一步提高模型的性能。两步微调策略极大地提高了模型对视角随机性的鲁棒性。解释结果表明，从图像中提取生物气候学相关特征是可能的。本研究提供了一种生物气候学检测方法来实时利用手持照相机图像，并对在现实场景中使用深度学习有了一些重要的见解。
part/2
相关背景
本研究的假设是，作物表型的特征可以通过分析图像被机器学习捕捉到，而传统上可以通过观察被农业专家识别。然而，对作物生物气候学检测的深度学习研究仍然非常有限。yalcin（plant phenology recognition using deep learning: deep-pheno. in 2017 the sixth international conference on agro-geoinformatics (pp. 1–5). https://doi.org/10.1109/agro-geoin formatics.2017.8046996）应用dcnn，使用固定角图像对生长阶段进行分类。bai等人（rice heading stage automatic observation by multi-classifier cascade based rice spike detection method. agricultural and forest meteorology, 259, 21360–270. https://doi.org/10.1016/j.agrformet.2018.05.001）使用支持向量机和dcnn来区分水稻穗的图像斑块。检测到的穗状斑块的数量决定了水稻的走向阶段。
以上两项研究集中在固定的角度和位置的图像上，而小农户可以以随机的角度和位置拍摄图像。为了方便处理这些随机图像，有必要开发一种通用的方法。从多个角度拍摄的图像中提取最大的生物气候学信息将是很吸引人的。还需要一种通过降低图像视角不确定性的影响的训练策略来提高深度学习方法的性能。
part/3
研究地域
实验地域（23° 5′ 52″–23° 7′ 23″ n, 108° 57′ 7″–108° 58′ 34″ e）位于中国广西宾阳县。该地区的160公顷土地被划分为800多个地块，由当地农民管理。该地区的年平均降水量约为1600毫米，平均气温为21°c。随机选取70块地块，利用管理的12块地块进行分析。
part/4
研究框架
data collection and processing
为了利用在不同视角度拍摄的图像进行现象学识别，选择了摄影方向和重力方向之间的四个垂直方向：0°(a)、20°(b)、40°(c)和60°(d)，如下图a。
在研究区域，大部分地块通过钻机移植。当在播种方向拍摄图像时，两排水稻之间的土壤会被很好地捕捉到，而在其他方向，图像捕捉到的土壤会较少。摄影方向和播种方向之间的三个水平方向（分别为0°(a)、45°(b)和90°(c)，以避免钻孔的影响（如图b)）。每次观察都拍摄了12张照片，并在距地面1.5米处大致手工控制视角。当地农民对70块地的图像采集被部署了7次。构建了一个具有622个观测结果的数据集，其中包含7464个图像，并使用其中7320个进行分析。其他的图像的质量很差，无法使用。根据dvs将610项观察结果分为10组，每组进一步分为训练（60%）、验证（20%）和测试（20%）组。
data augmentation
数据增广的策略
the cropping scheme of three datasets
上图显示从原始图像裁剪的图像块。裁剪后，数据集的结果分布比原始分布更均匀。
deep convolutional neural network approach
part/5
实验结果
上表是time-series-gcc方法的acc/mae。
(a) confusion matrix yielded by the bb set; (b) confusion matrix yielded by the dc set.
mf-svm方法的acc/mae。
a–d are results yielded by18 features from one channel, 54 features from 3 channels, 108 features from 6 channels, and 270 features from 15 channels, respectively.
上图中的a, b, c, d分别表示0°, 20°, 40°和60°。
不同拍摄角度的照片比较
最终结果：
关于乒乓球/羽毛球运动状态识别手表的设计
机器人在医疗保健行业的应用优势
LTC6752脉冲展宽器电路/单稳多谐振荡器
集微指数跌1.64% 卓胜微去年净利润大增112.69%
基于555 IC的PWM控制器电路图
利用手持摄像机图像通过卷积神经网络实时进行水稻检测
针对无铅回流焊接工艺的思考
大数据时代的冷数据该怎么处理
如何维护红外光谱仪？
基于扩散模型的图像生成过程
快速检测有毒有害物的十大技术
广东做了哪些准备迎接5G的到来
电流输出电路技术为您的模拟工具箱增添多功能性
特斯拉欲利用宁德时代闲置设备扩充电池产能，提升MEGA竞争力
最长99周！2022芯片交期再拉长！需求前置、疯狂扩产，供应过剩为时尚早
iphone8什么时候上市？iphone8最新消息：iPhone8草图再次曝光，延期到12月开卖
LM339窗口比较器分析
【了不起的芯片】3D封装：我很能装，只是有点难装
单身经济消费潜力巨大 壁挂洗衣机市场来了
全球硅晶圆市场出现复苏迹象，中国5G业务发展拉动其行业发展