基于FPGA的OCR文字识别技术的深度解析
ocr在通用文字识别等场景下有广泛应用，基于fpga异构加速的ocr识别相比cpu/gpu实现具有延时小、成本低的优势。我们设计了多fpga芯片协同的异构加速架构，能快速适配业务ocr模型变化，检测识别整体性能为gpu p4 130%，处理延时仅为p4的1/10，cpu的1/30。
1.文字识别技术- ocr
ocr技术，通俗来讲就是从图像中检测并识别字符的一种方法，在证通用文字识别、书籍电子化、自动信息采集、证照类识别等应用场景中得到了广泛应用。通用场景的ocr因此通用场景下的ocr技术一直都是人工智能领域挑战性极强的研究领域，不需要针对特殊场景进行定制，可以识别任意场景图片中的文字。
通用ocr技术包含两大关键技术：文本检测和文字识别。检测模型的作用简单来说就是确定图片中哪里有字，并把有字的区域框出来。文字识别是将文本检测box作为输入，识别出其中的字符。
近年来深度学习逐渐被应用到音频、视频以及自然语言理解等时序数据建模的领域。通过深度学习的端到端学习提升sequence learning的效果已经成为当前研究的热点。基本思路是cnn与rnn结合：cnn被用于提取有表征能力的图像特征，将rnn的序列化特性引入到文本检测，增加了文本检测候选区域的上下文信息，可以有效地提升文本检测任务的性能。cnn+rnn的混合网络将文本串识别领域的效果推到了一个新的高度。
1：crnn网络结构
我们以目前应用十分广泛的crnn模型为例，它是dcnn和rnn的组合，可以直接从序列标签学习，不需要详细的标注；比标准dcnn模型包含的参数要少很多。同时crnn在图像特征和识别内容序列之间严格保序，擅长识别字分割比较困难的文字序列。
架构包括三部分：
1) 卷积层，从输入图像中提取特征序列，将图像进行空间上的保序压缩，相当于沿水平方向形成若干切片，每个切片对应一个特征向量；
2) 循环层，预测每一帧的标签分布；采用双层双向的lstm，进一步学习上下文特征，据此得到切片对应的字符类别。
3) transcription层，利用ctc和前向后向算法求解最优的label序列。
2. ocr加速架构
依赖于fpga的可编程性、高性能以及高通信带宽，我们设计了一个多fpga芯片协同的异构加速架构。单一芯片针对一种类型的模型进行深度定制优化，不同芯片之间通过负载均衡以及流水化来完成整个混合模型的加速过程。
图2：ocr加速硬件架构
fpga 0配置为通用的cnn加速架构
fpga 1配置为通用的lstm加速架构
对于计算量较小的fc使用cpu进行计算，保持模型灵活性
fpga与服务器cpu通过pcie gen3进行数据通信，负载均衡由cpu进行控制
fpga间通过aurora轻量级协议进行数据交换，数据交换延时ns级，类似不同板卡间内存共享
平台后续升级可支持服务器间的多任务并行/流水调度
为特定的深度学习模型进行底层深度架构优化，通过架构层面上的优化来充分发挥异构加速器件的性能，达到最大的计算收益。
自动泊车系统有什么优缺点
ADAS无人驾驶技术，为出行保驾护航
华为和小米，重磅新机携手来袭，iPhone是否真的进入低迷期？
解锁5G预商用技术_运营商的网络重建还有多远
Windows操作系统中DLL简介
基于FPGA的OCR文字识别技术的深度解析
佳能在Oculus平台推相机模拟器 用VR就能对比镜头效果
测速电机结构和工作原理是什么
智能驾驶舱 是汽车颠覆式的创新点
国内PCB专用设备生产厂商TOP5
FPGA的工作方式有着什么样的特点
芯片WT2003H B007加湿器的原理
人工智能产业得以快速发展的的大方向
电动机两地控制电气原理图
直流稳压电源怎么用_直流稳压电源使用图解
基于24V电源的双环电流型PWM控制器的设计方案
人民日报头版头条@金刚石量子计算教学机
无纺布表面瑕疵检测系统的原理、功能及参数
人工智能大大减少了全球贸易中的什么问题
WIFI的高光时刻什么时候来的
1.文字识别技术- ocr
ocr技术，通俗来讲就是从图像中检测并识别字符的一种方法，在证通用文字识别、书籍电子化、自动信息采集、证照类识别等应用场景中得到了广泛应用。通用场景的ocr因此通用场景下的ocr技术一直都是人工智能领域挑战性极强的研究领域，不需要针对特殊场景进行定制，可以识别任意场景图片中的文字。
通用ocr技术包含两大关键技术：文本检测和文字识别。检测模型的作用简单来说就是确定图片中哪里有字，并把有字的区域框出来。文字识别是将文本检测box作为输入，识别出其中的字符。
近年来深度学习逐渐被应用到音频、视频以及自然语言理解等时序数据建模的领域。通过深度学习的端到端学习提升sequence learning的效果已经成为当前研究的热点。基本思路是cnn与rnn结合：cnn被用于提取有表征能力的图像特征，将rnn的序列化特性引入到文本检测，增加了文本检测候选区域的上下文信息，可以有效地提升文本检测任务的性能。cnn+rnn的混合网络将文本串识别领域的效果推到了一个新的高度。
1：crnn网络结构
我们以目前应用十分广泛的crnn模型为例，它是dcnn和rnn的组合，可以直接从序列标签学习，不需要详细的标注；比标准dcnn模型包含的参数要少很多。同时crnn在图像特征和识别内容序列之间严格保序，擅长识别字分割比较困难的文字序列。
架构包括三部分：
1) 卷积层，从输入图像中提取特征序列，将图像进行空间上的保序压缩，相当于沿水平方向形成若干切片，每个切片对应一个特征向量；
2) 循环层，预测每一帧的标签分布；采用双层双向的lstm，进一步学习上下文特征，据此得到切片对应的字符类别。
3) transcription层，利用ctc和前向后向算法求解最优的label序列。
2. ocr加速架构
依赖于fpga的可编程性、高性能以及高通信带宽，我们设计了一个多fpga芯片协同的异构加速架构。单一芯片针对一种类型的模型进行深度定制优化，不同芯片之间通过负载均衡以及流水化来完成整个混合模型的加速过程。
图2：ocr加速硬件架构
fpga 0配置为通用的cnn加速架构
fpga 1配置为通用的lstm加速架构
对于计算量较小的fc使用cpu进行计算，保持模型灵活性
fpga与服务器cpu通过pcie gen3进行数据通信，负载均衡由cpu进行控制
fpga间通过aurora轻量级协议进行数据交换，数据交换延时ns级，类似不同板卡间内存共享
平台后续升级可支持服务器间的多任务并行/流水调度
为特定的深度学习模型进行底层深度架构优化，通过架构层面上的优化来充分发挥异构加速器件的性能，达到最大的计算收益。
自动泊车系统有什么优缺点
ADAS无人驾驶技术，为出行保驾护航
华为和小米，重磅新机携手来袭，iPhone是否真的进入低迷期？
解锁5G预商用技术_运营商的网络重建还有多远
Windows操作系统中DLL简介
基于FPGA的OCR文字识别技术的深度解析
佳能在Oculus平台推相机模拟器 用VR就能对比镜头效果
测速电机结构和工作原理是什么
智能驾驶舱 是汽车颠覆式的创新点
国内PCB专用设备生产厂商TOP5
FPGA的工作方式有着什么样的特点
芯片WT2003H B007加湿器的原理
人工智能产业得以快速发展的的大方向
电动机两地控制电气原理图
直流稳压电源怎么用_直流稳压电源使用图解
基于24V电源的双环电流型PWM控制器的设计方案
人民日报头版头条@金刚石量子计算教学机
无纺布表面瑕疵检测系统的原理、功能及参数
人工智能大大减少了全球贸易中的什么问题
WIFI的高光时刻什么时候来的