当前位置: 首页 > news >正文

jsp怎么做购物网站实惠网外贸论坛

jsp怎么做购物网站,实惠网外贸论坛,黄骅招聘信息最新2022,湖南网站制作哪家好通过计算机视觉对扫描文件分类 一种解决扫描文档分类问题的深度学习方法 在数字经济时代#xff0c; 银行、保险、治理、医疗、法律等部门仍在处理各种手写票据和扫描文件。在业务生命周期的后期#xff0c; 手动维护和分类这些文档变得非常繁琐。 对这些非机密文档进行简…通过计算机视觉对扫描文件分类 一种解决扫描文档分类问题的深度学习方法 在数字经济时代 银行、保险、治理、医疗、法律等部门仍在处理各种手写票据和扫描文件。在业务生命周期的后期 手动维护和分类这些文档变得非常繁琐。 对这些非机密文档进行简单而有意义的自动化处理将使维护和利用信息变得容易的多并显著减少手工工作。 本案例研究的目的是开发一个基于深度学习的解决方案可以自动分类的文件 Data: 在这个案例研究中我们将使用RVL-CDIP (Ryerson Vision Lab Complex Document Information Processing)数据集该数据集包含16个类中的400,000张灰度图像每个类包含25,000张图像。有32万张训练图像、4万张验证图像和4万张测试图像。图像的大小使他们的最大尺寸不超过1000像素。这个数据集的大小超过200 GB。 Business-ML问题映射: 我们可以将业务问题映射为一个多类分类问题。当前的数据集中有16个类我们需要根据被扫描文档的像素值来预测文档的类这使得问题更加困难。但是等等**为什么我们不能使用OCR来提取文本并应用NLP技术呢?**是的我们对这个想法也很兴奋但是低质量的扫描导致了文本提取的低质量。在实际的业务场景中我们也无法控制扫描的质量因此依赖OCR的模型可能会在适当的预处理后泛化能力较差。 KPI和业务约束: 数据集相当平衡。因此我们选择准确性作为主要指标微平均F1分数作为次要指标来惩罚分类错误的数据点。我们还使用了混淆度量来验证模型的性能。有一个中等的延迟需求没有特定的可解释性需求。 我们能从文档的像素强度和大小中得到任何信息吗? 让我们尝试使用箱形图来可视化文档的平均像素强度和大小 从box plot中我们可以观察到某些类型的扫描文档的大小与其他类型的非常不同但是也存在重叠。例如类13和类9的文件大小差别很大但是类9的大小与类4和类6、类7重叠。 我们可以观察到75%的案例中class 4的平均像素强度在160-230像素之间。但是对于大约50%的情况它也与类6的平均像素值重叠。对于其他类平均像素值重叠。 分析方法 为了解决这个问题我们对扩充数据进行卷积神经网络(CNN)训练。我们尝试在有和没有数据扩充的情况下训练模型两种结果进行比较。 太棒了!但是如何确定网络架构呢?你是如何训练网络的因为数据不能一次放入内存? 从零开始训练神经网络需要大量的时间和集中计算资源为了避免这种情况我们采用了转移学习。我们从在ImageNet数据集上训练的预训练网络的权值开始然后在我们的数据集上重新训练。针对这类问题的当前SOTA模型使用域内和域内转移学习其中图像被分成四个部分:页眉、页脚、左身体和右身体。首先利用预先训练好的VGG16模型对整个图像(域内)进行训练然后利用该模型对部分图像(域内)进行训练。 在这个实验中我们采用了一种稍微不同的方法。我们没有使用VGG16进行域内转移学习而是训练了两个并行模型VGG16和InceptionResNetV2并使用它们的堆栈作为我们的最终模型。我们的假设是由于这两种模型的架构不同它们会学习图像的不同方面将它们叠加起来会得到很好的泛化效果。但是我们如何选择这些模型呢?这基本上来自交叉验证的结果。我们尝试了各种网络架构如VGG16、VGG19、DenseNet、ResNet、InceptionNet并选出了最好的两个。 我们使用keras的ImageDataGenerator类对训练数据进行预处理和加载而不是在内存中加载整个数据。 好的, 但是如何处理超参数呢? 对于任何CNN超参数是:学习率池大小网络大小批量大小优化器的选择正则化输入大小等。 学习率对神经网络的收敛性有重要影响。在深度学习问题中使用的损失函数是非凸的这意味着在存在多个局部极小值和鞍点的情况下寻找全局极小值不是一件容易的事情。如果学习率太低它会慢慢收敛;如果学习率太高它会开始振荡。在这个案例研究中我们使用了一种叫做“循环学习速率”的技术其目的是训练神经网络使每个训练批次的学习速率以循环方式变化。 但为什么会这样呢? 在CLR中我们在一个阈值内改变学习率。周期性的高学习率有助于克服它的鞍点或局部极小值。 对于其他超参数我们开发了自定义实用程序函数来检查哪种配置工作得更好。假设10个epoch之后准确率是47%我们将使用此模型作为测试基线并使用实用工具函数检查哪个配置集(即batch_size/optimizer/learning_rate)将在以后的epochs带来更高的准确性 结果 我们使用VGG16模型获得了90.7%的准确率使用InceptionResNetV2获得了88%的准确率。上述两种模型的比例叠加模型训练正确率为97%测试正确率为91.45%。 you can find the full implementation here. Citation: A. W. Harley, A. Ufkes, K. G. Derpanis, “Evaluation of Deep Convolutional Nets for Document Image Classification and Retrieval,” in ICDAR, 2015.https://arxiv.org/abs/1506.01186https://www.researchgate.net/publication/332948719_Segmentation_of_Scanned_Documents_Using_Deep-Learning_Approach
http://wiki.neutronadmin.com/news/314481/

相关文章:

  • 局域网的电脑怎么做网站服务器做信息网站能挣钱吗
  • 网站欣赏网站怎么给自己的网站设置关键词
  • 张店网站制作成都网站建设哪家专业
  • 怎么写网站建设的说明曲阜市网站建设
  • 专做母婴的网站网站建设深
  • 云空间网站开发互联网直播营销大赛主题
  • 网站建设的公司好做吗华为云建站怎么样
  • 谈谈你对网站建设有什么样好的建设意见wordpress主题缩略图
  • 广州商城网站建设公司高港网站开发
  • 唐山专业网站建设长春网站制作推广
  • 自己做的网站访问不怎样建设责任文化
  • 湖南省公司注册网站wordpress 存储
  • 深圳市住房和建设局网站登录搜搜网站收录
  • 合肥建网站学院网站建设项目概述
  • 珠海网站建设技术支持单位网页制作
  • 网站开发需求描述湖南天人安装建设有限公司网站
  • 微网站开发公司自己能建网站吗
  • 电子商务网站建设与管理考试本地的沈阳网站建设
  • 洛阳网站建设价格低wordpress 区块编辑器
  • 走出趣网站怎么做在阿里云域名可以做网站吗
  • 山东省建设人才网站能不能自己做视频网站
  • 成都网站开发建设推广做视频的素材怎么下载网站
  • 4a级旅游网站建设的要求东莞建设监督网
  • 可以做cps合作的棋牌网站6长沙律师网站建设
  • 外国客户网站wordpress 个人写作
  • 学网站建设软件开发网站改版 升级的目的是什么
  • 雄安做网站昆明网站推广排名
  • 咸宁市网站建设网站建设需要什么资质
  • 制作网页需要哪些技术苏州百度关键词优化
  • 怎样免费建个人网站锐旗 天梯网站建设