遥感影像识别-利用较大数据集训练

2023-11-03

回顾

经过前两次的思考,最终还是回到最初的想法上来,利用大量比较合理的电子地图进行模型的训练,看能否产生较好的效果。
前两次的博文链接如下:
遥感影像识别-制作数据集
遥感影像识别-训练策略

本次训练所使用的数据集

地域覆盖了全国几个主要的城市,比如杭州、成都、广州等等,不过一方面为了进一步观察数据集的效果,也为了不浪费算力,因此并未采集各个大城市的地图用以制作数据集,而是随便挑了几个城市中的部分区域用以制作,另一方面的原因也是因为现有的地图软件对于地图的识别很多地方都不是特别精确的,因此选择一个比较准确的标注区域实际上是有点靠运气的,只能挨个挨个去试,而在偏远地区则只有主要道路有标注,因此几乎无法从偏远地区取材制作数据集。

数据集并未上传,只是将文件夹上传到我自己的github库里去了,所以可以看到文件夹中有一个README.md文件
在这里插入图片描述

数据集类别分布

数据集中的类别越平衡,效果应该也会稍好些,因此为了查看本次做的数据集质量如何,因此统计了各个类别的像素个数以及百分比。
在这里插入图片描述
百分比:

背景: 0.8067575502102572
水域: 0.11571123391477656
道路: 0.029220867620779262
建筑: 0.04831034825418703

数据集大小概念:

总分辨率为:26817.35510821304
相当于104.0张 256X256 的图像

这里可以看出数据集的类别分布还是没那么平衡的,但是这也是在预料之中,因为结合遥感影像的特点,一张图里必然背景充斥了大部分板块,而道路则是最少的,毕竟都是以线条状分布在地图中,且零零散散。而建筑与水域情况也和道路差不了太多。因此除去背景,后三类的分布还是较为均匀的。

训练模型

本次并未再使用前文所提及的 DeepLabV3+ 模型,而是重新换了一个网络模型 Unet 来试了一下。
至于为什么,会在下文提及。
在将数据集放到 Unet 中训练之前,先利用一个比赛的数据集跑了一下效果,如下图。
在这里插入图片描述
这是把训练的数据集拿出来再预测了一下,基本上整个模型对原数据集拟合的效果还是可以的,但是这个说明不了什么问题,接下来把该模型用来预测我最近做的数据集上看效果咋样。

在这里插入图片描述
这就可以看出预测的效果比较差了,但是仔细看的话,还是能看到水域和道路还是能分的清的,但是由于参与训练的数据集比较少,只有五张图像,能有这个样子还是不错了。Unet的预测效果比较平滑,同时为了试试其它模型的效果,所以这次没有用之前的模型。

至于为什么采用最开始的策略,主要还是看效果,实际上的预测效果其实还是能够将主要障碍物识别出来的,因为虽然电子地图标记的很细一条线,但是这一条细线对应的卫星地图应该是标记物的中心位置,也就是说,这条细线和对应的卫星地图位置已经有一个一一对应的关系了。学习后,极有可能实际卫星地图上比较宽的区域也是可以识别出来的。因为虽然标记的样本上,范围小,但是特征是保留了的。

目前的模型还正在训练中,正是使用的新数据集,不过数量也不算特别多,但相较于上述使用的数据集还是要多一些的。

以下是正在跑的损失曲线:
在这里插入图片描述
还没有收敛,所以预测效果以及评价指标都得等收敛后再来获得。

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

遥感影像识别-利用较大数据集训练 的相关文章

随机推荐

  • Educoder--Java高级特性 - 多线程基础(1)使用线程

    第一题 请仔细阅读右侧代码 根据方法内的提示 在Begin End区域内进行代码补充 具体任务如下 使用继承Thread类的方式创建一个名为 ThreadClassOne 的类 重写的run方法需要实现输出0 10之间的奇数 输出结果如下
  • 开关电源原理、电路组成部分

    开关电源电路图及原理12v分析 详细版 KIA半导体的博客 CSDN博客 开关电源适配器各部分电路原理分析介绍
  • 【区块链实战】什么是 P2P 网络,区块链和 P2P 网络有什么关系

    目录 一 简介 二 知识点 P2P 网络 区块链节点与 P2P 的关系 区块链节点功能分类 P2P 网络特征 三 什么是 P2P 网络 区块链式使用 P2P 网络做什么 1 P2P 网络概念 2 P2P 网络节点特征 3 P2P 与区块链
  • 数据结构之图:无向图的介绍与功能实现,Python——22

    无向图 Undigraph 的介绍 引入 生活中的图 有地图 集成电路板的图 可以看类似的看做是数据结构中的图 数据有 一对一 一对多 和 多对多 的关系 前两种分别表示线性表和树的存储结构性质 而多对多则可表示图的存储结构性质 定义 图是
  • 基于Jupyter(python)使用蒙特·卡罗方法计算圆周率近似值

    使用蒙特 卡罗方法计算圆周率近似值 from random import random times int input 请输入掷飞镖次数 hits 0 for i in range times x random y random if x
  • 操作系统日志收集与分析

    一 Windows日志收集与分析 在运维工作中 如若windows服务器被入侵 往往需要检索和分析相应的安全日志 除了安全设备 系统自带的日志就是取证的关键材料 但是此类日志数量庞大 需要高效分析windows安全日志 提取出我们想要的有用
  • 电源纹波测试,居然还能这么玩

    开关稳压器因其具有非常高的效率优势 正在各个领域逐渐替代线性稳压器 但由于开关稳压器通常被认为具有很大的输出纹波 Ripple 所以很多工程师在高性能和噪声敏感型系统中只考虑使用低压差 LDO 稳压器 而事实上 现今很多高性能开关稳压器都已
  • 迁移学习概述

    1 迁移学习的背景 在有监督的机器学习和尤其是深度学习的场景应用中 需要大量的标注数据 标注数据是一项枯燥无味且花费巨大的任务 关键是现实场景中 往往无法标注足够的数据 而且模型的训练是极其耗时的 因此迁移学习营运而生 传统机器学习 主要指
  • markdown语法介绍

    目录 动态目录 toc 文章目录 目录 一 标题和文本 1 使用 和 标记一级和二级标题 2 使用 号标记 3 换行 二 文字标记和插入图片 链接 1 插入链接 2 插入图片 3 文字标记 设置文字 删除线 下划线 上标 下标 注释 4 e
  • Flip card 卡片翻转效果

    鼠标滑过 卡片翻转 如果想要点击卡片翻转的话就把 hover 改成 hover 然后自己添加点击事件 添加 class hover
  • Java序列化

    Java序列化 原理图 0bjectoutputstream java io 0bjectoutputstream extends outputstreamobjectoutputstream 对象的序列化流 作用 把对象以流的方式写入到文
  • 以太坊合并后,Layer2 何去何从?

    转载原文链接 http www btcwbo com 5671 html 在2022年以太坊开发者峰会上 联合创始人威尔基说 以太坊预计将信号标准链与主网络合并 通过8月份的TheMerge 合并 升级 这样以太坊就可以证明 POS 共识算
  • 英雄联盟-经验砖块

    作为一个LOL老玩家 如果说对游戏细节把握不到位 这是说不过去的 我们时常说道发育为重 那么发育包括等级和装备 我们是不是应该更精细的把我等级呢 今天我们来探究一下 赖线从小兵身上我们能获得多少经验等级 问题1 每个小兵有多少经验值呢 近战
  • 勒索软件攻击防护中的6个常见错误

    勒索软件攻击已经成为影响所有行业和组织的大问题 考虑到这些攻击可能对企业造成的影响 安全专业人员正在尝试以各种方式保护企业的网络 应用和数据 然而 但随着勒索攻击威胁形势的不断变化 很多错误的做法可能会阻碍企业勒索防护计划的有效执行 并使组
  • 最详细的Transformer讲解,Attention Is All You Need

    前言 Attention Is All You Need Google Brain 引用量 30255 1 3 ResNet 贡献 Transformer 是第一个完全依赖自注意力来计算其输入和输出表示而不是使用序列对齐的RNN和CNN 一
  • C++标准库头文件(工具库->csetjmp)

    参考网址 https zh cppreference com w cpp header https www runoob com cplusplus cpp standard library html 工具库 csetjmp 保存执行语境的
  • Android-Fragment详解

    Fragment是Android最常使用的控件之一 一般情况下 我们会在首页使用到 有的小伙伴也会单Activity和多Fragment的App 我总结了一下我了解的Fragment知识 希望对看这篇文章的小伙伴有所帮助 Fragment的
  • USB:Type-A、Type-B、Type-C、miniUSB、microUSB接口类型区分

    通用串行总线 universal serial bus USB 自推出以来 成功替代串口和并口 已经成为计算机和各种设备不可或缺的接口 USB的优点不用多说 网上有很多 今天主要小结一下USB的各种接口类型 避免被各种各样的USB名字搞晕
  • SQL调优案例1

    SQL语句的执行顺序 1 LIMIT 语句 分页查询是最常用的场景之一 但也通常也是最容易出问题的地方 比如对于下面简单的语句 一般 DBA 想到的办法是在 type name create time 字段上加组合索引 这样条件排序都能有效
  • 遥感影像识别-利用较大数据集训练

    回顾 经过前两次的思考 最终还是回到最初的想法上来 利用大量比较合理的电子地图进行模型的训练 看能否产生较好的效果 前两次的博文链接如下 遥感影像识别 制作数据集 遥感影像识别 训练策略 本次训练所使用的数据集 地域覆盖了全国几个主要的城市