哪个快?用300万个图斑测试ArcGIS Pro的成对叠加与经典叠加

news/2024/9/23 22:14:26/

​​​
点击下方全系列课程学习

点击学习—>ArcGIS全系列实战视频教程——9个单一课程组合+系列直播回放

点击学习——>遥感影像综合处理4大遥感软件ArcGIS+ENVI+Erdas+eCognition


在使用ArcGIS Pro的过程中,很多朋友发现,Pro有个成对叠加工具集。很多人只是简单的认为它们只是经典叠加工具开启多线程的并行状态。其实不然。

图片

        下面我介绍一下ArcGIS Pro成对叠加工具(成对缓冲、成对裁剪、成对融合、成对擦除、成对整合和成对相交)和经典叠加工具(缓冲区、裁剪、融合、擦除、整合和相交)的区别。

        这次我测试的数据是两个图层,数据量近300万个图斑,有足够的数据量来说明问题。且我在ArcGIS Pro、ArcGIS10.8、QGIS、FME都做了效率测试,来看看ArcGIS Pro的64位的框架是否真的那么快。

图片

        我首先也明确一个问题:ArcGIS Pro中的成对相交和相交是有本质区别,只有在特定情况才是一样,且他们的计算引擎也是不一样的。所以本次测试会主要围绕成对相交和相交展开。

本期目录

1、成对叠加工具概述

2、经典叠加工具与成对叠加工具的区别

3、成对相交与相交比较

4、实际测评

成对叠加工具集概述

工具

说明

成对缓冲

用于使用并行处理方法在输入要素周围某一指定距离内创建缓冲区多边形。

成对裁剪

此工具用于以其他要素类中的一个或多个要素作为模具来剪切要素类的一部分。在您想要创建一个包含另一较大要素类的地理要素子集的新要素类(也称为研究区域或感兴趣区域 (AOI))时,裁剪工具尤为有用。

成对融合

可使用并行处理方法基于指定的属性聚合要素。

成对擦除

计算输入和擦除要素的成对交集。只将输入要素处于擦除要素之外的部分复制到输出要素类。

成对整合

分析一个或多个要素类中要素之间的要素折点的坐标位置。彼此间距离在指定范围内的折点被认为表示同一个位置,并被指定一个共有坐标值(换句话说,将它们定位于同一点)。该工具还会在要素折点位于边的 x,y 容差范围内以及线段相交的位置处添加折点。

成对相交

计算输入要素的成对交集。输入要素图层或要素类中相叠置的要素或要素的各部分将被写入到输出要素类。成对交集是指从第一个输入中选择一个要素,然后将其与所重叠的第二个输入中的要素相交。

经典叠加工具与成对叠加工具的区别

成对缓冲和缓冲区

下面对成对缓冲和缓冲区工具进行了比较:

  • 这两种工具都使用并行处理。对于成对缓冲工具,默认启用并行处理。对于缓冲区工具,可通过“并行处理因子”环境进行启用。

  • 默认情况下,成对缓冲工具的输出要素的平滑度低于通过缓冲区工具创建的输出要素。

  • 成对缓冲工具可控制缓冲区输出要素的平滑度。有关最大偏移偏差参数的信息,请参阅工具文档。

  • 缓冲区工具提供了一些输出缓冲区选项,例如侧类型和末端类型。

    图片

成对裁剪和裁剪

  • 这两种工具都使用并行处理。对于成对裁剪工具,默认启用并行处理。对于裁剪工具,可通过“并行处理因子”环境进行启用。

    图片

成对融合和融合

  • 这两个工具的输出相似,并且可以互换使用。

  • 成对融合工具默认使用并行处理。 融合工具没有并行功能。

    图片

成对擦除和擦除

  • 这两个工具的输出相似,并且可以互换使用。

  • 这两种工具都使用并行处理。对于成对擦除工具,默认启用并行处理。对于擦除工具,可通过“并行处理因子”环境启用并行处理。

    图片

成对整合和整合

  • 成对整合工具默认使用并行处理。

  • 成对整合工具的内部容差稍稍大于整合工具,因为用于执行集成的基础引擎存在差异。

    图片

成对相交和相交

  • 这两个工具的输出基本上互不相同。在未评估工作流以及必须如何更改才能考虑不同输出的情况下,这两个工具不能互换使用。有关详细信息,请参阅成对相交的工作原理。

  • 这两种工具都使用并行处理。对于成对相交工具,默认启用并行处理。对于相交工具,可通过“并行处理因子”环境进行启用。

图片

    综上,除了成对相交和相交外其他成对叠加工具,主要是运行效率以及一些微小容差上的区别,基本可以互换使用以提高运行效率。

成对相交与相交比较

比较相交和成对相交

使用成对相交,第一个输入中的某一要素可以与第二个输入中的每一个要素相交。这与相交工具的工作原理本质上不同。使用相交,无论要素属于哪个输入图层,所有要素均可相交。

相交工具
  • 可以相交多个要素图层或要素类

  • 查找所有输入要素的相交,无论其属于哪个输入要素图层,同时创建表示所有要素几何相交的拓扑结构

成对相交工具

  • 仅适用于两个输入要素图层或要素类

  • 从第一个输入要素图层中获取要素,使其与第二个输入图层中的各要素相交,每次一个,同时创建表示相交的新要素

相交工具

        无论属于哪个输入要素图层,要素间的所有叠加(相交)均计算在内。因为所有相交均计算在内,输出可能会包括比所有合并输入要素数量更多的要素。还有许多情况,全部输入共包括数万个要素,但由于所有要素之间均存在着复杂叠加,所以输出包括数亿个要素。

        例如,以下所示的两个要素图层。一个包括 10 个要素 - 点周围的缓冲区,另一个包括一个要素 - 一个方形。

图片

输入 1 包括 10 个叠加面要素,以 OID 标注

图片

输入 2 - 1 面,以 OID 标注。

        下图显示以上两个要素图层相交的结果。注意:无论属于哪个输入要素图层,要素间的所有叠加(相交)均计算在内。这会产生远超出原输入要素数量的要素。输出中的面(167 个要素)比合并输入中的面(输入总数为 11 个要素)多很多。这会增加相交工具中新要素的数量,根据输入中叠加的复杂程度,输出可能增长迅速。

图片

成对相交工具

使用成对相交工具,输出将更简单。每个输出要素都是输入 1 中的某一个要素与输入 2 中要素的相交。使用相交工具,输入 1 中要素间的相交将计算在内,而使用成对相交则不会。

成对相交输出:10 个输出要素。

图片

    综上,想要用成对相交代替相交提高工作效率,只有当两个输入图层内部没有自重叠才可以哦。

实际测试

这次我使用近300万(3000000)个地类图斑和84个区县图层进行相交分析,计算每个区县的地类面积汇总情况。

测试环境:服务器  CPU E5-2680 V4(服务器级CPU) RAM 128GB,测试配置还是比较强悍的

图片

  • 4.1 使用ArcGIS10.8相交分析:运行时间 44分钟 

  • 4.2 ArcGIS Pro 3经典相交分析:运行时间58分钟(做了2次测试) 

  • 4.3 ArcGIS Pro 3成对相交分析:运行时间22分钟 

  • 4.4 QGIS 3相交分析:运行时间18分钟

  • 4.5 FME2020相交分析:持续的内存错误,没有继续测试。大家可以使用AreaonAreaOverlay,但是推荐使用Clipper转换器,实现更加快捷。加上为了懒,我就不再等了。FME在运行效率上本身不具有优势。

计算结果上:

    ArcGIS Pro 的经典相交与ArcGIS10.8的相交图斑个数基本相同,相差8个,汇总后的面积一致,且ArcGIS10.8的相交效率优于ArcGIS Pro的经典相交???

我为此做了2次测试。··················

    ArcGIS Pro成对相交后图斑个数,相差4054个图斑,面积相差0.7平方米,对于总数十万平方公里以上基本忽略不计。

所以,计算成果一致,成对相交有十分突出的计算效率。但是注意不是任何情况下成对相交与经典相交可以通用。

   但是此次由于数据格式问题,数据内部几何问题,QGIS有很多漏算的图斑,导致后续计算错误,图斑汇总面积缺失2千平方公里,后续可修复等问题后再做计算,可见不同软件格式的数据再不同平台之间计算时就会存在数据丢失的情况。且QGIS目前在百万级图斑计算时容易出现

   所以大批量数据运算时目前还是采用ArcGIS系列工具来进行运算。

    ArcGIS Pro的成对相交工具具有明显的效率优势。但是要注意他与经典相交的区别。

ArcGIS Pro 3.1.5 破解+安装+软件分享+测试说明

ArcGIS Pro稳定版 3.0.2 破解+安装+软件分享+测试说明

5 推荐学习

ArcGIS全系列实战视频教程——9个单一课程组合
4大遥感软件!遥感影像解译!ArcGIS+ENVI+Erdas+eCognition
ArcGIS10.X入门实战视频教程(GIS思维)
ArcGIS之模型构建器(ModelBuilder)视频教程
ArcGIS之遥感影像分类及成果应用视频课程
ArcPy结合数据驱动模块的批量制图
ArcGIS之Data Reviewer空间数据质量检查


http://www.ppmy.cn/news/1529513.html

相关文章

是德科技Keysight N4433D ECal模块 26.5GHz 4端口3.5毫米

是德科技Keysight N4433D ECal模块 26.5GHz 4端口3.5毫米 Keysight N4433D 射频电子校准 (ECal) 模块使是德科技矢量网络分析仪的校准变得快速、简单和准确。N4433D 是一款精密 4 端口电子校准件模块,支持选择 3.5 毫米连接器,最高可混频至 26.5 GHz。选…

数据结构:时间复杂度与空间复杂度

目录 算法效率时间复杂度大O渐进表示法时间复杂度计算案例 空间复杂度空间复杂度案例 复杂度算法题 算法效率 算法在编写成可执行程序后,运⾏时需要耗费时间资源和空间(内存)资源 。因此衡量⼀个算法的好坏,⼀般是从时间和空间两个维度来衡量的&#xf…

Spring 全局与局部异常处理解析 + 实战案例

Spring 全局与局部异常处理解析 实战案例 在 Java 开发中,异常处理是非常重要的一环。它不仅能够提升代码的健壮性,还能为用户提供有意义的错误提示。在 Spring Framework 中,我们可以通过全局和局部异常处理来优雅地管理异常。本文将结合 …

大数据毕业设计选题推荐-高校考试分析系统-Hive-Hadoop-Spark

✨作者主页:IT研究室✨ 个人简介:曾从事计算机专业培训教学,擅长Java、Python、微信小程序、Golang、安卓Android等项目实战。接项目定制开发、代码讲解、答辩教学、文档编写、降重等。 ☑文末获取源码☑ 精彩专栏推荐⬇⬇⬇ Java项目 Python…

【计算机网络】传输层协议TCP

目录 一、重新理解封装和解包二、TCP协议段格式三、确认应答(ACK)机制四、超时重传机制五、连接管理机制六、理解TIME_WAIT状态和CLOSE_WAIT状态七、流量控制八、滑动窗口九、拥塞控制十、延迟应答十一、面向字节流十二、粘包问题 一、重新理解封装和解包 在网络协议栈中&…

【手写数据库内核组件】1001词法分析器,语言被程序识别的第一步,将语句分解为最小词根token

1001 词法分析器 ​专栏内容: postgresql使用入门基础手写数据库toadb并发编程个人主页:我的主页 管理社区:开源数据库 座右铭:天行健,君子以自强不息;地势坤,君子以厚德载物. 文章目录 1001 词法分析器一、概述 二、词法分析机制原理 2.1 分析流程 2.2 预定义规则 2.3 …

9月23日

思维导图 作业 统计家目录下.c文件的个数 #!/bin/bashnum0for file in ~/*.c; doif [ -f "$file" ]; then((num))fi doneecho "家目录下.c文件的个数: $num"

QT菜单栏设计(二级菜单栏)

目的:创建一级菜单栏,添加对应选项,并向一级菜单栏中添加二级菜单栏选项。 #include "mainwindow.h" #include "ui_mainwindow.h"MainWindow::MainWindow(QWidget *parent): QMainWindow(parent), ui(new Ui::MainWindo…