大数据项目架构思考(二)

大数据架构思考(二)




世界上第一架(也是唯一?的)不锈钢制造的战斗机:国内军迷亲切的称呼它为“青翼蝠王”……从分量上来看,比西方那些用各种合金材料打造的妖艳货压秤多了,但是就这么个超级“秤砣”,不但飞起来了,还创造了当年在速度上面的N多项世界纪录。

所以,毛熊大哥们告诉我们的语录,我们一直记在心头:




进入21世纪的第二个10年,一种名叫“大数据”的技术,突然开始流行起来了,首先是

GeoEvent Server横向伸缩扩展(一)——ArcGIS GeoEvent弹性架构

前言
本文主要做了一件事,通过kafka横向扩展GeoEvent Server,构建GeoEvent+kafka集群部署。这件事有两个作用,其一,利用多台GeoEvent提高数据的吞吐量。其二,利用kafka集群的机制来提高GeoEvent Server软件的鲁棒性。
GeoEvent Server是用来实时接入的GIS数据的GIS实时服务器。而对于实时服务器来说,最重要的是系统的鲁棒性(Robu

基于矢量切片的电子地图配图(四)配置基础要素

本篇开始介绍在ArcGIS Pro中如何进行电子地图配图。按照操作步骤由少到多的顺序,分成四部分介绍:
配置基础要素。包括境界线、植被、居民区和带有底色的行政区划面图层。配置水系。配置道路。配置POI。

配图整体思路
1、使用图层、标注的可见比例控制显示范围; 2、使用基于比例的符号类,在不同比例下设置不同的符号;(ArcGIS Pro中特有) 3、使用显示过滤器,限制不同比例的可见要素。(Ar

基于矢量切片的电子地图配图(三)配图准备

安装并授权ArcGIS Pro软件

我们在ArcGIS Pro中进行配图,使用的版本为2.0。如果没有安装,可以申请免费试用,详细可参考:https://zhihu.geoscene.cn/article/131如何获取 ArcGIS Pro试用许可。
联网状态下,使用Named User许可,1个账号可以同时登陆3台设备。换句话说,可以3个人同时使用1个账号。如果离线到本地(不用联网状态下使用

基于矢量切片的电子地图配图(二)示例数据来源

示例数据来源

使用北京的数据作为示例数据,原因是数据相对好找,不涉密。数据具体来源如下:




注:北京市政务数据资源网

示例数据区域

示例数据预处理
1、数据坐标系 将所有数据统一成CGCS2000地理坐标系。

CGCS2000地理坐标系

2、数据位置错乱 数据的来源不同,故有些数据不能很好的叠加。编辑数据,以使数据能叠加或不互相压盖。

房屋不能在高速公路之间

3、将下载的各类

栅格数据提取高程_GP服务

西安分公司:严瑞

需求:在栅格数据上面输入一个点(X,Y),获取该点的高程信息

制作模型如下,其中elevation是输入的DEM,point是栅格上的点,elevationResult是输出结果。“值提取至点”是toolbox中获取栅格高程的工具。





执行工具后生成elevationResutl,打开该要素类属性表,生成新的RESATERVALUE字段,字段里面的值就是输入的poin

基于矢量切片的电子地图配图(一)为什么要重新配图?

为什么要使用矢量切片?
传统栅格切片面临的问题:
切图体积大切图效率低更改配图方案的话,需要重新切图对高分屏的支持不足

矢量切片的优势:
切图体积小切图效率高传输、渲染速度快可以直接修改矢量切片文件的样式,不需要重新切图可以动态切换不同语言标注高分屏中显示很好

关于矢量切片的详细介绍,可以观看Esri公开课《重磅解析ArcGIS矢量切片》。
 
为什么要在ArcGIS Pro里重新配图?
 

点批量移动到线上(Toolbox解决方法)

点批量移动到线上,如下:左图效果变为右图效果:









Analysis Tools工具箱下的Near方法:



点与线做Near后,如下会在point属性表中增加两个字段,分别是NEAR_X和NEAR_Y:



执行后,打开point属性表:



导出dbf表:







添加XY:



结果如下:





 

GP服务开发攻略(4)---常见错误

目录

1.1 Server注册sde时报:Cannot connect to database…

1.2 Error 000732 arcsde data.gdb does not exist or is not supported

1.3 监听程序在CONNECT_DATA中未得SERVICE_NAMENO extended error

1.4 Error000210 Cannot cr

GP服务开发攻略(3)---实战【6】ZonalStatics 输出raster

工具下载地址:https://pan.baidu.com/s/1bR6fkM 
 · 模型参数介绍



根据红色序号,对参数做一一介绍。

1. 创建的string类型变量,输入的shp的路径。

2. 接受1传来的参数。



1. 参数1就是工具所需要的Raster类型的参数。

2. 创建的String类型变量,输入的raster的路径。

3. 双击工具,设置其他参数。



注意:3.

GP服务开发攻略(3)---实战【5】Zonal Statistics as Table生成Table到sde

工具下载地址:https://pan.baidu.com/s/1bR6fkM 
 · 模型参数介绍

这里挑之前没有出现过的参数类型介绍,根据红色序号,如下:



1. 参数1就是工具所需要的Raster类型的参数。

2. 双击工具:



· ArcMap中测试



Sde库查看,成功输出:



· ArcGIS Server中测试



注意:server端raster类型目前我试过E

GP服务开发攻略(3)---实战【4】数据从sde导出成shp

工具下载地址:https://pan.baidu.com/s/1bR6fkM 
 · 模型参数介绍



根据红色序号,按顺序对参数介绍:

1.输入要素类的参数,String类型,获取输入要素类名称,加P;

2.输如的要素类参数获取



3.输出的shp所在文件夹路径;



4.输出shp所在的文件夹路径,变量String类型,加P。

5.输出的shp的名称,变量String类型,加P;