【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【4】ArcGIS Data Store
分享
-
2017-03-31
1.1.1. ArcGIS Data Store概述
ArcGIS Data Store是一个独立的数据库安装应用程序，主要用于托管 Portal for ArcGIS 的数据图层，是新一代的 Web GIS 系统的数据存储部分。让您轻松配置 Portal for ArcGIS 网站使用联合服务器存储数据。
随着Web GIS 平台大数据云计算时代的到来，传统的数据库类型已经不能满足需求，新的平台，新的能力，对数据库的要求能够实时快速，适合互联网数据快速请求，专库专用等新的需求，而ArcGIS Data Store 正是在这样背景下孕育而生。有别于传统的数据ArcGIS Data Store是一个混合数据库，按需安装，易于部署，性能优越。完美的支撑ArcGIS 新一代Web GIS 大数据，实时，三维等全新功能。
虽然ArcGIS Data Store 功能强大，但是安装却十分简单，ArcGIS Data Store提供了一个简单快捷的安装和配置，可以创建三种类型的数据存储。
ArcGIS Data Store 类型
ArcGIS Data Store 包含三种类型的数据库，关系型存储，切片缓存型存储，时空大数据存储。每种数据库在Web GIS平台中起着不同的作用，各司其职，协同保障Web GIS 平台各项功能成功运行。
· 关系数据存储：采用PostgreSQL技术，存储门户的托管要数以千计的要素图层数据，包括从空间分析工具的输出创建的托管要素图层。
· 切片缓存数据存储：采用CouchDB技术，主要用于支持Portal for ArcGIS网站的托管三维数据。Web GIS 平台中三维能力的提升就是来源于此。除此以外切片缓存型还支持影像数据的分析。
· 时空大数据存储：时空大数据类型是为大数据分析，实时专门打造，利用elasticsearch技术，具有快速，实时，高并发，高吞吐等特点，在Web GIS 平台中主要用来归档ArcGIS GeoEvent Server实时数据，并且存储ArcGIS GeoAnalytics Server 的结果。
1.1.2. ArcGIS Data Store主要功能
ArcGIS Data Store 作为Web GIS 平台的数据存储平台，可以将功能概括为以下几点：
· 支持大量的托管功能层。
· 依赖于关系数据存储托管要素图层需要更小的内存占用来运行，从而有可能为您发布的许多服务，硬件资源少。支撑发布数以千计的托管要输图层。
· 支持三维场景图层。
· 如果门户网站的托管服务器注册了切片缓存类型的数据存储，你可以用ArcGIS Pro 发布三维场景到Portal for ArcGIS。
· 存档海量，实时观测数据。
· ArcGIS GeoEvent Server扩展流的实时数据的大容量，可以用ArcGIS Data Store创建一个时空大数据存储和归档ArcGIS GeoEvent Server观测数据。
· 备份保证可以恢复在发生灾难的情况下，如数据损坏或硬件故障。可以控制何时创建关系数据存储的自动备份。
· 配置故障转移数据存储。
· ArcGIS的数据存储，可以设置主服务器和备份关系数据存储设备，以及主，备切片缓存的机器。
· 托管Feature Layer和三维场景的切片缓存数据可以从主设备到备用机器备份复制，所以如果一个主要计算机崩溃，备用机器可以取代其位置保证系统健康运行。
· 配置高度可用的时空大数据存储。
· 配置多个时空大数据存储在多台计算机来平衡负载的数据，并确保在一台机器发生故障时，时空大数据数据的可用性。
· 支持Portal for ArcGIS的空间分析。
· Portal for ArcGIS的托管服务器必须使用ArcGIS Data Store关系型数据存储，使用Portal空间分析功能。如使用ArcGIS GeoAnalytics Server工具，则需要配置一个时空大数据存储的ArcGIS GIS Server的服务器。
· 支持Insights for ArcGIS输出数据.
· 备份和恢复所有类型的数据存储
· 自动备份：
现在可以用于所有的数据存储类型。默认情况下为关系型数据存储。
使用切片缓存数据存储创建自动备份。
使用时空大数据的存储创建自动备份。
· 手动备份：
还可以使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_3F745CDA9DCD4B38A8F928CF25B49E78">backupdatastore工具来创建关系，切片缓存，或时空大数据存储的手动备份。
· 恢复数据：
使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_BAF681033AB248C2BF4718A917380C8D">restoredatastore工具现在可以让您恢复您拥有的备份文件的任何数据存储类型。
· 只读关系数据存储模式
如果你创建了关系型数据存储在机器运行的磁盘空间不足，数据存储变得不可用，并可能会丢失数据。 为防止丢失数据时，主关系数据存储将被放置在只读模式中，当机器的磁盘空间运行在指定空间以下（默认情况下，大小为1024 MB），你可以使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_5F78275E9F6A42D199FC7098DFF049AB">changedbproperties工具来将空间改为只读操作。
· 时空的大数据存储磁盘空间监控
ArcGIS Data Store 10.5监控时空大数据存储计算机磁盘的剩余空间。当磁盘剩余空间低于10 GB，警告你需要添加磁盘空间。一旦时空大数据存储的磁盘空间低于1024 MB，时空大数据存储关闭以避免数据丢失。
1.1.3. ArcGIS Data Store 管理维护
1）ArcGIS Data Store 的高可用性
如果需要数据存储具有高可用性，ArcGIS Data Store 提供了高可用方案， 由于ArcGIS Data Store 有三种类型的数据库，所以每一种的类型的高可用方案不一样。
· 关系数据存储
关系型的存储需要俩个机器，分别安装关系型的ArcGIS Data Store。这两个Data Store 分为主存储和备用存储。
如果主变为不可用（例如，如果主机崩溃，断电或失去网络连接），备用机晋升为主存储。一旦备用成为主数据存储时，它会发送其备份文件到以前主机发送的相同位置。
如果以前的主机恢复工作，例如机器电源被拔掉又接上电源，以前的主机变备用机用于数据存储。
· 切片缓存数据存储
安装配置以及高可用原理和关系型的都一样。不一样的地方是缓存数据存储不具备自动备份文件到映射网络驱动器（UNC的共享文件）。
· 时空大数据存储
时空大数据存储可以安装多台计算机，每一个时空大数据存储都称为时空大数据节点，每个节点没有主次之分，是对等备份，默认是最大可以添加150个节点。因为时空大数据使用ElasticSearch技术所以具备面向文档的分布式数据库，具有海量，高并发，实时的特性。时空大数据存储集群里会将每一份数据保存在至少俩个节点之上。具体原理请查阅ElasticSearch相关文档。
如果任何一台机器出现故障，数据仍然存在于至少一种其他的机器。
2）ArcGIS Data Store日志管理
ArcGIS Data Store可以使用ArcGIS GIS Server Manager查看日志，查询，配置和删除写入日志目录。可以过滤Data Store日志，查看日志选择模块ArcGIS的数据存储和日志源类型。
管理日志的类型有以下几种：
· 更改日志记录级别
· 更改日志文件保存期限
· 更改日志文件的位置
3）备份管理
数据备份在数据管理中至关重要，在机器发生故障的时候使用备份数据可以进行数据还原，将损失降到最小。
备份可以恢复数据，当服务器出现故障，数据也在服务器上，将无法恢复数据。因此，你需要将备份文件存储在不同的服务器数据存储上。
ArcGIS Data Store 提供了手动备份和自动备份两种方式。
ArcGIS Data Store 也提供了根据备份文件恢复到以前的一个时间节点。例如，如果大量编辑托管要素图层，然后发现了第二天那些编辑是不正确的，就可以恢复关系数据存储到它在之前的编辑状态。
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(1)概述:http://zhihu.esrichina.com.cn/article/2897
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【0】概述:http://zhihu.esrichina.com.cn/article/2896
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【1】基本配置:http://zhihu.esrichina.com.cn/article/2895
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【2】可选服务器产品:http://zhihu.esrichina.com.cn/article/2894
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【3】Portal for ArcGIS:http://zhihu.esrichina.com.cn/article/2893
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【4】ArcGIS Data Store:http://zhihu.esrichina.com.cn/article/2892
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(3)产品级别:http://zhihu.esrichina.com.cn/article/2891
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(4)基础部署:http://zhihu.esrichina.com.cn/article/2890
ArcGIS Data Store是一个独立的数据库安装应用程序，主要用于托管 Portal for ArcGIS 的数据图层，是新一代的 Web GIS 系统的数据存储部分。让您轻松配置 Portal for ArcGIS 网站使用联合服务器存储数据。
随着Web GIS 平台大数据云计算时代的到来，传统的数据库类型已经不能满足需求，新的平台，新的能力，对数据库的要求能够实时快速，适合互联网数据快速请求，专库专用等新的需求，而ArcGIS Data Store 正是在这样背景下孕育而生。有别于传统的数据ArcGIS Data Store是一个混合数据库，按需安装，易于部署，性能优越。完美的支撑ArcGIS 新一代Web GIS 大数据，实时，三维等全新功能。
虽然ArcGIS Data Store 功能强大，但是安装却十分简单，ArcGIS Data Store提供了一个简单快捷的安装和配置，可以创建三种类型的数据存储。
ArcGIS Data Store 类型
ArcGIS Data Store 包含三种类型的数据库，关系型存储，切片缓存型存储，时空大数据存储。每种数据库在Web GIS平台中起着不同的作用，各司其职，协同保障Web GIS 平台各项功能成功运行。
· 关系数据存储：采用PostgreSQL技术，存储门户的托管要数以千计的要素图层数据，包括从空间分析工具的输出创建的托管要素图层。
· 切片缓存数据存储：采用CouchDB技术，主要用于支持Portal for ArcGIS网站的托管三维数据。Web GIS 平台中三维能力的提升就是来源于此。除此以外切片缓存型还支持影像数据的分析。
· 时空大数据存储：时空大数据类型是为大数据分析，实时专门打造，利用elasticsearch技术，具有快速，实时，高并发，高吞吐等特点，在Web GIS 平台中主要用来归档ArcGIS GeoEvent Server实时数据，并且存储ArcGIS GeoAnalytics Server 的结果。
1.1.2. ArcGIS Data Store主要功能
ArcGIS Data Store 作为Web GIS 平台的数据存储平台，可以将功能概括为以下几点：
· 支持大量的托管功能层。
· 依赖于关系数据存储托管要素图层需要更小的内存占用来运行，从而有可能为您发布的许多服务，硬件资源少。支撑发布数以千计的托管要输图层。
· 支持三维场景图层。
· 如果门户网站的托管服务器注册了切片缓存类型的数据存储，你可以用ArcGIS Pro 发布三维场景到Portal for ArcGIS。
· 存档海量，实时观测数据。
· ArcGIS GeoEvent Server扩展流的实时数据的大容量，可以用ArcGIS Data Store创建一个时空大数据存储和归档ArcGIS GeoEvent Server观测数据。
· 备份保证可以恢复在发生灾难的情况下，如数据损坏或硬件故障。可以控制何时创建关系数据存储的自动备份。
· 配置故障转移数据存储。
· ArcGIS的数据存储，可以设置主服务器和备份关系数据存储设备，以及主，备切片缓存的机器。
· 托管Feature Layer和三维场景的切片缓存数据可以从主设备到备用机器备份复制，所以如果一个主要计算机崩溃，备用机器可以取代其位置保证系统健康运行。
· 配置高度可用的时空大数据存储。
· 配置多个时空大数据存储在多台计算机来平衡负载的数据，并确保在一台机器发生故障时，时空大数据数据的可用性。
· 支持Portal for ArcGIS的空间分析。
· Portal for ArcGIS的托管服务器必须使用ArcGIS Data Store关系型数据存储，使用Portal空间分析功能。如使用ArcGIS GeoAnalytics Server工具，则需要配置一个时空大数据存储的ArcGIS GIS Server的服务器。
· 支持Insights for ArcGIS输出数据.
· 备份和恢复所有类型的数据存储
· 自动备份：
现在可以用于所有的数据存储类型。默认情况下为关系型数据存储。
使用切片缓存数据存储创建自动备份。
使用时空大数据的存储创建自动备份。
· 手动备份：
还可以使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_3F745CDA9DCD4B38A8F928CF25B49E78">backupdatastore工具来创建关系，切片缓存，或时空大数据存储的手动备份。
· 恢复数据：
使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_BAF681033AB248C2BF4718A917380C8D">restoredatastore工具现在可以让您恢复您拥有的备份文件的任何数据存储类型。
· 只读关系数据存储模式
如果你创建了关系型数据存储在机器运行的磁盘空间不足，数据存储变得不可用，并可能会丢失数据。 为防止丢失数据时，主关系数据存储将被放置在只读模式中，当机器的磁盘空间运行在指定空间以下（默认情况下，大小为1024 MB），你可以使用<a href="https://localhost:2443/arcgis/ ... ot%3B \l "ESRI_SECTION1_5F78275E9F6A42D199FC7098DFF049AB">changedbproperties工具来将空间改为只读操作。
· 时空的大数据存储磁盘空间监控
ArcGIS Data Store 10.5监控时空大数据存储计算机磁盘的剩余空间。当磁盘剩余空间低于10 GB，警告你需要添加磁盘空间。一旦时空大数据存储的磁盘空间低于1024 MB，时空大数据存储关闭以避免数据丢失。
1.1.3. ArcGIS Data Store 管理维护
1）ArcGIS Data Store 的高可用性
如果需要数据存储具有高可用性，ArcGIS Data Store 提供了高可用方案， 由于ArcGIS Data Store 有三种类型的数据库，所以每一种的类型的高可用方案不一样。
· 关系数据存储
关系型的存储需要俩个机器，分别安装关系型的ArcGIS Data Store。这两个Data Store 分为主存储和备用存储。
如果主变为不可用（例如，如果主机崩溃，断电或失去网络连接），备用机晋升为主存储。一旦备用成为主数据存储时，它会发送其备份文件到以前主机发送的相同位置。
如果以前的主机恢复工作，例如机器电源被拔掉又接上电源，以前的主机变备用机用于数据存储。
· 切片缓存数据存储
安装配置以及高可用原理和关系型的都一样。不一样的地方是缓存数据存储不具备自动备份文件到映射网络驱动器（UNC的共享文件）。
· 时空大数据存储
时空大数据存储可以安装多台计算机，每一个时空大数据存储都称为时空大数据节点，每个节点没有主次之分，是对等备份，默认是最大可以添加150个节点。因为时空大数据使用ElasticSearch技术所以具备面向文档的分布式数据库，具有海量，高并发，实时的特性。时空大数据存储集群里会将每一份数据保存在至少俩个节点之上。具体原理请查阅ElasticSearch相关文档。
如果任何一台机器出现故障，数据仍然存在于至少一种其他的机器。
2）ArcGIS Data Store日志管理
ArcGIS Data Store可以使用ArcGIS GIS Server Manager查看日志，查询，配置和删除写入日志目录。可以过滤Data Store日志，查看日志选择模块ArcGIS的数据存储和日志源类型。
管理日志的类型有以下几种：
· 更改日志记录级别
· 更改日志文件保存期限
· 更改日志文件的位置
3）备份管理
数据备份在数据管理中至关重要，在机器发生故障的时候使用备份数据可以进行数据还原，将损失降到最小。
备份可以恢复数据，当服务器出现故障，数据也在服务器上，将无法恢复数据。因此，你需要将备份文件存储在不同的服务器数据存储上。
ArcGIS Data Store 提供了手动备份和自动备份两种方式。
ArcGIS Data Store 也提供了根据备份文件恢复到以前的一个时间节点。例如，如果大量编辑托管要素图层，然后发现了第二天那些编辑是不正确的，就可以恢复关系数据存储到它在之前的编辑状态。
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(1)概述:http://zhihu.esrichina.com.cn/article/2897
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【0】概述:http://zhihu.esrichina.com.cn/article/2896
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【1】基本配置:http://zhihu.esrichina.com.cn/article/2895
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【2】可选服务器产品:http://zhihu.esrichina.com.cn/article/2894
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【3】Portal for ArcGIS:http://zhihu.esrichina.com.cn/article/2893
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(2)产品组成【4】ArcGIS Data Store:http://zhihu.esrichina.com.cn/article/2892
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(3)产品级别:http://zhihu.esrichina.com.cn/article/2891
【ArcGIS 10.5 产品白皮书】第二章 ArcGIS平台产品---ArcGIS Enterprise(4)基础部署:http://zhihu.esrichina.com.cn/article/2890
