国土资源大数据整合与更新关键技术研究与应用
2021-12-24郭丽华
郭丽华
(广东麦科瑞地理信息工程有限公司,广东 惠州 516000)
在“互联网+”改革和“大数据”技术应用之后,国土资源管理中,逐渐推进了以技术为主导的精细化管理方案。但是由于信息化管理和数据化管理之间存在一个升级方面的技术问题,仍然存在诸多问题需要解决。比如,国土资源数据库管理中数据分散存储问题、标准不统一的问题、数据字段缺失问题、图形属性不对应的问题,以及由此产生的分散管理问题等。因此,为了有效提升国土资源管理效率,扩增其在综合效益产出方面的效用生产效率,十分有必要进行一些数据整合与更新,为国土资源的高效管理、数据共享、协同合作提供推动力。
1.国土资源大数据整合技术研究与应用
国土资源大数据整合技术的研究以技术路线为主,主要利用统一的数据模型,借助建设“图形驱动业务”的思路,在“互联网+国土资源”改革的基础条件上,通过统一数据库建设,实现对其数据的整合,其中的应用流程包括了诸多方面,分述如下:
1.1 实施数据调查分析
在数据调查分析环节,就是以国土资源数据资源体系建设目标为准,利用系统调研分析的方法,分别对土质环境、矿产资源、土地资源等进行全面的调研,从而形成相对完整的国土资源数据。
1.2 设置数据资源目录
在数据资源目录设置方面,则需要生成国土资源数据目录体系,在其应用过程中,要求以系统调研分析获取的基础数据为准,运用国土资源已经建设完成的信息管理系统,在遵循针对性、兼容性、可扩展性、稳定性、实用性,以及科学性的多项原则下,对其实进行自动目录生成。
1.3 构建统一数据模型
为了实现国土资源大数据整合任务,在其技术应用中则需要以其对象为准,构建以对象作为描述、编码的主要内容,然后采用统一化的系统控制理论和方法,设计与其相关的数据模型,其中包括了逻辑模型的设计、概念模型的设计,以及在此基础上,运用模拟方案,实现对国土资源空间对象的结构和行为的在线实时管理。
1.4 设计一体化数据库
国土资源大数据整合技术的应用需要实现各个独立数据库之间的有效联动,因此在实际应用中需要设计一体化的数据库,将所有的独立数据库进行通信联动后的中心管理,而一体化数据库的设计中,需要从多项内容方面实施统一设计与专门化的功能设计,应用中首先需要明确建库流程,然后,进行安全设计、性能设计、物理设计、逻辑设计、总体架构设计。
1.5 整合数据标准指标
在国土资源信息管理系统建设后,已经生成了诸多数据,而此类数据的利用效率相对较低,因此需要通过整合数据的方法,统一其中的各项指标,使其能够以标准化的规格和格式,实现全面的数据基础。具体应用中,一方面,应该以现有数据为准,分别按照“数据分析与检查——数据映射与抽取——数据预处理——对象编码——关联关系建设——质检审核”等流程,严格进行数据统一标准设置,从而在整合方法应用的条件下,使国土资源管理中的各项业务与数据形成一个有效对应,进而为其数据化管理奠定数据基础。
1.6 建设数据库
国土资源大数据整合中包括了已建库和未建库,因而,在实际的建库实践中,应该遵循“分布存储,集中管理”的设计方法,运用标准建库模式,对“新建数据库”和“已建数据库”进行数据库迁移处理,进而通过数据库迁移的办法,达到“统管”与“引流”目标,进而实现系统性的国土资源大数据管理。
1.7 进行数据联动
大数据整合的主要目标中包括了数据联动,以及为其后续应用中的大数据更新做准备。因此,在大数据整合后,完成的统一数据模型条件下,需要通过“缓冲资源池”,利用记录“编号信息、属性信息、业务信息”的功能,将其对应到“对象变化表”之内,从而为其后续的数据联动更新奠定基础。
2.国土资源大数据更新技术研究与应用
2.1 国土资源大数据更新技术
国土资源大数据整合属于基础性工作,在此基础上,需要通过配套设计更新机制,进而使其实现联动更新应用,其中的关键技术主要集中于构建统一数据模型、设计一体化数据库、进行数据联动更新三个方面。首先,统一数据模型。遵循“数据与应用分离”原则,应用面向对象的理论与方法,在国土资源管理空间对象中,以空间图元进行设计,包含面积、位置、边界等信息,均能以图形进行反映,包含统一对象描述、概念模型设计及逻辑模型设计等过程。其次,一体化数据库设计。包含三方面:国土资源一体化数据仓库、应用服务库、数据操作区,三者共同组成一体化数据库。国土资源一体化数据仓库可根据业务管理需求实时联动更新相关数据;应用服务库包含业务主体库与共享交换库,一方面为满足国土业务应用需求提供数据服务支撑,同时对社会公众开放国土资源数据共享服务。数据操作区属于一体化数据仓库的缓冲带,对未标准化、未确认的数据进行整理与加工,并将加工后的数据更新至数据仓库中。最后,数据联动更新。基于数据模型基础,通过业务系统的衔接,实现“一纵一横”的国土资源数据联动更新机制。
2.2 国土资源大数据技术的应用
2.2.1 大数据联动更新基础应用
国土资源大数据联动更新机制,主要以统一数据模型为前提,具体而言,需要先进行“统一对象描述”“概念模型设计”“逻辑模型设计”,通过检验机制,确认其能够进行整个数据模型应用,在完成数据实时采集、数据整合上传、数据统计分析、数据预测结果分发整个完整功能后,可以借助自动更新机制设计,先将数据划分为基础数据、效率数据、核心数据,当所有标记后的数据发生变化时,则会通过自动更新机制将其显示于整个大数据技术应用的每个环节,进而可以实时观察其动态变化曲线与相关图谱。
2.2.2 大数据联动更新高效应用
国土资源大数据整合与更新关键技术,在于“整合与更新”,而其中的“整合”与“更新”技术的全面应用,均离不开为其数据处理赋予“系统性标记”。因此,大数据联动更新的高效化应用过程中,要求先对整个一体化数据库进行全面标记,其中包括了“国土资源一体化数据库”中各个数据分型的采集环节、存储环节、利用环节;尤其在“数据操作区”的更新,需要通过“分析整合、加工处理、抽取操作”等程序,进而记录整个更新过程中的信息“痕迹”,确保其能够在数据更新的高效应用过程中,实现“步步留痕”的目标。一方面,通过这种更新机制,或以降低整个系统的荷载,另一方面,通过将更新机制与“云存储”进行结合,既保障了一体化数据库存储数量的规模化,也有效提升了一体化数据库高效化的安全运行。另外,大数据联动更新机制在高效应用过程中,需要对“应用服务库”进行全面的调动,这其中牵涉到“数据交互”的问题,比如,在部、省、市、县方面的“数据交互”,就需要先实现“共享交换库”的建设;再如,在行业层面则应该建立与其对应的“业务主题库”,这样才能使“共享交换库”与“业务主题库”在全面联动的条件下,实现全面的同步更新。需要注意的是数据联动更新时,有“一横”与“一纵”的区别,如“共享交换数据库”方面的联动更新就属于三级联动更新,具有垂直管理特征;而跨业务的联动更新,则具有“横向”更新特征。
3.结束语
国土资源大数据整合与更新关键技术,与国土资源管理的实际情况相符合,能够借助技术管理手段化解其中的诸多问题。尤其是在应用层面,国土资源大数据整合与更新的关键技术十分繁杂,而要获得较好的应用,就需要结合其管理中“各司其职”“分散管理”的基本特征,进而利用“系统性管理和配套性管理相结合”的思路,在整体上实施统一的国土资源管理方案设计;同时,通过对各个子系统的独立优化,使其能够在独立管理国土资源分项目的同时,实现各个子系统之间的有效联动,提升大数据技术应用效率,为后续的国土资源有效利用提供科学、精准的参考依据。