基于大数据管理的附件资源共享技术设计与实现
——以宿迁市为例
2021-12-31陆敬刚
陆敬刚,张 岩
(宿迁市国土资源基础信息中心,江苏 宿迁 223800)
自然资源“一张图”平台是自然资源部门加强国土资源动态监管的创新举措,是遥感、土地利用现状、基本农田、遥感监测、土地变更调查以及基础地理等多源信息的集合,与国土资源的计划、审批、供应、补充、开发、执法等行政审批系统叠加,共同构建统一的综合平台,实现资源开发利用的“天上看、网上管、地上查”,从而实现资源动态监管的目标。
江苏省自然资源厅在《江苏省自然资源厅关于印发全省国土资源信息化工作要点的通知》中重点提出:深入贯彻落实党中央关于自然资源管理的要求,准确把握自然资源工作在新常态下和“迈上新台阶、建设新江苏”工作大局中的定位,践行“保护资源、节约集约、维护权益、改革创新”的工作总要求,坚定推动节约集约、利用资源等各项重点工作落地见效,全力推动国土资源工作迈上新台阶。
为全面推进“全流程优化审批、全区域便民服务、全业务网上办理、全节点效能监管”的服务模式,进一步提升信息化保障和服务能力,建设大数据附件资源管理系统,改变国土各个系统平台附件重复上传、丢失及数据冗余的现状。
1 概述
宿迁市自然资源“一张图”项目建设过程中,遇到一些亟需解决优化的问题,如在业务审批中大量附件材料的重复提交、重复扫描上传,业务网上办理过程中大量重复附件的积累,不动产统一登记、建设用地动态监管等各子系统附件重复扫描上传,相关业务附件数据信息各自独立形成信息孤岛,以及档案数字化重复扫描等问题。
基于以上问题,研究基于大数据管理的附件资源共享技术,建立附件资源管理系统,将各系统业务办理过程中的附件材料通过附件资源管理系统统一管理,通过业务各个环节的关联性,实现附件材料一次上传重复利用,并使审批后的各类表单和附件资源自动归档到附件资源管理系统中,避免再次进行档案数字化扫描工作,节省财政支出。从根本上解决附件材料重复提供、重复上传、数据冗余的情况,实现数据共享、业务审批和档案数据一体化管理,方便群众办事,真正做到便民高效。
2 系统设计
2.1 设计思路
通过对宿迁市自然资源“一张图”综合平台和其它子系统的附件材料进行分析,在业务过程中用到的附件材料,通过录入附件材料关键字段,对应的附件进行扫描上传,存储到数据库中,下次办理业务用到相同的附件时,通过关键字检索,进行附件调用,避免对相同附件进行重复上传和录入,提高办事效率。
系统采用OracleXML DB 技术实现业务受理表与附件资源业务操作的上下文统一,根据附件资源管理系统对附件进行统一管理,对每一类附件材料分别定义一个表单进行管理,每一个附件材料定义相应的关键字段进行关联,相同的附件材料关键字相同,存储时数据库中只保留一个;业务办理中受理与数据库中关键字段相同的附件材料时,只通过关键字段检索,调用相应的附件材料即可进行业务办理,减少附件材料扫描、关键字段录入及上传等步骤的同时,节约了数据库的存储资源,避免数据冗余。
为减少重复开发,系统控件尽可能考虑实际需求情景,在附件数据编辑时,根据附件数据的关键信息录入编辑,按照部门涉及的业务梳理附件材料清单,录入材料关键属性。在上传附件材料时,可随时查看已上传的材料,附件管理支持多文件选择、一次性上传,实现附件一次上传,多处调用。
上传的附件包括Word 文档、Excel 表格、PDF 文件以及各类图片格式,为方便查看,集成图片查看控件,直接读取图片附件的数据流作为对象展示,该图片控件支持对图片的滚动放大、缩小、翻转等操作。
2.2 总体框架
在宿迁市自然资源“一张图”综合平台基础上,按照“放管服”要求建立资源共享、效能优化的附件管理系统。
(1)云基础设施层
云基础设施以虚拟化技术为支撑,对基础软硬件、数据进行池化,对池化资源进行管理,为附件资源管理系统提供可扩展的计算、存储、网络、数据资源,支撑附件资源管理系统的应用与服务。同时,提供对YanVM、Xen、KVM、VMWare、Hyper-v、PowerVM 等厂商的虚拟资源接入管理,以充分利用现有的各类资源。
(2)数据层
数据层主要实现对宿迁市国土资源“一张图”核心数据库各类电子、纸质数据以及其他数据的统一存储管理,包括附件资源管理的各类文件档案数据。
(3)服务层
服务层是将应用层中的应用系统与业务逻辑无关的通用支撑功能分离,构建可以被不同系统调用的构件集、服务集,实现对功能的重用。服务层以宿迁市国土资源“一张图”平台为基础,提供数据交换整合、数据挖掘、数据查询、工作流引擎等服务支撑。
(4)应用层
附件资源管理系统以灵活、松散耦合的方式,制定统一的数据标准规范,建立数据的集中存储与访问策略,来完成与电子监察系统、土地整治系统、移动办公系统、分局OA 系统、综合监管系统、建设用地预审系统、建设用地报批系统、建设用地供地系统、执法监察系统、信访管理系统等的数据集成,同时附件资源管理系统支持与其他系统之间进行附件资源数据交换共享,各系统之间的附件文件均通过附件资源管理系统进行统一管理。
(5)用户层
用户层是本系统统一信息服务的窗口,其它系统或者用户通过用户层实现对数据和服务的统一访问。用户层主要面向业务使用人员和系统维护人员,为不同类型的用户提供一站式的数据与应用服务。
2.3 数据库设计
数据库主要根据各业务中用到的附件材料清单,针对材料清单上的关键字,建立数据库检索字段,通过将每一类附件材料清单录入的关键字存储到数据库中,对以后附件材料管理提供便捷的方法,防止相同的附件重复上传,同时对附件管理系统操作日志数据库进行设计,使附件资源管理系统的操作日志自动记录到数据库中,便于以后管理。
在数据库的设计中,由于对所有系统平台的附件文件进行统一的管理,各系统平台之间附件的逻辑关系设计清晰,在各系统平台进行附件文件上传、调用时,数据库设计要记录各系统之间上传、调用的日志,方便以后进行查询。要充分考虑每一类附件材料清单提取的关键字段,关键字段要兼顾以后查询统计分析时的需求。
3 系统实现
系统采用B/S 架构,大数据中心数据层提供数据存储服务,通过服务器提供硬件支撑,在web 应用程序端发布服务以后,通过内网或互联网客户端浏览器可以对所需附件进行上传调用。
系统为各平台附件资源提供资料管理服务,所有系统平台所需附件通过附件资源管理系统对附件进行关键字段录入、扫描上传、调用、档案归档等操作,通过一定时间的积累,在以后的业务办理过程中,用到附件资料库相同的附件时,不用再重复进行扫描上传及关键字段录入等操作,直接调用相应的附件即可,为之后档案数字化管理和群众便捷高效办事提供便利。
3.1 附件材料建立一个表单统一管理
每类附件材料建立一个表单进行单独管理,导航栏树结构根据处室业务建立目录树,每个业务流程下面建立附件材料清单目录,上传附件材料时,根据流程下面的附件材料清单、表单进行上传附件,针对不同流程用到同样的附件材料,根据附件材料上传时录入关键字段条件,进行上传时如附件材料录入关键字段相同,就不再重新扫描上传。如:土地利用处——国有土地使用权出让流程,用到“用地申请书”,在上传扫描后的用地申请书附件材料时,录入相关的“申请单位”“申请日期”“接收单位”“标题”等信息,在地籍管理处——初始登记用到用地申请书时,再按照录入和以上相同条件,系统自动提示该附件已上传,避免重复上传,每个附件材料一个表单进行管理,不管是国有土地出让还是初始登记用到的用地申请书,调用的都是同一个表单,上传、查询、调用、关联也都是在同一个表单上操作。
3.2 附件材料上传和业务调用模块实现
附件材料上传的两种方法:
(1)按对应流程上传
能快速查询检索相对应流程下面的材料清单,按每个表单、清单进行上传,如:办理国有土地使用权出让流程时,一目了然的看到要上传哪些附件材料,然后按对应上传(有些附件材料可能在前置流程中已经上传就不再重复上传)。
(2)按附件材料目录上传
根据设计步骤进行上传,这种是只对应附件材料名称、不对应流程进行上传。
按附件材料名称进行搜索,根据搜索到的表单,录入相应的关键字段,然后点击上传附件即可。
业务流程调用时按上面“附件材料上传”模式进行快速调用。
3.3 附件资源查询统计分析模块实现
每个附件上传到附件资源管理系统时,都会生成唯一的ID 号进行标识,并录入每个附件的关键字段存储在数据库中,在大数据中心进行管理,通过定义的唯一标识码来进行附件材料的查询统计分析。系统支持附件材料总量统计,附件类别、种类、数量、属性等统计分析,通过关键字快速检索查询附件材料等功能。
3.4 附件资源管理系统附件安全管理模块实现
由于附件资源管理系统存储大量的附件,其中涉及的部分附件有权限才能查看,因此要对登陆附件资源管理系统的人员进行权限控制。
为防止上传附件重复,在文件上传之前,先行比对数字化录入的属性字段,看是否有重复,如果有重复则进行提示。对于每次出现系统提示的情况,要记录到系统日志里,便于日后管理。
错误上传的文件,将错误文件转存到“回收站”,不直接删除,错误文件所关联的流程、用户、时间等信息要完整记录到日志中,便于以后查询。
4 结束语
基于大数据管理的附件资源共享技术,是通过对附件资源的物理存储、数据索引、关键字段提取、唯一性定义、查询及调用等关键技术的优化创新,实现多源、多尺度、海量附件资源数据统一存储和高效管理,实现办事过程中附件资源一次上传、重复利用,方便群众办事、提高办事效率。在平台出现问题时,能保证附件资源不受影响,另外,也达到了实现“一张图”平台的数据库性能优化,减少数据冗余,提高数据库作业性能的目的。