1 引言
在大数据时代,数据分析的因果关系将逐渐被相关关系取代。在某种程度上,我们利用大数据技术,只需得知“会发生什么”而不是“为什么会发生”,大数据的价值也在于此。测绘地理信息档案作为国民社会经济建设发展的基础建设之一,兼具专业性和社会化特点,不应在档案馆里沉睡,成为“信息孤岛”,应在计算机网络技术的加持下,充分发挥大数据多元化,智能化,信息化和共享化优势,顺应社会发展,焕发勃勃生机。
2 测绘地理信息档案面临的挑战和机遇(大数据档案提供对外服务模式的转变)
传统的测绘地理信息档案管理模式:收集-整理-分类-组卷-归档-上架-利用。存储模式除了纸质档案盒,更多的用光盘、机械硬盘管理数据档案。数据存储分散,不集中,利用率低,档案服务功能单纯。当下,数据获取的手段越来越先进,获取周期越来越短,形成的档案归档数据量巨大,存储格式多元化。一般测绘项目的成果归档周期为三个月,半年或者一年,某些特殊项目要求T+N甚至T+5个工作日完成成果资料的汇交。数据从收集整理分类到汇交,对测绘地理信息档案归档提出了新的挑战和更高的要求,既有的管理模式已跟不上数据流通的时效要求。大数据信息技术的到来,为数据归档带来新的管理模式。在网络技术(如数字云服务)的支撑服务下,大数据信息技术具有高效采集、海量存储、多元利用的特点,降低人力,让测绘地理信息“活起来”,不再止步于简单的查询,规划设计等工作。通过高效的信息挖掘,为自然环境资源建设科学决策参考等多方面应用提供服务,满足用户多样化需求。
3 测绘地理信息档案大数据融合面临的技术问题
3.1建立对大数据的认识
大数据拥有不同的管理模式并能够进行流程优化,是能提高效率和观察力的信息技术。它的战略意义不在于如何获取庞大的数据信息,而在于对这些有意义的数据进行专业化处理,将海量复杂的数据进行计算与控制,推动工作成果的转化,符合测绘地理信息档案的工作要求。
3.2大数据技术原理
大数据技术是一种处理、分析和挖掘海量数据的技术,它具有数据量大、类型多样、处理速度快、价值密度低等特点。采用Hadoop(分布式系统基础架构)技术把数据分层,打包压缩存储处理,从而更好的提取和利用数据价值。
3.3大数据建设的难点
测绘地理信息档案资源涵盖了土地,山地,林草,水资源,不动产,交通等地理信息数据,其在空间上呈现出明显的连续性,异质性与区域性。相关数据信息涉及多个领域,多个部门,多个项目,导致档案信息的来源多样,采集标准不一,处理要求不同,整合模式多样,影响档案的数据组织与管理的规范性。当前基础测绘类项目和自然资源调查任务多采用区域并行开展的模式,由于测绘地理信息成果数据与大数据管理缺乏统一的标准规范,衍生出大量的多源异构数据,或采集时频不同,或精度不同,这些问题均导致测绘地理信息档案统筹管理存在融合度低,共享难度大,易形成数据孤独等问题。
4大数据在测绘地理信息档案中的应用
如今,测绘地理信息档案已存在相当的体量,如何扩展测绘地理信息档案资源的内容和范围,提高档案信息资源的利用率,协调处理档案保密与开发利用的关系,更好的服务人民社会基本建设,是迫在眉睫的事情。
4.1建立测绘地理信息档案大数据平台。
测绘地理信息档案内容丰富、复杂,既有标准比例尺4D产品、大地基准数据,也有按景号或轨道号命名的航空摄影照片,卫星影像,以及各种资源数据等。这些数据格式和组织结构各不相同。通过大数据平台的建设,对测绘地理信息档案进行资源整合,把二维,三维数据按标准规范赋予信息要素,建立数字模型,形成系统化,信息化的管理机制,为科研生产应用提供数据支撑。
4.2通过信息技术,提高大数据的智能处理水平。
现阶段测绘地理信息档案资料,均通过移动存储介质进行数据交换,由专业人员处理整理,汇交,存储备份,面对海量数据,仅依靠人力显得力不从心。使用大数据技术,借助人工智能等技术手段分析识别有价值的数据和信息,通过少量的人工干预,自动完成相关工作,极大减轻人工负担。
4.3充分发挥大数据下测绘地理信息档案的数据利用价值
目前无人机航空摄影技术更新迭代,获取的影像时像越来越快,精度越来越高,伴随实景三维技术的全面铺开,测绘地理信息档案资源日益丰富。手工作业获取的信息效率低,工作量大,时间成本高。运用大数据处理技术,对纷繁复杂的时空地理信息数据进行集成,分析解译,形成汇报文件,为自然资源建设提供精准数据支持。如在农业领域,根据近几年某地农作物用地面积图斑变化情况结合近几年遥感影像监测情况,运用大数据技术进行智能解译,可快速,准确分析出其经济价值,预测未来市场变化趋势情况,在农业生产上及时调整农业生产结构,合理配置农业资源,增加经济收入。在城市规划和发展领域,利用历年来城市地形地貌更新数据,通过卫星影像来监测城市发展,土地利用和交通流量,促进城市的可持续发展和改善居民生活质量等。
5 大数据环境下测绘地理信息档案的安全保密管理
5.1完善管理制度和操作流程
大数据的体量大,种类丰富,但并非所有的数据都具有利用价值,测绘地理信息档案的管理制度应根据大数据的特点进行针对性调整。依据测绘地理信息档案的管理要求,通过建立模型,机器学习,进行筛选,发现有价值的信息,分析出规律,整理,分类,实现提高效率、改善现状、推进档案管理信息化流程。
对于涉密测绘地理信息档案资源的查阅,必须严格遵守保密原则,合理利用。根据不同等级的密级,设置不同的权限,逐级进行调阅。针对特殊档案,可设置加密措施和解密技术,确保档案资料安全合规使用。
5.2推进安全保密等级认证进程
测绘地理信息档案反映了国家自然资源、行政区划等重要的地理信息,涉及土地,海洋,国情监测等重大政治项目资料,具有高度的敏感性和保密性。大数据的开放,共享的特点与保密工作的要求相悖,做好档案信息不同级别的保密划分,相关保密安全等级的认证工作,将需要保密处理的数据根据数据本身的性质评定,规范数据资料的保密管理,根据保密等级展开合作开发利用,既满足经济建设需要,又对档案数据做好保密管理工作。
5.3构建大数据安全体系
在大数据时代,虽然在挖掘测绘地理信息档案利用价值上更加便利高效,但是基于大数据技术的特点(需要借助计算机网络中海量的数据来拓展大数据应用),它的网络安全问题也面临严峻的挑战。病毒、木马、防御层次设计、不规范的授权使用、使用者薄弱的安全保密意识等都对数据安全构成了威胁和潜在隐患。把大数据技术与计算机网络安全技术相融合,建立网络防火墙以及专门的安全监测系统,加大档案管理人员培训力度,学习接受先进的工作理念和新技术,加强保密教育培训,全面提升个人专业技能和综合素养。通过软硬结合,建立合适的网络安全体系,切实将各项风险扼杀在摇篮之中。
4结语
大数据技术已经运用到日常生活的各个领域,促进了科技的快速发展和测绘地理信息档案服务需求爆发式的增长,为测绘地理信息档案资料的管理带来新的发展机遇。随着大数据处理技术不断地完善成熟,我们在工作中应紧跟时代脚步,充分运用大数据技术对测绘地理信息数据进行高效管理和挖掘拓展,有效发挥地理信息数据资源的基础性和战略性保障作用,切实履行好测绘地理信息全面服务自然资源“两统一”的职责,推动测绘事业转型升级。
殷箐遥 大数据时代测绘地理信息档案管理模式探讨[J] 产业创新研究,91-93 2021(11)
殷家林 探讨大数据在测绘地理信息方面的运用 支撑技术45-47 2024.3.12
梅树红 何琪 大数据时代测绘地理信息档案资源的建设与应用 测绘与空间地理信息 166-168 2016(5)