大数据背景下档案文化功能探析
2017-01-28■席畅
■席 畅
大数据背景下档案文化功能探析
■席 畅
大数据时代的来临,使数据和信息分析上升到前所未有的历史高度。本文从大数据的定义出发,阐述了大数据的现实意义及内在价值,解析了大数据的应用对档案文化的功能所带来的挑战,同时提出了大数据的发展给档案文化功能带来的新机遇。最后指出了档案文化功能的实现必须建立在厚重的社会文化积淀、迫切的社会管理诉求和广泛的社会文化需求之上。因此,针对档案文化功能的大数据模式研究,将是档案学发展的关键。
大数据 档案文化 功能
英国牛津大学维克托·迈尔-舍恩伯格教授在《大数据时代》一书中说:“大数据开启了一次重大的时代转型,就像望远镜让我们能够感受宇宙,显微镜让我们能够观测微生物一样,大数据正在改变我们的生活以及理解世界的方式,成为新发明和新服务的源泉,而更多的改变正在蓄势待发。”在世界信息化高速发展的大背景下,大数据已成为国家目前重要的基础性战略资源。作为档案自身,它蕴含着国家发展所需的宝贵资源,具有极其丰富的文化底蕴,弥足珍贵。大数据时代,档案文化功能实现,自有其存在和研究的必要性。在新的时期,重新认识和处理档案的文化内涵,把数据变成“会说话”的活数据,为国家战略的准确性和实效性提供帮助,进而实现档案的文化功能效应。同时,如何采集各类档案信息,丰富和完善档案文化功能,更好的分享和利用档案资源,切实发挥档案资源自身价值,是摆在档案工作者面前的重要任务,也是国家档案管理部门急需思考和解决的重要问题。
一、大数据的定义与价值
随着云时代的到来,大数据引起社会广泛关注。作为巨量资料的大数据(big data),是指所涉及的资料量巨大到无法通过现有主流软件工具,在既定时区内达到采集、处理、管理、整理,使决策得到更为积极帮助的资讯。作为《著云台》的分析师团队认为,大数据一般是指某个公司产生的大量非结构和半结构化数据,它在下载到关系型数据库用于分析时将消耗过多时间和金钱,而从各类数据中快速获得有价值信息的能力,就是大数据技术。
大数据有四方面特点:一是数据体量巨大,从TB级别跃升到PB级别;二是数据类型繁多,如网络日志、图片、视频及地理位置信息等等;三是价值密度低,如视频,在不间断监控中可用数据仅有一两秒;四是处理速度快,即1秒定律。最后一点和传统数据挖掘技术存在本质不同。业内将其归缩为4个“V”——Volume,Variety,Value,Velocity。
大数据的4V特征给数据采集、监护(Data Curation,又译为数据监管)、存储、搜索、共享、分析和数据可视化等领域的既有技术方法带来极大挑战,因此大数据发展的最初阶段集中表现在大数据相关技术的研发和进步。
当今社会高速发展,科技日新月异,信息流通日渐加速,人们之间的交流愈加密切,生活愈加便利,大数据就是这个信息爆炸的高科技时代产物。其最核心价值就是对海量数据的存储和分析。相比现有其他技术而言,大数据具有最优的“廉价、迅速、优化”的综合成本。
大数据的实质就是“辅助决策”。利用大数据进行分析,能够做到总结经验、发现规律、预测未来,为辅助决策服务。我们掌握的数据信息越多,决策就会更加科学、更加精确合理。数据本身无法价值,只有与其他具体领域、具体行业结合,为决策提供帮助后才具有价值。很多都可以借助大数据,达到提升管理及决策水平、提升经济效益目的。
全球知名咨询公司麦肯锡是最早提出“大数据”时代到来的机构。麦肯锡在研究报告中指出,数据已经渗透到每一个行业和业务职能领域,逐渐成为重要的生产因素。而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。物联网、云计算、移动互联网、车联网、手机、平板电脑、PC以及遍布地球各个角落的各种各样的传感器,无一不是数据来源或者承载的方式。
二、大数据使档案文化功能面临挑战
作为文化载体的档案,是人类历史长期积累形成的丰富而复杂的文化成果。档案的存储、利用及开发等工作,都可视其为文化活动或文化现象。丰富档案文化内涵,挖掘档案文化价值,扩展档案文化功能,是推动档案工作现代化的内在需要,也是推动社会发展的迫切要求。大数据的出现,使档案文化功能面临挑战,具体表现在以下几方面:
(一)档案文化的存储功能面临挑战
从古至今,档案就是人类社会信息和文化贮存的重要形式和载体。它记录着历代创造的文化成果,承载文化发展的历史延续性,具有存储文化的功能。大数据的出现,使档案存储手段得以扩展和变化,对于大数据而言,它要求使用专用的数据存储设备和专门的数据库技术,克服了传统数据库那种单纯追求数据高度的一致性和容错性,而缺乏较好的扩展性和系统可用性,无法有效存储音频、视频等非结构及半结构化数据的不足。
(二)档案文化的传播功能面临挑战
就档案文化传播功能而言,档案能够实现人类历史记忆的线性传递,也能够实现文化知识跨地区、跨行业的横向传播;它既可以通过档案原本、影印件和成果编著等方式实现静态传播,也能够通过公共宣传媒介(如广播、影视、报刊、网络等)实现档案信息的动态传播。大数据的出现,特别是大数据特有的4V价值特性,使用户对大数据带来的服务价值产生更高的期望,需求也随之变得愈加多样和复杂。
(三)档案文化的教育功能面临挑战
作为重要的文化教育资源,因为档案具有原始、真实、权威及直观性特点,客观反映了社会生活的各方面,由此成为了文化宣传及教育的生动素材。面对大数据技术的应用,为档案文化教育功能提出新的要求,如何实现以往的信息采集、存储、分类、检索及人机交流等技术方法顺利转换到大数据的管理和利用体系之中,达到有效转换和扩展档案文化教育功能,对档案学界来讲,是必须深入探讨和研究的重要问题。
(四)档案文化的传承功能面临挑战
档案作为文化载体,需要原始地保留人类文化的重要内容,它是历史记忆和传承的本源。大数据技术对信息处理要求较高的时效性。而对于以往的数据挖掘技术来讲,当数据维度及规模增大时,需要的资源也将呈现指数的增长,面对历史有限资源,为了实现档案文化传承,在大数据运用过程中,就需要寻求简单有效的人工智能算法和面对新问题的有效求解方法。
(五)档案文化传承中的信息安全功能面临挑战
大数据的出现,将无可争辩地推动人类社会飞速发展,但与之俱生的信息安全,面临着史无前例的严峻挑战。大数据时代,信息巨量膨胀,各类数据蜂拥而至,其中需要保密的数据和隐私的数据也成倍地增长,个人隐私、知识产权、国家安全等时时刻刻面临着空前的安全挑战。档案作为大数据中数据类之一,同样受到安全问题的冲击,这就要求我们寻求和设计强大的安全防御体系,随时识别和发现安全漏洞,有效防御,确保系统的安全运行。
(六)档案的知识生产功能面临挑战
大数据时代,档案作为特殊的数据,有其独有的要求和标准。随着时代的进步,档案数据的采集方式也会发生质的变换。在坚持以往传统采集模式的同时,大部分档案数据必将从社会庞大数据系统中自动采集和生成,也就是档案的知识生产功能得到极大扩展,现有的档案的知识生产功能面临新的挑战。如何通过数据分析,架构档案数据识别和生成系统,是档案走向现代化的重要问题之一。
三、大数据给档案文化功能带来前所未有的机遇
深入分析大数据对档案文化功能的影响,我们会发现,在大数据背景下,档案的文化功能存在两项重要的发展趋势,那就是“求真”和“求变”。“求真”是指作为人类活动真实记录的档案,具备原始性和真实性两个重要特性。它是人类历史发展的记忆宝库、知识宝库、信息宝库。而“求变”指的是档案管理、档案采集、档案文化传承的技术手段发生巨大变化,这种时代的变化,必将为档案的文化功能发展带来前所未有的机遇。
(一)数据复杂、海量、迅猛地增长,必将为档案的数据存贮能力快速增长提供广阔平台
互联网和互联网+被社会广泛认可和利用,是社会的信息数据量迅猛增长,具体的说,就是网络使数据产生途径、方式和范围发生巨大变化,人们的一言一行、一举一动都将产生巨大数据,这些半结构或非结构化的庞大、复杂的数据,为档案的数据扩展提供了巨大支持,同时大数据的4V特征,为档案数据存储能力增长提供了广阔平台,成为可能。
(二)复杂数据的处理将成为大数据时代档案文化功能的主旋律
大数据时代档案文化功能即将面临的是庞大复杂数据的处理。如何高标准地深入挖掘档案文化信息,识别、采集、处理、生成数据档案面临巨大挑战。大数据的优势就在于信息数据建设不再局限于只针对结构化数据或单一数据,也不仅仅是数据库和XML等同类型,而是从非结构化或半结构化的复杂数据挖掘正在发生的、同时分析和预测将来会发生的,以寻找、加工和生成有价值的档案文化数据,为更好地服务社会及应对未来的社会需求,扩展档案文化功能奠定基础。
(三)大数据与档案文化传承功能的价值取值一致
档案文化功能的信息价值与大数据的发掘利用价值基本吻合。档案的文化传承功能能够将涵盖信息获取、整理、组织及信息检索、分析、可视化等纯熟的理论、方法及技术应用到大数据之中,达到推动大数据研究和发展的同时,扩展档案文化的传承功能,以保证档案文化功能的信息价值和大数据的发掘利用价值做到双赢。
(四)档案的文化传播功能与大数据有效契合
在档案大数据的实际运用中,我们在界定档案“Variety”范围时,不仅要关注档案大数据中的新型档案,同时还要关注数据档案的生命周期。要从档案信息源头着手,对档案数据实时地进行采集和处理。以确保档案信息的可靠性和完整性。“大数据时代”称之为大容量、大内容的数据集合时代可以说是当之无愧的。大数据的运用,使以往档案研究中的事实数据从获取渠道、数据内容与媒体形态等方面得到极大丰富,做到相互印证、相互补充,切实促进了档案质量和传统档案文化传播功能的共同提升。
(五)大数据催生大分析,产出大价值,促使档案文化功能的大发展
随着人们对大数据价值的深入认识,档案大数据必将成为档案界的核心资产,也就是说,数据不再是单纯获取,而是一种及其重要的基础资源。新的技术手段使以往的“死数据”获得新生,这是大数据时代带来的大分析、大价值的具体体现。正如有学者认为,“大数据之大,不仅仅在于其容量之大,更大的意义在于,通过这些数据的交换、整合和分析,人类可以发现新的知识,创造新的价值。”
(六)档案文化信息安全是档案大数据实现的切实保证
信息安全技术是档案学科的重要研究内容,它的发展状况如何,直接影响着档案大数据的进程。“大数据”必备“大安全”,产出价值愈大,风险亦愈大,所以,我们在档案大数据建设中,要把信息安全技术研究作为首要大事来抓,只有具备过硬的信息安全技术和手段,档案的大数据才能得以有效开展,档案文化信息安全才能得以切实保证,档案文化功能的有效提升和扩展才能得以切实实现。
四、结语
大数据时代的到来,必将引起各系统、各领域的历史性变革。其中我们客观清晰的认识到,大数据的核心目的是在于为用户挖掘数据中蕴含的价值,绝不是软硬件简单的堆砌。它对档案文化功能带来了挑战和机遇,档案文化功能的实现和拓展不是随意的,而是要受社会和经济发展水平、文化、科技以及档案的管理开发利用水平、档案工作者自身素质等诸多因素的约束。档案文化功能的实现必须建立在厚重的社会文化积淀、迫切的社会管理诉求和广泛的社会文化需求之上。因此,针对档案文化功能的大数据模式研究,将是档案学发展的关键。
项目资助:教育部人文社科规划基金项目“信息文明视阈下档案文化范式转型研究”(项目编号:12YJA870015);国家社科基金项目“信息文化视阈下档案价值认知转型研究”(项目编号:13BTQ066)。
[1]任越.文化哲学视阈下档案文化层次问题研究[J].档案学通讯,2016(1):8-12.
[2]席畅.信息文化背景下档案文化功能的转型探究[J].机电兵船档案,2016(4):29-32.
[3]席畅.信息文化对档案文化功能实现的影响[J].兰台世界,2016(5):49-50.
[4]席畅.大数据环境下未来档案馆建设的新构想[J].云南档案,2017(1):55-57.
[5]贺德方.大数据环境下的情报学[J].图书馆学情报学,2013(3).
[6]韩翠峰.大数据带给图书馆的影响与挑战[J].图书与情报,2012(5).
作者单位:黑龙江大学信息管理学院