首页  ·  知识 ·  大数据
大数据的安全理解及应对策略研究
胡坤 刘镝 刘明辉  E-Works  实践应用  编辑:dezai   图片来源:网络
本文梳理了互联网、电信、金融、医疗、政府组织五大行业的大数据安全需求,分析出大数据环境下的6个安全特征和问题,即移动数据安全、易攻击目标、用户隐私保护难题、安全存储问题、数据安全进

大数据的产生使数据分析与应用更加复杂,难以管理。据统计,过去3年里全球产生的数据量比以往400年的数据加起来还多,这些数据包括文档、图片、视频、Web页面、电子邮件、微博等不同类型,其中,只有20%是结构化数据,80%则是非结构化数据。数据的增多使数据安全和隐私保护问题日渐突出,各类安全事件给企业和用户敲醒了警钟。在整个数据生命周期里,企业需要遵守更严格的安全标准和保密规定,对数据存储与使用的安全性和隐私性要求越来越高,传统数据保护方法常常无法满足新变化网络和数字化生活也使黑客更容易获得他人信息,有了更多不易被追踪和防范的犯罪手段,而现有的法律法规和技术手段却难于解决此类问题。因此,在大数据环境下数据安全和隐私保护是一个重大挑战。

  但是也应该看到,在大数据时代,业务数据和安全需求相结合能够有效提高企业的安全防护水平。通过对业务数据的大量搜集、过滤与整合,经过细致的业务分析和关联规则挖掘,企业能够感知自身的网络安全态势,预测业务数据走向。了解业务运营安全情况,这对企业来说具有革命性的意义。目前,在一些运营商的业务部门已经开始使用安全基线和大数据分析技术,及时检测与发现网络中的各种异常行为和安全威胁,从而采取相应的安全措施。据Gartner公司预测,2016年40%的企业(以银行、保险、医药、电信、金融和国防等行业为主)将积极地对至少10TB数据进行分析,以找出潜在的安全危险。

  随着对大数据的广泛关注.有关大数据安全的研究和实践也已逐步展开,包括科研机构、政府组织、企事业单位、安全厂商等在内的各方力量,正在积极推动与大数据安全相关的标准制定和产品研发,为大数据的大规模应用奠定更加安全和坚实的基础。

  2.不同领域的大数据安全需求

  在理解大数据安全内涵、制定相应策略之前,有必要对各领域大数据的安全需求进行全面了解和掌握,以分析大数据环境下的安全特征与问题。

  (1)互联网行业

  互联网企业在应用大数据时,常会涉及数据安全和用户隐私问题。随着电子商务、手机上网行为的发展,互联网企业受到攻击的情况比以前更为隐蔽。攻击的目的并不仅是让服务器宕机,更多是以渗透APT的攻击方式进行。因此,防止数据被损坏、篡改、泄露或窃取的任务十分艰巨。同时,由于用户隐私和商业机密涉及的技术领域繁多、机理复杂。很难有专家可以贯通法理与专业技术,界定出由于个人隐私和商业机密的传播而产生的损失,也很难界定侵权主体是出于个人目的还是企业行为。因此,互联网企业的大数据安全需求是:可靠的数据存储。安全的挖掘分析,严格的运营监管,呼唤针对用户隐私的安全保护标准、法律法规、行业规范,期待从海量数据中合理发现和发掘商业机会和商业价值。

  (2)电信行业

  大量数据的产生、存储和分析,使得运营商在数据对外应用和开放过程中面临着数据保密、用户隐私、商业合作等一系列问题。运营商需要利用企业平台、系统和工具实现数据的科学建模,确定或归类这些数据的价值。由于数据通常散乱在众多系统中,信息来源十分庞杂,因此运营商需要进行有效的数据收集与分析,保障数据的完整性和安全性。在对外合作时,运营商需要能够准确地将外部业务需求转换成实际的数据需求,建立完善的数据对外开放访问机制。在此过程中,如何有效保护用户隐私,防止企业核心数据泄露,成为运营商对外开展大数据应用需要考虑的重要问题。因此,电信运营商的大数据安全需求是:确保核心数据与资源的保密性、完整性和可用性。在保障用户利益、体验和隐私的基础上充分发挥数据价值。

  (3)金融行业

  金融行业的系统具有相互牵连、使用对象多样化、安全风险多方位、信息可靠性、保密性要求高等特征。而且金融业对网络的安全性、稳定性要求更高.系统要能够高速处理数据,提供冗余备份和容错功能,具备较好的管理能力和灵活性,以应对复杂的应用。虽然金融行业一直在数据安全方面追加投资和技术研发,但是由于金融领域业务链条的拉长、云计算模式的普及、自身系统复杂度的提升以及对数据的不当利用.都增加了金融业大数据的安全风险。因此,金融行业的大数据安全需求是:对数据访问控制、处理算法、网络安全、数据管理和应用等方面提出安全要求,期望利用大数据安全技术加强金融机构的内部控制,提高金融监管和服务水平,防范和化解金融风险。

  (4)医疗行业

  随着医疗数据的几何倍数增长,数据存储压力也越来越大。数据存储是否安全可靠,已经关乎医院业务的连续性。因为系统一旦出现故障,首先考验的就是数据的存储、灾备和恢复能力。如果数据不能迅速恢复,而且恢复不到断点,则对医院的业务、患者满意度构成直接损害。同时,医疗数据具有极强的隐私性,大多数医疗数据拥有者不愿意将数据直接提供给其他单位或个人进行研究利用,而数据处理技术和手段的有限性也造成了宝贵数据资源的浪费。因此,医疗行业对大数据安全的需求是:数据隐私性高于安全性和机密性,同时需要安全和可靠的数据存储、完善的数据备份和管理,以帮助医生与病人进行疾病诊断、药物开发、管理决策、完善医院服务,提高病人满意度,降低病人流失率。

  (5)政府组织

  大数据分析在安全上的潜能已经被各国政府组织发现,它的作用在于能够帮助国家构建更加安全的网络环境。例如,美国进口安全申报委员会不久前宣布,通过6个关键性的调查结果证明,大数据分析不仅具备强大的数据分析能力,而且能确保数据的安全性。美国国防部已经在积极部署大数据行动,利用海量数据挖掘高价值情报,提高快速响应能力,实现决策自动化。而美国中央情报局通过利用大数据技术,提高从大型复杂的数字数据集中提取知识和观点的能力,加强国家安全。因此,政府组织对大数据安全的需求是:隐私保护的安全监管、网络环境的安全感知、大数据安全标准的制定、安全管理机制的规范等内容。

  3.大数据环境安全

  通过上述分析可知,各领域的安全需求正在发生改变,从数据采集、数据整合、数据提炼、数据挖掘、安全分析、安全态势判断、安全检测到发现威胁,已经形成一个新的完整链条。在这一链条中,数据可能会丢失、泄露、被越权访问、被篡改,甚至涉及用户隐私和企业机密等内容。通常,大数据安全具有以下6个方面的特征和问题。

  (1)移动数据安全面临高压力

  社交媒体电子商务、物联网等新应用的兴起。打破了企业原有价值链的围墙,仅对原有价值链各个环节的数据进行分析,已经不能满足需求。需要借助大数据战略打破数据边界,使企业了解更全面的运营及运营环境的全景图。但是,这显然会对企业的移动数据安全防范能力提出更高的要求。此外。数据价值的提升会造成更多敏感性分析数据在移动设备间传递,一些恶意软件甚至具备一定的数据上传和监控功能,能够追踪到用户位置、窃取数据或机密信息,严重威胁个人的信息安全,使安全事故等级升高。在移动设备与移动平台威胁飞速增长的情况下,如何跟踪移动恶意软件样本及其始作蛹者.分析样本相互间关系,成为移动大数据安全需要解决的问题。

  (2)网络化社会使大数据易成为攻击目标

  在网络空间里,大数据是更容易被发现的大目标。一方面,网络访问便捷化和数据流的形成,为实现资源的快速弹性推送和个性化服务提供基础。正因为平台的暴露,使得蕴含着潜在价值的大数据更容易吸引黑客的攻击。另一方面,在开放的网络化社会,大数据的数据量大且相互关联,使得黑客成功攻击一次就能获得更多数据,无形中降低了黑客的进攻成本。增加了收益率。例如,黑客能够利用大数据发起僵尸网络攻击,同时控制上百万台傀儡机并发起攻击,或者利用大数据技术最大限度地收集更多有用信息。

  (3)用户隐私保护成为难题

  大数据的汇集不可避免地加大了用户隐私数据信息泄露的风险。由于数据中包含大量的用户信息,使得对大数据的开发利用很容易侵犯公民的隐私,恶意利用公民隐私的技术门槛大大降低。在大数据应用环境下,数据呈现动态特征,面对数据库中属性和表现形式不断随机变化,基于静态数据集的传统数据隐私保护技术面临挑战。各领域对于用户隐私保护有多方面要求和特点擞据之间存在复杂的关联和敏感性,而大部分现有隐私保护模型和算法都是仅针对传统的关系型数据,不能直接将其移植到大数据应用中。

  (4)海量数据的安全存储问题

  随着结构化数据和非结构化数据量的持续增长以及分析数据来源的多样化。以往的存储系统已经无法满足大数据应用的需要。对于占数据总量80%以上的非结构化数据,通常采用NoSQL存储技术完成对大数据的抓取、管理和处理。虽然NoSQL数据存储易扩展、高可用、性能好,但是仍存在一些问题。例如,访问控制和隐私管理模式问题、技术漏洞和成熟度问题、授权与验证的安全问题、数据管理与保密问题等。而结构化数据的安全防护也存在漏洞,例如物理故障、人为误操作、软件问题、病毒、木马和黑客攻击等因素都可能严重威胁数据的安全性。大数据所带来的存储容量问题、延迟、并发访问、安全问题、成本问题等,对大数据的存储系统架构和安全防护提出挑战。

  (5)大数据生命周期变化促使数据安全进化

  传统数据安全往往是围绕数据生命周期部署的,即数据的产生、存储、使用和销毁。随着大数据应用越来越多,数据的拥有者和管理者相分离,原来的数据生命周期逐渐转变成数据的产生、传输、存储和使用。由于大数据的规模没有上限,且许多数据的生命周期极为短暂,因此,传统安全产品要想继续发挥作用,则需要及时解决大数据存储和处理的动态化、并行化特征,动态跟踪数据边界,管理对数据的操作行为。

  (6)大数据的信任安全问题

  大数据的最大障碍不是在多大程度上取得成功,而是让人们真正相信大数据、信任大数据,这包括对别人数据的信任和自我数据被正确使用的信任。例如,近年来工资“被增长”、CPI“被下降”、房价“被降低”、失业率“被减少”,因百姓的切身感受与统计数据之间的差异以及国家和地方之间GDP数据严重不符。都导致了市场对统计数据的质疑。同时,大数据的信任安全问题也不仅是指要相信大数据本身,还包括要相信可以通过数据获得的成果。但是,要让人们相信和信任通过大数据模型获得的洞察信息却并不容易,而证明大数据本身的价值比成功完成一个项目要更加困难。因此,构建对大数据的安全信任至关重要,这需要政府机构、企事业单位、个人等多方面共同建设和维护好大数据可信任的安全环境。

  4.大数据安全内涵

  基于以上大数据环境的安全分析,作者认为大数据安全应该包括两个层面的含义,如图1所示。

  (1)保障大数据安全,即大数据自身的安全问题

  大数据安全不同于关系型数据安全,大数据无论是在数据体量、结构类型、处理速度、价值密度方面,还是在数据存储、查询模式、分析应用上都与关系型数据有着显著差异。大数据意味着数据及其承载系统的分布式,单个数据和系统的价值相对降低,空间和时间的大跨度、价值的稀疏,使得外部人员寻找价值攻击点更不容易。但是,在大数据环境下完全的去中心化很难。只要存在中心就可能成为被攻击的穴道,而对于低密度价值的提炼过程也是吸引攻击的内容。针对这些问题,传统安全产品所使用的监视、分析日志文件、发现数据和评估漏洞的技术在大数据环境中并不能有效运行。很多传统安全技术方案中,数据的大小会影响到安全控制或配套操作能否正确运行。多数安全产品不能进行调整,无法满足大数据领域,也不能完全理解其面对的信息。而且,在大数据时代会有越来越多的数据开放,交叉使用,在这个过程中如何保护用户隐私是最需要考虑的问题。图2说明了保障大数据安全的相关要点。

 

 为解决大数据自身的安全问题,需要重新设计和构建大数据安全架构和开放数据服务,从网络安全、数据安全、灾难备份、安全风险管理、安全运营管理、安全事件管理、安全治理等各个角度考虑,部署整体的安全解决方案.保障大数据计算过程、数据形态、应用价值的安全。

 (2)大数据用于安全,即用大数据解决安全问题

  大数据在面临自身安全问题的同时,也给信息安全发展带来了新的机遇。2013年1月,RSA/EMC信息安全事业部发布的安全简报断言,大数据将会是整个安全行业发生重大转变的驱动因素,并将推动智能驱动的信息安全模型。预计到2015年,大数据分析将有可能给信息安全领域包括SIEM(信息安全事件管理)、网络监控、用户身份认证和授权、身份管理、欺诈检测以及治理、风险及合规系统在内的大多数产品类别带来足以改变市场的变化。

  大数据为安全分析提供新的可能性,对于海量数据的分析有助于更好地刻画网络异常行为,从而找出数据中的风险点,制定更好的预防攻击、防止信息泄露的策略。例如网络攻击行为总会留下蛛丝马迹。这些痕迹都以数据的形式隐藏在大数据中,利用大数据技术整合计算和处理资源有助于更有针对性地应对信息安全威胁,有助于找到攻击的源头。在此过程中,需要注意两个问题:一是大数据可能成为高级可持续攻击的载体:二是大数据分析技术也容易被黑客利用到攻击中去。需要明确大数据安全保障对象,加强对敏感和要害数据的监管,加快面向大数据的信息安全技术的研究,建立并完善大数据信息安全体系。

  大数据也为企业提供一个更宽广的新视角,帮助它们更加前瞻性地发现安全威胁,利用大数据技术可以提升企业数据防护系统的安全效能、安全能力和安全效果。可以这样讲,大数据给信息安全带来的最大改变是通过自动化分析处理与深度挖掘,将之前很多时候亡羊补牢式的事中、事后处理,转向事前自动评估预测、应急处理,让安全防护主动起来。

  目前,大数据在信息安全领域的应用包括两个方面:宏观上的网络安全态势感知和微观上的安全威胁发现圈。前者是指运用大数据技术特有的海量存储、并行计算、高效查询等特点,解决大规模网络安全事件数据的有效获取,海量安全事件数据的实时关联分析,客观、可理解的网络安全指标体系建立等问题,从中发现主机和网络异常行为,起到全局安全预警的作用。后者是指从大数据中发现微观事件,特别是APT攻击发现。通过全面收集重要终端服务器上的日志信息以及采集网络设备上的原始流量,利用大数据技术进行分析和挖掘,检测并还原整个APT攻击场景,能够起到动态预防的安全作用,如图3所示。

 

 5.应对策略

  在大数据产业链的各个环节,安全问题无处不在,面对这一系列的安全风险和关键问题,如何保障大数据安全,并在信息安全领域有效利用,是企业需要认真解决的问题。只有大数据技术和大数据安全“两条腿”并行走路.大数据才可以真正成为企业的驱动力。根据传统信息安全成功经验及最新安全技术发展结果,作者认为可以从以下几方面开展大数据安全工作。

  (1)构建大数据环境下的数据信息安全体系

  数据信息安全是指数据信息的硬件、软件及数据受到保护,不因偶然的或者恶意的原因而遭到破坏、更改、泄露,系统连续可靠正常地运行。信息服务不中断。通常数据信息安全强调CIA三元组的目标,即保密性、完整性和可用性,另外还有一些其他目标,包括可追溯性、抗抵赖性、真实性、可控性等。只有在正确完整的安全体系指导下,大数据信息安全建设所需的技术、产品、人员和操作等材料才能真正发挥各自的效力。设计大数据信息安全体系的目的在于:从管理和技术上保证数据安全策略得以完整准确的实现,全面准确地满足大数据安全需求。从具体内容上来看,该安全体系应该包含实现大数据环境下的信息安全所必需的功能或服务、安全机制和技术、管理和操作以及这些因素在整个体系中的合理部署和相互关系。所以,该安全体系应该是多层次多方面的.必须能够完整描述大数据环境下的数据信息安全建设所要实现的最终形态。

  大数据信息安全体系可以通过多种途径表示,例如非常具体的框架或者比较抽象的模型。无论表现形式如何,大数据信息安全体系都应该结合防护、检测、响应和恢复这几个关键环节在一起的动态发展的完整体系,能够为大数据安全的解决方案和工程实施提供参考和依据,帮助企业规范化、标准化大数据的安全防控内容和防护框架。

  (2)研究保障大数据安全的关键技术

  大数据安全保障技术可以从物理安全、系统安全、网络安全、存储安全、访问安全、审计安全、运营安全等角度进行考虑,围绕大数据全生命周期。即数据产生、采集、传输、存储、处理、分析、发布、展示和应用、产生新数据等阶段进行安全防护。其目标在于:最大程度地保护具有流动性和开放性特征的大数据自身安全。防止数据泄露、越权访问、数据篡改、数据丢失、密钥泄露、侵犯用户隐私等问题的出现。因此,大数据安全保障技术需要设计和构建更多的技术标准、安全规范、工具产品、安全服务等形式来保护大数据的安全。

  (3)研究应用大数据安全的关键技术

  通过了解大数据安全内涵和技术特点,可以在信息安全领域利用大数据分析技术。得到相关的安全预警和防护建议。例如,在大数据采集的基础上,企业可以从原始数据中进行二次提取,建立基础指标、应用层指标等多种类型指标,然后基于指标之间的关联分析、每个指标的变化状况,通过大数据分析帮助企业建立信誉评估机制,感知信息安全态势。

  (4)加强大数据管理,做好安全评估,提高安全意识

  通过技术保护大数据的安全必然重要,但安全管理制度也很关键。要从海量数据中提取价值,提高企业生产效率,就必须使用科学的大数据管理方法,降低各种安全隐患。具体来说,可以从以下几个方面进行安全管理。

  ·规范大数据建设。规范化建设可以促进大数据管理过程的正规有序,实现各级各类信息系统的网络互连、数据集成、资源共享,在统一的安全规范框架下运行。

  ·完善大数据资产管理。大数据资产管理要能够清楚地定义数据元素,包括数据格式、别名、统计表以及其他特性标识符等:描述数据元素定义的信息来源及其相关数据元素的信息;记录使用信息,包括数据元素的产生及修改信息、安全及访问控制信息、访问历史记录。

  ·建立以数据为中心的安全系统。为了确保数据中心系统的安全,防护系统主要通过防火墙、入侵检测系统、安全审计、抵抗拒绝服务攻击、流量整形和控制、网络防病毒系统来实现全面的安全防护。同时,通过使用加密、识别管理并结合其他主动安全管理技术,贯穿于数据从使用到迁移、停用的全部过程。

  ·做好大数据安全风险评估。不同类型的数据形式以及数据的不同状态,都有其不同的泄密风险层级。针对大数据的固有特点。可以将其分为不同的安全风险等级。从而加强安全防范,并在实际生产中明确安全风险治理目标,降低企业数据泄露风险,分析并消除信息安全盲点。

  ·提高企业员工安全意识。需要提升员工对大数据安全威胁的识别能力,了解正在使用的数据的价值。充分认识到自己在企业数据安全中的重要角色。企业也需要对员工进行安全培训,让员工对彼此在安全防护中的职责和战略有所了解,并结合周期性的安全攻击演习,以检验培训的成果。

  6.结束语

  本文梳理了互联网、电信、金融、医疗、政府组织五大行业的大数据安全需求,分析出大数据环境下的6个安全特征和问题,即移动数据安全、易攻击目标、用户隐私保护难题、安全存储问题、数据安全进化、信任安全问题等。随后,文中提炼出大数据的安全内涵。即保障大数据安全和应用大数据技术,并给出了相关的应对策略。

本文作者:胡坤 刘镝 刘明辉 来源:E-Works
CIO之家 www.ciozj.com 微信公众号:imciow
    >>频道首页  >>网站首页   纠错  >>投诉
版权声明:CIO之家尊重行业规范,每篇文章都注明有明确的作者和来源;CIO之家的原创文章,请转载时务必注明文章作者和来源;
延伸阅读
也许感兴趣的
我们推荐的
主题最新
看看其它的