当前位置: 首页 > 科技观察

大数据和云计算都绕不开数据保护的坎

时间:2023-03-14 09:29:56 科技观察

【.com原稿】大数据时代,数据逐渐成为企业的核心资产和竞争力。每一个新项目都会产生大量的新数据,让人很容易忘记二手数据的内在价值。随着云的兴起,企业加快了数据上云的步伐。云天然的分布式架构具有一定的容错性,人们往往忽略了数据保护的重要作用。二级数据保护在大数据领域的新应用通常我们将生产数据和原始数据以外的数据,包括副本数据、备份数据、容灾数据等,统称为二级数据。过去,二手数据只有一个用途,就是在灾难发生后恢复二手数据以供生产使用。如今,随着大数据技术的发展,二手数据的应用领域不断扩大,一手数据与二手数据的界限日趋模糊。近年来,容灾领域的发展呈现出两大特点:一是为了提高二次数据的访问速度,提高利用效率,数据备份和容灾的介质从磁带转移到磁盘;第二,传统的封闭接口必须开放,使用开放的接口让前端应用软件可以方便地访问和调用二次数据。Commvault大中华区技术总监蔡宝勇在接受记者采访时表示:“对于传统的数据保护和备份厂商来说,如何盘活二级数据,开放二级数据存储,利用开放的接口,让前端的分析软件可以方便访问,从而可以用于开发、测试等各种数据应用场景,这是当前备份厂商面临的一大挑战。”很多企业在做大数据分析的时候,普遍的做法是从各个生产系统开始,把数据抓到电脑里,然后放到大数据平台上,经过存储和分析,做出决策,进而指导生产和生产。销售量。蔡保勇认为,“如果企业的数据管理做得好,二级数据存储的数据丰富、完整,那么只需要将二级数据的接口开放到大数据分析平台,数据可以很好的管理。在保护的同时,盘活你的二手数据,同时节省一定的存储成本。”2017年下半年,Commvault推出HyperScale存储技术,可为客户提供简单、弹性、恢复、弹性和可扩展的永久本地二级数据管理。企业将二级数据直接放在HyperScale存储上,具有备份时写入速度快的优势,并且可以为前端分析和搜索软件提供API接口,从而提供与主存储相同的访问性能,帮助企业驱动关键业务和IT转型。以前我们在测试的时候如果要调用备份的数据,就得把备份的数据恢复到另外一个平台上,非常耗时。如果是在HyperScale上,可以直接通过API标准访问,供测试环境使用,瞬间完成访问。蔡宝勇认为,这是二级数据保护和使用的重大变革,从传统的仅用于容灾恢复,到现在面向大数据分析平台的测试开发和外出开放。-无需暂存的开箱即用方式,让企业更方便地在完整的数据平台上进行数据处理和数据挖掘。Commvault大中华区技术总监蔡宝勇认为,Hadoop天生的容错性并不是绝对安全的。云和Hadoop都是分布式架构。他们的多副本模型具有一定的硬件容错能力,但是企业数据是存储在云端的。在Hadoop上或在Hadoop上都不是绝对安全的。蔡宝勇提到,一些金融企业在使用Hadoop平台时,也存在数据丢失的情况。2017年,全球最大的云服务提供商AWS的云存储服务也出现了宕机事件。从这里可以看出,很多副本互相复制,任何一个副本坏了,所有的副本都会坏掉。它不像数据管理软件,可以保证一定时间点的数据会保存一份。从云计算的发展趋势可以看出,过去云服务商最大的卖点是计算资源和存储资源,而现在,很多云服务商已经开始利用云服务基础设施为用户提供数据保护。用户。统计显示,在AWS、Azure等主流云存储资源中,有30%到40%的数据是客户备份数据,而这些主流云服务商并没有承诺任何备份服务,这也提醒企业上云也需要考虑数据保护和备份。蔡宝勇提醒,云上的数据并没有那么安全,甚至比本地还差,因为本地只需要一份,数据出现故障还可以迁移。如果完全依赖云服务商,就没有数据可以恢复。因此,虽然你使用了云服务,但你仍然需要单独的数据管理和数据保护服务。在采访中,蔡宝勇举了两个云上更好的容灾和备份的例子。第一个例子是一家大型跨国零售公司,它在全球拥有多个数据中心。这家公司已经开始将部分应用构建在云上,同时保护云上的数据。比如生产系统在本地,云端上传备份数据,云端的数据会不间断的恢复到云主机上,作为容灾平台。当本地数据中心出现问题时,可以直接在云平台开启虚拟机叠加数据,无需自建数据容灾中心即可激活业务。据介绍,该客户选择了微软的Azure平台。Commvault与微软的云平台有着天然的集成功能。它不仅可以将数据迁移到Azure平台,还可以在Azure平台上自动开启云主机服务来恢复数据,为客户实现容灾自动化。第二个例子采用异地备份的形式,将本地数据中心备份的数据快速转移到异地,快速恢复到虚拟化环境中。使用虚拟机备份数据也可以在发生灾难恢复时轻松移除。对接原创制作业务。据介绍,在云存储层面,Commvault已对接AWS、Azure、中国移动云、阿里云、华为云等45家云存储厂商;在云主机方面,Commvault目前支持AWS、Azure、GoogleCloud、OracleCloud,以及所有基于OpenStack架构的相关公有云。【原创稿件,合作网站转载请注明原作者和出处为.com】