移动数据时如何避免停机和中断

news/2024/11/29 9:37:20/

如今,越来越多的组织需要在数据中心和云端之间移动数据,但在移动数据期间面临停机的风险是一个难题。

据调研机构451 Research最新的预计,截至明年,约有60%的企业IT工作负载将在某种形式的公共云或私有云上运行。它在企业关键业务(包括数据分析和核心业务应用)方面实现了特别强劲的增长。而其他调研机构IDC,Gartner和Forrester的调查结果大致相同,即云计算迅速成为核心,而不是一般IT提供的外围设备。

那么,IT领导者对数据移动的风险以及相关的停机时间表示担忧,这并不足以为奇。现在,传统的数据集现在是10到20年前企业数据库平均大小的1000到100万倍。这意味着与移动相关联的潜在停机时间将会增加许多倍。这不再是只花费15分钟的时间,这可能是数据正在重新安置的几个小时的停机时间。

企业知道他们需要更多地利用云计算,特别是实施更具战略性和智能的事情:高速,高容量的数据压缩,以支持实时决策和复杂的自动化。如今产生的数据量也使得建设二级数据中心成本过高,而这是进一步推动企业走向云计算的因素。

但是将业务数据从数据中心迁移到云端的痛苦仍然让人望而却步。他们的数据在运输过程中可能会发生什么,如果他们无法再获得访问权限,或者如果在其他地方被使用,他们如何继续使用实时数据?

数据延迟也是一个问题。数据中心过去建在靠近企业经营的地方,以防止与网络传输相关的性能下降。但是,随着云计算的应用,数据中心之间的距离不在企业的控制之内,因此性能问题可能会减缓数据可用性和和协调性,这是一个重要的考虑因素。

关于停机的担忧也在灾难恢复方案中有效。例如,由于远程数据中心可能被要求实时系统备份并快速运行,因此首席信息官们会因为近距离和远程系统之间的不兼容而导致停机或数据丢失而担忧。例如,IBM公司将在网络研讨会上讨论这个问题。

未来将是现在

无论是日常的后台系统,还是那些支持与人工智能或物联网有关的雄心勃勃的新项目,组织都需要随时需要正在处理的数据的可用性和完整性。

例如,对于无人驾驶汽车而言,所有各方(乘客,汽车制造商,保险公司和第三方服务提供商)都需要绝对的保证车辆仪表和传感器,以及与之相连的云计算平台将能够持续实时发送,接收,解释和处理数据。据估计,具有传感器,相机和激光测量(LiDAR测量)的一台自主驾驶车辆每秒可产生100Gb的数据。

使用不断变化的数据集提供可行服务的唯一方法,无停机时间和无中断,这是人们称之为活动数据复制的方式。这允许实时数据同时存在于多个位置,而不会在每个终点被更新时不同步而有中断的风险。这种能力将允许汽车制造商和服务合作伙伴分析和回应关于车辆运行情况的现场数据,实时识别异常情况,以及事先确定哪些必要的补救措施。

许多组织正在转向采用基于Hadoop的分析(一种以速度进行大规模数据处理的特定方式),将大数据转化为可以在日常活动中使用的有意义和可操作的事情。很多企业使用Hadoop来分析和回应Twitter的活动。但是,这通常意味着将数据放入云计算中,其中所需的处理能力随时可用。

除非他们正在处理历史数据,否则企业将继续需要访问其核心业务系统中的数据,其中记录将继续更新。在这种情况下,使用云计算进行处理并不是简单的将批量装载的完整数据发送到目的地,这是巧妙发生的事情。

暂停不是一个选项

当对实时的生产数据进行分析时,企业无法承受数据来源的站点和数据处理点不同步。他们在任何新的事情发生之前,不能等待几天才能移动,分析和返回数据。这不仅仅是停机,而且是系统瘫痪。而且,这并不影响在迁移过程中可能发生的任何损坏或Hadoop分析事件后数据被协调的结果。

同样,避免与数据移动相关的停机和中断的唯一方法是找到一种在位置之间持续更新和同步数据的方法。谷歌公司通过精心制作的卫星设置实现了这一点,而企业也可以使用文中介绍的这样的巧妙算法来实施。 


本文作者:佚名

来源:51CTO


http://www.ppmy.cn/news/768729.html

相关文章

mysql如何不停机迁移_如何实现真正的不停机数据迁移?

各位周三好。 明天是大年三十了,西瓜哥也要过年了。今年是最后一天探讨存储技术。正愁不知道和大家分享啥,收到一个网友的投稿,简述如何实现不停机迁移数据的一个比较好的方法,决定选登出来,供大家参考。 --------------------------------------- 解读存储虚拟化引擎发展…

【雕爷学编程】Arduino动手做(136)---0.91寸OLED液晶屏模块5

37款传感器与执行器的提法,在网络上广泛流传,其实Arduino能够兼容的传感器模块肯定是不止这37种的。鉴于本人手头积累了一些传感器和执行器模块,依照实践出真知(一定要动手做)的理念,以学习和交流为目的&am…

Oracle备份和恢复

备份 备份其实就是为了防止出错或者宕机时,作为冗余的一种手段。 一、Oracle备份从备份类型上分可以分为两类:物理备份和逻辑备份 1、 物理备份:copy,将datafile、control file等文件copy到别的地方 Oracle也提供了一些工具比如…

如何备份ORACLE数据库

公司的用户名和密码是ANYOA/ANYOA。 我想把项目的数据库导出,然后导入到自己的计算机中。如何做? 要求:1 导出公司目前开发的一个项目的数据库,并导入到自己电脑的ORACLE中2 如何在自己的ORACLE中新建一个帐户,要求权…

Oracle备份(DMP)

前沿 Oracle 数据库需要做定时备份,所以先导出dmp的备份文件,仅供参考。 创建备份目录: mkdir -p /home/oracle/bak_dir 进入Oracle sqlplus / as sysdba 查询 pbd select pdb_id,pdb_name,dbid,status,creation_scn from dba_pdbs; 切…

oracle查询备份记录,oracle 备份记录

cntrl_32_1_846932923 本机恢复步骤 1、做一次完整全备,确认备份成功。 2、手工删除一部分数据(运用在测试机上)。 3、查看数据控制文件 #su - oracle #rman target / #list backup of controlfile; 最后一个控制文件备份集cntrl_1822_1_783069678,此文件…

linux命令及oracle备份

1.linux下查看占用空间 df -h 2.gzip 压缩文件 gzip xx.dmp xx.dmp.gz 3.解压缩 gzip -d xx.dmp.gz 4.查看tomcat进程 ps -ef |grep tomcat 5.杀死进程 kill -9 pid 6.导出数据 exp nciclccd_e/nciclccd_eLCC buffer9999999 file/opt/oracle/backup/exp/trans/201007091400…

ORACLE数据库备份方法

ORACLE 数据库有两类备份方法。第一类为物理备份,该方法实现 数据库的完整恢复,但 数据库必须运行在归挡模式下(业务 数据库在非归挡模式下运行),且需要极大的外部存储设备,例如磁带库;第二类备…