数据时代的到来,使数据成为一种重要的战略资源。如何更好地利用这些数据,成为摆在政府、学者和工程师等人面前的一大难题。随着大数据和物联网的发展进步,数据量呈爆发式增长,随之而来的关于数据存储、计算和分析的问题急需解决。因此,主要对Spark Streaming和Flink两个流式计算模型进行对比研究,从原理、实现机制和使用场景等角度进行多维度对比分析,以期使用者能结合自己的业务场景,更好地选择适合的流式计算框架。
作者:蓝色海岸 期刊:《新一代信息技术》 2006年第08期
前几日,在单位上网,突然一位QQ好友要传一部短片给我看。可用QQ传了一半,下班时间到了,单位机器不让“一夜无眠”,心里又急着看这部短片。经过一番摸索,笔者找到了解决方法——用QQ异地断点续传。在QQ的文件传输栏中停止文件的传送,然后打开资源管理器,进入QQ程序文件夹的“QQFileCache”子文件夹,我们利用QQ进行文件传送过程中的所有缓存数据全部保存于此。如果该文件夹中有多个文件,请注意区别,找出与刚才已传输数据...
作者:PeterLiu 期刊:《信息通信技术与政策》 2013年第08期
"大数据"最近被誉为新的"金矿",对于很多行业而言,如何利用这些大规模数据正成为赢得竞争的关键。基于数量、数据量、多样性等原因,在所有行业中,电信运营商拥有明显的优势,而且能从这一演变中获得最大收益。爱立信(中国)通信有限公司PeterLiu所撰《电信行业中的大数据》一文首先对大数据和电信网络中的大数据进行了分析和介绍,并对电信数据的货币化及大数据中的软件技术进行了研究和探讨。大数据为电信运营商提供了一个更加...
作者:李佳璐; 王昕 期刊:《财富生活》 2012年第11期
自人类有史以来至今我们所产生的信息量为5艾字节(50亿GB).而过去3年产生的数据量比以往4万年的数据置还要多。
作者: 期刊:《网络安全和信息化》 2016年第02期
近年来,网络数据量呈爆炸式增长,然而这些数据很快就会由“热”变“冷”。以Facebook为例,其数据产生24小时内访问的频率非常高,而此后访问频率就越来越低,逐渐变为冷数据。Facebook自身的敞据中心有89%的数据都是冷数据。相关专家表示,这些冷数据同样重要,许多大数据分析都要基于冷数据来进行,而且许多数据要求保存的时间非常长。
作者: 期刊:《网络安全和信息化》 2013年第10期
截至2013年,数字数据量预计将达到四泽字节(zettabytes),比2012年高50%以上,是2010年的近四倍。因此,行之有效的企业级信息优化战略变得空前重要。由于预计2015年产生的数字内容中有90%将是非结构化数据,如短信和微博生成的信息,以及视频和音频,情况将变得越来越复杂。无论您身处哪个行业,围绕大数据及管理这些信息的挑战都无处不在。毫无准备的企业可能会在应对现有原始信息的数量、种类和速度时手足无措。
作者:孙浩峰 期刊:《网络安全和信息化》 2009年第11期
随着信息数字化的加速发展和数据量的爆炸性增长,用户的需求也正以前所未有的速度提升:如何应对急剧增长的数据量?如何保护我们的虚拟服务器及远程分支机构?怎样才能在需要时找到相应的数据?数据的可访问性要如何保护?数据中心是一个完整的体系.这些问题不仅仅是一台设备或一个软件就可以克服的。
作者: 期刊:《网络安全和信息化》 2013年第19期
众所周知我们处在一个数据爆炸的时代,越来越多的信息被制造出来,数据量大而且种类复杂。据统计,未来几年,智慧城市、智能交通、智慧医疗以及物联网所产生的数据也会铺天盖地而来。这么多的数据中蕴含着非常多的有价值信息,但是我们如何将这些信息提取出来呢?
作者:曹江华 期刊:《网络安全和信息化》 2013年第15期
数据量越来越大,磁盘数量也越来越多,只有有效的对磁盘进行管理,才能提高磁盘的利用率。本文介绍使用图形工具Palimpsest管理Linux磁盘!
作者: 期刊:《网络安全和信息化》 2015年第07期
随着企业IT架构的不断扩展,服务器、存储设备的数量越来越多,网络也变得更加复杂,对爆炸式增长的数据量、种类、速度和复杂性的处理正全面考验着IT管理系统的数据处理和分析能力。
作者:潘顺军 期刊:《网络安全和信息化》 2010年第11期
数据集中后,所有银行业务和网点都需要借助网络对数据中心中的主机进行访问,且银行数据中心涉及银行、众多储户的资金信息,数据重要、敏感,数据量庞大,必须要保证系统具备极低的响应时间、较高的服务成功率,这就要求能够快速访问数据,并保证数据的安全性。
作者:李洋 期刊:《网络安全和信息化》 2011年第14期
随着虚拟化、云计算等技术的冲击,以及企业需要管理的数据量的不断增大,企业数据存储及管理所采用的技术及其理念也在不断地调整和变革中。那么,如何在把握现有技术的前提下,来应对新的挑战呢?本专题将从概括、分析现状出发,给出企业当前数据存储及管理的建议,并分析出企业如何在云计算时代把握好数据存储及管理等问题。
作者:王剑 期刊:《网络安全和信息化》 2005年第07期
目前,我所在企业的数据备份系统仍然采用最基本、最原始的手动COPY备份方式,没有考虑性能、自动化程度、对现有系统应用的影响程度以及管理、可扩展性等方面的因素。这种备份方式只适用于数据量很小的非关键应用领域。随着数据量的增大,系统管理人员很难管理备份介质。同时,当对同一个数据库的容量超过一盘磁带的容量时,手动备份工作就变成了一个极其复杂,效率极低、风险很大的工作了。从以上分析,采用高效的集中式备份管理...
作者: 期刊:《网络安全和信息化》 2014年第17期
面对海量的数据及其各种不同的需求,传统的解决方案日益面临越来越多的问题,比如数据量的指数级增长对不断扩容的存储空间提出要求,实时分析海量的数据对存储计算能力提出要求。一方面传统的存储解决方案正在改变,比如多级存储来不断适应大数据存储管理系统的特点和要求,另一方面全新的存储解决方案正日渐成熟,来有效满足大数据发展需求。
作者: 期刊:《网络安全和信息化》 2014年第17期
随着互联网、云计算、移动终端和物联网的迅猛发展,全球数据量每两年翻倍的速度增长,在2010年已经正式进入ZB时代,到2020年全球数据总量将达到44ZB。除了数据量增长,企业同样面临设备数量、应用数量、交易量等方面成倍增长的局面,未来企业所面对的挑战仍具有很多的不确定性,大数据、云计算、移动化、社交化正在深入地影响着企业IT的变化趋势。
作者: 期刊:《网络安全和信息化》 2012年第06期
许多行业分析师和顾问认为大数据是业务在激烈竞争环境中的下一个利益来源点,但第一个问题就是“什么是大数据?”,有人理解为巨大的数据量。但是根据不同的数据来源,
作者: 期刊:《网络安全和信息化》 2013年第24期
不幸的是,大多数企业的数据分析能力并没有随着可用数据量的增加而保持同样的增长速度。为了不再纯粹凭经验与直觉来做出企业的相关重大决策,企业需要建立起一套以数据驱动的方法,引入预测分析,进而提高决策能力。
作者: 期刊:《网络安全和信息化》 2015年第10期
随着数据量爆炸性地增长,大数据技术的发展也达到了前所未有的新高度。2015年,大数据仍将保持这一快速增长势头。Informatica执行副总裁兼首席营销官Margaret Breya女士预计,在新的一年以及更远的将来,将有八大主要趋势主导大数据技术发展领域。
作者:孙浩峰 期刊:《网络安全和信息化》 2016年第01期
随着互联网和移动互联网技术的进一步发展,在数据量激增的同时,数据类型也变得更为复杂多样。如何快速处理这些数据、使其产生价值,如何结合结构化与非结构化数据分析进行预测、推理、感知的判断并采取相应行动,成为了企业亟需思考的难题。面对当前挑战,企业需要能够处理和分析大量结构化与非结构化数据、
作者: 期刊:《网络安全和信息化》 2014年第20期
企业IT的未来 谁主沉浮? 当前,随着互联网、云计算、移动终端和物联网的迅猛发展,全球数据量以每两年翻倍的速度增长,在2010年已经正式进入ZB时代,到2020年全球数据总量将达到44ZB。除了数据量增长,企业同样面临设备数量、应用数量、交易赶等方面成倍增长的局面,未来企业所面对的挑战仍具有很多的不确定性,大数据、云计算、移动化、社交化正在深入地影响着企业IT的变化趋势。