大数据被称为新世纪的未来石油。大数据,IT行业术语,指的是在一定时间内,常规软件工具无法捕捉、管理和处理的数据集合。它是一种海量、高增长、多元化的信息资产,需要一种新的处理模式来拥有更强的决策力、洞察和发现能力以及流程优化能力。
互联网时代,大数据无处不在。当我们使用搜索引擎,在微信上与人互动,或者享受打车软件的便利时,我们都在产生和分享社交数据。当今社会是一个快速发展的社会,科技发达,信息流通,人与人之间的交流更加密切,生活更加便利。大数据是这个高科技时代的产物。
随着云时代的到来,大数据受到越来越多的关注。分析师认为,大数据通常用于描述一家公司创建的大量非结构化数据和半结构化数据,这些数据在下载到关系数据库进行分析时会花费太多的时间和金钱。大数据分析往往与云计算联系在一起,因为大数据集的实时分析需要MapReduce这样的框架将工作分配给几十台、几百台甚至几千台计算机。