什么是大数据,大数据时代如何理解大数据?
Bigdata通常用来描述一个公司创建的大量非结构化和半结构化数据,下载到关系数据库进行分析会耗费太多的时间和金钱。大数据分析往往与云计算联系在一起,因为大数据集的实时分析需要MapReduce这样的框架将工作分配给几十台、几百台甚至几千台计算机。
大数据的特征
数据量大,数据种类多,实时性要求强,数据蕴含的价值大。各行各业都有大数据,但是大量的信息和咨询是复杂的,需要搜索、处理、分析、归纳、总结。
大数据时代的影响
越来越多的政府、企业等机构开始意识到,数据正在成为组织最重要的资产,数据分析能力正在成为组织的核心竞争力。比如2012年3月22日,奥巴马政府宣布投入2亿美元推动大数据相关产业发展,将“大数据战略”上升为国家意志。2012年,联合国还发布了《大数据政府白皮书》,指出大数据是联合国和世界各国政府的历史性机遇。人们现在可以利用极其丰富的数据资源,对社会经济进行前所未有的实时分析,帮助政府更好地应对社会经济运行。
大数据的意义和前景
大数据是一种庞大的、动态的、可持续的数据,利用新系统、新工具、新模型进行挖掘,从而获得具有洞察力和新价值的东西。以前,面对庞大的数据,我们可能是盲目可见的,所以无法了解事物的真实本质,所以在科学工作中会得出错误的推论。随着大数据时代的到来,所有的真相都会呈现在大家面前。
大数据分析的目的
大数据分析的核心目的是预测,在海量数据的基础上,通过机器学习相关的各种技术和数学建模来预测事情发生的可能性,并采取相应的措施。预测股票价格,预测机票价格,预测流感等。
如果我们预测到事情发生的可能性,就可以通过适当的干预,引导事情朝着预期的方向发展。比如亚马逊和所有电商一样,会根据对用户喜好和消费能力的分析来推荐商品,引导用户增加消费金额;谷歌等互联网巨头也会尝试通过各种技术手段将不同的广告展示给不同的用户,并称之为精准营销,以此来提高点击率(公司收入);网游公司也会通过运营项目中玩家行为数据的分析,及时调整游戏关卡和收费点的设计。