来，给大数据热泼点冷水

    【CPS中安网 cps.com.cn】 “大数据”是近年来国内外业界与学界热议的一个话题。它不仅是对一种技术发展趋势的描述，也被视为蕴含着发展机遇的“下一个创新、竞争和生产力的前沿”。就像农业时代的土地、工业时代的能源，数据被看作是信息时代的核心资源。而“大数据”概念的产生，意味着人们对这一资源的认识正在不断深化，为我们理解和改造世界打开了一扇新的大门。

　　但总的来说，“大数据”仍然属于新生事物，人们对相关议题还存在很多不同的、乃至针锋相对的理解。围绕“大数据”的各种争议既展示了这个概念所涉议题的复杂性，也说明这一领域的实践与认识刚刚开始，未来有着无限的可能性。本文选取几个主要的争议点，以呈现一幅更加丰富的“大数据”图景。

　　“大数据”叫错了?

　　“大数据”从字面上理解是指规模很大的数据。如麦肯锡在2011年报告中的最早界定，“大数据是指其大小超出了典型数据库软件的采集、储存、管理和分析能力的数据集。……目前，大数据的一般范围是从几个TB到数个PB(数千TB)。”

　　所谓量变引起质变，基于大规模的数据，人们可以进行很多具有想象力和创造力的探索和实践，而这些探索和实践是在小规模数据的基础上是无法完成、甚至无法想象的。”例如，视频网站Netflix通过分析海量用户的观看行为数据，成功地推出剧集《纸牌屋》;又如，谷歌通过跟踪分析用户搜索关键词的海量数据，对美国流感疫情的估测值与美国疾病控制和预防中心的报告基本一致。

　　然而有一些论者认为，“大数据”的命名并不恰当。因为数据规模大并非“大数据”的核心特征，也没有体现新技术趋势的本质。一种观点认为，数据“在线”比数据“大”更体现新技术趋势的核心特征。如阿里巴巴集团CTO兼阿里云总裁王坚称，数据的“在线”远远比数据“大”更反映本质，更体现互联网的特点，而不在线的数据再大也没什么价值。而且，“在线”还使得数据搜集、整理、分析变得容易，并且能够反过来快速对社会产生影响。

　　还有一种观点认为，“长数据”(long data)比“大”数据更值得关注，“长数据”即从文明起源至今有关历史事实的数据集。哈佛大学应用数学家萨缪尔·阿布斯曼认为，“大”数据所呈现的只是信息与知识的切片，只有将数据置入长时段的历史中我们才能获取信息与知识的完整图景。而“长数据”不仅能够分析长时段的变迁，也能为当下的趋势变化提供背景。

　　大数据时代，数据抽样、因果关系不再重要?

　　《大数据时代》的作者维克托·迈尔-舍恩伯格认为，大数据时代在分析信息时发生了三大转变：第一个转变是可供分析的数据更多，甚至可以处理和某个特别现象相关的所有数据，而不再依赖于随机采样，因为采样分析是信息匮乏时代和信息流通受限制的模拟数据时代的产物;第二个转变是追求精确度已变得不可行和不需要，只有掌握大体发展方向即可;第三个转变因前两个转变而促成，我们无须紧盯事物之间的因果关系，而应该寻找相关关系。大数据告诉我们“是什么”而不是“为什么”，“在大数据时代，我们不必知道现象背后的原因，我们只要让数据自己发声。”

　　上述三大转变的阐述，有一些常用的案例支撑。如亚马逊网站根据用户在其网站上的类似查询数据来进行产品推荐;Twitter等社交网络通过用户的社交网络图来获知用户喜好。

　　这些说法招致很多质疑。大数据可能是存在系统性偏差的数据，如果不对数据总体、数据可靠性与数据来源进行审慎考虑，即使数据规模再大也无法提供关于某个现象的可靠结论。例如，通过分析Twitter的海量数据发现，人们远离家庭时更快乐，在周四的晚上最悲伤。但这个结论的可靠度很低。首先，来自皮尤研究中心的资料显示，只有16%的美国成年网民使用Twitter，这显然不是一个有代表性的样本，它突出了年轻人群体和大城市人口。其次，我们知道很多Twitter账户是由机器自动控制或辅助操作的。最新的估算认为，Twitter上可能有2000万虚假账户。因此，数据捕捉到的那些“人类感情”很可能是由机器表达的。

　　不仅如此，当数据规模增大之后，其出现错误的可能也随之增大。北大教授刘德寰以自已翔实的实验数据证明，巨量数据集和细颗粒度的测量会导致出现“错误发现”的风险增加。他说，“那种认为“假设、检验、验证的科学方法已经过时”的论调，正是大数据时代的混乱与迷茫。”

　　刘德寰教授还认为，大数据并不是新事物，天气、地震、量子物理、基因、医学等领域都产生巨量数据，而这些学科都在使用抽样调查的方法。互联网数据挖掘方法论也如此。既然是关于人的研究就需应用所有研究人的方法梳理大数据。

声明:

凡文章来源标注为"CPS中安网"的文章版权均为本站所有，如需转载请务必注明出处为"CPS中安网"，违反者本网将追究相关法律责任。非本网作品均来自互联网，转载目的在于传递更多信息，并不代表本网赞同其观点和对其真实性负责。