机房360首页
当前位置:首页 » 大数据 » 透过现象看本质 大数据核心并不在规模大

透过现象看本质 大数据核心并不在规模大

来源:机房360 作者:娟子 更新时间:2015/4/4 19:49:02

摘要:3月31日有报道称,阿里巴巴要把买家行为的“大数据”像蚂蚁金服一样向全行业开放,吸引广告主。其实,大数据是对于大规模现象的一种模糊的表达。这一术语如今已经被企业家、科学家、政府和媒体炒得过热。

  大数据之所以可以飞速发展,得益于互联网以及各种智能设备的发展,人们的行为、位置、生理特征等等,无时无刻不在生成数据被这些设备所采集。

  而大数据的核心并不在规模大,而是它蕴含的是计算和思维方式的转变。大数据的推崇者认为所有通过数据的分析都事正确的;认为数据捕捉全面,所以可以摒弃过去传统的抽样统计的方法;认为人们只需要知道数据之间有统计相关性就行,数据已经达到可以自己做出结论了。

  通过现象看本质 不要曲解数据

  上述这些观点过于乐观,事实并非如此。在我们有了足够多的数据时,往往不能看直接的结果,需要对数据进行进一步分析。比如英国二战时期空战的例子,每次能回来的战斗机机翼上有很多枪眼,于是工程师们就加强防护,但增加了防护之后,飞机的损失率反而提高了,于是统计学家 Wald改变思维模式,在没有枪眼的部位加强防护,最后效果很好。

  数据并非绝对全面

  前段时间,淘宝做过几个基于网购的大数据调查分析,主要以娱乐为主,得出了一些很有趣的结果。但也不难看出,虽然淘宝的注册用户高达几亿,但是所统计的数据中,并不是所有用户都购买了所统计的产品,也有部分用户不是用自己账号购买商品,淘宝也有很多刷单的情况等等。

  不确定的情况很多,喜欢网购的人群是受限制的,他们并不能代表所有的消费群体。我们不能说网上的统计结果没有意义,但是也不能夸大这种只有部分代表性的结果,否则我们可能会被误导。

  《大数据》这本书的联合作者,牛津大学互联网中心的Viktor Mayer-Schonberger教授说,“他最喜欢的对于大数据集合的定义是‘N=所有’,在这里不再需要采样,因为我们有整个人群的数据。”当“N=所有”的时候确实不再有采样偏差的问题,因为采样已经包含了所有人。

  结语

  对于大数据,统计学家们正争先恐后的为大数据开发新的工具。这些新的工具当然很重要,但它们只有在吸取而不是遗忘过去统计学精髓的基础上才能成功。不能过度崇拜大数据,要善用大数据,大数据所反映出的结果是需要人们进行科学的分析和提取的。


责任编辑:娟子编辑

机房360微信公众号订阅
扫一扫,订阅更多数据中心资讯

本文地址:http://www.jifang360.com/news/201544/n710366812.html 网友评论: 阅读次数:
版权声明:凡本站原创文章,未经授权,禁止转载,否则追究法律责任。
转载声明:凡注明来源的文章其内容和图片均为网上转载,非商业用途,如有侵权请告知,会删除。
相关评论
正在加载评论列表...
评论表单加载中...
  • 我要分享
推荐图片