大数据时代
2022-06-26 本文已影响0人
钟珑清龙南市第三中学
一、大数据时代的思维变革
先来看一下,要想从大数据中获得价值和洞见,有没有什么前提条件。作者认为,要想从大数据中获益,我们首先需要在思维层面做出一些转变。所以,他们给这本书起了个副标题,叫作“生活、工作与思维的大变革”。
01 不是随机样本,而是所有数据
具体来说是三个转变。第一个思维转变是,分析问题的时候,我们要分析与问题相关的所有数据,而不是像以前那样,依靠随机采样,然后分析少量的数据样本。
什么意思呢?以前,因为技术条件的限制,我们采集、记录和处理数据的能力非常有限,所以,分析问题用到数据时,只能随机采样。而现在,技术条件已大大进步,我们采集、记录和处理数据的能力已经有了质的提升。所以,两位作者提出“样本=总体”的概念,认为我们现在应该分析所有的相关数据,而不仅仅是少量的采样数据。像我们前面提到的超市那个案例,分析团队就分析了超市近几年所有的购物数据,而不仅是少量的随机采样是在以前技术条件有限的时候,我们不得已的一种选择。它的优点是,在当时的环境条件下,能用最少的数据获得最多的信息。但这种分析方法也有一个很难克服的缺陷,就是它很难呈现出全部数据中隐藏的一些细节信息。