大数据时代带来的机遇和挑战.pdfVIP

大数据时代带来的机遇和挑战

——读《大数据时代》的心得体会

互联网高端技术的创新与发展，给人类社会带来了巨大变化。

今后20年全球将步入大数据新时代。高端互联网将再铸新世界。

我们正处在一个数据爆发增长的时代。移动互联网、移动终端和

数据感应器的出现，使数据以超出人们想象的速度在快速增长。

我通过近一段时间在市委管理干部培训班的学习，同时，又拜读

了维克托·迈尔-舍恩伯格的《大数据时代》，深受裨益，特此将感

悟心得记下，与大家分享。

一、大数据时代的意义

本书作者维克托·迈尔-舍恩伯格被誉为“大数据时代的预言

家”，整本书分为三个部分，分别是大数据时代的思维变革、商

业变革和管理变革。

大数据时代的思维变革分为“不是随机样本，而是全体数据”、

“不是精确性，而是混杂性”、“不是因果关系，而是相关关系”

三部分，分别讲述了大数据时代，数据在数量、性质和关系方面

的变革。当数据处理技术得到了较大的发展之后，数据分析就采

取了全数据模式，样本=总体，比如淘宝进行用户行为分析时会就

一个用户在淘宝里的所有行为进行技术分析，而谷歌对流感的预

测则是对所有相关词汇搜索行为进行技术分析。书里说，只有5%

的数据是结构化且能适用于数据库的，如果不接收混乱，剩下的

1

95%的非结构化数据都无法被利用。用户在互联网上的行为，其

实就是一种数据，比如鼠标停留位置、搜索输入语言、项目点击

次数等，但是这些数据其实都不是标准化、结构化的，用户搜索

板蓝根、感冒灵、吃什么水果治感冒等都说明用户可能感冒了，

但是其输入的搜索文字确实不一样的，如果要精准地按照感冒两

个字来判断用户是否感冒，其数据分析结果和实际结果应该会存

在比较大的差距。

大数据时代的商业变革分为内容数据化、数据价值实现、数

据公司类型三部分，随着信息技术的变革，我们将文字、方位、

沟通甚至是世间万物都变成数据，然后通过数据的再利用、重组、

扩展等实现价值，创造大数据公司。同时，根据所提供价值的数

据本身、技能和思维三种不同来源，分别出现了基于这三种来源

的互联网公司，而谷歌、亚马逊等则是包含三者，全面发展的大

数据公司。

大数据时代的管理变革则分为大数据的风险和自由度掌控。

大数据带来的风险主要包括个人生活的监视、隐私的泄露、预测

惩罚以及数据独裁，对此，通过一定的管理变革，比如个人隐私

保护从个人许可到让数据使用者承担责任，预测分析并不决定个

人动因及相应惩罚，避免数据独裁而培养大数据算法师以及反数

据垄断大亨等，来限制大数据的发展不超过我们可以控制的范围。

《大数据时代》作者抛出了大数据时代处理数据理念上的三

大转变：要全体不要抽样，要效率不要绝对精确，要相关不要因

2

果；从万事万物数据化和数据交叉复用的巨大价值两个方面，讲

述驱动大数据战车在材质和智力方面向前滚动的最根本动力；大

数据帝国前夜的脆弱与不安，包括产业生态环境、数据安全隐私、

信息公正公开等问题”。

二、对大数据的感悟思考

书中对大数据的价值的分析，主要是站在数据处理角度，分

析数据的再利用、重组数据、可扩展数据、数据的折旧值、数据

废气、开放数据等带来的数据创新价值，而我的思考方向则是从

互联网行业角度出发，分析开放平台、社交网络、电子商务等利

用大数据后所获得的改革优势。

（一）大数据与开放平台

大数据时代到来之际，开放平台确实面临着机遇和挑战。开

放平台的核心价值是分配流量和消费资源给开发商和应用，同时

提高平台本身用户的活跃度和粘度，怎么把平台的流量和用户更

好地分配给第三方应用，把平台效率最大化是一个巨大的挑战，

而大数据是解决这个挑战的重要手段。

开放平台收集了大量的用户数据，随着大数据的出现，数据

的总和比部分更有价值，当我们将多个数据集的总和重组在一起

时，重组总和本身的价值也比单个总和更大。由于开放平台在信

息价值链中的特殊位置，能收集流向每一个API接口的用户数据，

寻找各个API接口数据之间的联系，通过数据重组寻找数据间联

系，创造数据价值。平台通