大数据时代的颠覆与创新

大数据时代的颠覆与创新大数据时代的颠覆与创新维克托・迈尔・舍恩伯格是大数据领域最受尊敬的权威发言人。20多年来，他一直致力于网络经济、信息与创新、信息监管、网络规范与战略管理的研究，其代表作有《大数据时代》、《删除》等。2010年，舍恩伯格和另一位专家共同在英国《经济学人》上发表了长达14页的大数据专题文章，成为最早洞见大数据时代发展趋势的数据科学家之一。前不久，舍恩伯格来到中国，与互联网界人士共同探讨大数据话题，对于如何理解大数据的概念、大数据将带来怎样的变革以及人类社会该遵循怎样的法则以应对大数据时代等问题，详谈了他的最新看法。笔者适逢其会。颠覆因果，寻找关联问：作为预言大数据革命的先锋人物之一，是什么让你发现了大数据的价值？答：过去几年，服务业的兴起使我注意到一些过去无法做到的事情，现在却可以实现。比如在20世纪七八十年代，我还觉得机器翻译不可行，而现在机器翻译已成现实。几年前，我结识了谷歌公司做流感趋势预测的员工，他们正通过搜索全球的信息进行流感预测，这让我意识到数字世界里有某种深层次的巨大力量正在酝酿中，但那时我还无法为它找到适当的名称。此后，我逐渐领悟到世界万物之间都有联系，而联系的纽带就是大数据。问：你觉得大数据会改变人们的行为方式、价值观和思维吗？答：是的。未来5-10年，“数字化新新人类”、“互联网一代”这些词都将被遗忘，取而代之的将是“数据一代”。人们会对预测习以为常，习惯理智地面对问题，通过数据获得洞察力，作出决策。如果没有可用的数据，人们会觉得不可接受。这和现在的状况正好相反，现在人们常常是在数据不充分的情况下就作了决策。问：到了“数据一代”，传统权威和精英文化是否将遭遇挑战？答：不仅权威会被挑战，陈旧的思维定势以及陈旧的判断因果关系的依据都将被挑战。需要看到，追求事物的起因是人类的天性。比如有人去餐馆吃饭，第二天腹泻了，可能就会认为是因为在餐馆吃了不洁食物。但实际上，最可能的诱因是他和某个手上携带肠胃病菌的人握了手，根本不是餐馆的问题，只是人们总是情不自禁地去寻找这种因果联系。有了大数据后，人们会认识到：其实很多追因溯果的行为都是白费力气，都是没有根据的幻想，会让思维走进死胡同。如果转而把注意力放在寻找关联性上，即使不能找到事物发生的原因，也能发现促使事物发生的现象和趋势，而这就足够了。问：寻找答案和真理通常被认为是美德，但你却告诉我们应该忘记原因，追寻关联性。答：当然，寻找原因被认为是终极思维，这一观点被根深蒂固地植入了我们的头脑：当我们看到一件事物时，就情不自禁开始思考因果。诺贝尔奖获得者丹尼尔・卡尔曼把这种行为称作快思考，是一种发自本能的思维方式。然而，这种快速、本能的因果思维得到的常常不是真相，而是一种幻觉。在大数据时代，人们用关联性去了解和认识现象，而非追求原因，反而可以获得真相。尽管人们获得的可能只是部分而不是全部真相，但这已经是巨大进步。人们应该明白，追求因果的过程往往是无果的，通过关联性而不是因果关系来认识现象，才能有助于我们更好地了解世界。问：有观点认为大数据的核心价值和概念就在于可预测性，你怎么看？答：大数据的核心价值在于事物之间的关联性，只是人们通常把关联性用于预测。预测的作用不仅仅限于商业用途。比如，预测流感的传播就是有益于公共健康的行为，用大数据预测婴儿可能患有的致命疾病并及时治疗，也不是商业行为，而是挽救生命。还有，通过大数据可以预测哪些书籍是人们爱读且能带来良好学习效果的，进而有助于改善教育体制，这是福荫全社会的事情，而不是为了赢利。变革与制衡问：大数据会带来怎样的时代变革？答：首先，大数据会改变人们的工作方式，我们在工作中会用到更多的数据，数据科学家也将受到更多的重视。更重要的是，通过运用大数据，人类将获得第二次启蒙。因为大数据让一切都与过去不同，人们会看到关于这个世界、自然、社会和生命更加具体微观的细节，第一次启蒙让人类认识到理性的存在及其价值，却没有足够的数据去证实，而大数据填补了这个空缺。因此，大数据所带来的变革将远远超越互联网行业，遍及到整个社会，社会结构将因此发生改变，权威机构将经常遭受质疑，他们不能再简单地说“我们更了解情况”，因为人们要求提供数据支持来证明其决策是否合理。问：具体而言，旧的商业秩序，如分销体系，将如何被大数据改变？答：以飞机票为例。常识是：越早买票越便宜，离起飞时间越近越贵。但几年前，美国一家叫做FARECAST的公司运用大数据做分析，在研究了美国几大航空公司的机票成本和价格后发现，机票价格在任何时候都会有上下波动，这家公司因此可以预测未来几天机票价格的走势。消费者登录该公司网站时可获得购票建议，如“最好再等24小时或3天再买票，以获得最佳票价”，还能看到在不同时间买低价票的机率预测。就这样，FARECAST为数以亿计的人节约了平均75-89美元，创造了巨大的价值，同时也挤压了传统机票预定系统的生存空间，降低了航空公司通过信息不透明获得的暴利。问：大量的数据掌握在大型商业组织手中，如何来制衡它们对数据的控制？答：首先，我并不那么担心商业组织对数据的控制，而更担心美国中情局这样的政府组织拥有数据。因为区别在于政府可以把我关到监狱里，而谷歌不能。这差别可大了。不过，我的确仍然担心因大量数据集中而造成垄断力量，因此，我认为需要保证互联网的多元化，观点的多样化，服务供应商的多元化，选择的多样化。问：有了大数据和多种多样的数字设备，社会是否最终将透明化，个人隐私将受到多大威胁？答：我确信在未来社会，商业交易、政府和个人行为都会更加透明，但完美的透明状态在短期内难以实现，因为我们不可能也不希望捕获所有的信息。但是，运用大数据可以以更低的成本获得更多的信息，这已经可以给世界带来大不同。!--endprint--!--startprint--当然，我们需要看到，电子设备和大数据的使用，会威胁到个人隐私，但我担心的不是传统的隐私――人们放在互联网上的个人信息，而是担心在大数据时代，人们的行为可以被预测，令企业或政府等组织，根据预测就对人们尚未实施的行为进行惩罚。举个例子：在美国有一个名为“预测式配警”的计划，该计划通过大数据分析来预测美国某个城市的某条街道的某个时段是犯罪高峰时段，然后部署更多的警力在那个位置。这意味着该地区居民将长时间被监控，这是一种变相的惩罚。他们没有做错事，却因为某个计算机的算法预测他们可能会做错事便被惩罚了，这显然并不公平。问：大数据需要从各个方面收集大量数据，可你却谈到了“删除”，为什么？答：在大数据时代，很多小数据时代的规则都不存在了。欧洲、加拿大、澳大利亚及其他一些地方的隐私保障法规定，在征集个人信息时要获得其同意。所以，当网站要求个人填写生日时，必须告知该信息的用途。在小数据时代，数据的价值就在于其用途，比如填生日信息的用途在于网站给用户发送生日礼物，简单明了。但在大数据的时代，数据的用途将超出人们的想象。比如谷歌的流感预测，就是通过分析人们搜索关键词的时间数据来实现的，这种用法此前人们从来没有想到过。因此，在大数据时代，人们常常不能事先就被告知数据的用途，这会引发新的隐私问题。所以，过去的一些法则已经不适用了，需要建立新的数据使用法则，比如不能一直保留某些数据，而是过一段时间就必须删除一些数据，令个人有控制自己信息的可能性，每个人都可以决定其个人信息用于大数据分析的时间长度，以此来建立大数据时代使用数据和保护隐私之间的平衡。大数据与互联网问：在大数据时代，互联网治理意味着什么？答：目前，互联网上流动着海量的信息。尽管很多人都在谈互联网治理，但很少有人真正知道其含义，我认为其核心意义在于谁在指挥互联网世界中虚拟道路的方向。如果方向指错了，信息就会向错误的地方流去。当我们决定应该由谁来指引信息流的方向时，是选择一家由美国商务部控制的美国公司，还是联合国下属专门机构的国际电联这样的组织？应该是某个国家、个人、还是某一群工程师？这个选择非常重要，我们必须就该问题作出决定，但又不能妨碍互联网的功能。因为如果决策错误，互联网就失效了。所以，我们需要平衡变革的必要性和风险。在互联网治理这个问题上，一方面应采取国际化的态度，另一方面需要坚持已经成共识的互联网的最基本原则：多元化。我认为，互联网不能再持续由美国政府和某家在加州注册的非盈利性组织签订的谅解备忘录来管理了。互联网、新媒体是全球性的，我们需要互联网治理的全球化。问：对于互联网的未来，你最关心什么？答：我最关心的是互联网能够持续成为创新的平台和工具，让人们参与进来，产生新的点子、新的思维和协作方式。但要做到这一点，互联网必须保持其足够的开放性。几年前，西方企图把自己认为正确的价值观和法则强加于互联网，这是错的。我们需要意识到，我们生活在一个多元价值观的世界，而互联网就很好地折射了这一现实，值得我们去珍惜。笔者观察大数据与商业利益仿佛一夜之间，大数据火了起来，人人张口闭口大数据，凡有电脑处，皆能谈大数据。但也有很多人对此不以为然，认为大数据只是一个时髦的词汇，是新瓶装旧酒，或者就像当年的千年虫一样，是一个被夸大的概念。另外一些人则对大数据的重要性表示困惑，意识不到它对自己或自己的企业到底意味着什么。舍恩伯格认为大数据正在开启一次人类重大的时代转型，是一场生活、工作与思维的大变革，这种认定或许略有飘忽高远。但即便后退一百步，大数据对商业的重要性却已近在眼前，触之可及。作为一个企业家，2012年之后，你可以不随波逐流地去谈论大数据，但对于大数据所可能带来的那些商业变化，绝对应该有个基本的认知。大数据发展的核心动力来源于人类测量、记录和分析世界的渴望。记录信息的能力是原始社会与现代社会的分界线之一，文字、语言都是人类对信息记录的基本方式，之后的造纸术、印刷术、计算机、互联网则是人类信息记录能力的一次次重大进步。长期以来，文字等信息只供阅读与查询，但大数据时代，文字变成了数据，它就大显神通了，人可以用之阅读，机器也可以用之分析，一旦世界被数据化，就只有想不到，没有做不到的事情了。随着数据分析工具与设备的进步，人类处理数据的能力越来越大。数据化代表着人类认识世界的一个根本性转变，世界不再被看做是一连串人类认为的或是自然、或是社会现象的事件。人们将意识到，世界本质上是由数据信息构成的。在未来的大数据时代，对数据信息处理能力的极大增强，是否会使社会主义者们梦寐以求的对社会化大生产的全面计划成为现实，并带来一场巨大的社会变革？目前还没有人给出答案。但从企业层面来讲，大数据却很可能意味着一场管理革命。管理大师戴明与德鲁克在诸多思想上都持对立观点，但“不会量化就无法管理”的理念却是两人智慧的共识。这一共识足以解释近年来的数字大爆炸为何无比重要，因为大数据时代的一个基本特征就是“一切皆可量化”，有了大数据，管理者可以将一切量化，从而对公司业务尽在掌握，进而提升决策质量和业绩表现。除了将引发管理革命之外，大数据的出现，本身就意味着巨大的财富。在收集和处理能力提升以前，大数据更像油页岩，或许有人知道它有价值，却无法变现。但在大数据时代，它的价值才开始被挖掘出来。这样的例子已经数不胜数，书写文明中所蕴含的潜在财富正在被唤醒。像谷歌、亚马逊和脸谱网这样先天拥有大数据资源的前沿公司正在不停地发掘之中。但除了他们之外，其他任何公司通过对已有数据资源的提炼，也能获取财富。想必很多人都知道关于大数据的一个经典案例：华尔街有家公司利用电脑程序分析当时全球3.4亿微博账户留言判断民众情绪，再以1到50分为其打分，根据分数高低处理手中股票。原则就是：多数人表现兴奋就买入，表现焦虑就抛售，结果出乎意料，这样的经营模式为其第一季度创造了7%的收益率。真正实现了数据创造价值。即便对那些无意在大数据领域掘金的传统企业来说，开发好本行业、本公司已有的大数据，也将意味着新的利润增长。比如在医疗保健领域，如果能够对95%的未捕获数据进行分析，估计每年将创造3000亿美元的新价值。老虎队在每个新赛季中都会让球员佩戴高精度的身体传感器，提供有关运动中的肌肉、肌腱和呼吸系统详细信息并筛选信息。通过收集大量的生物力学和医学数