大数据,正在到来的数据革命以及它如何改变政府商业与我们的生活 涂子沛 2013.4 【pdf mobi epub txt非扫描】
·《亚洲周刊》“年度十大好书”,持续畅销;从0到1,开中国先河,领跑大数据时代非常好的书, 经典之作——首次详尽讲述“大数据浪潮”的来龙去脉;首次深入解读“大数据时代”如何改变政府、商业和我们每个人的生活;首次犀利阐明“数据”怎样推动民主进程……
· 各界要人盛赞推荐——汪洋【中央高层人物】、柳传志【联想集团名誉主席】、任志强【中国房地产风云人物】、达文波特【全球 管理咨询大师】、许倬云【史学大家】、谢文【著名IT评论人】、薛海培【奥巴马总统大选亚裔事务顾问、美国华人全国委员会会长】、杨叙【英特尔全球副总裁、中国区总裁】、【中美10大高校著名学者】……各界要人盛赞推荐!
·《大数据》,这里有“中国对手”——
大数据浪潮,汹涌来袭。20世纪大萧条以来,美国作为世界强国的开放历史,数据技术浪潮的兴起过程,气势磅礴,波澜壮阔。真正读懂中国趋势,一定要先读懂美国。美国政府为什么能,中国到底缺什么?
·《大数据》,这里有“中国建言”——
哈佛大学商学院访问教授、全球 管理咨询大师达文波特,把脉经济,数据治国,专门为中国政经两界提示智库建言:“在很多领域,中国政府和中国的企业都有雄心勃勃的计划,这引起了全世界的关注,这些雄心和计划,现在应该拓展到大数据的领域。”
·《大数据》,这里有“中国财富”——
现代管理学之父德鲁克有言,预测未来的好方法,就是去创造未来。商务智能、云计算、Facebook、推特、Web3.0、语义网……数据战争,就是未来之争!数据兴则企业兴,数据强则企业强!叫醒中国,超越中国模式的粗放式增长,迈向精细化的管理革命,大数据将是下一个社会发展阶段的“石油”和“金矿”。
·《大数据》,这里有“中国致敬”——
活着就为改变世界,只有偏执狂才能生存,不要以为乔布斯、盖茨、扎克伯格才这样。美国之为美国,还有坚持信息自由的新闻记者、发现摩尔定律的工程师、定义数据仓库的实业家、首倡普适计算的业余鼓手、鼓吹财政公开的民间活动家、倡导数据开放运动的青年学生,以及活跃在无数公民自治组织的普通个人。
·《大数据》,这里有“中国问题”——
回望中国,胡适批评“差不多先生”,黄仁宇求索“数目字管理”,我们的世界看起来雷打不动。大数据时代,挑战中国,摘不下“差不多先生”的文化标签,我们世界工厂还将是一个落后的100年!
·《大数据》,这里有“中国乡愁”——
大数据战略,重新洗牌全球格局:美国,再一次领跑世界;中国,却很可能再失良机而浑然不知!中国迷局如何解开?非常具有海归视野、近20年中美职业生涯的作者,从太平洋对面看到中美两国的差距,披露大量美国真实案例,优先为华文世界开启大数据重要话题,写成这本意在兴邦治国的战略之书,图文并茂,老百姓也看得懂。
名人推荐
这几天,我看了两本书,其中有一本是广西师范大学出版社出版的,一个在美国的华人涂子沛写的《大数据》,看以后非常有启发。/中国人数据意识的淡薄由来已久,甚至可以称之为国民性的一部分。/我希望大家能认真读一读这本书,带着问题读,带着想法读。
——汪洋 [中国高层人物]
涂子沛先生能为大数据推动社会进步作出贡献,功莫大焉。
——柳传志 [联想集团有限公司董事局名誉主席]
在很多领域,中国政府和中国的企业都有雄心勃勃的计划,这引起了全世界的关注,这些雄心和计划,现在应该拓展到大数据的领域。涂子沛先生的《大数据》这本书,将在这个重要的领域,为中国政府和企业的努力提供引导和帮助。
无论是对中国政府,还是就中国的商业组织而言,《大数据》都是一本重要的书。
——托马斯·H. 达文波特 [全球顶尖的管理咨询大师、哈佛大学商学院访问教授、巴布森学院总统杰出奖教授]
在极权的国家,他们手上拥有足够的资讯,足以利用这资讯,掌握每一个人的日常生活;“老大哥”的影子,可以无所不在……涂子沛先生《大数据》这部书,清楚地叙述了资讯时代对我们生活的影响与社会的控御力。他讨论的范围方方面面、极为广泛。我们要对涂子沛先生致敬与致谢,因为他为华文世界提出一个重要的话题。
——许倬云 [史学大家、匹兹堡大学历史系荣誉讲座教授]
《大数据》从奥巴马建设“前所未有的开放政府”出发,描写了半个多世纪以来数据对美国社会政治、商业、文化等方方面面的影响,谈及了1930年以来历任美国总统,可谓波澜壮阔。涂子沛作为科技业的精英,并没有将自己眼光和生活局限于技术之上,他对美国社会的独到观察和理解、对华人社区工作的积极参与和贡献,都是促成本书成为一本佳作的重要原因。
——薛海培 [奥巴马总统大选亚裔事务顾问、美国华人全国委员会会长、凤凰卫视时事评论员]
《大数据》这本书讲述了数据技术浪潮的兴起过程,回顾了近一个世纪以来美国作为一个世界强国的开放历史,气势磅礴。从书中可以看到,美国的发展动力,正是开放和创新。我们正在向个性化的智能互联网时代迈进,计算力的扩展正在不断加速,数据将成为我们最强大的创新动力。
——杨叙 [英特尔全球副总裁、中国区总裁]
《大数据》是一本视角独特、取材新颖、别开生面的好书。它以数据为轴线,描绘了美国走过的开放创新历程。从该历程中我们看到,数据挖掘是一种知识生产过程,从中产生创新,产生管理,产生推动社会变革的理论与实践。更有意思的是,美国政治的发展,公民权利的实现,以及各种自由与福利的保障,都和对数据的创造性应用密切相关。这对已经步入信息时代的中国,尤其有借鉴意义。趋势所在,数据乃大。涂子沛先生的专业性分析和介绍,是一项创造性的工作。
——郭巍青 [中山大学政治与公共事务管理学院教授]
大数据具有催生社会变革的能量。但释放这种能量,需要严谨的数据治理、富有洞见的数据分析,以及一个激发管理创新的环境。涂子沛的《大数据》这本书总结了美国的经验和实践,并为中国提出了一个路线图。我为他的成就感到骄傲。这本书完整地融合了技术、政治、商业三个角度,体现了我们学院师资教学的独特优势。我相信本书会在中国激发新的思想和讨论,帮助中国迎接大数据的挑战。
——Ramayya Krishnan [卡内基梅隆大学海因兹学院及信息管理学院院长、终身教授]
通过历史故事的讲述,用近似新闻评论的笔法,《大数据》这本书以美国为例介绍了由经验管理到数据管理这场正在发生的革命性变革,通俗形象地讲清楚了科学的道理,实属难得。这对学者们扩大视野,对管理干部深化科学发展观的认识,都有十分重要的价值。
——薛华成 [中国管理信息系统的主要开创者、澳门科技大学行政与管理学院名誉院长]
《大数据》这本书揭示了数据在未来社会中的革命性作用。大数据将是下一个社会发展阶段的“石油”和“金矿”。无论是个人、企业还是国家,谁能更好地抓住数据、理解数据、分析数据,谁就能在下一波的社会竞争中脱颖而出。关于数据的知识,将成为个人知识结构中的必备要素和基础。
——施伯乐 [复旦大学计算机研究所所长、上海(国际)数据库研究中心主任]
18世纪启动的工业革命为人类创造了巨大的财富,也极大地推动了社会变革。20世纪中启动的信息革命对人类社会也将产生巨大的冲击,而这个进程刚刚开始。涂子沛先生所著的《大数据》一书,用有趣的故事带我们回顾信息时代的里程碑,使我们透过未来的变幻不清的迷雾,展望和畅想信息革命的大趋势。
——董洁林 [苏州大学企业创新和发展研究中心主任、教授]
《大数据》值得仔细阅读与思考。要让数据更好地说话,既依赖于数据科学与技术的发展,更需要政府、机构和公民的数据意识的不断提高。
——汪小帆 [上海交大电子信息与电气工程学院教授]
数据科学正在成为一个新兴的学科和领域。涂子沛先生的《大数据》这本书,为我们揭示了大数据浪潮发生的前因后果,以及这种技术进步对政治、经济、文化的种种影响。希望读者从本书中获益,以积极的态势应对中国的大数据挑战。
——张晖 [卡内基梅隆大学计算机系终身教授]
作者简介
涂子沛,著名信息管理专家,江西吉安人,曾在美国学习、工作多年,2014年12月从美国硅谷回国,出任阿里巴巴集团副总裁。
本科毕业于华中科技大学计算机系,研究生就读于卡内基梅隆大学,获公共管理硕士和信息技术科学硕士学位。赴美留学前,曾在武警部队和公共部门磨砺10年,深刻洞悉中美两国的科技动态和文化理念。作者还先后担任上海真爱梦想基金会理事、中国旅美科技协会副主席等职务,并在国内多所大学有客座教职。
《大数据》这本书在中国社会开大数据之先河,引发了对大数据战略、数据治国和开放数据的讨论,被盛赞“为华文世界开创了一个重要话题”。 作者的另一本著作《数据之巅》,提出当前信息技术的发展,已经让中国获得了后发优势,中国要在大数据时代的全球竞争中胜出,需要把大数据从科技符号提升成为文化符号,在全社会倡导数据文化。
目录
新版自序数据可以治国,还可以强国
序言一大数据:为华文世界提出一个重要话题
序言二中国的雄心应该拓展到大数据领域
序幕新总统的第一天
一人一票:把“黑”人送进“白”宫
大国新政:阳光是最好的防腐剂
上篇帝国风云得数据者得天下——美国的成功经验
第一章历史争战《信息自由法》
第四股力量:知情权的起点
国会议员:孤独的战争
白宫当家人:一个妥协者和机动者
政府VS.社会:旧剧情重现新时代
第二章数据帝国的兴起
摩尔定律:全世界半个世纪的发展规律
最小数据集:上升到立法高度的开路先锋
民意几时有:选票催生的创新
普适计算:计算机本身将从人们的视线中消失
“大数据”战略:争夺全世界的下一个前沿
第三章数据治国
循“数”管理:平安大道怎样铺
数据“验”平权:民权史上的碑石
数据“打”假:最大的争议就是福利滥用
CompStat:街头警察的创新传奇
第四章商务智能的前世今生
起源:从数据到知识的挑战和跨越
结蛹:数据仓库之厚积薄发
蚕动:联机分析之惊艳
破茧:数据挖掘之智能生命的产生
化蝶:数据可视化的华丽上演
中篇法则博弈大数据时代的发展与危机
第五章帝国的法则
收集法则:减负,为人民减负
使用法则:隐私,文明社会的共识
发布法则:免费,人民已经交税
管理法则:质量,互联网时代的根本
第六章《数据质量法》的困局
产业界“俘虏”政府:数据背后的政经战争
美式“旋转门”:权、名、利大串场
“掺沙子”法案:国会对付总统的独门秘器
环保“风险门”:公共利益常常无人代表
集体行动的逻辑:人人都想“搭便车”
三权之歧:什么是真正的“和谐”
第七章全国隐私风波
《一九八四》:零隐私的恐惧
大数据就是“老大哥”:中央数据银行之争
百年纠结:统一身份证
“9.11”大拐点:以反恐的名义向左转
万维信息触角计划:追踪恐怖分子的“数据脚印”
6种改变政府的力量:山姆大叔大退让
下篇公民故事公民社会与数据瓦动之双赢时代
第八章数据开放运动
一个新的世界:从软件开源到数据开放
总统的雄心:公共财政支出透明
数据民主:印裔首席信息官的崛起
Data.Gov:从旗舰初航到保“数”运动
大众创新:航班延误之候机经济学
第九章试金石:白宫访客记录
总统在见谁:大医改中的“小”插曲
全体美国人的房子:白宫
步步妥协:总统与草根的对决
从白宫安保到政治监督:执著的公民改变世界
第十章矿难中的歌声和数据
集体行动的号角:你站在哪一边
可以避免的悲剧:数据揭示的全景式真相
默认公开推定:和矿难赛跑的原则
唯一的道路:民主时时都要“争”
外篇天下趋势大数据社会未来之世界走向
第十一章大趋势
数据权:大不列颠的硕果
大合流:国际开放联盟
云计算:新的航向
再造互联网:从网页相连到数据相“联”
第十二章大挑战
第十三章大变革
尾声挑战中国:摘下“差不多先生”的文化标签
大事记20世纪大萧条后美国信息开放、技术创新之路
后记搭建“大数据”的世界
建言中国如何应对大数据时代的挑战
访谈大数据时代的“中国梦”
演讲大数据、大计算:新经济的土壤
专题什么是“数据的外部性”?
索引
序言
今年春节期间,出版社告诉我,作为中国大数据领域的开山之作,《大数据》很受欢迎,他们希望满足市场的需求,推出第三个版本,嘱咐我写点东西。
之所以受到欢迎,可能是因为独树一帜。一提到大数据,很多人的第一反应,是数据在商业领域中的作用,所津津乐道的,也是精准营销,即通过数据分析增强对用户的洞察、扩大营销收入。但本书所强调的,却是“数据不仅可以治国,还可以强国”。
数据治国,是指要凭借对数据的有效收集、处理和分析来治理国家,决定国家的大政方针和具体政策。
从定义看,数据是对客观世界进行量化和记录的结果。量化,是人类进行科学研究最根本的手段,就此而言,数据治国也可以理解为“用定量分析、实证研究的科学方法来治理国家”。此外,数据表示的是过去,关注、表达的却是未来。数据之中蕴藏着社会发展的规律,“数据治国”的提法,也暗含着“人类可以更好地把握未来”之意。
回顾人类的历史,任何一个国家的治理,都需要参照数据,但由于信息技术的进步、记录手段的普及,物理世界的状态、个人的社会行为得到了前所未有的记录,这种记录的粒度越来越细、维度越来越多、频度越来越密,形成了“大数据”。今天的数据治国,含义远远超出了“参照数据”。
例如,当前国人关心的头号问题,莫过于空气质量。要解决好这个问题,从环境的监测、传感器的安装,到空气标准的设立、污染原因的分析,再到高污染、高能耗、低产值传统产业的转型,和智能电网、智能电表的使用和普及,整个治理链条都贯穿了数据。又例如交通拥堵,如今很多城市,立交桥高达三四层、地铁线也在快速扩张,却赶不上车辆增加的速度,在资源增长、空间有限的情况下,唯一的出路,是用好大数据,对城市的状态进行实时的分析和预测,不断优化现有资源的使用情况。还有当下智慧城市的建设,大数据的作用可谓重中之重。
今天的政府,无论是东方、西方,都有人在不断尝试,试图把“凭借数据来治理社会”的模式推到极致。本书第七章“全国隐私风波”重点阐述了十几年前美国各方力量围绕“万维信息触角计划”(TIA)产生的纠结和较量。2002年,在国防部长拉姆斯菲尔德、海军中将波因德克斯特的主导下,美国国防部高级项目研究所(DARPA)试图建立一个超级数据库,把全社会每一个人的基本资料、信用卡交易信息、医疗保险记录、出入境记录、航空和酒店信息、电子邮件、电话记录、网络搜索记录等等数据都整合到一起,然后通过数据挖掘和监控,在大量的信息当中发现“信号”,实现有效的社会治理和管控。这个计划,因为可能侵犯公民的隐私,在美国国会不断受阻,但美国国防部却屡次变换名目、暗中推动项目进展。这段历史,堪称2013年“斯诺登事件”的前传,因为后来大面积曝光,最终震惊世界。
西方不亮东方亮。这期间,新加坡的国防部长Peter Ho在美国访问,他获知万维信息触角计划之后,大为赞赏。不久后,该计划在美国触礁流产,波因德克斯特被迫辞职,新加坡却重金引进了这个项目组的一批人员,并聘波因德克斯特为国防部顾问,视为上宾。在波因德克斯特的指导下,新加坡快速建立了一套万维信息触角,命名为“风险评估和全景扫描”(RAHS)。
RAHS最初的目的,是通过全社会的数据联通和挖掘,在错综复杂的社会现象中发现恐怖袭击、流行病疫情等突发事件的“信号”,达到未雨绸缪、有效治理的目的。之后,由于行之有效,新加坡政府将系统不断扩大,推广到经济、文化、社会管理的种种领域。房屋管理局用它来了解人们对于住房体系的批评和期待,人口部门通过它掌握大众的生育态度变化,旅游部门用它来预测各地游客数量的周期,食品部门通过它决策是否应该减少对进口食品的依赖等等。从这个角度说,新加坡是数据治国的一个实验室,它不仅将大数据用于情报和反恐,还用于构建和谐社会。
在中国,特别要强调的是,数据治国不是“数字治国”。一些官员一谈起辖区人口面积、GDP增长幅度、项目投资多少、惠及领域若干、利税增加几何都有“数”在胸,还特别喜欢用“三项原则”、“五个重点”、“八项规定”等等数字范式对工作进行总结,各项工作的考核也都与数据挂钩,大有唯“数据”盛行之势。这不是不好,但这些都是孤立的、静态的数字,并不是“数据治国”的真义。大数据时代,数据治国更关注的是动态的数据、系统化的数据,以不间断“流”的形式存在的、成片的、活的数据,它们应该成为公共决策的资源为政府和社会所广泛使用。归根结底,公共决策最重要的依据将是系统的、成片的、动态的数据流,而不是个人经验或长官意志,过去深入群众、实地考察的工作方法虽仍然有效,但对社会治理而言,系统采集的数据、科学分析的结果更为重要。
我认为,数据不仅可以治国,还可以强国。其中的原因,是因为数据正在成为各行各业最重要的创新资源。
以农业为例,来自天气、土壤和农作物的数据,可以实现自动化的灌溉、防治虫灾、决定如何种植和收割、节省水利资源、提高单位产量;在教育领域,以大数据为基础的在线智能学习平台(MOOC),可以突破教室的限制,让成千上万的学生同时得到个性化的教学和辅导;再以医疗领域为例,IBM公司的Watson系统可以快速地检索几百万名患者的病例、最新的医疗研究报告和成果,做出更快、更准确的诊断;工业领域更不待言,汽车、飞机正在被大数据改造,成为无人驾驶汽车、无人驾驶飞机;还有金融领域,利用电商平台的交易数据,“阿里小贷”可以在几分钟之内判断企业的信用,为近百万小微企业发放贷款。今年年初,阿里巴巴又推出了基于个体消费者的“芝麻信用”,用的创新资源还是数据。一百年前的美国,用了几十年的时间才建立全民信用体系。因为拥有无处不在的充沛数据,今天中国的全民信用体系可能在更短的时间内、以更低的成本就可以建立起来。
毫不夸张地说,基于数据的创新将带动人类社会的各个领域都实现巨大的飞跃,这种飞跃是前人难以想象的。今天的年轻人面临的创新机会要远远多于前几代人,因为他们拥有人类有史以来最伟大的创新资源:数据。
和其他的创新资源相比,数据之所以伟大,是因为它不会被它所激发的思想和创新所消耗,它可以重复使用,可以同时被无数人使用,此数据和彼数据整合,还可以产生新的价值和效用。在空间的拓展中和时间的延伸中,数据的能量将在人类社会层层放大,数据的不断积累是资源和知识的持续增加。
但要成就数据的“伟大”,还有个前提,这就是数据的开放。正是出于这个原因,本书用了相当的篇幅来讨论“开放数据”。
对于“开放数据”,中国社会目前还存在不少误解。一是将开放等同于公开,其实开放和公开是两个完全不同的概念。公开是信息层面的,是一条一条的;开放是数据库资源层面的,是一片一片的。开放数据,指的是将原始的数据及其相关的元数据以可以下载的电子格式让第三方自由使用。开放也不一定代表免费,因为开放是有成本的,企业可以以收费的形式开放数据。开放也可以有层次、有范围,针对某个特定的组织和群体开放,不一定面对全体社会大众。
开放数据之于当下中国社会的意义,在于推动知识经济和网络经济的发展,在于促进中国经济由粗放向精细、从“制造”向“创造”的转型升级,在于释放社会生产力、催生创新。通过开放更多的数据,让创新的资源自由地流动,李克强总理提出的“大众创业,万众创新”才能更快、更好地在中国大地形成燎原之势。
大众创新、创业的趋势,也可以在美国社会的发展过程中观察到。根据美国科学基金会(NSF)的数据,1981年,大公司(超过25000人)的研发投入占全美研发投入的70%,可谓主导了美国的创新;到2007年,大公司的研发投入仍然在上升,但格局却发生了改变,尽管绝对数量增长了4倍,其占全美研发投入的比例却下降到35%。同期,1000人以下小公司的研发投入增长了50倍,其占全美的比例从1981年的4%上升到2007年的24%。这些数据表明,研发和创新呈现分散化,在向小公司和个人转移,其中最根本的原因,就是知识、信息特别是数据资源的深度开放,不再受大公司、大组织的垄断,不再是精英阶层的专利。 文化靠沉淀,文明靠创新。创新,才是一个国家持续发展、不断迈向强大的真正动力。今天的中国,创新已经成为共识。就此而言,数据强国我们正在路上。
记得《大数据》首版上市,是2012年7月
资源链接
标签
发布日期
2019-02-20
擦亮日期
2019-02-20