范煜著的这本《数据革命(大数据价值实现方法技术与案例)》的目的不在于研究数据的获取，因为社会上已有足够的数据，无数运行的软件日夜不停地产生着新数据，无数程序员在编写着程序准备产生更多的数据。本书更多地是放眼于数据时代对数据的存储和应用，以及数据应用会产生哪些改变，这些改变包括政治的、经济的、社会的等；并且探讨了一个通用的数据产生价值的途径——决策支持，其中涉及一个被称为“鹰眼”的核心技术，这个技术的推广应用将对数据使用发挥很大作用。

在信息技术革命之后，我们将迎来数据革命。在大数据的概念、性质和价值已得到政府和社会的认可之后，大家关注的是数据如何获取，以及有了数据以后如何挖掘数据的价值。仅适合特定行业、满足特定需求的技术不足以应对一场革命，大数据不但是超出计算机软硬件处理的能力，更是超出人类的认知能力。只有实现对数据的认知，利用数据辅助决策，才是适合不同行业数据价值实现的通用手段。本书描述了数据革命的起源、实现的思路、所用的技术和要达到的目标，针对当今社会热点描述了在数据时代的应对之策。

范煜著的《数据革命(大数据价值实现方法技术与案例)》宏观和微观、人文和技术、启迪思想和关注实用并举，既适合宏观层面的领导启迪思维，提出工作目标，又适合微观层次的执行人员找到实现的方法和路径。本书介绍的理论和技术均可在智慧城市、智能制造领域实际使用。

本书适合政府、企业决策者和CIO，及其他对大数据应用感兴趣的人阅读。

开编故事

第1章 迎接数据革命

 1.1 信息技术革命

1.1.1 未完成的第三次工业革命

1.1.2 从智力替代到辅助决策、自主决策

1.1.3 三次工业革命的比较

1.1.4 数据是信息革命的主要遗产

 1.2 为什么是数据革命

 1.3 社会需要数据革命

1.3.1 发展需要资源配置均衡

1.3.2 数据促进社会平等

1.3.3 不均衡导致中国古代王朝更迭

1.3.4 熵增原理

1.3.5 中国国内市场的完善

1.3.6 新的就业机会

1.3.7 建立社会经济运行的反馈机制

1.3.8 权威的信息交换平台

1.3.9 分享经济模式的扩张

 1.4 从海关数据看数据价值

 1.5 美国的启示

 1.6 数据的价值与变现

1.6.1 数据的变现

1.6.2 决策产生价值

1.6.3 数据的价值特点

1.6.4 数据服务的商业模式

 1.7 信息时代遗留的问题

1.7.1 缺乏原始数据

1.7.2 难搞的需求

1.7.3 自助分析的陷阱

1.7.4 难以满足的客户

1.7.5 完全不一样的需求

1.7.6 心有余而力不足的数据挖掘

1.7.7 跳出事务处理的红海

第2章 认识数据革命

 2.1 认识数据

2.1.1 数据分类

2.1.2 数据来源和存储

2.1.3 非结构化数据

2.1.4 数据处理的三个层次：产生、获取和分析

2.1.5 数据比图像、视频更有价值

2.1.6 数据与程序要分离

2.1.7 SQL是访问数据的通用语言

2.1.8 需要标准并开源的数据库设计

 2.2 关于数据

2.2.1 数据和信息的区别

2.2.2 数据含金量

2.2.3 用于理解大数据的小数据

2.2.4 广义和狭义大数据技术

2.2.5 看懂数据的认知计算

2.2.6 数据的冷态、温态和热态

 2.3 走出大数据应用误区

2.3.1 从个性化需求到普遍服务

2.3.2 走出结果导向

2.3.3 从有方向到无方向

2.3.4 自助分析工具与自助分析系统的区别

 2.4 信息系统总体规划

2.4.1 基于数据的规划

2.4.2 用规划展示数据不足

2.4.3 以市长为核心的智慧城市总体规划

第3章 推动数据革命

 3.1 数据的立法

 3.2 数据的公开

3.2.1 对信息公开的认识

3.2.2 政府开放数据

3.2.3 对开放数据的要求

3.2.4 政府主导的公共数据库

3.2.5 科研数据的公开

 3.3 有时数据隐私只是借口

 3.4 数据基础设施

3.4.1 数据作为基础设施

3.4.2 数据垄断的“滑铁卢”

3.4.3 公共数据服务与中介

3.4.4 农产品交易数据的案例

 3.5 建立数据图书馆

第4章 进行数据革命

 4.1 数据用于决策支持

4.1.1 数据分析需要统计而不是检索

4.1.2 数据通过辅助决策产生价值

4.1.3 两类完全不同的程序

4.1.4 传统商业智能模式的沦落

4.1.5 像鹰一样看数据

4.1.6 数据一致性不是分析的先决条件

4.1.7 从数据比较中发现价值

4.1.8 保障决策者的决策思维流

4.1.9 建立基于可视化数据的指挥室

4.1.10 组织的决策支持流程

4.1.11 宏观和微观的融合

4.1.12 用过度设计满足任意需求

 4.2 建立数据模型

4.2.1 存储数据的数据仓库

4.2.2 可以推导需求的维度模型

4.2.3 维度模型原理

4.2.4 分主题进行数据分析

4.2.5 离不开的时间维度

4.2.6 通过时间分析数据

4.2.7 空间维度直观地显示数据

4.2.8 数据的可视化钻取

4.2.9 用OLAP提升统计速度

4.2.10 数据可视化加快对数据的认知

4.2.11 用内存数据库实现实时数据分析

 4.3 改变思路

4.3.1 建立基于真实数据的

4.3.2 为实现工业  4.0建立数据基础设施

4.3.3 主动抽取数据实现数据集中

4.3.4 统计数据从报送到抽取

4.3.5 改进数据分析工作流程

 4.4 适应数据分析的硬件

第5章 实现数据革命

 5.1 数据革命的作用

5.1.1 对国家治理的作用

5.1.2 对国有企业改革的作用

5.1.3 对政府“三公”经费管理的作用

5.1.4 对“一带一路”战略的作用

5.1.5 对医疗改革的作用

5.1.6 对银行信贷风控的作用

5.1.7 对降低社会成本的作用

5.1.8 对防止欺诈上市的作用

 5.2 数据革命的后果

5.2.1 竞争机制的替代

5.2.2 计划经济和市场经济的融合

5.2.3 经济危机的消除

 5.3 数据革命后的技术

5.3.1 以数据检索为主的搜索引擎

5.3.2 基于数据的云服务

5.3.3 可以检索数据的浏览器

第6章 工业数据革命

 6.1 智能制造首先要解决数据问题

 6.2 工业企业数据总体架构

 6.3 财务数据分析

6.3.1 四个层次

6.3.2 阿特曼Z-score模型

6.3.3 财务比率

 6.4 经营数据分析

6.4.1 名词解释

6.4.2 经营数据中心

6.4.3 销售数据分析

6.4.4 毛利数据分析

6.4.5 应收款数据分析

6.4.6 采购数据分析

6.4.7 应付款数据分析

6.4.8 库存数据分析

 6.5 与上市公司外部数据比较

 6.6 控制数据分析

6.6.1 从工业大数据中找到故障

6.6.2 从检测大数据中发现质量问题

第7章 设计案例

 7.1 政府房产数据分析

7.1.1 监控中心

7.1.2 预售数据分析

7.1.3 成交数据分析

 7.2 医院管理决策支持系统

7.2.1 监控中心

7.2.2 医药收费数据分析

7.2.3 门诊数据分析

7.2.4 住院数据分析

7.2.5 手术数据分析

7.2.6 用药数据分析

7.2.7 医疗项目收入数据分析

7.2.8 大型诊断检查数据分析

7.2.9 体检数据分析

7.2.10 物资出入库数据分析

 7.3 政府财政数据分析

7.3.1 监控中心

7.3.2 收入数据分析

7.3.3 支出数据分析

7.3.4 收支执行数据分析

7.3.5 预算执行用款数据分析

7.3.6 政府采购数据分析

致谢

参考文献

1.1信息技术革命

数据成为重塑国家竞争优势的新机遇。在全球信息化快速发展的大背景下，大数据已成为国家重要的基础性战略资源，正引领新一轮科技创新。充分利用我国的数据规模优势，实现数据规模、质量和应用水平同步提升，发掘和释放数据资源的潜在价值，有利于更好发挥数据资源的战略作用，增强网络空间数据主权保护能力，维护国家安全，有效提升国家竞争力。

国务院《促进大数据发展行动纲要》

1.1.1未完成的第三次工业革命

18世纪中叶以来，人类历史上先后发生了三次工业革命。目前，大家一致认为第三次工业革命已经结束，并期待第四次工业革命的到来。

有人把第四次工业革命，定义为以互联网产业化、工业智能化、工业一体化为代表，以人工智能、清洁能源、无人控制技术、量子信息技术、虚拟现实为主的全新技术革命。显然，一次工业革命不可能是一些新技术的杂烩，而且这些新技术还依赖数据技术的发展，比如工业智能化，在数据认知还没有完成时，智能决策和执行无从谈起。

从第一次工业革命的蒸汽机和第二次工业革命的电力设备来看，蒸汽机的发明、制造、安装和维护虽然是一个巨大的产业，但产生的社会影响远不如其带来的规模化生产(比如钢铁厂和纺织厂的生产以及铁路的铺设)来得深远。同样，从电力的发明来看，电力本身有发电机以及发电机的生产、制造和服务，但它的影响不如后来电力输送线的铺设和大量电器的使用以及生产中动力从蒸汽机转变为电力带来的影响大。

综上所述，每一次工业革命都由两个或多个部分组成：第一个部分是作为引起革命标志的技术的发展；第二个部分是由这个革命的技术导致的社会更深层次的影响。

同样，我们来审视一下第三次工业革命。第三次工业革命是以计算机的发明使用为基础，计算机本身已经产生了一个非常大的产业，对人类社会也产生了巨大影响，但这不是第三次工业革命的最终结果。计算机产生的大量数据以及由于我们对数据的应用而产生的变革才是第三次工业革命更大的成果。

数据革命也不是人们传说中的第四次工业革命，只是第三次工业革命的下半场。第三次工业革命分为两部分，上半场是信息技术革命，下半场是数据革命。原因有两个：一是这两场革命的联系如此密切，难以分开；二是数据革命实现的是信息技术革命未完成的理想。

1.1.2从智力替代到辅助决策、自主决策

蒸汽机发明的重要意义，在于人类首次从只能依靠人力或者畜力作为动力，变为可以以机器作为动力，从而对人类的生产经营活动产生了巨大的影响。原来只能小规模生产的产品因为机器的发明能够进行大规模的生产，火车头或者轮船可以通过蒸汽机来驱动把人或货物运送到很远的地方。

计算机的发明，同样拥有一个相似的重要意义，人类首次以机器来代替人类的智力活动。蒸汽机以机器代替人类的体力活动，计算机以机器代替人类的脑力劳动。

但是，仔细分析从计算机发明以来人们所取得的成就，不难发现，计算机的发展还没有完全达到预期的目标。

机器代替人类智力的活动有三个阶段。

第一个阶段是智力替代，即原来是人可以实现的智力活动，用计算机来替代。比如，原来必须用心算或者笔算进行的计算，用计算机可以自动进行；原来必须依靠个别智力超群、经验丰富的人才能完成的工作，可由计算机来完成。第三次工业革命基本上完美地实现了这个阶段的目标。

P6-7

自2008年经济危机爆发以来，从美联储开始，世界各国央行都在通过货币政策防止更大经济危机的爆发。大家同时也认识到货币与经济政策只能缓解经济危机的严重程度，争取时间，而不能从根本上走出经济危机。只有新的技术革命的发生，世界才能真正地走出经济危机。

那么下一场技术革命是什么呢？现在有很多推测，如机器人、工业4.0、虚拟现实（VR）、3D打印、人工智能等。如果研究一下这些技术的影响范围，就会发现它们都难以担当下一次技术革命的重任。

能把世界拉出经济危机的技术革命是怎样的呢？它应该具有以下特征：①应用领域非常广泛，而不局限在某个行业；②影响的人群非常大，会产生大量新兴的职业；③和日常生活息息相关，具有很大的渗透性。

显然，我们正处于信息技术革命的末期，越来越多的迹象表明，信息技术革命已经完成了它的历史使命：①英特尔公司已经走上了巅峰，摩尔定律即将失效，难以开发出更高性能的CPU，即使推出更高性能的CPU，市场需求也不大，市场普遍认为现在的CPU已经能满足现有需求；②智能手机经过高速发展后，市场进入饱和期，功能也基本满足需求，大家更换手机的动力减弱，高速发展的苹果公司销量停止了增长；③微软公司推出的Windows10操作系统免费升级，但即使使用多种强制手段，大家升级的愿望也比较弱，甚至认为即使很老的WindowsXP系统也能满足基本需求。当初人们对信息技术革命的期望，能够做到的已经做到，不能做到的现在暂时也遥遥无期。

信息技术革命给我们留下什么呢？无论是初期的大型计算机，还是后来的个人计算机、笔记本电脑、智能手机，或者现在很时新的物联网，都会在使用过程中产生大量的数据。这种数据分散在不同的地方，很多数据用完即扔。数据只在产生的过程中发生了作用，历史数据价值并没有被发掘。特别是物联网技术产生以后，收集到越来越多的数据，但很多数据还没有找到用处。

在计算机出现的初期，人们就对利用计算机实现决策支持抱有非常大的期待。关于决策支持系统、专家系统的研究，有一段时间也非常红火，但现在看来这个期望还没有实现。以实现决策支持为目的的商业智能领域虽然积累了许多有价值的理论和技术，但达到的效果还不能满足人们的预期目标。

综上所述，作为信息技术革命成果输出的大量数据应该是下一场革命的输入，是新革命的原料，信息技术革命未完成的使命就是下一次革命的目标。因此，下一场革命无疑应该是数据革命。

数据革命是信息技术革命的延伸，它会对社会产生巨大的影响，它完全是从另一个角度去完成信息技术革命不能完成的目标，还会对信息技术革命的产物（比如计算机网络、云计算、物联网）产生更大的需求，导致现在看来过剩的计算能力又变得不足。

数据革命的影响巨大，会深入到社会经济的方方面面。现在凡是用到计算机的地方，都涉及数据的问题。数据的处理对很多人来说都是一个崭新的领域，有很多新知识需要学习，并因此产生许多新兴职业。

目前已经出现一些与数据革命相关的事情，比如政府开放数据。现在欧美很多国家政府制定了政策，要求政府数据、有政府基金资助的科研数据对外开发，把原来保密的数据变成共享。政府建立起开放数据网站，提供可机读的数据。但是他们的工作局限在数据的供应上，对数据如何利用、如何产生价值还依赖社会的创新，并没有找到通用的方法，也没有找到通用的价值创造机制。

数据革命中的数据不一定是大数据，虽然对海量数据的认知离不开大数据技术，但大数据只是数据的一个特例。

本书的目的不在于研究数据的获取，因为社会上已有足够的数据，无数运行的软件日夜不停地产生着新数据，无数程序员在编写着程序准备产生更多的数据。本书更多地是放眼于数据时代对数据的存储和应用，以及数据应用会产生哪些改变，这些改变包括政治的、经济的、社会的等；并且探讨了一个通用的数据产生价值的途径——决策支持，其中涉及一个被称为“鹰眼”的核心技术，这个技术的推广应用将对数据使用发挥很大作用。

利用数据进行革命的最终结果应该是：人们通过对数据的分析，解决了在经济生活中遇到的一些难题，反过来推进更多的数据的产生和存储，再进一步推动更多的信息技术产品的生产和销售，吸引更多的人从事与数据相关的工作。

本书描述了数据革命的起源、实现的思路、所用的技术和要达到的目标，针对当今社会热点描述了在数据时代的应对之策。