第一章 国内外大数据发展基本概况

一、全球大数据发展概况

（一）大数据已成为全球各国战略竞争的焦点

伴随大数据成为基础性战略资源，世界各国将推动大数据发展作为提升国家竞争力、夺取新一轮竞争制高点的战略选择。各国普遍认为，掌握大数据及相关能力，是保障经济持续增长、提升国家战略决策能力、强化科技发展综合实力和强化军事建设等方面的支撑力量。

美国当前已进入大数据“第三步战略阶段”，发布了《联邦大数据研发战略计划》，形成了涵盖技术研发、数据可信度、基础设施、数据开放与共享等7个维度的系统顶层设计，打造面向未来的大数据创新生态，特别是新一届政府上任以来，对大数据应用及其产业发展持续关注，构建并开放高质量数据库，强化5G、物联网和高速宽带互联网等大数据基础设施，促进数字贸易和跨境数据流动等。英国紧抓大数据产业机遇，密集发布了《数字战略2017》《工业战略：建设适应未来的英国》等，希望到2025年数字经济对本国经济总量的贡献值可达2000亿英镑，积极应对“脱欧”可能带来的经济增速放缓的挑战。韩国布局大数据发展战略以应对第四次工业革命，韩国的智能终端普及率及移动互联网接入速度多年来位居世界前列，这使得其数据产出量也达到了世界先进水平，为充分利用这一天然优势，韩国持续推进大数据发展战略，发布以大数据、云计算等技术为基础的《智能信息社会中长期综合对策》，以积极应对第四次工业革命的挑战，希望大数据成为该国经济增长的引擎。

（二）大数据产业增长势头保持强劲

全球的数据规模总量已呈现爆炸式增长，据美国IDC预测，全球数据量大约每两年翻一番，这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。IDC预计，到2020年，全球将会拥有33ZB的数据量，且非结构化数据在存储系统中所占比例接近80%。到2025年，全球数据量将突破175ZB。产业规模仍保持增长态势，根据监测数据，2018年全球大数据市场规模将达到454亿美元，而未来5年的年均复合增长率约为15.37%，至2022年，全球大数据市场规模达到800亿美元。超大规模数据中心建设不断加快，根据市场研究机构Synergy Research发布的数据，2018年全球超大规模数据中心为430个，较2017年增长11%。同时，该机构预计在2019年年底前，全球超大规模数据中心的总量将会超过500座，云计算的领先企业仍是超大规模数据中心的主要拥有者。企业级服务已成为云计算、大数据市场的重要组成部分，IDG对云计算、大数据企业的调查和预测结果显示，目前超过70%的大企业和56%的中小企业已经部署或正在计划部署大数据项目，其中各大企业将在与大数据有关的项目上平均花费800万美元。

（三）大数据关联产业核心技术研发步伐加速

世界主要发达国家重点围绕大数据、芯片、人工智能、云计算等领域加大研发投入，推动大数据与人工智能、云计算、物联网、区块链等技术深入融合，创新支持方式，引导企业加快技术创新，力图巩固和强化数字转型发展主导权。例如，2018下述国家组织做了如下披露。

美国国防部宣布，在未来五年内投资20亿美元用于研发下一代人工智能技术，用以将第二波机器学习技术向“上下文推理”能力发展。英国在工业战略中强调大数据与人工智能的发展，宣布将投资10亿英镑（约合人民币91.4亿元）以支持该国人工智能的研究，确保英国在人工智能领域的国际领先地位，将来很有可能会推动现有的商品和服务市场被颠覆和取代。欧盟委员会宣布将在2024年前投资17.5亿欧元，重点研究节能芯片、功率半导体、智能传感器、先进光学设备和复合材料五大领域。德国政府在内阁会议上提出，计划在2025年前向人工智能领域投资30亿欧元，以推动德国人工智能的发展。法国政府在今后4年内将投入15亿欧元支持前沿技术发展，其中4亿欧元用于科研项目招标和颠覆性创新研究，8亿欧元用于纳米电子学。日本将大数据、物联网和人工智能界定为建设超智能社会服务平台必不可少的共性技术，专门拨款901.40亿日元（包括补贴）用于物联网、人工智能、机器人等技术的研发。韩国政府将智能信息化社会定义为“ICBM（物联网、云服务、大数据和手机）与AI（人工智能）相融合的社会”，将在未来4年内投资2.2万亿韩元（约合130亿元人民币）开发核心人工智能技术，希望该国能在2022年前成为该领域的全球巨头。

（四）各国政府不断加大数据核心产业培育力度

世界各国不断加大对大数据核心产业及相关领域的投入力度，促进产学研用协同，引导社会资本支持，不断扩大大数据产业化发展水平。美国投资2亿美元用于提高大数据分析的技术与工具，重点资助大数据核心技术研发，推动大数据在政府治理、公共服务、国防安全等领域的应用和发展，并在研发支持中注重多部门协同，强调与大学、研究机构和企业协同。欧盟加强数据处理技术投入，支持与行业协会签署PPP协议，制定政策、运作项目，引导产业投资、研发创新。法国以新兴企业、软件制造商、工程师、信息系统设计师等为目标，先后投入1150万欧元用于支持信息系统设计、大数据新兴企业、软件制造等7个投资项目；同时，中小企业、创新和数字经济部投资3亿欧元，重点发展大数据孵化器，并向数百家大数据初创企业提供启动资金。韩国投入6444亿韩元，推进大数据及相关产业发展。

（五）大数据在重点领域的融合应用持续深入

近年来，大数据应用基础条件发生跨越式变化。一方面，数据流通、共享的边界将进一步拓宽，多源数据融合技术的进步为公共服务数字化与智能化水平的提升提供了技术层面的保障，数据的标准化及开放则成为各国建设服务型政府和平台型政府的资源保障。另一方面，大数据应用的基础设施将成为与水电气暖等类似的设施，成为人们生活中必不可少的部分。其中，包括物联网、智能硬件等数据采集类设施，5G、光通信等超高速数据传输类设施，超级计算机、云计算及边缘计算等计算类设施，以及新型的存储设施等。

各国政府高度重视并积极推动大数据的应用，创造需求，进一步加速大数据产业化和市场化进程。美国着力推动大数据在服务领域的应用，在公共政策、敏感人群和事件监控、犯罪预测、反恐等领域依据大数据分析辅助决策，以大数据应用增强社会服务能力，人口、交通、医疗等公共事业部门通过大数据的挖掘，实现了对人口流动、交通拥堵、传染病蔓延等情况的实时分析。英国积极促进大数据技术从科研向应用领域转化，在资金上大力支持大数据在医疗、农业、商业、学术研究领域的发展。法国旨在通过大数据应用提升产业供给能力、提高产业供给效率，法国经济、财政和工业部通过投资政府项目，促进大数据技术、产品及解决方案研发创新，并将其用于实践，促进了法国大数据产业的发展。

（六）各国政府公共数据开放快步推进

加快数据开放共享成为各国提升数据价值的重要手段。政府拥有的数据资源规模大、种类丰富，蕴含着巨大的经济和社会价值。社会各界对政府数据资源开放共享的需求非常迫切。因此，整合相关部门公共数据资源，建立公共数据开放平台，推动公共数据资源实现开放共享，已成为发达国家实施大数据战略的重要内容。从总体上看，世界实施数据开放的国家有近100个，截至2018年11月14日，加拿大共计开放98万个公共数据集，欧盟发布86万个公共数据集，印度发布23万个公共数据集，英国发布4.5万个公共数据集，如图1-1所示。各国数据开放网站开放数据集量（个）如图1-2所示。据欧盟测算，2016—2020年，欧盟开放数据直接市场规模的增长率为36.9%，预计到2020年将达到757亿欧元。其中，美国通过开放政府公共数据开发移动应用的企业已超过500家，至少有4家企业市值已超过10亿美元。

图1-1 2018年世界主要发达国家开放数据集数量

（数据来源：天府大数据国际战略与技术研究院）

图1-2 各国数据开放网站开放数据集量（个）

（数据来源：赛迪智库）

美国是数据开放政策的倡导者和实践者，非常重视数据开放的顶层设计，自2011年起至今，共公布了3个开放政府国家行动计划，2018年，12月21日，美国众议院投票决定启用《公共、公开、电子与必要性政府数据法案》（又称《开放政府数据法案》），标志着美国政府在数据开放上又迈出历史性的一步。英国同样是政府数据开放的领导者和先行者，致力于成为“世界上最开放、最透明的政府”，如今，英国已成为世界上政府数据开放最为成功的国家之一。如表1-1所示，2018年“万维网基金会”发布的《开放数据晴雨表》中，英国在政府数据开放方面的指数（总得分）与加拿大排名并列第一，一份国际行业报告显示，英国政府通过大数据技术每年已节省约330亿英镑。韩国积极建设“透明、称职、服务至上的政府”，通过利用新一代信息技术和“电子政府”，将“智能政府”作为一项国家战略，围绕政府数据开放构建一系列完整的体制机制保障，包括成立开放数据中心，建立开放数据战略委员会，颁布并实施《促进公共数据提供与推广基本计划》及《韩国2018—2020国家行动计划》等计划。

表1-1 2018年全球开放数据晴雨表

数据来源：万维网基金会。