“大数据”对官方统计数据发布的冲击及应对.pdf

《统计科学与实践》2013年12期 统计实努 DOI：10．3969／j．issn：1674—8905．2013．12．019 “大数据对官方统计数据发布的冲击及应对 刘兴远 (江苏省统计局。江苏南京210013) 摘要：大数据环境下，官方统计数据发布的条件和环境发生重大变化，统计数据发布方式、 内容和时效及频率都将受到强力冲击。因此，政府统计部门在拥抱大数据、与大数据共舞中，应 从打造数据仓库、运用可视化技术、整合数据资源、与新媒介共融等方面着眼，积极改进和完善 官方统计数据发布模式。 关键词：大数据：统计数据发布；应对 美国有谚云：除了上帝，任何人都必须用数据说话。对肩 负着向社会发布和传播数据使命的政府统计部门而言，数据就 与官方CPI环比指数呈现出联动关系。这表明，一方面在大 是重要资源和“说话”的资本。面对滚滚而来的大数据浪潮， 数据时代政府统计部门不再是唯一的数据拥有者，也不是唯 正视大数据带来的挑战和冲击，利用大数据所提供的全新理念 一的发布者和传播者：另一方面，人们获取公共信息的渠道 和思考方式，挖掘价值堪比黄金、石油和货币的庞大数据资 可以并能够越来越多样化，不必再过分依赖政府部门发布的 源，藉以改进和完善既有官方数据发布模式，对提升统计工作 统计数据信息，从而对政府统计数据发布形成“挤出效 价值无疑具有重大意义。 应”。 2．人们的主观感受与官方统计之间存在差异化。大数据时 一、大数据时代官方数据发布环境 代，是一个人们在不知不觉间被数据裹挟和深陷其中的时代。 发生深刻变化 每个人都是数据的创造者和传播者，每个人也是数据的接收者 和分享者。IDC指出，个人在日常生活中的“数字足迹”大大 随着大数据时代的到来，无处不在的信息感知和采集终端 刺激了数字宇宙的快速增长。通过手机、电脑、数字电视、智 为我们积累了海量数据，一个更加开放、便捷的社会正在形 能电视、传感器、卫星定位系统等终端设备，每个人的日常生 成。在大数据改变人们生活和思维方式的同时，政府统计数据 活都在被数字化，海量数据由此源源不断地产生。数据增长催 发布所处的环境也正悄然发生历史性变化。 生了新的数据处理技术和应用，继而又产生了新数据的积累和 1．社会公众获取数据信息的来源呈现多样化。大数据时 存储，如此周而复始迭代发展，形成了令人叹为观止的大数据 代，互联网文本和文件、有哪些信誉好的足球投注网站、移动电话、微博、微信和电 浪潮。但正如大数据时代)作者维克托·迈尔一舍恩伯格所 商每天都产生海量的数据。美国互联网数据中心指出，互联 说，大数据往往是凌乱和质量参差不齐的。数据价值密度的高 网上的数据每年将增长50％，每两年翻一番。IDC和EMC估低与数据总量的大小往往成反比。例如，一部数小时连续不间 计，蛩J2020年的数字世界将拥有40ZB的容量，是全世界所断的视频监控过程中，可能有用的数据仅仅只有数秒。而一般 有海滩全部沙粒数的57倍。有资料表明，1秒钟内，互联网 的数据使用者，不可能通过采用强大的机器算法来迅速地完成 产生的数据量1；1520年前整个互联网储存的数据还多；1分钟数据的价值“提纯”，无法辨别出数据的“噪音”，同时自身 内，微博、Twitter上新发布的数据量超过10万，社交网站也不断制造着数据的碎片化、歧义化。近年来，社会上对官方 Facebook的浏览量超过600万；1天内，百度要处理几十数据的质疑，诸如收入“被增长”、CPI“被下降”等，主要 PB数据。可以说，大数据的应用已经渗透到人们的日常生 就缘于老百姓的主观感受与官方统计数据之间的