市场前沿 | 云计算、大数据与统计局信息化建设
- 2014-09-13 12:40:00
- 王毅 贵州省统计局社情民意调查中心 原创
“云计算”推动“云调研”,“大数据”促进“大统计”,统计局作为官方的统计机构,承担着为国家发展和政府决策提供数据依据的重要任务。在“云计算、大数据”时代,统计局的信息化建设变革也需要与时俱进,不断创新
传统的统计调查工作中,人工抽样、纸质问卷、基层走访都是比较常用的数据收集工具和方式。在农业社会和工业社会的背景下,这些方法和技术在统计事业中发挥了积极的、无可替代的作用。然而,在信息化社会的背景下,信息大量膨胀,人口流动加快,互联网全面普及,新现象、新问题层出不穷,统计调查工作面临着前所未有的机遇和挑战。统计局如何抓住信息革命的机遇,利用先进的信息化工具和技术,加快自身的信息化建设步伐,是所有统计人不断思考和探索的问题。
我国政府统计局统计调查信息化建设起步较晚,虽然电话调查早在80年代末引入中国,直到2006年开始,统计调查信息化建设才逐步开始,在建设的初期,伴随着各地统计局先后开始设立社情民意调查中心,统计信息化建设相对简单,通常为采购单一的计算机辅助电话调查(CATI)工具,国内先后也涌现了一批CATI 软件厂商,其中包括萌泰公司的CATI软件(前身为译盛CATI)。虽然CATI调查方式单一,但由于其操作易标准化,质量相对可控,因此,CATI已经成为统计局信息化建设的标配产品。
2009年以来,随着Android,iOS等智能操作系统和手机、PAD等智能终端设备的应用和普及,以及4G网络的大范围覆盖和推广,计算机辅助面访调查中的移动面访(CAPI)不断被尝试,也越来越获得认可,2014年的全国经济普查就使用了该技术。当前,越来越多的统计机构也意识的CAPI的作用和意义,尤其是CAPI的定位、拍照、录音等质量控制手段更加丰富,数据质量更加可控,因此很多统计调查机构逐步开始进行推广应用。
此外,作为目前市场上主流的CAWI网络调查,自互联网普及后就得到了众多市场研究机构的拥护和支持,但由于其数据质量难以有效控制,因此,在政府统计调查系统内,一直为大家所顾虑。但是,近年来,随着移动互联网的快速发展,尤其是以微博、微信为代表的SNS等应用的普及,一方面,网络使用者的身份更加真实,另一方面,采用CAWI进行调查更加便捷,成本更低,数据质量也越来越高。对于统计调查而言,CAWI作为其他调查方式的补充,尤其适合一些样本数要求较大,样本信息无法提前获取,执行周期较长的调查项目,因此CAWI也越来越得到了大家的认可。
然而,技术发展日新月异,“云计算、大数据”时代突然来临,传统的独立部署的C/S架构的CATI软件和的CAPI软件已经显得落后,当前,采用全新的基于云计算平台,能够实现电话调查、面访调查和网络调查三者相互融合,集成数据采集、数据处理、数据分析和挖掘的技术已经出现,这给统计调查信息化建设带来了新的机遇。
2014年国家统计局与百度、阿里等11 家企业在京签订了大数据战略合作框架协议,共同推进大数据在政府统计中的应用,不断增强政府统计的科学性和及时性,这是一个很好的开端。
我们需要在“大数据”的世界里学习,掌握、比较、选择、运用和创新统计理论和统计方法,以适应大数据时代的发展及其带来的挑战。大数据将促进“大统计”,而“大统计”也应在大数据时代,为人类社会的发展和进步作出新的贡献。
“云计算、大数据” 时代的到来,是现代生产力水平发展到一定阶段的必然,在此背景下,统计局信息化建设的变革必须需要紧跟时代的发展。