首页 > 文章中心 > 统计学大数据分析

统计学大数据分析

统计学大数据分析

统计学大数据分析范文第1篇

基于理念分析和比较研究方法,对大数据的分析方法和传统统计学分析方法的关联性和差异进行了对比分析,从方法的基本思想、量化形式、数据来源、分析范式、分析方法、分析视角等角度揭示了两种社会科学分析方法存在的联系与差异。

关键词:

大数据;统计学;研究方法

中图分类号:

F27

文献标识码:A

文章编号:16723198(2015)11005201

随着信息技术的日益发展与普及,信息以及数据在社会经济发展过程中发挥的作用越来越重要。现如今,“大数据”时代已经来临,于是如何更有效地利用数据快速做出科学决策也已成为众多企业甚至是国家所共同关注的焦点问题。在数据处理和分析方法方面,《统计学》以及在其基础上发展而来的实证统计方法是当前的主流,这些方法可以帮助数据持有者从大量的数据中挖掘有价值的信息,并为其相关决策提供理论支撑和方法支持。然而,传统的实证统计方法在最新出现的大数据情境下,却呈现出了诸多缺陷,例如传统数据收集方法无法实现大规模(甚至是总体)数据的收集,传统统计方法和分析软件无法处理大规模数据,等等。于是,在将传统统计学方法应用于最新的大数据情境和问题之前,需要首先明确大数据所要求的处理方法与传统的统计学处理方法存在哪些关联和区别,然后才能够决定是否可以应用既有统计学理论和方法来处理某些大数据问题。

1大数据的界定

根据一位美国学者的研究,大数据可以被定义为:it means data that’s too big, too fast, or too hard for existing tools to process。也就是说,该学者认为:在关于大数据的所有定义中,他倾向于将之定义为那类“太大”、“太快”,或现存工具“太难”处理的数据。一般而言,大数据的特征可以概括为四个V:一是量大(Volume);二是流动性大(Velocity),典型的如微博;三是种类多(Variety),多样性,有结构化数据,也有半结构化和非结构化数据;四是价值大(Value),这些大规模数据可以为持有企业或者组织创造出巨大的商业或社会价值。

Victor在其最新著作《大数据时代――生活、工作与思维的大变革》中指出,大数据时代,思维方式要发生3个变革:第一,要分析与事物相关的所有数据,而不是依靠分析少量数据样本;要总体,不要样本。第二,要乐于接受数据的纷繁复杂,而不再追求精确性。第三,不再探求难以捉摸的因果关系,应该更加注重相关关系。这些变革反映出了大数据处理方式与传统统计学分析方法的很多关联以及主要不同。因此,下面我们分别针对两者的联系和区别进行讨论。

2大数据与统计学分析方法的联系

从18世纪中叶至今,统计学已经经历了两百多年的发展历程,不论是基础理论还是社会应用都极其坚实而丰富。大数据作为一种新兴的事物规律认知和挖掘思维,也将会对人类的价值体系、知识体系和生活方式产生重要影响,甚至引发重大改变。作为两种认知世界和事物规律的基本方法,它们在以下两个方面存在紧密关联。

(1)挖掘事物规律的基本思想一致。统计学(statistics)探索事物规律的基本方法是:通过利用概率论建立数学模型,收集所观察系统的数据,进行量化分析和总结,做出推断和预测,为相关决策提供依据和参考。对于大数据,维克托指出,大数据思维的来临使人类第一次有机会和条件,在非常多的领域和非常深入的层次获得和使用全面数据、完整数据和系统数据,深入探索现实世界的规律,获取过去不可能获取的知识。通过这两个定义可以看出,不论是传统的统计学方法还是新兴的大数据分析方法,都是以数据为基础来揭示事物特征以及发展趋势的。

(2)均采用量化分析方式。大数据分析的基础是数据化,也就是一种把各种各样现象转变为可制表分析的量化形式的过程。不论是传统统计学中所应用的数据(定性和定量数据),还是大数据时代即将被转化和采用其他形式数据(如文字、图像等),最终都是通过量化分析方法来揭示数据中所蕴含的事物特征与发展趋势。

3大数据与统计学分析方法的区别

(1)基础数据不同。在大数据时代,我们可以获得和分析更多的数据,有时候甚至可以处理和某个特别现象相关的所有数据,而不再依赖于随机抽样。这意味着,与传统统计学数据相比,大数据不仅规模大,变化速度快,而且数据来源、类型、收集方法都有根本性变化。

①在数据来源方面,在大数据背景下,我们需要的纷繁多样的数据可以分布于全球多个服务器上,因此我们可以获得体量巨大的数据,甚至是关于总体的所有数据。而统计学中的数据多是经由抽样调查而获得的局部数据,因此我们能够掌握的事“小数据量”。这种情况下,因为需要分析的数据很少,所以必须尽可能精确的量化我们的数据。综上,大数据情况下,分析人员可以拥有大量数据,因而不需要对一个现象刨根问底,只需要掌握事物大体的发展方向即可;然而传统的小数据情况下则需要十分注意所获得数据的精确度。

②在数据类型与收集方面,在既往模式下,数据的收集是耗时且耗力的,大数据时代所提出的“数据化”方式,将使得对所需数据的收集变得更加容易和高效。除了传统的数字化数据,就连图像、方位、文本的字、词、句、段落等等,世间万物都可以成为大数据范畴下的数据。届时,一切自然或者社会现象的事件都可以被转化为数据,我们会意识到本质上整个世界都是由信息构成的。

(2)分析范式不同。在小数据时代,我们往往是假想世界是如何运行的,然后通过收集和分析数据来验证这种假想。也就是说,传统统计实证分析的基本范式为:(基于文献)提出理论假设-收集相关数据并进行统计分析-验证理论假设的真伪。然而,在不久的将来,我们将会在大数据背景下探索世界,不再受限制于传统的思维模式和特定领域里隐含的固有偏见,我们对事物的研究始于数据,并可以发现以前不曾发现的联系。换言之,大数据背景下,探索事物规律的范式可以概括为:数据观察与收集――数据分析――描述事物特征/关系。

(3)数据分析方法不同。传统统计学主要是基于样本的“推断分析”,而大数据情境下则是基于总体数据的“实际分析”,即直接得出总体特征,并可以分析出这些特征出现的概率。

(4)分析视角不同。传统的实证统计意在弄清事物之间的内在联系和作用机制,但大数据思维模式认为因果关系是没有办法验证的,因此需要关注的是事物之间的相关关系。大数据并没有改变因果关系,但使因果关系变得意义不大,因而大数据的思维是告诉我们“是什么”而不是“为什么”。换言之,大数据思维认为相关关系尽管不能准确地告知我们某事件为何会发生,但是它会提醒我们这件事情正在发生,因此相关关系的发现就可以产生经济和社会价值了。

4结语

综上,相对于传统而言,大数据思维主要包括三个重大转变。首先,要分析与某事物相关的所有数据,而不是依靠分析捎来能够的数据样本;其次,研究人员应乐于接受数据的纷繁复杂,而不再追求精确性;最后,认知世界的思想发生了转变,不再探求难以捉摸的因果关系,转而关注事物的相关关系。以上三个转变构成了大数据思维的核心。在统计学的进一步应用和发展完善过程中,需要结合以上转变所产生的挑战,思考有效的统计学发展对策。

参考文献

[1]孟小峰,慈祥.大数据管理:概念,技术与挑战[J].计算机研究与发展,2013,50(1):146169.

统计学大数据分析范文第2篇

【关键词】大数据 统计学 挑战 机遇 教学

【基金项目】贵州省科技厅、贵州民族大学联合基金(黔科合J字LKM[2011]09号)

【中图分类号】G642 【文献标识码】A 【文章编号】2095-3089(2014)08-0235-01

1.引言

“大数据”时代的来临和“大数据”处理技术的发展深深的影响着统计学的发展。能否利用传统的统计理论和统计方法对海量的数据做出快速、准确的处理并获取相关信息?如何对传统的统计理论与方法进行改进或探索新的统计理论和方法来对大数据进行挖掘与处理以获取信息?如何在“大数据”时代背景下培养符合市场需求的统计分析师或数据分析师?如何将“大数据”处理技术融入相关统计学课程教学以促进数据处理与分析技术的发展?这些都是我们在统计学相关课程教学过程中必须思考的一个问题。

2.大数据与统计学

“大数据”随着社交网络、物联网、云计算等的兴起而产生。一般认为大数据具有规模性、多样性、实时性及价值性四个基本特征,包含分析、带宽和内容三个要素。“大数据”在数据来源、数据结构和处理方法方面对传统的统计分析方法产生了冲击。第一,在大数据背景下,数据来源不再是原来的简单抽样,而是“样本即总体”,直接将总体作为研究对象。第二,在大数据时代,研究对象也不是原来单一的结构化数据,由于数据的多样化与规模化,我们更多的是研究非结构数据,采用人工智能来进行数据挖掘和信息获取。第三,数据处理方法也不是简单的采用传统的假设检验方法进行研究,特别是对于统计学中的异常点,不再采取以往的丢弃或者平滑处理方式。

“大数据”处理技术对统计学的发展提出了巨大挑战,但我们必须认识到学科之间的发展是相互交融的,“大数据处理技术”其本质上是数据处理与分析技术,其发展对统计学学科的发展也有积极的一面,同时统计学作为一门独立的学科,有其自身独特的学科优势。首先,海量的数据有利于提高各类统计分析的精度,如减小抽样误差等。其次,较之于传统的统计学方法,现有的“大数据”分析方法难度较大、成本较高、耗时较长。而在实际的应用中,我们关心的不是数据量的多少,而是数据量所蕴含的信息。传统的统计学分析方法是以较少的数据进行精确度相对较高的统计分析,这是“大数据”分析所无法替代的。另一方面,统计学在数据收集方法、模型选择、模型假设以及模型诊断方面有很大优势。而且并不是所有的问题都具有海量的数据,并不是每一个“大数据”问题都适合用现有的“大数据处理技术”来处理。

3.对策与建议

3.1 夯实基础教学

针对以上的分析我们可以看出,大数据对统计学的发展既是机遇,又是挑战。因此我们在教学过程中要夯实统计学基础知识的教学,讲清楚统计学的基本原理与基本方法,特别是数据分析与数据处理的基本原理与方法。对于许多传统领域,如生物、医药以及质量与可靠性工程等,我们面对的多是“小数据”而不是大数据,因此基于样本的统计分析方法仍然是进行此类问题研究的最有效的科学手段。

另一方面,我们要结合大数据技术的特点,对统计学的基本知识进行拓展教育,引导学生思考怎样将已有的统计学基本原理与方法运用到大数据处理的技术研究中。如在大数据环境下怎样进行数据的收集、筛选与甄别、存储与分析等,如何分析并厘清可能的数据来源与范围,如何建立相关指标体系并对数据进行分类,如何制定或调整相应的统计参考标准,以及如何对依靠非传统数据源加工生产的统计数据进行规范的统计推断等。

随着大数据时代的来临,各行各业对具有统计背景知识人才的需求必定越来越多。因此,在统计学教学过程中,一定要结合各专业的特点,特别是“大数据”的特点,切实加强统计学的基础知识教学与拓展教学。

3.2 加强统计学专业软件教学

“大数据”环境下,对统计人才需求也发生了变化。面对海量的数据与多样化的数据,一名合格的统计人才或数据分析人才不单需要良好的统计素养与扎实的统计基础知识,更需要具有数据的存储与整理能力、计算能力以及数据分析与处理能力等。这就要求在教学过程中,加强统计软件或数学软件的教学。

针对传统的“数学证明+手工计算”或“重理论轻专业统计软件”的统计学课程教学模式,可将统计软件或数学软件融入课堂教学并安排一定的课时上机学习统计软件,以此提高学生数据处理能力,加深对统计学基本原理的理解与掌握。

在加强统计软件或数学软件,如SPSS、R、SAS以及Matlab的教学过程中,要摈弃“会软件的操作即会统计技术”的思维,要让学生真正掌握相关操作与相关算法,深入思考算法的实现与相关理论的应用。同时引导学生思考对“大数据处理”的技术要求,包括数据搜集、发掘、存储以及计算分析过程中的算法与设备要求等,引导学生针对大数据进行软件升级与开发。

3.3 突出案例教学与实践教学

大数据的产生和发展源于规模经济问题或超规模经济问题的研究。每一个大数据问题的研究都是与实际经济或社会问题紧密相联的,因此,在实际教学过程中,要突出案例教学与实践教学,由易到难,通过案例教学逐步引入大数据的概念以及大数据处理的基本技术,提高学生的分析全局观以及进行实际数据分析与处理的能力。

教学改革的目的是培养在“大数据”时代背景下,符合市场需求的专业统计人才,而合格的专业统计人才必须具备良好的统计实践能力。案例教学与统计实践活动是培养学生统计实践能力的有效途径。因此,在教学过程中,一方面,教师可融合各种与实际问题相关的案例进行分析和讲解,加深学生对相关统计理论知识的理解,激发学生的学习兴趣,培养学生解决实际问题的能力。另一方面,教师可以组织多种形式的课堂或课堂外的统计实践活动以培养学生统计实践。如,指导学生针对他们感兴趣的与经济、社会发展相关的统计实际问题展开统计研究,设计调查问卷,收集数据、整理和分析数据,撰写研究报告,实现对实际问题的分析和解决等。

4.结束语

总之,在“大数据”环境下我们既要积极面对挑战,又要紧紧抓住机遇,切实结合“大数据”的特点和“大数据处理技术”发展的需求,既加强对传统的统计学方法、统计理论的教学,又积极开展 “大数据“环境下的拓展教学,推动统计学的发展,在数据收集、数据分析以及统计制度等方面进行改革和创新。

参考文献:

[1]李国杰. 大数据研究的科学价值[J]. 中国计算机学会通讯,2012,8(9) .

[2]姜奇平. 2013 全球大数据-大数据的时代变革力量[J]. 互联网周刊,2013,1.

[3]游士兵,张佩,姚雪梅.大数据对统计学的挑战和机遇 [J]. 珞珈管理评论标,2013,2(13).

统计学大数据分析范文第3篇

(一)数据化的信息收集

传统的统计研究主要是对已收集的数据进行各种技术分析,包括描述性分析、推断性分析、截而分析、时间序列分析等,侧重点在于技术分析手段的使用上。然而大数据时代,关注的是信息本身。现代信息系统的使用使大数据成为可能,文字、地理方位、沟通等,任何事物都可以量化,一切现象都可以用数据或表格来诊释。因此,大数据背景下世界是由各种信息和数据所构成的。

(二)数据模式的研究对象

在信息处理能力受限制的过去,人们缺少用来分析所收集数据的工具,因此产生了随机抽样。随机抽样法的目的是用最少的数据获得最多的关于总体的信息,从而使用样本对总体进行推断。然而,在大数据时代,数据处理的方式和技术发生了巨大的改变,人们可以通过互联网、数据库以及各种通讯工具获得海量数据,这时随机抽样就失去了它原来的意义。简单廉价的数据收集方法,足够的数据处理和存储能力,使得全数据模式成为可能。因此,大数据背景下样本即为总体。放弃随机抽样分析的捷径,采用所有数据的方法,可以发现一些隐藏在海量数据下的细节。

(三)混杂性的数据处理思维

传统的统计学处理数据的步骤是首先对数据进行整理和清洗,剔除不完整的或者异常值,然后再利用样本信息,在允许的误差范围内对总体进行推断和分析,即通过调整精确度的大小来对总体进行研究和分析。然而,在大数据背景下,来自各个时间和空间的数据来源纷杂,格式广泛,在萃取或处理数据的时候,很难做到把所有的数据都进行仔细地清洗。这种情况下,必须接受数据的混乱和不确定性,因为数据多比少好,因此更多的数据信息更加智能、更加精确的算法系统还重要。当拥有大量数据的时候,可以忽略一部分精确性,但并不是说不需要精确性,而是数据规模不断扩大时,确切的数量已经不再那么重要了,可以通过大规模的数据来发现事物背后的规律。

(四)相关关系的基础分析方法

传统的统计中,大部分相关关系分析仅限于寻求线性关系,或是在建立假设的基础上揭示数据相互之间的因果关系,例如Granger经验就是依据时间序列数据对变量之间的因果关系进行的判断,但往往会产生一些虚假的因果关系。这是因为统计关系并没有蕴含多少真实的因果关系。在大数据背景下,数据点以数量级方式增长,用数据驱动的相关关系分析不再需要建立在假设的基础上,所以相关关系分析不容易受偏见的影响而发生错误。大数据时代相关关系通过回答“是什么”的问题,为人们认识世界提供了一种新的视角。因此,相关关系统计分析是大数据预测的基础。

二、统计学专业教学体系中存在的问题

大数据背景下传统的统计学专业教学体系存在的问题凸显,具体体现在以下几个方面。

(一)培养目标无法适应大数据时代的社会需求

传统的统计学专业教学体系的培养目标是通过统计专业核心课程内容的介绍,锻炼学生收集、整理和分析数据的能力,培养“应用型”统计专业人才。然而,大数据的出现,使得通过数据分析获得知识、商机和社会服务的能力,从以往局限于少数的学术精英圈子扩大到了普通的社会机构、企业和政府部门,各行各业对统计数据、统计分析的需要使得统计学专业受到了前所未有的关注。大数据背景下,要求统计学作为一种分析工具,能够与其他专业相互衔接,相互服务,培养“复合型”专业人才。因此,传统的统计学专业教学体系培养目标存在两个方而的挑战:第一,如何协调统计与其他专业之间的关系;第二,如何从“应用型”向“复合型”人才进行转变。

(二)忽视数据的收集和创新

传统的统计学专业教学体系重视数据的分析技术,更多的课程设置是围绕着数据分析方法和技术展开的,例如多元统计分析、时间序列分析、统计预测与决策分析等。基础的数据收集部分只在统计学原理中有一章的内容介绍,而且是作为非重点一带而过的。大数据以海量的数据为分析研究的对象,将一切社会经济现象进行量化,重视的是信息的收集和数据的创新,包括数据的再利用,数据的重组,数据的扩展,数据的折旧以及数据的开放等各个方面。这些内容在原有的教学体系中是没有体现的。

(三)与大数据时代脱节的教学内容

传统的统计学专业教学体系原有的教学内容,在近二十年内变化不大。专业的主干课程有统计学原理、国民经济核算、计量经济学、抽样技术与方法等。而在大数据背景下,教学内容以数据模式为研究对象,强调对所有的数据进行分析,而不是开展随机抽样;允许不精确的存在,而不是在给定的精确程度下对总体进行推断和分析;关注海量数据之间的相关关系,而不是强调数据之间的因果联系。这些内容都无法在现有的教学体系中体现,因此,传统的专业教学体系与大数据时代是脱节的。

(四)实践教学环节薄弱

随着“应用型”统计专业人才培养目标的提出,学校对实践教学的重视增强,与过去相比,现有的专业教学体系中已经增加了实践教学环节。但是,在大数据背景下,实践教学仍然是统计学专业教学体系中的薄弱环节。主要表现在两个方而:(1)以模型驱动为主的实践教学模式已不适应大数据时代的要求。现有的实践教学内容并不是从数据出发,而是通过寻求一些适合模型的数据来“证明”这个模型的确有意义。这种思维方式与大数据时代的要求是不适应的,因为创造模型的目的是适应现实数据,而不是由模型驱动。(2)以SPSS、Eviews为主的软件教学已无法处理大数据。现有的实践教学中,主要讲授的是传统的统计分析软件SPSS和Eviews,因为这两种软件发展成熟,操作简单,可以处理一般的计量模型和时间序列。但是,大数据时代数据是海量的、复杂的,用简单的软件已无法处理和实施。

三、统计学专业教学体系改革的方向

根据以上分析,时代的发展对统计学专业提出了更高的要求,现有的教学体系中存在的各种问题即为统计学专业教学体系改革的方向。

(一)准确定位统计学专业的人才培养目标,重新设计主干课程的教学内容

大数据时代要求培养“复合型”统计专业人才,因此教学体系的培养目标要从简单的“应用型”向“复合型”转变。“复合型”统计专业人才要求学生除了具备数据收集、处理和分析的能力外,还要对统计学应用领域的背景知识有一定的了解。因此,按这个培养目标,需要对现有教学体系中的主干课程重新进行调整和设计。专业主干课程分为方法和应用两个方面。方法类的课程除了原有的计量经济学、时间序列分析、多元统计分析等外,又增加了机器学习、模拟算法、数据挖掘,R软件分析(或SAS软件分析)等处理复杂大数据的方法的课程。应用类课程在保留原有的国民经济核算,金融统计,证券投资,会计学基础外,增加一些统计学应用领域的基础知识课程,例如商业统计、生物统计、保险与精算统计等。此外,适当调整各专业主干课程的课时,一些课程可以增加课时,如软件分析、数据挖掘等,一些课程可以缩减课时,仅作一些简单的介绍,如抽样技术等。

(二)转变固有的思维方式,在大数据背景下积极推进教学改革

大数据时代,数据更多、更杂,传统统计学思维方式受到了极大的挑战。因此,以大数据为背景,转变固有的思维方式,从以统计技术方法为中心转换到以信息数据为中心,推进统计学专业教学改革十分重要。具体来说,可以弱化传统的推理论证的教学模式,强化数据收集、数据处理和数据分析的能力培养;强调数据本身的价值,让数据说话,用简单的方法了解数据背后所隐藏的信息和规律;使用项目式训练,让学生从项目中真正体验数据化处理的整个过程,达到理论和方法的结合;加强课堂教学与实验教学的统一和贯通,如在传统的教学过程中,将统计学原理、多元统计分析结合SPSS软件介绍,而时间序列分析又采用E-views进行介绍,造成学生疲于学习各种软件,实际上SAS,R等统计软件可以实现所有的功能,用一种软件与课堂教学融合贯通能帮助学生更好更深地掌握软件的使用。

统计学大数据分析范文第4篇

宏观经济统计分析是建立在经济学、统计学基础上,伴随中国社会主义市场经济发展而逐步完善起来的。近年来,随着市场化进程的加快,特别是在信息技术的推动下,大数据时代的到来,对于宏观经济统计分析提出了更多挑战。面对新的情况,如何从统计学知识体系来渗透经济分析方法,并从宏观经济统计分析中的问题来探讨其发展趋向,对于提升我国宏观经济统计分析的科学水平具有重要的现实意义。

关键词:

宏观经济统计分析;统计方法;关键问题

从概念上来看,宏观经济统计分析是建立在经济学、统计学知识体系基础上,以统计知识为核心,围绕经济学知识进行研究和分析。在我国社会主义市场经济体制下,宏观经济统计分析的内容也经历了几个不同发展阶段。在以计划经济为主时期,宏观经济统计分析主要运用计量经济学知识,利用数理统计和模型分析,来完成对国民经济运行系统的优化和平衡。同时,借助于政府统计系统,从国民经济运行相关数据分析中,对计划执行情况进行研究,改进下一阶段计划经济重大问题。这一时期的计划经济为宏观经济统计分析提供了基础数据,但是,对于统筹兼顾、优化管理为主体的计划经济管理思想是一以贯之的。从我国统计学发展历程来看,对于宏观经济统计分析的内容,概况的讲,主要是围绕国民经济主要经济指标来展开,如利用国民经济账户、投入产出、资金流量表、国际收支平衡表等,从各个核心部门、核心指标、核心统计体系中来分析国家、产业的发展状况,减少经济危机的发生。改革开放以后,我国宏观经济统计分析,借鉴了马克思社会再生产、计划经济管理理论,同时借鉴了国民经济核算体系理论思想,完善了我国国民经济综合平衡统计方法,逐步实现了财政、信贷、外汇、物资的四大平衡。在以信息社会、大数据时代为特征的第三阶段,宏观经济统计分析将实际问题作为研究重点,特别是经济学与现实问题的关联,大数据环境下数据的可比性,统计分析方法的科学性和实效性等。

一、宏观经济统计与宏观经济统计分析概念研究

我国国民经济统计主要依托国民经济核算体系,包括经济循环理论下的宏观经济统计指标体系,以及各类标准、统计分类等内容。宏观经济统计,从概念上理解为从宏观上来探讨经济运行过程及结果的统计测度理论和方法。从统计范围来看,主要从经济活动中来获取统计数据,包括各类经济活动的信息整理、也包括各类统计部门设计的用于统计实际数量的调查资料。统计学是依据统计学理论,运用统计学方法来对各类经济信息进行统计分析,如利用抽样调查来进行统计分析,以实现对样本总量的推断;在获取相关统计数据内容时,常用的统计方法有分类法、关联统计法、变化率统计法、总量统计法、结构统计法等。信息化社会的发展,特别是基于网络技术的电子商务平台的建设,使宏观经济统计分析的独立性和地位更趋重要。概括来讲,经济统计分析从统计方式、统计数据上来全面认识经济获得,并从有效分析中提升经济发展水平.宏观统计数据的测度方式及搜集方法,与传统的调查方法,如普查、抽样调查、统计报表相类似,在现代经济统计中,增加了软统计内容,如抽样问卷、心理量表等。宏观经济统计分析是建立在宏观经济统计基础上,利用统计学理论和方法,以实证经济分析来处理统计结果。从概念上来看,广义的宏观经济统计分析包括的经济活动较多,不仅有重要的宏观经济指标内容,还有其他与国民经济管理相关的统计分析。微观来讲,宏观经济统计分析主要从经济问题的统计分析研究中,来构建统计分析模型,并从统计分析变量或指标中探析统计数据所反映的结果。

二、宏观经济统计分析体系研究

1.宏观经济统计分析内容

宏观经济统计分析体系包括宏观经济学目标、宏观经济管理目标和宏观经济统计目标三项内容,对于宏观经济学目标,主要从宏观经济统计分析对象,如社会总供给、总需求等建立均衡统计分析,从国民收入分配统计分析中来构建各项统计指标,如产业结构统计分析、经济周期统计分析、知识经济发展与创新统计分析、消费-投资需求分析、通货膨胀统计分析等等。宏观经济管理目标主要从宏观经济运行体制及组织结构上,围绕国家经济社会重大战略开展统计分析。如创新型国家经济战略、科教兴国战略、财政政策、货币政策、城镇化区域发展战略、可持续发展战略等等。宏观经济统计目标主要从国家统计、部门统计、行业统计、区域统计等层次化统计数据基础上来开发,围绕社会创新、政府管理、科学研究等内容展开统计方法创新。

2.宏观经济统计分析问题

宏观经济统计分析是政府统计工作的重要内容,一方面归结为制度化的统计分析工作,另一方面表现为专题型或问题型统计分析工作。在制度化统计分析工作中,围绕政府统计调查指标体系,从宏观经济运行过程及结果中来搜集数量特征、数量关系,并从宏观经济运行情况综合表现上来剖析主要问题和成功之处;对于各项宏观经济政策措施的执行情况进行跟踪,对执行效果进行对照分析,并从存在问题中来提出应对建议。如国家统计局和各下属统计单位,每年要对上一年度的统计工作进行汇报,以经济分析白皮书形式进行综合。制度化宏观经济分析工作,能够从社会生产、市场供需、收入分配、金融市场化、国际收支等多方面进行呈现,既有动态指标,也有近期、中长期发展趋向分析。宏观经济专题统计分析具有灵活性和变化性,主要是围绕不同时期的经济工作,从经济问题中来展开针对性调查统计分析。其特点表现在:一是对所研究的问题或专题具有较深的研究;二是多采用多重调查方法来实现对专题问题的全面分析,如抽样调查、软实力调查、问卷调查等的综合使用;三是运用现代信息技术来提升统计分析能力,特别是用网络化平台技术来弥补传统调查方法的不足,改善数据质量等。

三、宏观经济统计分析方法研究

宏观经济统计分析方法具有多样性,针对不同问题,有搜集数据、整理数据方法,也有针对经济问题的分析方法,还有基于统计描述和探索性数据分析方法。总的来看,对于宏观经济统计分析工作,多种方法的综合运用有助于提升宏观经济统计分析的科学性和有效性。对于宏观经济统计分析,不同领域所涉及的统计方法具有交叉性。但对于宏观经济分析中动态经济分析、静态经济分析、比较动态经济分析、比较静态经济分析方法所反映的经济学问题,能够从全面质量管理方法中体现目标、过程、方法、绩效、因素等统计描述信息,改善统计分析的应用实效性。主要常用的方法有因素分析法、指数分析法、弹性分析法、时间序列分析法、应用回归分析法和多元统计分析法等。对于不同经济变量体系的描述,根据经济运行过程及数量特征,从所选定的指标变量上来进行估计,包括推算、核算和估算等方法。描述性统计分析方法是基于统计分析应用,从构建基本逻辑架构中来分析客观存在的相关变量之间的关系;由于经济活动中各经济关系之间存在动态性,需要从经济分析的聚类、因子分析等方法中,运用分层回归、分位回归以及协整分析方法来转换,以促进对各项分析指标体系进行综合评价和反映。同样道理,在宏观经济统计分析方法研究中,面对大量微观性数据,如何发挥统计变量测度及过程变量特征分析优势?实践中常用统计系统描述方法,将系统分类及归纳至分位、分层、立体、动态的复杂系统中,从探索各关系变量及因素之间关系上来进行描述性分析。如在人口普查以及经济普查中,对于各类模拟系统方法的运用,主要从各因素的顺序识别和组内方差缩小、组间方差扩大上来实现动态过程的科学推断,提升核心主体的统计分析精度。

四、宏观经济统计分析的趋向研究

从宏观经济统计分析的应用来看,当前社会环境下面对更多挑战,其主要研究方向有以下几点:一是做好对国家经济社会发展管理的重要决策导向研究,特别是在信息技术快速发展背景下,从海量数据分析中来挖掘科学的信息资源,来优化和辅助市场化竞争、产业竞争及区域、国际间的竞争需要。哈佛大学加里·金(GaryKing)提出“信息革命背景下,对于海量数据资源的统计分析,将席卷商业界、学术界和政界”。建立在大数据基础上的精细化测量行为研究,从经济领域、商业领域来拓宽延伸,以促进社会发展;二是顺应大数据时代的发展机遇,在中国特色社会主义市场经济转型关键期,从协同政府、行业、经济、社会发展关系的角度,以政府公共数据共享平台建设来完善社会发展科学管理水平,从中长期发展政策分析中来进行科学谋划和实施。对于统计信息平台中的活动、业务、行政记录、财务信息等资料,要按照统计数据的统一化要求进行科学转换,增强宏观经济统计分析的决策科学化能力;三是强化创新型国家建设统计分析工作,围绕国家创新能力、国家创新体系建设发展要求,从国家科技政策制订,到各项经济统计工作的实施,都应扎实推进宏观经济统计分析在经济建设中的核心和驱动地位;四是构建高端化的产业结构统计分析模型,围绕我国全面转型过渡期的产业结构现状资料,从构建“三高一低”产业结构高端化统计目标入手,加大对信息化金融产业的创新,延长产业价值链,增强产业辐射及带动作用,优化产业结构向高端化进程转移;五是注重金融统计分析,完善我国金融管理体系,提升金融管理效率。在建设金融服务业与其他产业的协同发展上,发挥统计手段来全面跟踪和优化我国货币政策服务环境,挖掘金融数据,加大金融风险监测和防范;六是注重宏观经济空间统计分析,依托大数据时代数据集中化平台,为宏观经济统计分析创造有利环境,实现大数据的共享、合作和协同发展,真正实现大数据的整体效益。

参考文献:

[1]赵彦云,周芳.试论大数据时代中国政府统计改革发展新模式[J].教学与研究,2014(01).

[2]侯福忠.宏观经济统计分析在国民经济核算体系中的作用[J].现代商业,2013(15).

统计学大数据分析范文第5篇

[关键词]大数据;独立学院;统计学;教学改革

doi:10.3969/j.issn.1673-0194.2020.16.106

[中图分类号]G642[文献标识码]A[文章编号]1673-0194(2020)16-0-02

0引言

统计学是一门实践性很强的课程,旨在培养学生利用统计方法解决经济社会中实际问题的能力。由此可知,统计学的发展通过实际需求驱动。如今,数据已经渗透到各个职能部门,伴随着互联网和新型技术的迅速发展,数据已然成为一项资产,成为重要的生产要素,随之而来的数据处理技术也变得越来越丰富。企业对经济管理类学生的数据处理能力要求更高,使统计学原有的结构架构、理论体系等都遇到了前所未有的冲击和挑战。在该背景下,统计学教学必须进行改革,以适应时代的发展变化。如何使统计学的教学跟上时展,笔者所在学校统计学教学组教师在统计学教学过程中进行了一些有益尝试,主要针对之前统计学教学过程中存在的问题以及大数据背景下统计学课程教学目标两个方面开展。

1大数据时代传统统计学的变革

统计学者对大数据时代统计学教学改革问题做了大量有益的研究。从研究视角看,主要集中在以下两个方面:大数据时代对统计学的挑战与思考。邱东认为统计是一门数据科学,在大数据时代特别重要。这个推断逻辑上没有问题,但问题在于“统计学特别重要”不等于“统计学唯一重要”。他还指出大数据时代的统计重心发生了转移,如果原来的统计实务重心在于收集基礎数据,难点在于如何获取数据,那么在大数据时代,则更注重如何选择有用数据。如果原来重心是“做加法”———无中生有;那么现在重心则是“做减法”———有中生用。换句话说,原来统计学的特点是以小见大,现在则更在于由繁入简。朱建平、张悦涵认为,大数据的产生对统计学具有划时代的意义,大数据以其价值性、多样性、大量性、高速性的特征弥补了统计学高成本、高误差的不足,但这并不意味着统计学的时代结束了,人们进行搜索、聚类、分类大数据时还需要依赖统计学的方法,大数据离不开统计学。大数据时代的到来,提高了统计质量,降低了统计成本,拓宽了统计学应用领域,使统计学得以延伸,提高了统计学在自然科学和社会科学中的地位,这是大数据给传统统计带来的机遇。

大数据的到来使统计分析从小数据走向大数据,传统的统计学通过认识样本了解总体。大数据时代,统计学分析的对象可能是总体;传统统计学大部分研究可以用图表展示结构化数据,而大数据时代人们面对更多的非结构化数据;传统统计学虽然应用计算机软件,但大部分基于Excel、SPSS软件,而大数据时代数据处理软件更多,比如,R语言、Python、MATLAB以及SAS等。这些都说明大数据给统计学不仅带来了机遇,也带来了一定的挑战。抓住机遇,迎接挑战,确保统计学跟上时代的发展步伐是每一位统计学相关人员的责任和使命。

2统计学教学中存在的问题

2.1讲授内容较多,学时有限

统计学的内容包括基本概念、基本理论、统计整理、描述性分析、参数估计、假设检验、相关与回归分析、时间序列分析等。之前笔者所在学院统计学学时为32学时,其中还包括软件的学习和操作,假设检验都无法完整讲授,更不用说相关分析、回归分析和时间序列及指数分析。如果学生不能充分在课后展开自主学习,学习效果将大打折扣。

2.2先导课程基础薄弱

统计学的先导课程为微积分、概率论与数理统计。对于经管类非统计专业的学生,大多数学生对公式不敏感,甚至头痛,常常死记硬背,上统计学时,关于概率论与数理统计的很多知识已经忘记,看到统计学课程包含公式、概率论等知识常常觉得痛苦。虽然目前已淡化了公式的相关计算,但在讲解原理时,如中心极限定理、方差分析思想时,学生仍觉得有一定难度。

2.3教学内容没有与时俱进

统计学的基本内容包括两大方面:一是描述统计;二是推断统计。在大数据时代,无论是描述统计还是推断统计都发生了变化,但实际课堂上,统计学的教学内容并没有与时俱进。以统计推断为例,传统的统计推断以概率论数理统计为基础,利用中心极限定理确定已知数据分布后,利用样本统计量推断总计特征,推断结果的评价由样本统计量的构造原理及样本数据的质量决定。而大数据时代,人们可以收集到海量数据,研究数据实际分布就是对数据进行分析计算。显然,当下统计学课程教学内容已跟不上时展的步伐,学校培养的学生不具备从事大数据研究的能力,这是不争的事实,毋庸置疑,统计学的教学改革迫在眉睫。在大数据时代,把大数据思想与精髓纳入统计学的教学体系中非常必要。

2.4注重理论教学,轻实践教学

统计学是与数据打交道的一门学科,从数据收集到最后的分析预测,都离不开数据,实践性很强,但掌握统计学数据分析方法,必须掌握一定的理论,如随机抽样、大数定理、中心极限定理、小概率原理等。在一些地方院校,这些内容的讲解会占用50%以上的学时,比如,在讲到推断统计时,统计量是非常重要的概念,教师为了让学生掌握这一概念,会从概率讲起,介绍随机抽样、抽样分布以及中心极限定理等相关内容,这样在总学时有限的情况下便会大大缩短实践时间。此外,不能保证上机时间,学生不能完全掌握数据分析软件的操作步骤,导致学习效果大打折扣,甚至学生无法将统计理论知识应用到实践中,这与教学目标背道而驰。

2.5考核方式單一

联合国教科文组织国际教育发展委员会出版的《学会生存》一书中说:“从理论上讲,考试的目的第一在于测量过去的成绩,第二在于评价一个人的未来的能力。”考试作为教学的最后一步,是对教师一学期教学质量的评价,也是衡量学生学习效果的重要手段。之前,笔者所在学校统计学主要采用“期末成绩(70%)+平时成绩(30%)”的考核方式,这种考核方式显然不合理,无法体现学生实践能力。

3统计学教学改革方法

统计学是一门兼具理论和应用的课程,特别是在大数据的背景下,学生在具备经济学、管理学等专业知识的基础上,需要掌握相关数据分析方法,并能熟练掌握相关统计软件,自觉地利用统计学知识思考和解决实际社会经济问题。因此,在统计学教学改革过程中,应着重从以下几方面进行改革。

3.1增加学时

笔者所在学校的经管学院在2017级人才培养方案修订过程中,将统计学学时由原来的32学时增加到56学时,实验学时由原来的4学时增加到16学时,大大缓解了内容多、学时少之间的矛盾。另外,由原来大班教学改成小班教学,提高课堂教学效果。

3.2转变教学观念

受新冠病毒肺炎疫情影响,全世界学生都进行在线学习,这是教育领域的一场革命。疫情过后,教学方式会发生很大变化,当然这种变化得益于信息技术的进步。以往的课堂总是“填鸭式”教学,教师滔滔不绝地讲一节课,学生参与度极低。随着在线平台的推广和普及,例如,慕课、网易云课堂等被学生青睐,所以高校教学观念也应随之转变。课堂上以学生为中心,课前通过网络给学生推送预习内容,包括在线平台视频。课堂上教师应用案例分析串讲知识,剖析重难点,使学生在案例学习中掌握理论知识。一方面,学生通过这种方式掌握理论知识;另一方面,节约时间,加强学生实践环节学习。

3.3加强教学实践

传统统计学虽设有实验,但是以Excel、SPSS为主的统计软件处理一般统计学问题,比如,数据图表展示、回归分析等。这些分析方法远远不能满足大数据的需求。在大数据时代,机器学习、数据挖掘、模式识别、商务智能、人工智能都属于数据分析,这要求学生的软件应用能力足够强,不仅会傻瓜式操作,更要胜任算法设计和程序编码等。在条件允许的情况下,可以开设计算机课程,比如,数据库、数据结构、Python等。

3.4优化考核方式

单一的卷面考核方式已经不能适应经济社会对统计人才的需求,在大数据时代,应该加强对学生实践能力的考核,将实践作为考核范畴。通过实际上机能力考核,引起学生高度重视,推动学生动手能力与社会需求相匹配。把实践纳入考核体系后,无论是教师还是学生,都会高度重视上机实践教学,不再流于形式。

3.5提高教师自身专业素养

教师是一个需要终身学习的职业,大数据时代的到来对统计学教师来说既是挑战也是机遇。教师要努力学习,掌握大数据相关内容,以跟上时展步伐。这要求教师把学习当作一种常态,经常参加教学科研活动。对于教学任务重、院校所在地较偏僻的教师,参加在线培训,听取一些专家在线直播的课程等不失为一种有效的学习途径。