
绩效审计方法之五 ——案例研究方法.doc
31页国 外 审 计 动 态第 9 期(总第 266 期)审计署审计科研所 2011 年 4 月 7 日绩效审计方法之五 ——案例研究方法一、案例研究方法概述美国审计署在诸如城市住房、武器系统测试、社区发展、军事采购合同、对巴西进出口净额的影响、水质改善项目的进展情况等审计项目中采用了案例研究方法一)案例研究方法的定义案例研究方法是一种运用历史数据、档案材料、访谈、观察等方法收集数据,运用可靠技术对研究对象进行分析,从而得出带有普遍性结论的研究方法它是一种分析性归纳方法,从个别到一般,通过对现实中某一问题的深入剖析,得出具有普遍意义的结论为方便理解案例研究方法,先看以下两个例子如果我们要研究导致 Three Mile Island1灾难的原因,并且将工作范围界定为描述要求的安保措施是否得以实施,这不是一项案例研究;但是如果我们把工作定义为考察导致灾难的深层原因、出现了什么错误以及为什么出现错误,这就是一项案例研究如果我们被要求研究核设施的总体安全性,我们可能选择调查所有的核设施有关的自我符合性报告作为我们的研究方法,这不是案例研究;但是如果将工作界定为深入探讨核电站(包括三里岛以及其他核电站)中最近出现的问题,尝试理解安保措施为什么没有得到执行或者为什么不够充分,那么我们就将选择案例研究作为回答问题的方法。
案例研究要求对复杂实例及其环境在全面理解的基础上进行详细的描述和分析首先,案例研究对象是复杂性问题,如, “机场是否遵循了国内外关于乘客安保程序的要求”就是一个相对简单的问题,而“机场的安保程序是否足以保护乘客和设备的安全” ,就是一个相对复杂的问题,就可以作为一个案例研究的对象;其次,案例研究应该尽可能全面地认识案例的进展并解释其原因;再次,案例研究应对运用多种渠道、多种方法获得的不同资料进行广泛深入地描述和分析;最后,案例研究对象可以是某人 (如菲律宾前总统)、某地、某一活动、某一事件 (古巴导弹危机、挑战者号空难等)、一个地区、一个组织或者部门审计人员在开展绩效审计项目尤其是问题导向型绩效审计1三里岛事件[1979 年发生于美国宾夕法尼亚州的核电站泄漏事件,译者注]项目时,可以将整个审计项目作为一个案例研究项目,或者针对其中的某一审计事项开展案例研究掌握案例研究方法可以有效地解决问题导向型绩效审计中关于“怎么样” 、“什么事”“为什么”之类的问题;通过多案例研究还可以发现一些体制方面的问题,从宏观方面提出审计建议二)案例研究的分类1.根据案例研究的功能,案例研究分为探索型、描述型和解释型三种类型。
探索型案例研究是在未确定研究问题和研究假设之前,凭借研究者的直觉线索到现场了解情况、收集资料形成案例,然后再根据案例来确定研究问题和理论假设描述型案例研究是通过对一个人物、团体组织、社区的生命历程、焦点事件以及项目实施过程进行深度描述,以经验事实为支撑,形成主要的理论观点或者检验理论假设解释型案例研究旨在通过特定的案例,对事物背后的因果关系进行分析和解释2.按照案例研究中使用案例的个数,案例研究分为单案例研究和多案例研究单案例研究适用于:(1)极端个案分析;(2)对现有理论的批驳或者检验;(3)代表性或典型个案分析;(4)对他人未曾研究过的个案进行分析以启发更深入的研究;(5)对同一个案进行不同时间段的纵向分析多案例研究遵循复制法则,而不是统计调查中遵循的抽样法则,对于多案例研究,选择的案例要么能够逐项复制,各案例产生相同的结果,要么可以进行差别复制,归纳出与前案例不同的结果;一般可以选择 4-10 个案例开展多案例研究,每个案例可以是整体性案例,也可以是嵌入性案例无论单案例研究还是多案例研究,都可以分为探索型案例、描述型案例和解释型案例三种这样,将两种分类结合起来,建立一个 2×3的矩阵模式,可以形成六种不同的案例研究类型,具体如下表所示。
案例研究的不同类型探索性 描述性 解释性单案例研究探索型单案例研究描述型单案例研究解释型单案例研究多案例研究探索型多案例研究描述型多案例研究解释型多案例研究3.针对项目(或者方案)的案例研究可以分为项目实施案例研究和项目效果案例研究项目实施案例研究一般要进行多样本研究,要回答“发生了什么?项目进程的满意程度如何?实施中存在哪些问题?原因是什么?项 目效果案例研究要求测定项 目是否有效,并挖掘项目效果的影响因素美国审计署从事了很多这方面的研究三)案例研究的程序步骤一个完整的案例研究过程包括:界定研究问题、设计研究方案、收集证据、分析证据、撰写研究报告五个步骤第一步,进行案例研究设计主要包括定义研究问题、提出理论假设(探索性案例研究可以不用进行理论假设 2)提出理论假设的目的是指导资料收集和资料分析,减少研究工作量,避免走弯路第二步,拟定研究草案主要包括定义研究对象、形成研究主题、明确案例性质、确定案例选择范围和数量第三步,证据收集采用访谈、观察和第三方信息等方法收集相关证据资料第四步,证据分析对收集的资料进行深入分析,如果是多案例研究,还应进行案例内分析和交叉案例分析,前者是把每一个案例看成独立的整体进行全面的分析,后者是在前者的基础上对所有的案例进行统一的抽象和归纳,进而得出更精辟的描述和更有力的解释。
第五步,提出结论,撰写报告上述步骤中证据分析与证据收集可以同时进行,形成互动,证据收集是证据分析的基础,证据分析又为下一步的证据收集2 探索性案例研究遵循“扎根”理论研究方法扎根理论 [Glaser& Strauss(1967)、Strauss& Corbin(1998)]的主要宗旨是从经验资料的基础上建立理论研究者在研究开始之前一般没有理论假设,直接从实际观察入手,从原始资料中归纳出经验概括,然后上升到理论扎根理论在理论建立的整个过程中不断运用比较原则,从收集到第一份资料开始,研究者就进行比较以刺激思考,并能全面、扼要地抓住研究现象的主要特质运用比较的方法整理资料,可以发现数据之间的秩序、看到各种现象之间的关系这是一种自下而上建立实质理论的方法,即在系统收集资料的基础上寻找反映社会现象的核心概念,然后通过这些概念之间的联系建构相关的社会理论提供指导和方向在证据收集和证据分析不断循环的过程中,研究的问题也许会得到重新的提炼,并带来更多的数据和新的发现二、案例研究方法的适用范围 (一)案例研究方法可以回答哪些问题一般而言,社会学研究方法主要包括调查法、实验法、历史法、档案研究法和案例研究法五种,这些方法分别适用于解决不同类别的问题。
具体到不同研究方法,其不同的适用范围如下表所示:不同研究方法的适用范围调查法 实验法 历史法 档案研究法案例研究法什么 √ √ √谁 、哪里 √ √如何 √ √ √为什么 √ √ √研究人员必须清楚在什么时候可以采用案例研究方法而不是其他方法;一般而言,在具体选择研究方法时,一般可以遵循的流程如下图所示:开 始问题类型是 : 怎么样 ?为什么 ?档案研究法调查法研究对象可控 ?发生在当前 ? 历史研究法实验法案例研究法否是否 否是 是研究方法选择流程图上图中确定研究对象是否可控或要不要控制很重要这些研究对象可以包括个体、组织、过程、制度、事件等研究对象是否可控主要是考虑影响研究对象的因素是否可控;研究对象是否与当前环境有关,决定了是采用历史研究法还是案例研究法在进行探索性研究时可以采用上述所有方法,也可以在一项研究中采用多种方法,如在案例研究中采用调查法或者相反案例研究法与其他社会学研究方法相比有以下特点:以现实问题为研究对象,目的在于对所研究的现实问题有较深入的认识;一般以一个具体的事件为依托,探索事件发生、发展的原因、结果和影响;以实地深入调查为重点,并注重二手资料的收集、整理和分析。
二)几种常用的案例研究法的适用范围将案例研究作为一种评价方法,必须首先考虑是评价哪一种问题,然后考虑每一种案例研究在回答这类问题时的优势和劣势;下一步,关键就是观察每种案例研究的特点,并决定它是否可以满足特定环境下的方法要求1.示例型 (illustrative)案例研究示例型案例研究主要描述发生了什么以及为什么发生,通过一两个案例,来展示具体情况在有理由相信大多数读者对一个项目或者情况知之甚少,以至于不能完全理解通过调查或者其他方法得到的信息时,示例型案例研究可以帮助理解这些信息如美国审计署曾运用这种方法辅助调查了住房补贴情况,他们选择了三个代表性城市,描述了这些城市的住房情况、住房相关活动、资金使用状况和移居前后对个人的邻居和住所的影响等问题,增强了对该项目运行的共识这种案例研究所需的样本数量少,证据资料可能包含较多的可视资料当项目之间存在重大差异,选择典型样本难度较大时,不宜采用这种类型的案例研究2.探索型(exploratory)案例研究探索型案例研究可以理解为一种缩小了的案例研究,往往在开展大规模调查之前进行当项目运行和结果存在很大的不确定性时,通过探索型案例研究可以为后续的研究识别问题、制订评价标准,提供案例研究设计和分析策略。
因此,这种案例研究的成果一般包括详细的问题描述、数据来源渠道、重要变量、数据库和样本选择标准等内容探索型案例研究形成的假设有时可以泛化(generalizability)美国审计署曾经在对巴西市场的研究中运用探索型案例研究考察了出口竞争中出现的问题通过会见官员和私人机构代表、查阅官方文件、对相关公司发放调查问卷等方式,审计人员发现了影响巴西市场出口竞争的四个关键因素探索型案例研究样本的选择既要考虑方便性又要考虑差异性,探索型案例研究的成果往往不很成熟,因此主要作为对内报告或者作为更大规模案例研究报告的一部分3.关键案例(critical Instance)研究关键案例研究用于特定情况下特定的复杂问题的考察,如三里岛事件(1979 年美国发生的核电站泄露事件)、挑战者号事件等这些关键案例研究的结果往往不需要泛化,但可能需要对其进行深入全面地分析,以了解事件的前因后果,提出针对性建议,以防范此类问题的发生关键案例研究的另一种情况是,通过考察一个关键案例来研究整体情况,提出普遍存在问题的解决方案,这种情况下可以将单个案例的建议推广至总体如美国审计署曾经检查与货物进出口有关的国家政策和相关程序是否会在港口运作中引发问题,该项目中他们选择了进出口业务具有多样性的、有一定业务规模的纽约港进行测试,这样如果该港口发现问题,那么其他港口可能也会存在这些问题,如果没有发现问题,其他港口也不太可能发现类似问题。
这种案例研究适合回答案例中的因果关系,采用这种案例研究应注意避免结论的过度泛化4.项目实施(program implementation)案例研究这种案例研究常常用于回答项目是否实施了,是否按照委托者的意愿实施的等类似问题这种案例研究有助于理解项目实施过程中制订了哪些决策、涉及哪些人以及是否满足地方需求等问题;也可以深入挖掘项目实施中发生了什么、为什么会发生等问题的信息,为项目实施结果的变化提供解释,针对项目实施的内控和程序提出改善建议这种案例研究需要对多样本进行分析,需要投入较多的时间和人力,研究建议可以泛化推广美国审计署常常紧密地跟踪项目实施和项目活动,如为跟踪人口普查项目的开展情况,审计人员在主要地点协助普查员进行现场调查,深入考察区域办公室的相关工作程序,并提出了改进建议项目实施案例一般应选择多个样本点,并对相关调研人员进行培训,以提高工作质量5.项目效果(program effects)案例研究项目效果案例研究的重点是测定项目的效果,分析项目成功或失败的原因这种案例研究方法往往与其他研究方法相结合,对于差异化程度较大的项目应该选择最佳、最差、代表性、典型性案例进行分类研究,并对相关差异进行解释。
这种案例研究的结果可以泛化推广美国审计署于 1982 年。
