德尔菲法(Delphi).ppt

《德尔菲法(Delphi).ppt》由会员分享，可在线阅读，更多相关《德尔菲法(Delphi).ppt（41页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、德尔菲法（德尔菲法（Delphi）德尔菲法的介绍德尔菲法的特点德尔菲法的构成要素德尔菲法中常用的统计方法目录德尔菲法的介绍01德尔菲法（德尔菲法（Delphi）的介绍：）的介绍：定义定义 由来由来德尔菲法是专家调查法中很重要的一种方法，它是根据经过调查得德尔菲法是专家调查法中很重要的一种方法，它是根据经过调查得到的情况，凭借专家的知识和经验，直接或经过简单的推算，对研到的情况，凭借专家的知识和经验，直接或经过简单的推算，对研究对象进行综合分析研究，寻求其特性和发展规律，并进行预测的究对象进行综合分析研究，寻求其特性和发展规律，并进行预测的一种方法。一种方法。它的最大优点是简便直观，无需建立繁琐

2、的数学模型，而且在缺乏它的最大优点是简便直观，无需建立繁琐的数学模型，而且在缺乏足够统计数据和没有类似历史事件可借鉴的情况下，也能对研究对足够统计数据和没有类似历史事件可借鉴的情况下，也能对研究对象的未知或未来的状态作出有效的预测。象的未知或未来的状态作出有效的预测。德尔菲法的定义德尔菲法的定义德尔菲法的由来德尔菲法的由来 德尔菲法（德尔菲法（Delphi)Delphi)的名称来源于古希腊的一则神话。德尔的名称来源于古希腊的一则神话。德尔菲是古希腊的一个地名。当地有一座阿波罗神殿，是众神菲是古希腊的一个地名。当地有一座阿波罗神殿，是众神占卜未来的地方。占卜未来的地方。德尔菲法的由来德尔菲法的由

3、来 德尔菲法最早出现于德尔菲法最早出现于2020世纪世纪5050年代末期。当时美国政府组织了一年代末期。当时美国政府组织了一批专家，要求他们站在苏军战略决策者的角度，最优地选择在未批专家，要求他们站在苏军战略决策者的角度，最优地选择在未来大战中将被轰炸的美国目标，为美军决策人员提供参考。在来大战中将被轰炸的美国目标，为美军决策人员提供参考。在19641964年，美国兰德公司的赫尔姆和戈尔登首次将德尔菲法应用于年，美国兰德公司的赫尔姆和戈尔登首次将德尔菲法应用于科技预测中，并发表了科技预测中，并发表了长远预测研究报告长远预测研究报告。此后，德尔菲法。此后，德尔菲法便迅速在美国和其他许多国家广泛应

4、用便迅速在美国和其他许多国家广泛应用 。德尔菲法的由来德尔菲法的由来 德尔菲法（德尔菲法（Delphi)Delphi)法除用于科技预测外，还广泛用于政策法除用于科技预测外，还广泛用于政策制定、经营预测、方案评估等方面。发展到现在，德尔菲制定、经营预测、方案评估等方面。发展到现在，德尔菲法在信息分析研究中，特别是在预测研究中占有重要的地法在信息分析研究中，特别是在预测研究中占有重要的地位。位。德尔菲法的特点02德尔菲法有如下三个主要特点：德尔菲法有如下三个主要特点：匿名性匿名性反馈性反馈性统计性统计性德尔菲法的特点德尔菲法的特点匿名性匿名性 从事预测的专家彼此互不知道其他有哪些人参加预测，他们从

5、事预测的专家彼此互不知道其他有哪些人参加预测，他们是在完全匿名的情况下交流思想的。是在完全匿名的情况下交流思想的。德尔菲法采取匿名的发函调查的形式，它克服了专家会议调德尔菲法采取匿名的发函调查的形式，它克服了专家会议调查法易受权威影响，易受会议潮流、气氛影响和其他心理影查法易受权威影响，易受会议潮流、气氛影响和其他心理影响的缺点。专家们可以不受任何干扰地独立对调查表所提问响的缺点。专家们可以不受任何干扰地独立对调查表所提问题发表自己的意见，而且有充分的时间思考和进行调查研究、题发表自己的意见，而且有充分的时间思考和进行调查研究、查阅资料。匿名性保证了专家意见的充分性和可靠性。查阅资料。匿名性保

6、证了专家意见的充分性和可靠性。德尔菲法的特点德尔菲法的特点反馈性反馈性 由于德尔菲法采用匿名形式，专家之间互不接触，仅靠一由于德尔菲法采用匿名形式，专家之间互不接触，仅靠一轮调查，专家意见往往比较分散，不易作出结论，为了使受轮调查，专家意见往往比较分散，不易作出结论，为了使受邀的专家们能够了解每一轮咨询的汇总情况和其他专家的意邀的专家们能够了解每一轮咨询的汇总情况和其他专家的意见，组织者要对每一轮咨询的结果进行整理、分析、综合，见，组织者要对每一轮咨询的结果进行整理、分析、综合，并在下一轮咨询中反馈给每个受邀专家，以便专家们根据新并在下一轮咨询中反馈给每个受邀专家，以便专家们根据新的调查表进一

7、步地发表意见。的调查表进一步地发表意见。德尔菲法的特点德尔菲法的特点统计性统计性 在应用德尔菲法进行信息分析与预测研究时，对研究课在应用德尔菲法进行信息分析与预测研究时，对研究课题的评价或预测既不是由信息分析研究人员做出的，也不题的评价或预测既不是由信息分析研究人员做出的，也不是由个别专家给出的，而是由一批有关的专家给出的，并是由个别专家给出的，而是由一批有关的专家给出的，并对诸多专家的回答必须进行统计学处理。对诸多专家的回答必须进行统计学处理。所以，应用德尔菲法所得的结果带有统计学的特征，往往所以，应用德尔菲法所得的结果带有统计学的特征，往往以概率的形式出现，它既反映了专家意见的集中程度，又

8、以概率的形式出现，它既反映了专家意见的集中程度，又可以反映专家意见的离散程度。可以反映专家意见的离散程度。具体步骤：具体步骤：（1 1）确定调查预测目标。调查组织者明确调查主）确定调查预测目标。调查组织者明确调查主题，设计调查问卷或调查提纲，收集整理有关调题，设计调查问卷或调查提纲，收集整理有关调查主题的背景材料，做好调查前的准备工作。查主题的背景材料，做好调查前的准备工作。（2 2）选聘专家。人数一般为）选聘专家。人数一般为10-1510-15人，如果是重人，如果是重大预测项目，可以超过此数。大预测项目，可以超过此数。（3 3）反复征询专家意见。一般）反复征询专家意见。一般3-53-5轮。轮

9、。（4 4）对各专家最后一次征询的意见进行统计处理，）对各专家最后一次征询的意见进行统计处理，作出调查预测结果。作出调查预测结果。德尔菲法的构成要素03德尔菲法由三个要素组成：德尔菲法由三个要素组成：协调人协调人一群与决策问题有关的专家一群与决策问题有关的专家一套特制的咨询调查表和程序一套特制的咨询调查表和程序协调人的主要工作是协调人的主要工作是确定要咨询的问题确定要咨询的问题挑选挑选专家专家寄出咨询寄出咨询调查表调查表收集、归纳综合、整理收集、归纳综合、整理反馈调查反馈调查结果，进行下一轮的结果，进行下一轮的意见再征询意见再征询提出预测报告或者决策意见提出预测报告或者决策意见专专家家:是是指

10、指对对所所要要预预测测的的问问题题有有一一定定的的专专门门知知识识，有有丰丰富富的的经经验验，能能为为解解决预测问题提供某些较为深刻见解的人员。决预测问题提供某些较为深刻见解的人员。专专家家的的代代表表性性:一一方方面面应应根根据据预预测测所所涉涉及及的的领领域域，去去选选择择有有关关的的专专家家；另另一一方方面面，还还要要考考虑虑到到专专家家所所属属的的部部门门和和单单位位的的广广泛泛性性。这这样样可可以以代代表表不不同同的意见，相互启发，使认识向正确的方向统一。的意见，相互启发，使认识向正确的方向统一。专专家家人人数数要要视视预预测测问问题题的的规规模模而而定定，一一般般以以1010151

11、5人人为为宜宜。人人数数太太少少，学学科科的的代代表表性性受受到到限限制制，并并缺缺乏乏权权威威，影影响响预预测测精精度度。人人数数太太多多则则组组织织较较困困难难，但但对对一一些些重重大大问问题题也也可可扩扩大大到到100100人人以以上上。在在确确定定专专家家人人数数时时，值值得得注注意意的的是是，即即使使专专家家同同意意参参加加该该项项目目研研究究，因因种种种种原原因因也也不不一一定定每每轮轮必必答答，有有时时甚甚至至中中途途退退出出。因因此此，在在预预选选专专家家人人数数时时应应适适当当多多选选一一些些专专家家，以以留留有余地。有余地。选择合适的专家选择合适的专家-成败的关键在选择专家

12、时，大体按如下顺序进行。在选择专家时，大体按如下顺序进行。1.1.编制征求专家应答问题的一览表；编制征求专家应答问题的一览表；2.2.根据预测问题，编制所需专家类型一览表；根据预测问题，编制所需专家类型一览表；3.3.将预测问题一览表发给每个专家，征询他们能否参加规定问题的预测；将预测问题一览表发给每个专家，征询他们能否参加规定问题的预测；4.4.确定每个参加预测的专家从事预测所消耗的时间和经费。确定每个参加预测的专家从事预测所消耗的时间和经费。选择专家程序选择专家程序调查表的制定调查表的制定对德尔菲法作出简要的说明对德尔菲法作出简要的说明问题要集中问题要集中避免组合问题避免组合问题用词要确切

13、用词要确切征询调查表要简化征询调查表要简化要限制问题的数量要限制问题的数量不应强加领导小组的意见不应强加领导小组的意见调查调查表表的设计的设计调查表是德尔菲法预测的主要手段，它设计的好与坏，直接影响预测的调查表是德尔菲法预测的主要手段，它设计的好与坏，直接影响预测的质量。在设计问题表时，应注意以下几点：质量。在设计问题表时，应注意以下几点：1.1.问题必须提得非常清楚，用词要确切问题必须提得非常清楚，用词要确切在所设计的问题表中，所提的问题的含义只能有一种解释，而且用词要在所设计的问题表中，所提的问题的含义只能有一种解释，而且用词要确切，不得有不明确或易产生不同理解的情况。确切，不得有不明确或

14、易产生不同理解的情况。2.2.问题要集中中并有针对性，不要过于分散，以便使各个事件构成一个问题要集中中并有针对性，不要过于分散，以便使各个事件构成一个有机的整体。问题要有逻辑顺序，先整体，后局部。同等问题中，先简单，有机的整体。问题要有逻辑顺序，先整体，后局部。同等问题中，先简单，后复杂。这样由浅入深的排列，或者按问题的分类排列，易于引起专家回后复杂。这样由浅入深的排列，或者按问题的分类排列，易于引起专家回答问题的重视与兴趣。答问题的重视与兴趣。调查调查表表的设计的设计3.3.问题的数量不要太多问题的数量不要太多问题的数量不仅取决于应答要求的类型，同时还取决于专家可能作出应问题的数量不仅取决于

15、应答要求的类型，同时还取决于专家可能作出应答的上限。如果问题只要求作出简单的回答，数量可多些。如果问题比较答的上限。如果问题只要求作出简单的回答，数量可多些。如果问题比较复杂，则数量要少些。严格的界定是没有的，一般可以认为问题数量的上复杂，则数量要少些。严格的界定是没有的，一般可以认为问题数量的上限以限以2525个为宜，以便每一位专家在个为宜，以便每一位专家在2 2小时内回答完问题。如果问题超过小时内回答完问题。如果问题超过5050个，个，则评估领导小组就要认真研究，问题是否过于分散而影响应答质量。则评估领导小组就要认真研究，问题是否过于分散而影响应答质量。调查表的设计调查表的设计4.4.问题

16、表要简化问题表要简化问题表应有助于专家作出评价，应使专家把主要精力用于思考问题，问题表应有助于专家作出评价，应使专家把主要精力用于思考问题，而不是用在理解复杂、混乱的调查问卷上。专家咨询表应答的要求，最而不是用在理解复杂、混乱的调查问卷上。专家咨询表应答的要求，最好是以好是以“”或填空的方式列出。问题表还应留有足够的地方，以便专或填空的方式列出。问题表还应留有足够的地方，以便专家阐明意见或理由。事实证明，一个设计好的专家咨询表，将得到事半家阐明意见或理由。事实证明，一个设计好的专家咨询表，将得到事半功倍的效果。功倍的效果。5.5.领导小组意见不应强加于问题表中领导小组意见不应强加于问题表中为了

17、保证预测结果的可靠性，领导小组不要把自己的观点加在问为了保证预测结果的可靠性，领导小组不要把自己的观点加在问题表中，作为反馈材料提供给应答专家。这样处理势必出现诱导现象，题表中，作为反馈材料提供给应答专家。这样处理势必出现诱导现象，导致预测结果不可靠。导致预测结果不可靠。调查表的设计调查表的设计德尔菲法的实施过程德尔菲法的实施过程 经典的德尔菲法一般包括以下四轮的征询调查，且在调查经典的德尔菲法一般包括以下四轮的征询调查，且在调查过程中包含着每轮间的反馈：过程中包含着每轮间的反馈：德尔菲法的实施过程德尔菲法的实施过程第一轮第一轮主持者将一份事先没有经过严密组织、结构松散、没有具体主持者将一份事

18、先没有经过严密组织、结构松散、没有具体目的，仅仅指出预测课题、不带任何框框的问题表、发给根目的，仅仅指出预测课题、不带任何框框的问题表、发给根据预测课题所在领域选择的各个专家。据预测课题所在领域选择的各个专家。经过一定的时间期限，主持者将第一轮问题表收回后，对专经过一定的时间期限，主持者将第一轮问题表收回后，对专家们提出的所有意见加以汇总、整理、剔除对预测目的无关家们提出的所有意见加以汇总、整理、剔除对预测目的无关或意义不大的意见，用标准术语综合出第二份问题表。或意义不大的意见，用标准术语综合出第二份问题表。德尔菲法的实施过程德尔菲法的实施过程第二轮第二轮将经过汇总处理的第二份问题表，由主持者

19、发给每个专将经过汇总处理的第二份问题表，由主持者发给每个专家，专家应当就第二份问题表所列事件作出评价，并阐家，专家应当就第二份问题表所列事件作出评价，并阐明理由。明理由。主持者将第二份问题表收回后，对专家意见再次进行处主持者将第二份问题表收回后，对专家意见再次进行处理汇总，综合出第三份问题表。理汇总，综合出第三份问题表。德尔菲法的实施过程德尔菲法的实施过程第三轮第三轮主持者将第三份问题表发给每位专家。每位专家应当根主持者将第三份问题表发给每位专家。每位专家应当根据第三份问题表，对汇总的各种意见、理由进行评价。据第三份问题表，对汇总的各种意见、理由进行评价。专家们经过修正和新的论证后再寄给主持者

20、。主持者再专家们经过修正和新的论证后再寄给主持者。主持者再次总结专家们的意见综合出第四份问题表。次总结专家们的意见综合出第四份问题表。德尔菲法的实施过程德尔菲法的实施过程第四轮第四轮主持者将包括事件表，对专家的各种评价等内容的第四主持者将包括事件表，对专家的各种评价等内容的第四份问题表最后再寄给每位专家。每位专家必须考虑各种份问题表最后再寄给每位专家。每位专家必须考虑各种论证和评论，并作出新的预测。论证和评论，并作出新的预测。在第四轮中，专家们是否需要再提出新的论证，将根据在第四轮中，专家们是否需要再提出新的论证，将根据主持者是否认为必要而定。主持者是否认为必要而定。德尔菲法的实施过程德尔菲法

21、的实施过程对第四轮以后的应答结果进行统计处理，形成较一致预对第四轮以后的应答结果进行统计处理，形成较一致预测结果。测结果。德尔菲法的实施过程德尔菲法的实施过程注意事项注意事项（一）（一）上述四轮调查不是简单的重复，而是一种螺旋上升的过上述四轮调查不是简单的重复，而是一种螺旋上升的过程，每循环和反馈一次，专家都吸收了新的信息，并对程，每循环和反馈一次，专家都吸收了新的信息，并对预测对象有了更深刻、更全面地认识，预测结果的精确预测对象有了更深刻、更全面地认识，预测结果的精确性也逐轮提高。性也逐轮提高。并不是所有被预测的事件都要经过四步。可能有的事件并不是所有被预测的事件都要经过四步。可能有的事件在

22、第二步就达到统一，而不必在第三步中出现。在第二步就达到统一，而不必在第三步中出现。在第四步结束后，专家对各事件的预测也不一定都达到在第四步结束后，专家对各事件的预测也不一定都达到统一。不统一时也可以用中位数和上下四分点来作结论统一。不统一时也可以用中位数和上下四分点来作结论 。德尔菲法的实施过程德尔菲法的实施过程注意事项注意事项（二）（二）要支付适当报酬：为了调动和鼓励专家的积极性在组织德尔菲法要支付适当报酬：为了调动和鼓励专家的积极性在组织德尔菲法预测时，应给专家支付适当报酬。其报酬金额视预测工作量而定。预测时，应给专家支付适当报酬。其报酬金额视预测工作量而定。最后将报酬标准随征求专家应答一

23、览表一起发出。最后将报酬标准随征求专家应答一览表一起发出。确定合适的轮间间隔：从经验来看，不同的预测轮间间隔差别较大。确定合适的轮间间隔：从经验来看，不同的预测轮间间隔差别较大。多数预测完成一轮需要多数预测完成一轮需要46周时间，然而有的预测两轮一共只需要周时间，然而有的预测两轮一共只需要26天。因此，轮间间隔除了与问题难易有关外，还与专家对预测问天。因此，轮间间隔除了与问题难易有关外，还与专家对预测问题的兴趣有关。题的兴趣有关。充分说明德尔菲法的预测程序：领导小组充分说明德尔菲法的预测程序：领导小组(或主持者或主持者)不能自认为参加不能自认为参加应答的专家都了解德尔菲法及其预测程序。实际上，

24、有许多专家对应答的专家都了解德尔菲法及其预测程序。实际上，有许多专家对德尔菲法及其程序了解甚微，甚至全然不知。为了使专家全面了解德尔菲法及其程序了解甚微，甚至全然不知。为了使专家全面了解情况，一般问题表都应有前言、用以说明预测的目的和任务，德尔情况，一般问题表都应有前言、用以说明预测的目的和任务，德尔菲法预测的程序，以及应注意的有关问题。菲法预测的程序，以及应注意的有关问题。德尔菲法的评价德尔菲法的评价德尔菲法的优点：德尔菲法的优点：各专家能够在不受干扰的情况下，独立、充分地表明自己的意见；各专家能够在不受干扰的情况下，独立、充分地表明自己的意见；预测值是根据各位专家的意见综合而成的，能够发挥

25、集体的智慧；预测值是根据各位专家的意见综合而成的，能够发挥集体的智慧；应用面比较广，费用比较节省。应用面比较广，费用比较节省。德尔菲法的缺点：德尔菲法的缺点：在综合预测值时，仅仅是根据各专家的主观判断，缺乏客观标准，在综合预测值时，仅仅是根据各专家的主观判断，缺乏客观标准，而且显得强求一致。而且显得强求一致。有的专家由于一些主客观原因，对表格的填写未经过很深入的调查有的专家由于一些主客观原因，对表格的填写未经过很深入的调查和思考，从而影响到评价结果的准确性。和思考，从而影响到评价结果的准确性。德尔菲法中常用的统计方法04德尔菲法中常用的统计方法：德尔菲法中常用的统计方法：百分数、算术均数、几百

26、分数、算术均数、几何均数、中位数、四分位数、满分频率、等级和、变何均数、中位数、四分位数、满分频率、等级和、变异系数、各种统计表、统计图等等。异系数、各种统计表、统计图等等。对专家应答结果进行对专家应答结果进行分析和处理分析和处理是德尔菲法预测的最后阶段，也是是德尔菲法预测的最后阶段，也是最重要的阶段。处理的方法和表达的方式，取决于预测问题的类型和对预最重要的阶段。处理的方法和表达的方式，取决于预测问题的类型和对预测的要求。德尔菲法应用最为广泛的是，要求专家对某事件发生的时间提测的要求。德尔菲法应用最为广泛的是，要求专家对某事件发生的时间提出评价。此外，还要求专家对策方案在总体中的比重进行评价

27、，及从多方出评价。此外，还要求专家对策方案在总体中的比重进行评价，及从多方案个择扰选择一个。案个择扰选择一个。近年来随着科学技术的高速发展，科学技术日趋朝着多目标和多方近年来随着科学技术的高速发展，科学技术日趋朝着多目标和多方案方向发展。为了用有限的的资金和人力确保重点，有必要对众多目标和案方向发展。为了用有限的的资金和人力确保重点，有必要对众多目标和方案的相对重要性进行评价，这是近年来德尔菲法的一项重要发展。方案的相对重要性进行评价，这是近年来德尔菲法的一项重要发展。专家咨询表的统计分析方法专家咨询表的统计分析方法 一、专家基本情况一、专家基本情况对专家应答的结果进行统计分析，应用常规的统计

28、分析方法。首先对专家应答的结果进行统计分析，应用常规的统计分析方法。首先对专家的性别、年龄、职务、专业及从事专业的年限等个人特征进行描对专家的性别、年龄、职务、专业及从事专业的年限等个人特征进行描述性的分析，以了解专家的基本情况，便于说明参加该项目评估、预测述性的分析，以了解专家的基本情况，便于说明参加该项目评估、预测专家的水平与结果的可信和可靠程度的联系。专家的水平与结果的可信和可靠程度的联系。例如，例如，邀请参与函询调邀请参与函询调查的查的15名专家来自浙江省、江苏省、广东省、江西省、上海市的相关名专家来自浙江省、江苏省、广东省、江西省、上海市的相关护理管理、护理质量管理、临床一线等相关研

29、究领域。第一轮调查中护理管理、护理质量管理、临床一线等相关研究领域。第一轮调查中15名专家均参与。专家的基本情况见表名专家均参与。专家的基本情况见表1。专家咨询表的统计分析方法专家咨询表的统计分析方法项目人数（n=15）构成比(%)年龄30-16.67%40-960.00%50-533.33%工作年限（年）0.00%10-320.00%20-533.33%30-746.67%学历0.00%大专0.00%本科1386.67%硕士16.67%博士16.67%技术职称0.00%中级320.00%副高640.00%高级640.00%表表1.专家基本情况（专家基本情况（n=15）专家咨询表的统计分析方法

30、专家咨询表的统计分析方法二、专家的积极系数二、专家的积极系数专家的积极专家的积极系数系数用问卷的应答率表示，即问卷的回收率、有效率用问卷的应答率表示，即问卷的回收率、有效率，其大小其大小说明专家对该项目研究的关心程度。因此认真地分析专家的情况，对以后评说明专家对该项目研究的关心程度。因此认真地分析专家的情况，对以后评估结果或预测结果将有十分重要的作用。例如：表估结果或预测结果将有十分重要的作用。例如：表2 2轮次发放数回收数回收率有效数有效率（%）第一轮1515100%15100%第二轮1515100%15100%表表2.专家函询表回收情况表（专家函询表回收情况表（n=15）专家咨询表的统计分

31、析方法专家咨询表的统计分析方法三、三、专家意见集中程度专家意见集中程度专家意见集中程度用重要性赋值均数来表示。专家意见集中程度用重要性赋值均数来表示。专家意见集中程度包括均数专家意见集中程度包括均数(MjMj)、满、满分频率分频率(KjKj)、等级总和、等级总和(SjSj)。首先将全部分专家对所有被评的项目或指标的评分值。首先将全部分专家对所有被评的项目或指标的评分值CijCij列于表中，见表列于表中，见表3 3。第一轮调查重要性赋值均数最小值第一轮调查重要性赋值均数最小值2 29393，最大值，最大值5 5，平均，平均4.54.5。表表3 某一研究项目专家评分值表某一研究项目专家评分值表（一

32、）计算均数(Mj)式中：Mj：表示j指标评价的均数；mj：表示参加j指标评价的专家数；Cij：表示i专家对j指标的评分值。均值取值在09或0100分之间，Mj越大，则对应的j指标的重要性越高。式中：Kj：表示j指标的满分比；Mj：表示给满分的专家数。Kj取值在01之间，Kj可作为Mj的补充指标，Kj 越大，说明对该指标所给满分的专家比例越大，该指标也越重要。专家研究项目或指标12jn1C11C12C1jC1n2C21C22C2jC2niCi1Ci2CijCinmCm1Cm2CmjCmn（二）计算满分比(Kj)专家咨询表的统计分析方法专家咨询表的统计分析方法四四.专家评价结果一致性检验专家评价结

33、果一致性检验(1)(1)肯德尔协调系数肯德尔协调系数 W W：肯德尔协调系数肯德尔协调系数(Kendall coefficient of concordance)W(Kendall coefficient of concordance)W的取值在的取值在0 01 1之间，越接近之间，越接近1 1，表示所有，表示所有专家对全部因子评分的协调程度较好；专家对全部因子评分的协调程度较好；根据国内几项大型德尔菲法在卫生系统的应用研究，经根据国内几项大型德尔菲法在卫生系统的应用研究，经2323轮咨询协调后，误差控制较好，轮咨询协调后，误差控制较好，W W一般一般在在0-0.50-0.5的范围波动的范围波

34、动。越接近越接近0 0，意味着专家意见协调意味着专家意见协调程度程度越越低低。协调程度的显著性检验协调程度的显著性检验22检验：假设专家的意见按正态分布，根据自由度检验：假设专家的意见按正态分布，根据自由度d.fd.f和显著性水平和显著性水平，从，从22值表中查得值表中查得22值，如果值，如果22值值,则可认为协调系数经检验后有显著性。说明专家评估或预测则可认为协调系数经检验后有显著性。说明专家评估或预测意见协调性好，结果可取。反之，意见协调性好，结果可取。反之，2 2 值很小，专家组的意见的非偶然协调的概率越大，如果值很小，专家组的意见的非偶然协调的概率越大，如果P P0.050.05，则认

35、为专家意见在非偶然协调方面将是不足置信的协调，评估或预测结论的可信度差，评价或，则认为专家意见在非偶然协调方面将是不足置信的协调，评估或预测结论的可信度差，评价或预测结果不可取。预测结果不可取。本研究第一轮调查后专家的和谐系数分别为本研究第一轮调查后专家的和谐系数分别为0.258(X2=104.1440.258(X2=104.144；P0.01)P0.25表明该指标的专家协调程度不够表明该指标的专家协调程度不够。第一轮调查变异系数最小值。第一轮调查变异系数最小值0.000.00，最大值，最大值0.510.51，平均，平均0.180.18。专家咨询表的统计分析方法专家咨询表的统计分析方法五五.专

36、家权威程度专家权威程度任何一个专家都不可能对预测中的每一个问题都是权威，而权威程度对评价的可任何一个专家都不可能对预测中的每一个问题都是权威，而权威程度对评价的可靠性则有相当大的影响。因而，对评价结果进行处理时，常常要求考虑专家对某一靠性则有相当大的影响。因而，对评价结果进行处理时，常常要求考虑专家对某一问题的权威程度。专家的权威程度一般由两个因素决定，一个是专家对方案作出判问题的权威程度。专家的权威程度一般由两个因素决定，一个是专家对方案作出判断的依据，用断的依据，用Cn表示；一个是专家对问题的熟悉程度，用表示；一个是专家对问题的熟悉程度，用Ca表示。专家的权威程度表示。专家的权威程度以以自

37、我评价自我评价为主，有时也可相互评价。当自我评价时，专家除填报应答表外，还应为主，有时也可相互评价。当自我评价时，专家除填报应答表外，还应填写判断依据及其影响程度表和对问题熟悉程度表。分别如见表填写判断依据及其影响程度表和对问题熟悉程度表。分别如见表9和表和表10。权威程度权威程度为判断系数和熟悉程度系数的算术平均值，计算公式：为判断系数和熟悉程度系数的算术平均值，计算公式：判断依据对专家判断的影响程度大中小理论分析0.30.20.1实践经验0.50.40.3国内外同行的了解0.10.10.1直觉0.10.10.1表表9 判断依据及其影响程度量化表（判断依据及其影响程度量化表（Cn）熟悉程度C

38、很熟悉0.9熟悉0.7较熟悉0.5一般0.3较不熟悉0.1很不熟悉0.0表表10 专家对问题的熟悉程度系数表（专家对问题的熟悉程度系数表（Ca）指标CRCaCn社会经济指标0.790.560.68卫生资源投入与分配指标0.840.730.79妇幼保健效果指标0.900.810.86妇幼保健状况指标0.890.780.84儿童保健状况指标0.870.750.81计划生育指标0.830.710.77妇幼卫生政策及管理学指标0.840.670.76平均值0.860.700.78表表11 专家权威程度统计表专家权威程度统计表专家的权威程度与预测精度呈一定的函数关系，一般来说，预测精度随着专家的权威程度与预测精度呈一定的函数关系，一般来说，预测精度随着专家权威程度的提高而提高。专家权威程度的提高而提高。感谢观看 THANK YOU