Meta分析的步骤与实例分析课件.ppt

《Meta分析的步骤与实例分析课件.ppt》由会员分享，可在线阅读，更多相关《Meta分析的步骤与实例分析课件.ppt（71页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、首都医科大学附属北京友谊医院首都医科大学附属北京友谊医院Beijing Friendship Hospital,Capital Medical University Meta分析的步骤与实例分析分析的步骤与实例分析曹邦伟曹邦伟首都医科大学附属北京友谊医院首都医科大学附属北京友谊医院首都医科大学附属北京友谊医院首都医科大学附属北京友谊医院 肿瘤科肿瘤科肿瘤科肿瘤科1.Meta分析的步骤分析的步骤1.1.选题选题选题选题2.2.文献检索文献检索文献检索文献检索3.3.数据提取数据提取数据提取数据提取4.4.统计软件应用统计软件应用统计软件应用统计软件应用5.5.结果判读结果判读结果判读结果判读6.

2、6.论文书写论文书写论文书写论文书写7.7.相关的问题与思考相关的问题与思考相关的问题与思考相关的问题与思考2.Meta分析的基本要求分析的基本要求 MetaMeta分析的基本要点：分析的基本要点：分析的基本要点：分析的基本要点：对研究者既往知识面的要求对研究者既往知识面的要求对研究者既往知识面的要求对研究者既往知识面的要求1.研究设计：需临床专业知识及研究能力；需要计算机能力、文献检索能力、英语能力；2.严格评价：需临床流行病学知识；3.统计分析：需既往选修数理统计课程或者有统计学基础；4.结果解释：需临床专业及研究能力，客观，理性；5.基本原则与原始临床试验的设计类似，原始试验以人为研究对

3、象及单位，Meta分析以单个的临床研究论文为研究对象及单位。3.Meta分析的选题分析的选题 确定研究目的：确定研究目的：确定研究目的：确定研究目的：注意事项注意事项注意事项注意事项1.对于一些经过大样本、多中心合作的临床试验已得到明确结论的，不必要再做Meta分析；2.对已有明确结论，除非以后所发表的其他RCT文章有完全相反的结果，否则不必要再进行此立题的Meta分析；3.对于已经验证明确的、或已经成为定论的：HPV-宫颈癌、K-ras与西妥昔单抗、EGFR与TKIs等。4.4.注意：注意：注意：注意：要理解并承受最终的研究结果和最初的该研究目相反，甚至无意义的要理解并承受最终的研究结果和最

4、初的该研究目相反，甚至无意义的要理解并承受最终的研究结果和最初的该研究目相反，甚至无意义的要理解并承受最终的研究结果和最初的该研究目相反，甚至无意义的结果。结果。结果。结果。4.Meta分析的选题分析的选题 确定研究目的：确定研究目的：确定研究目的：确定研究目的：Meta-Meta-分析的条件分析的条件分析的条件分析的条件1.两个以上的研究；2.各研究之间的特性没有可影响它们结果的差异；3.各研究的结果采用相似的方法进行测量；4.各研究的资料都可用（当有的资料仅部分可用时应多加小心）。5.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：注意事项注意事项注意事项注意事

5、项1.全面性的概念以及不同层面的概念，例如地域、领域、方法等；2.权威性、真实性、辛苦性与最终结果的可靠性，免遭自己与别人的质疑；3.熟练掌握文献检索的方法与技巧，包括各种文献检索网站、电子与传统纸质媒介。6.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖7.Meta分析的文献检索分析的文献检索收集文献：收集文献

6、：收集文献：收集文献：中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖8.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但均未能全部覆盖中文网站，注意各个中文网站收集的文献大部分重叠，但

7、均未能全部覆盖9.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文网站，英文网站，英文网站，英文网站，PubmedPubmed，未必有全文提供，未必有全文提供，未必有全文提供，未必有全文提供10.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文数据库，英文数据库，英文数据库，英文数据库，ElsevierElsevier，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志11.Meta分析的文献检索分析的文献检索收集文

8、献：收集文献：收集文献：收集文献：英文数据库，英文数据库，英文数据库，英文数据库，SpringerSpringer，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志12.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文数据库，英文数据库，英文数据库，英文数据库，Wiley-Blackwell Wiley-Blackwell，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志

9、，大部分有全文提供，但仅限于该集团旗下杂志13.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文数据库，英文数据库，英文数据库，英文数据库，Nature Group Nature Group，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志，大部分有全文提供，但仅限于该集团旗下杂志14.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文数据库，英文数据库，英文数据库，英文数据库，EBSCO EBSCO ，大部分有全文提供，但仅限于该数据库旗下杂志，大部分有全

10、文提供，但仅限于该数据库旗下杂志，大部分有全文提供，但仅限于该数据库旗下杂志，大部分有全文提供，但仅限于该数据库旗下杂志文献最早可回溯至文献最早可回溯至1975 年年15.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文全文数据库英文全文数据库英文全文数据库英文全文数据库(首都医科大学首都医科大学首都医科大学首都医科大学)16.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：英文文摘数据库英文文摘数据库英文文摘数据库英文文摘数据库(首都医科大学首都医科大学首都医科大学首都医科大学)17.Meta分析的文献检索分析的文献检索收集文献：中

11、文收集文献：中文收集文献：中文收集文献：中文全文数据库全文数据库全文数据库全文数据库(首都医科大学首都医科大学首都医科大学首都医科大学)18.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：中文文摘数据库中文文摘数据库中文文摘数据库中文文摘数据库(首都医科大学首都医科大学首都医科大学首都医科大学)19.Meta分析的文献检索分析的文献检索收集文献：收集文献：收集文献：收集文献：循证医学数据库循证医学数据库循证医学数据库循证医学数据库(首都医科大学首都医科大学首都医科大学首都医科大学)20.Meta分析的文献检索分析的文献检索文献检索：文献检索：文献检索：文献检索：是

12、一门专业，可在研究生阶段选修相关课程，以及参加培训课程是一门专业，可在研究生阶段选修相关课程，以及参加培训课程是一门专业，可在研究生阶段选修相关课程，以及参加培训课程是一门专业，可在研究生阶段选修相关课程，以及参加培训课程21.Meta分析的文献检索分析的文献检索收集文献：药物收集文献：药物收集文献：药物收集文献：药物临床试验数据库，信息量大，更新迅速临床试验数据库，信息量大，更新迅速临床试验数据库，信息量大，更新迅速临床试验数据库，信息量大，更新迅速22.Meta分析的文献检索分析的文献检索影响检索效果的因素：影响查全率影响检索效果的因素：影响查全率影响检索效果的因素：影响查全率影响检索效果

13、的因素：影响查全率1.从从文文献献存存储储来来看看，主主要要有有：文献库收录文献不全；索引词汇缺乏控制和专指性；词表结构不完整；词间关系模糊或不正确；标引不详；标引前后不一致；标引人员遗漏了原文的重要概念或用词不当等；2.从从情情报报检检索索来来看看，主主要要有有：检索策略过于简单；选词和进行逻辑组配不当；检索途径和方法太少；检索人员业务不熟练和缺乏耐心；检索系统不具备截词功能和反馈功能，检索时不能全面地描述检索要求等。23.Meta分析的文献检索分析的文献检索影响检索效果的因素：影响查准率影响检索效果的因素：影响查准率影响检索效果的因素：影响查准率影响检索效果的因素：影响查准率1.索引词不能

14、准确描述文献主题和检索要求；组配规则不严密；选词及词间关系不正确；标引过于详尽；组配错误；2.检索时所用检索词（或检索式）专指度不够，检索面宽于检索要求；检索系统不具备逻辑“非”功能和反馈功能；3.检索式中允许容纳的词数量有限；截词部位不当，检索式中使用逻辑“或”不当等等。24.Meta分析的文献检索后的纳入分析的文献检索后的纳入为使用当前最佳证据而检索：充分检索为使用当前最佳证据而检索：充分检索为使用当前最佳证据而检索：充分检索为使用当前最佳证据而检索：充分检索如对治疗证据进行检索，一般：首选Cochrane Library（CDSR）不满意不满意不满意不满意DARE，ACP Journal

15、 Club，EBM指南,Bandolier等 仍不满意仍不满意仍不满意仍不满意 MDELINE，EMBASE，CBMdisc等 还不满意还不满意还不满意还不满意 指南、专业杂志、会议录数据库等25.Meta分析的文献检索后的纳入分析的文献检索后的纳入影响纳入文献质量的因素：很多影响纳入文献质量的因素：很多影响纳入文献质量的因素：很多影响纳入文献质量的因素：很多1.检索到的文献少，因而迁就性纳入；2.部分文献发表时未在电子数据库，未进行图书馆的纸板杂志检索；3.立题宽泛不精确导致纳入文献庞杂，随意删除、舍弃文献；4.研究者就该立题专业把握度不够，文献纳入有出入性偏倚；5.原文取得困难的文献没有纳

16、入，可向作者Mail索取原文；6.非汉语、英语语种文献的缺失。26.Meta分析的文献检索分析的文献检索-实例实例文献检索：文献检索：文献检索：文献检索：具体操作实例具体操作实例具体操作实例具体操作实例1.1.中文检索关键词：准确、无遗漏中文检索关键词：准确、无遗漏2.2.英文检索关键词：部分中文期刊是英文版的，如中华英文检索关键词：部分中文期刊是英文版的，如中华-英文版等。英文版等。27.文献的纳入和排除：文献的纳入和排除：1.经检索相关数据库得到139 篇文献，阅读文摘和标题,初步排除文献81篇；2.剩余58篇经阅读全文,排除不符合纳入标准的文献39篇；3.总共纳入研究19篇；4.其中英文

17、文献4 篇，中文文献15篇，发表年限为1996-2008。Meta分析的文献检索分析的文献检索-实例实例28.Meta分析的文献质量评价分析的文献质量评价影响影响影响影响MetaMeta分析结果的重要因素：质量评价分析结果的重要因素：质量评价分析结果的重要因素：质量评价分析结果的重要因素：质量评价 1.使用低质量方法可改变研究的结果；2.Meta-分析中纳入低质量研究有可能夸大治疗效果；3.评估偏倚对纳入研究的质量的影响及由此而造成的对系统评价的影响；4.如果被评价的文章在设计及执行方面质量太差，最好删除；因为对于这些有偏倚的资料和没有意义的资料，不能寄托于Meta分析会得到可信的结论，反而会

18、引起误导；5.如果纳入文献的质量均较差，则建议放弃，否则辛辛苦苦做的工作被审稿人拒稿，会极大地浪费时间和精力。29.Meta分析的数据提取分析的数据提取MetaMeta分析数据的提取：一般原则分析数据的提取：一般原则分析数据的提取：一般原则分析数据的提取：一般原则1.将原始研究中可用的资料提取出来，以免混乱，便于集中分析；2.在提取过程中，对资料进行质量分析和评价；3.将原始资料条理化，便于Meta分析作者对文献中的具体工作进行评价，以评估系统评价的准确性；4.多个Meta分析作者应对质量分析的一致性进行自测；5.根据立题时的目标设计制定详细的资料录入表格。30.Meta分析的数据提取分析的数

19、据提取MetaMeta分析数据的提取：基本要求分析数据的提取：基本要求分析数据的提取：基本要求分析数据的提取：基本要求1.研究编号study ID2.纳入研究的一般信息3.研究者的姓名authors4.发表信息publication information5.研究名称title6.纳入研究的设计方法：平行设计(parallel design)、交叉设计(cross-over design)、安慰剂对照（placebo control)；随机方法adequate;unclear;inadequate7.是否采用盲法（blind）；8.有无失访/丢失/退出（loss of follow-up/wi

20、thdraw/drop-out)31.Meta分析的数据提取分析的数据提取-实例实例HPVHPV与食管癌与食管癌与食管癌与食管癌MetaMeta分析数据的提取：基本数据分析数据的提取：基本数据分析数据的提取：基本数据分析数据的提取：基本数据1.观察对象(Participants)2.总人数（食管癌、正常人）3.亚组人数（高低发区、HPV不同检测方法、不同对照、HPV亚型）4.基线情况（年龄、性别等）5.总结果Outcomes：总人群中多少例罹患食管癌、多少未罹患6.亚组结果Outcomes：亚组人群中多少例罹患食管癌、多少未罹患7.列出原始研究的所有测量指标，也可能是最后舍弃的（本研究中食管腺

21、癌资料最终从表格中被舍弃）32.Meta分析的数据提取分析的数据提取-实例实例33.Meta分析的数据提取分析的数据提取影响数据提取的因素：资料不全影响数据提取的因素：资料不全影响数据提取的因素：资料不全影响数据提取的因素：资料不全1.对每篇进入分析的文章主要内容进行描述，如治疗方法的可比性、病人特点、疾病程度、并发症、取材手段、检测方法等；2.不建议用文字描述记录，建议略微复杂的表格登记，便于查找、补充、甄别；3.务必注重整个立题文献纳入与数据提取过程的时效性，及时完成论文，否则滞后性的研究结果可能对临床指导性的作用会推后。34.Meta分析的统计运算分析的统计运算MetaMeta分析的统计

22、运算软件：很多分析的统计运算软件：很多分析的统计运算软件：很多分析的统计运算软件：很多1.基础级：Revman；2.提高级：Meta-Disc、Meta-win、MetaLab、SPSS；3.专业级：Stata、SAS。4.应根据个人的时间、实际学习操作能力、和对结果展示的期待作出适当的选择。应根据个人的时间、实际学习操作能力、和对结果展示的期待作出适当的选择。35.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：基础级分析的统计运算软件：基础级分析的统计运算软件：基础级分析的统计运算软件：基础级36.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软

23、件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-Meta-View 3.1-Meta-View 3.137.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-Meta-Win-Meta-Win38.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-NCSS-NCSS39.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件

24、：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-SPSS for windows-SPSS for windowsSPSS做做Meta需要自己建模编程需要自己建模编程 40.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-Meta-DiSc-Meta-DiSc41.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级分析的统计运算软件：提高级-MATLAB(Matrix

25、 Laboratory)MATLAB(Matrix Laboratory)42.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：专业级分析的统计运算软件：专业级分析的统计运算软件：专业级分析的统计运算软件：专业级-Stata-Stata43.Meta分析的统计运算分析的统计运算MetaMeta分析的统计运算软件：专业级分析的统计运算软件：专业级分析的统计运算软件：专业级分析的统计运算软件：专业级-SAS(Statistics Analysis System)-SAS(Statistics Analysis System)44.Meta分析的统计运算分析的统计运算-软件软

26、件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程45.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程46.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程47.Meta

27、分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程48.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程49.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教

28、程：使用教程：使用教程50.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程51.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程52.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(Re

29、vMan 5.0)：使用教程：使用教程：使用教程：使用教程53.Meta分析的统计运算分析的统计运算-软件软件Review Manager 5.0(RevMan 5.0)Review Manager 5.0(RevMan 5.0)：使用教程：使用教程：使用教程：使用教程54.异质性检验：异质性检验：1.Meta-分析前先做异质性分析；2.一般说来，异质性资料不能合并；3.如合并分析显示异质性时，仔细分析异质性原因和来源；4.无异质性资料合并采用固定效应模型；5.有异质性资料合并采用随机效应模型。Meta分析的统计运算分析的统计运算-异质性分析异质性分析纳入纳入纳入纳入MetaMeta分析研究的

30、第一步：异质性分析分析研究的第一步：异质性分析分析研究的第一步：异质性分析分析研究的第一步：异质性分析55.异质性检验：异质性检验：1.总20项研究之间异质性检验(X2=94.78,P0.001)，说明各研究之间存在异质性；2.各亚组之间异质性检验(P值均0.001)，说明各亚组研究之间同样均存在异质性；3.因此，总体或亚组分析研究均采用校正后的随机效应模型(REM,D-L法)进行数据合并，计算合并OR值及其95%CI(表2)。Meta分析的统计运算分析的统计运算-实例实例56.异质性检验：异质性检验：总20项研究之间异质性检验(X2=94.78,P0.001),说明各研究之间存在异质性；Me

31、ta分析的统计运算分析的统计运算-实例实例57.异质性检验：异质性检验：1.各亚组之间异质性检验(P值均0.001)，说明各亚组研究之间同样均存在异质性；2.因此，总体或亚组分析研究均采用校正后的随机效应模型(REM,D-L法)进行数据合并，计算合并OR值及其95%CI(表2)。Meta分析的统计运算分析的统计运算-实例实例58.Meta分析结果：分析结果：1.纳入分析的20项研究资料中，食管癌患者HPV 阳性感染率为52.95%、对照组HPV阳性感染率为34.83%；2.综合OR值为3.30(95%CI:2.13-5.11)，合并效应量的检验结果(Z=5.36,P0.05)，2.故认为无显著

32、性发表偏倚，对最终HPV 感染与食管癌关联的综合OR值结论无实质性影响。(表2)。Meta分析的统计运算分析的统计运算-实例实例63.偏倚性检验结果：漏斗图（在发表论文中按审稿人要求删除）偏倚性检验结果：漏斗图（在发表论文中按审稿人要求删除）Meta分析的统计运算分析的统计运算-实例实例64.亚组分析结果：亚组分析结果：按按按按照 1、食管癌的高-低发区，2、HPV的检测方法，3、对照的设置（癌旁对照与正常人对照）分组。Meta分析的统计运算分析的统计运算-实例实例65.Meta分析的统计运算分析的统计运算-实例实例66.Meta分析的讨论及注意事项分析的讨论及注意事项MetaMeta分析的讨

33、论：分析的讨论：分析的讨论：分析的讨论：注意事项注意事项注意事项注意事项1.1.对对临临床床实实践践的的意意义义：结结果果是是否否能能帮帮助助指指导导一一般般的的决决策策或或特特异异情情况况下下的的决决策策？2.2.对对临临床床研研究究的的意意义义：系系统统评评价价可可以以指指出出研研究究的的缺缺口口并并对对未未来来应应进进行行的的研研究提出建议究提出建议；3.3.如如果果缺缺乏乏相相关关的的或或可可靠靠的的资资料料，或或研研究究之之间间有有显显著著的的异异质质性性时时，MetaMeta分分析就不可能进行析就不可能进行；67.Meta分析的讨论及注意事项分析的讨论及注意事项MetaMeta分析

34、的讨论：分析的讨论：分析的讨论：分析的讨论：注意事项注意事项注意事项注意事项4.4.一一个个结结论论合合理理而而真真实实的的系系统统评评价价比比结结论论不不真真实实的的MetaMeta分分析析更更有有价价值值（大大多多研究生倾向研究生倾向于做于做MetaMeta分析分析，应特别注意），应特别注意）；5.5.MetaMeta分分析析就就不不能能进进行行时时，做做一一个个系系统统评评价价或或者者写写一一篇篇综综述述也也不不失失为为一一种种选择选择 。6.6.问问问问自自自自己己己己：我我做做的的这这个个MetaMeta分分析析结结果果真真实实、重重要要吗吗？这这个个结结果果可可应应用用于于我我的病

35、人吗？的病人吗？68.须常常浏览的网站须常常浏览的网站The Cochrane CollaborateThe Cochrane Collaborate：http:/www.cochrane.orghttp:/www.cochrane.org69.须常常浏览的网站须常常浏览的网站中国循证医学中心：中国循证医学中心：中国循证医学中心：中国循证医学中心：地点设在华西医院地点设在华西医院地点设在华西医院地点设在华西医院70.首都医科大学附属北京友谊医院首都医科大学附属北京友谊医院Beijing Friendship Hospital,Capital Medical University THANKS2014-07-252014-07-252014-07-252014-07-2571.