医疗健康大数据应用实例与系统资料.doc

《医疗健康大数据应用实例与系统资料.doc》由会员分享，可在线阅读，更多相关《医疗健康大数据应用实例与系统资料.doc（6页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、医疗健康大数据：应用实例和系统分析1 、概述随着信息技术和物联网技术发展、个人电脑和智能手机普及以及社交网络兴起，人类活动产生数据正以惊人速度增长。根据国际数据公司（International DataCorporation，IDC）报告，仅2011年，全世界产生数据就有1.8 ZB（1 ZB1 021 byte），并且平均每5年增长9倍1。大数据一词由此而生。大数据是指难以被传统数据管理系统有效且经济地存储、管理、处理复杂数据集。大数据一般以PB为单位计量，并包含结构化、半结构化、无结构化数据，大数据给数据采集、运输、加密、存储、分析和可视化带来了严峻挑战2。和传统数据相比，大数据包含5个V

2、特性：Volume（数据规模巨大）、Variety（数据类型繁多）、Velocity（数据产生数据非常快）、Veracity（分析结果取决于数据准确性）、Value（大数据一般包含非常重要价值）3。大数据带来了存储、管理、处理数据挑战，也带来了发掘数据中新价值机遇。多个行业已经利用大数据改善业务，例如金融业、零售业、生命科学、环境研究。大数据市场估计每年会增长50亿美元价值，到2020年将达到600亿美元价值4。医疗健康行业目前面临着巨大挑战，其中，最主要挑战包括：急剧升高医疗支出、人口老龄化带来慢性疾病问题、医疗人员短缺、医疗欺诈5等。国家统计局数据显示，我国2013年医疗卫生总支出为31

3、668亿元，较2012年上升12.6%，并且已经连续8年每年增长超过10%。医疗支出已经占据了社会总支出很大比例，在可以预见将来，医疗支出将会持续增长。然而，根据美国医学研究院（Institute of Medicine，IOM）一篇报告，如今医疗健康支出1/3被浪费而没有用于改善医疗。这些浪费包括不必要服务、行政浪费、昂贵医疗费用、医疗欺诈和错失预防机会6。为了保持竞争力，医疗机构必须把数据作为一种战略资产，分析数据以达到提高诊断准确度、提高疗效、降低费用、减少浪费目。医疗健康机构采用大数据可以有效地帮助医生进行更准确临床诊断；更精确地预测治疗方案成本和疗效；整合病人基因信息进行个性化治疗；

4、分析人口健康数据预测疾病爆发等。利用大数据技术还能有效减少医疗成本，麦肯锡全球研究院预计使用大数据分析技术将每年为美国节省3 000亿美元开支。其中，最有节省开支潜力两个方面包括临床操作和研发7。利用大数据技术帮助医疗企业实现其业务例子正在快速增多。比如，ActiveHealthManagement收集用户健康方面数据以帮助用户实现健康管理；CancerIQ整合临床数据和基因数据帮助实现癌症风险评估、预防和治疗；CliniCast利用大数据预测治疗效果以及降低花费。本文首先介绍医疗健康行业大数据特点以及大数据技术背景，然后举例说明目前大数据在医疗健康行业应用，最后分析目前医疗健康大数据系统及其

5、相关技术。2、 背景知识2.1 大数据处理方法根据麦肯锡全球研究院2011年报告，适合大数据处理技术包括：关联规则学习、分类、聚类分析、数据融合、机器学习、自然语言处理、回归、信号处理、仿真、可视化8等。其中，关联规则学习是挖掘各个变量间有趣关系，比如在零售中发现经常被一起买商品，便于促销；分类是通过训练已有数据集来有效识别新数据，比如预测用户购买行为；聚类分析是按数据相似程度将整个数据集分为多个小规模数据集；数据融合是将多个数据源信息整合分析以产生新更加精确、连续、有价值信息；机器学习是一类算法总称，关注设计算法自动识别数据中复杂模式；自然语言处理关注计算机和自然语言联系，帮助计算机识别人类

6、语言；回归是一组统计算法，用来判断因变量和自变量关系，以帮助预测。信号处理是一组用来识别、分析、处理信号技术；仿真是模拟一个复杂系统行为技术，经常被用来预测；可视化是将数据处理为图像、图标、动画，以帮助人类直观了解数据。2.2 大数据处理平台大数据特点决定了传统数据库软件和数据处理软件无法应对存储、处理、分析大数据任务。大数据处理任务由运行在数十台，甚至数百台服务器大规模并行软件完成8。常见大数据处理平台和工具有：MapReduce，其提供了一种分布式编程抽象方法；Hadoop，其包含了多个系统和工具以帮助完成大数据任务； HDFS，其用来可靠地分布式存储数据； Hive，其提供了Hado o

7、p上SQL支持； HBase，它是基于HDFS一种非关系型数据库；Zookeeper，其提供了集群节点一个管理方法。2.3 医疗健康数据来源医院信息系统（hospital information system，HIS）是医疗数据重要来源。医院信息系统包括：电子病例系统（electronic medicalrecord system，EMRS）、实验室信息系统（laboratory information system，LIS）、医学影像存档和通信系统（picture archiving &communicationsystem，PACS）、放射信息管理系统（radiology informat

8、ion system，RIS）、临床决策支持系统（clinical decision support system，CDSS）等。根据中国医院信息化状况调查报告中对于医院信息系统总体实施现状报告，截至2006年，电子病例系统、实验室信息系统、医学影像存档和通信系统、临床决策支持系统已有或在建率分别为27.46%、37.70%、25.20%、12.30%9。除此之外，各种健康设备可以帮助收集用户生命体征信息，比如心电数据、血氧浓度、呼吸、血压、体温、脉搏、运动量。社交网络和搜索引擎也包含了潜在人口健康信息。2.4 医疗健康大数据特点医疗大数据除了包含了大数据5 个V 特点之外，还有多态性、时效性

9、、不完整性、冗余性、隐私性等特点10。多态性指医师对病人描述具有主观性而难以达到标准化；时效性指数据仅在一段时间内有用；不完整性指医疗分析对病人状态描述有偏差和缺失；冗余性指医疗数据存在大量重复或无关信息；隐私性指用户医疗健康数据具有高度隐私性，泄漏信息会造成严重后果。3 、医疗健康大数据应用举例信息化医疗数据、医疗研究数据、病人特征数据以及移动设备、社交网络和传感器产生医疗健康相关数据为医疗健康从业人员提供了新思路，利用大数据技术可以从中发现潜在关系、模式，从而帮助医师提高诊断精度、预测治疗效果、降低医疗成本，帮助医药公司发现潜在药物不良反应、帮助公共卫生部门及时发现潜在流行病。下面将从公共

10、卫生、药物副作用评估、治疗预测和降低医疗成本、辅助诊断和个性化治疗等几个方面介绍大数据用处。3.1 助力公共卫生检测2009年，Google比美国疾病控制和预防中心提前1 2周预测到了甲型H1N1流感爆发，此事件震惊了医学界和计算机领域科学家，Google研究报告发表在Nature杂志上11。Google正是借助大数据技术从用户相关搜索中预测到流感爆发。随后百度公司也上线了“百度疾病预测”借助用户搜索预测疾病爆发。借助大数据预测流感爆发分为主动收集和被动收集，被动收集利用用户周期提交数据分析流感当前状况和趋势，而主动收集则是利用用户在微博推文、搜索引擎记录进行分析预测。FluNear You1

11、2借助用户周期提交自我流感检测来预测流感爆发。首先，用户在Flu Near You网站上注册，随后每个星期用户将收到一封电子邮件，指引用户登录Flu Near You网站。在网站上，用户填写一份关于自己是否有流感症状调查。最终Flu Near You收集信息并利用大数据技术生成目前流感疾病和未来流感疾病预测可视化图表。流感爆发初期，通常伴随着用户在搜索引擎搜索相关内容或在社交网络上发布相关内容，这些信息可以作为流行病爆发初期预警13,14。参考文献15以用户在Twitter上推文以及英国健康保健局发布城市流感样病例率（influenza like illnessrate）为数据源，通过LASS

12、O算法进行特征选择，选择推文关键字，建立未来数天流感样病例率预测模型，取得了比较精确结果。在疾病传播中，长时间和病原体接触会增加感染几率，因此追踪人口接触信息以及人口位置信息将有助于了解流行病行为16,17。参考文献18设计了一套使用智能手机自动收集人口位置信息和接触信息应用。参考文献19将流行病数据源分为媒体（包括官方媒体）、移动设备、社交网络、Pro-Med邮件列表、实验室和医院数据，并根据不同数据来源设计了一套收集数据、分析数据、验证数据、数据可视化系统，用以直观表现流行病情况。3.2 帮助发现药物副作用药品上市后不良反应检测一般依赖被动检测和主动检测。被动检测依赖于医生、患者、制药公司

13、提供不良反应报告。被动检测最大问题是漏报，参考文献20认为94%不良反应没有被报告。主动检测则是利用文本挖掘、数据挖掘技术从EHR、EMR、社交网络、搜索引擎中发现潜在药品导致不良反应事件20。参考文献21利用药品不良反应存在时间先后顺序，挖掘电子病例中可能存在药物不良反应。参考文献22将引起不良反应条件分为使用一种药品、两种药品、一种药品和病人一种特点、一种药品和一种药品过敏事件，根据决策树、聚类等数据挖掘方法发现条件和不良反应结果关系。当药物使用和不良反应存在低频率因果关系时，一般数据挖掘算法将难以分辨因果关系和偶然事件23，参考文献23基于预认知决策模型（RPD model）设计了多种算

14、法用以发现药品不良反应中低频因果关系2325。3.3 助力治疗预测和降低医疗成本目前，医疗健康行业成本高昂部分原因来自医疗失误和医疗浪费。根据1998年美国医疗协会报告，仅仅在美国，可以避免医疗失误每年造成了98 000起死亡案例26。美国花在医疗健康上费用超过1 700亿美元，而中国每年花费在医疗健康上费用超过30 000亿元。在此背景下，多国通过改革医疗系统以减少医疗失误及医疗浪费，最终削减医疗开支。美国于2011年通过关于医疗健康信息技术HITECH法案宣布：决定投入500亿美元在5年内使用信息技术解决医疗行业存在问题27。而中国在2009年宣布了花费1 200亿元10年医疗系统改革计划

15、第一部分。参考文献28中分析了澳大利亚医疗保险行业，认为使用目前验证技术无法有效发现医疗服务中存在欺诈、滥用、浪费、错误等现象，原因在于旧验证技术只关注单个病例，无法利用多个病例间联系。作者以医疗账单为数据源，建立关于治疗费用、住院时间等数据预测模型，使用数据挖掘技术发现账单中异常数据；使用领域专家建立规则库分析异常账单，发现其中可能存在问题并给出警告。典型应用环境包括医疗器材滥用、手术过程和病情诊断不符、过度收费等。提早检测出医疗过程中问题将为国家保险机构、患者、私立保险机构节省大量花费。3.4 辅助诊断参考文献29,30认为患者基因型、生活方式、身体特征、多重病患严重影响了治疗效果。提早根

16、据患者特征设计个性化治疗方案将有助于降低成本，减少医疗事故。参考文献31认为通过挖掘用户基因信息和电子病例可以做到：根据患者基因信息和患者其他特征预测各种治疗方案可能副作用；选择更好治疗方案，而不是尝试各种治疗方案；帮助用户预防疾病或削弱疾病影响。之后，参考文献31设计了一套系统Mayo用来收集、存储个性化治疗所需要数据，并为数据分析师提供分析数据平台。参考文献32则通过分析病人特征数据并匹配相似病例以帮助医师诊断。4、 医疗健康大数据平台为了利用大数据技术处理医疗健康问题，需要针对数据特点以及处理方式设计专门系统。下面主要介绍目前医疗健康大数据平台如何设计以应对挑战。4.1 个人数据收集系统

17、iEpi1是一个便于流行病医疗科研人员快速搭建起收集用户接触信息、位置信息平台系统，本文主要对其进行介绍分析。4.1.1 背景智能手机普及为获取个人医疗数据提供了一个绝佳机会，利用这些信息服务个人医疗、公共卫生成了关注焦点。多个应用给予用户控制自己健康状况自由，为医疗服务提供商提供病人详细状态信息。这些应用主要提供非聚集信息。而聚集化信息可以更容易地提供准确、一致性信息。人口接触信息提供了了解流行病传播模式机会。人口活动信息加上位置信息，可帮助城市规划者了解建筑环境对健康影响；加上环境质量监控器，可以帮助了解环境污染对健康影响。4.1.2 目标设计一个个人数据收集系统，周期性收集用户数据，包括

18、位置、加速度、温度、心跳等信息；考虑到需要提供接触信息，位置信息应尽可能精准；用户可以设定所要收集数据以及数据收集频率和持续时间；考虑到医疗研究人员可能没有编程经验，配置方式应该简单。4.1.3 设计iEpi系统包含2个部分（如图1所示）：数据收集部分（HealthLogger）和辅助处理部分。其中，HealthLogger由5个模块组成。任务管理器：HealthLogger任务包括上传数据、传输数据、读取传感器。任务分连续性和周期性两种方式调度，其中，周期性任务需要设置周期和持续时间。任务管理器也调度其他服务。数据流和过滤器：数据流提供了访问Android传感器API和其他数据标准接口，过滤

19、器帮助用户剔除不需要数据。数据日志和数据缓存：数据日志存放收集数据，数据缓存为数据日志提供临时存放功能。数据传输器：数据传输器是一个通用文件上传器，被HealthLogger其他组件用来上传数据到服务器。iEpian：是HealthLogger提供一种简易脚本，用来为没有编程经验医疗研究员提供控制数据采集方式功能。因此，用户可以在没有编程经验情况下完成数据采集器设计。HealthLogger还提供了蓝牙接口以帮助用户采集其他设备提供数据，比如体重信息和饮食信息。当用户数据被收集后，会以文件形式存放在Apache服务器，iEpi周期性地检查新文件，对数据解密并解析，然后按用户和数据采集周期存放到

20、数据库中。由于在室内时GPS提供位置信息不准确，为了提高位置信息准确性，iEpi定位器采用SaskEPS算法利用接入点位置及信号强度提高室内位置计算精确度。4.2 面向病人医疗健康网络社区DiabeticLink27,33为糖尿病患者及相关利益人员提供了一个多功能健康网络社区，下面将分析其设计思路。4.2.1 背景目前，在美国，糖尿病影响了8%人口，建立为糖尿病人服务医疗健康网络社区有助于帮助他们。该网络社区主要提供以下4个方面服务：糖尿病门户及在线健康社区，主要包括为病人提供论坛、博客等交流医疗经验及感情服务，还包括匿名交流服务；糖尿病追踪及可视化，包括记录病人医疗数据和健康数据并生成可视化

21、报告；糖尿病风险报告，使用病人数据预测患病风险，促进病人自我管理；提供建议，为病人提供改善其状态建议，并鼓励病人达成长期目标。4.2.2 目标设计一个面向病人医疗健康网络门户，为患者、患者家属、护士、医师、制药公司提供服务。其中，病人可以利用医疗健康网络社区交流治疗经验和疾病信息，学习医疗知识，以更好地了解自己病情、控制病情发展；病人家属可以利用医疗健康网络社区了解病人疾病、讨论治疗经验、阅读教育书籍，以提供更好照顾；护士需要快速建立起疾病相关知识，以引导病人积极应对治疗。医疗健康网络社区还提供了以下功能：医师在面对不熟悉疾病时，需要快速获取相关工具和资源通道；部分医疗健康网络社区提供匿名电子

22、健康记录，医学研究员可以从中挖掘信息；制药公司可以从医疗健康网络社区挖掘药物不良反应信息。4.2.3设计为了满足多方面需求，除了提供简单医疗健康社区功能外，该系统还包含以下4个部分。个性化病人智能工具：使用数据挖掘方法挖掘病人电子病例和病人博客以发现生活方式、治疗和疗效关系，并为病人提供预防性建议。疾病管理工具：记录患者糖尿病参数（血糖、血压、糖化血红蛋白等）、营养、运动量、用药量，并形成可视化报表，以帮助用户管理自己状况。社交功能：提供用户分享经验和感情，提出回答问题，寻找情感支撑等功能。教育功能：提供可信医疗文章、研究报告、健康食谱等内容，并为用户提供知识搜索引擎。4.3 个人体征数据收集

23、和处理系统参考文献34为用户提供了一个便于开发个人体征分析应用基于Hadoop框架。4.3.1 背景医疗健康行业重心正逐步从医疗转向预防35，而可穿戴医疗设备兴起为医疗健康行业转变提供了独一无二机会。利用可穿戴医疗设备从用户身上收集生命体征数据，比如心电图、体温、心跳，帮助提早检测用户患病危险、主动预防、管理健康。生命体征数据包括像体温、血压这样间隔数据，也包括像呼吸、心电图这样连续测量才有意义数据。前者可以用传统数据库存放，后者一般采用文件存放。4.3.2 目标设计一个个人健康分析系统，以便用户在此之上快速搭架生命体征分析应用。系统应该提供服务包括：体征数据接收、数据存储管理、数据分析接口、

24、个性化服务（发送用户服务数据到用户智能设备）。考虑到两种不同体征数据形态，系统应该提供统一处理方式。4.3.3 设计系统分为5个部分，如图2所示。生命体征传输：为了提供可拓展性，系统采用符合W3CSOAP标准传输数据。中间服务层：为了对用户提供统一数据形式，系统添加中间服务层来预处理数据，将数据转换为符合HL7规范数据，中间服务层还提供接收体征数据、传送数据到处理平台、接收处理平台结果并发送给用户以及信号处理功能（例如将加速度数据转换为记步数据）。数据存储服务：系统接收中间服务层数据，存放至分布式数据库HDFS中。分析服务：系统采用Hadoop作为主要数据分析平台。4.4 小结在设计医疗健康大

25、数据处理平台时，必须把数据放在优先考虑位置。下面总结了前文提到医疗健康大数据平台设计思路，提出了定义数据源、确定数据处理方式、分析数据流向、设计系统一般步骤。（1）定义数据源医疗健康大数据数据来源包括结构化、半结构化、无结构化医疗单位数据、个人健康数据和公共健康数据。例如医疗单位电子病例数据、放射信息管理系统数据，传感器收集体温、脉搏等个人数据，公共健康数据（包括政府发布流感信息、社交媒体信息）等。为了实现良好数据流，必须首先将平台所要收集信息分类，分析每种数据特点，包括：是否是结构化、无结构化或半结构化数据；是否需要预处理；包含何种有用信息。（2）确定数据处理方式大数据处理方式包括前文提到机

26、器学习、分类、聚类、回归等。根据上一步分析得到数据特点和数据价值选择相应处理方式。比如参考文献34中，为了得到用户运动数据，需要用户记步数据，而记步数据可以通过将源数据中用户加速度信息经过信号处理获得。（3）分析数据流向根据数据源、数据处理方法和数据结构确定数据流方向。iEpi1中各类传感器数据经过在手机端汇总后到达服务器，以临时文件方式存储，经过分析后存放在数据库中，最后提供给用户挖掘其中关系、模式。（4）设计系统根据数据流特点和数据处理方式选择现有大数据处理平台作为子系统，然后设计中间系统以连接多个子系统。5 、医疗健康大数据技术5.1 可视化技术医疗可视化技术一直存在，比如X光、CT、核

27、磁共振、远程医疗等。医疗可视化功能在于为病人、医生以及利益相关者提供更深理解，以帮助其做出更好决策。随着医疗信息化到来以及移动设备、社交网络流行，医疗健康数据呈爆发式增长，医生、制药公司、公共卫生机构无法在面对海量数据时有直观了解，需要利用可视化技术将数据以直观方式呈现给相关人员。5.1.1 分析医疗健康大数据来源主要包含3个方面6：个人健康数据、医疗数据、人口健康数据。在个人健康数据方面，数据来源主要是传感器信息和在线信息。使用可视化技术处理个人健康数据、个人疾病数据可以帮助用户更容易地实现健康管理、疾病管理。处理个人饮食、运动数据可以帮助用户直观了解身体状况，有助于用户保持身体健康。在医疗

28、数据方面，数据来源主要是医学研究数据、电子病例数据。医生无法跟上从这些数据中发现新医学知识速度并将其用到病人治疗上，医疗可视化将为医生提供直观了解新知识机会。人口健康数据以及疾病监控数据可以通过可视化技术帮助用户了解人口健康状况、疾病爆发状况。5.1.2 挑战由于需要处理大量数据以提供可视化分析报告，可视化服务需要较长时延才能提供。当作为临床决策支持系统时，医师希望在短时间内获得服务，这对可视化服务提供者提出了实时性服务挑战。5.2 个性化医疗考虑到患者间存在很大差异，不存在针对一种病症适应所有情况治疗方案36，实际上，研究人员一直在寻找针对病人治疗经历、基因信息、遗传信息、环境信息、生活方式

29、等信息给予个性化治疗方案37。鉴于人类基因工程原因，人类可以从基因角度给予患者个性化治疗。5.2.1 分析个性化治疗一般使用以下工具：家族健康历史，利用家族健康历史整合遗传信息可以有效帮助预测疾病，进行主动预防性措施；基因信息，指利用基因信息及其衍生物信息，包括RNA、蛋白质、代谢产物信息进行疾病预测和个性化治疗，然而，基因检测费用高昂38，基因多态性特质可能导致评估错误及预测错误，导致了通过基因检测提供个性化治疗难以获得较高性价比；临床决策支持系统，其提供了一个利用所有信息为患者提供个性化治疗方案机会。5.2.2 挑战个性化医疗挑战主要在于部分用于疾病预测、疗效预测数据源难以获得。首先，平价

30、个人基因分析技术应该被提上日程；其次，用户不愿意提交个人医疗数据部分原因是担心隐私泄露39，这就对医疗数据提供商安全和隐私保护提出了要求。6 、结束语本文首先介绍了大数据概念、特点和处理平台，之后分析了医疗健康行业数据来源和特点，然后讨论了利用大数据技术应对医疗健康行业挑战例子，最后介绍了医疗健康大数据系统和关键技术。目前医疗健康大数据还处于初期发展阶段，但是它已经展现了改变医疗服务潜力。医疗健康服务提供商利用大数据分析技术可以从临床数据、研究数据、个人健康数据、公共健康数据中挖掘潜在关系，为临床决策、公共卫生、个人健康提供帮助。将来，医疗健康大数据将会快速地发展。目前，医疗健康大数据还面临着诸多挑战，隐私问题关系到用户数据不会被用作恶意用途，数据安全和标准化需要成立专门机构来管理。然而，随着技术发展，医疗技术和大数据技术结合将更好地为人类健康提供服务。