大数据将有助于提高医疗保健行业的效率,促进在该行业推行问责制。然而到目前为止,其他行业在这方面要成功得多:通过对多种数据源进行大规模的整合和分析,获得了实用价值。
那些成功行业弄明白了一个问题,那就是:当不同的数据集在具体某个人的层面上连接起来时,大数据就会产生变革性的价值。相比之下,生物医学大数据分散在研究机构中,而且被特意地隔离起来,目的是为了保护病人的隐私。连接这些分散的数据,既有技术方面的挑战,也有社会方面的挑战。只有迎接两个方面的挑战,才能使生物医学大数据对医疗保健行业发挥充分的作用。在今天的“观点”栏目中,我们要着重分析这种连接所带来的挑战。CDA数据分析师:http://cda.pinggu.org/
竞选活动、政府和企业利用大数据尽可能更多地了解选民或客户情况,然后利用先进的估算方法来制定策略。2012年奥巴马竞选的时候,把来自脸谱网(Facebook)、人口普查、选民列表以及积极推广等多种渠道的数据综合起来,以确认、接近和影响那些犹豫不决的选民。国家安全局通过电话公司和互联网公司来确认恐怖分子。CDA数据分析师:http://cda.pinggu.org/
通过用户的上网历史和地理环境,谷歌公司将每个人的搜索结果进行了个性化处理。在所有的这些事例中,关键是已经超出了综合数据的范围,将信息连接到了具体的人。知道在某个行政区域内有很多犹豫不决的选民是有所帮助的,但是跟这些具体的人们获得联系可能有助于赢得一场竞选。
获得大数据可能会使医生和研究人员验证新的假设,并确认那些可能遭受干预的领域。例如,通过从不同地区的商店所获得的杂货购买模式,能否预测出公共卫生数据库中肥胖症和2型糖尿病的患病率呢?能否像配药时对后续配方进行测量那样,将家庭监视装置所记录的运动量跟降胆固醇药物的疗效相互关联起来呢?病人的脸谱网网友在多大程度上能够影响他们对生活方式的选择和对医学治疗的依从呢?至于这些相互关联的推断是否真正地存在于大数据中,以及医生们将如何利用这些信息,这些情况都还不清楚。
然而,将数据连接到具体病人的层面上来,是探索这些可能性的先决条件。
在有效利用生物医学大数据方面,首要的挑战就是要确定卫生保健信息的潜在来源是什么,以及确定将这些数据连接起来之后所带来的价值如何。将数据集按照“大小”从不同的方面进行条理化,这个大数据就会提供解决问题的潜在方案。
一些大数据,如电子健康记录(EHRs),提供详尽资料,包括病人接受诊断时的多种资料(如:图片、诊断记录等)。尽管如此,其他大数据,如保险理赔数据,提供纵深资料——顾及病人在很长一段时间里、在某个狭窄的疾病类型范围内所经历的病史。当连接数据有助于填补空白的时候,这些大数据才会增加价值。CDA数据分析师:http://cda.pinggu.org/
只有记住这些,才能更容易明白如何将卫生保健系统之外非传统来源的生物医学数据融入这些情况之中。尽管数据的质量有所不同,但社会媒体、信用卡购物、人口普查记录以及大量其他类型的数据,都会有助于收集一个病人的历史资料,特别是有助于揭示可能对健康产生影响的社会因素和环境因素。
英语原文:
Finding the Missing Link for Big Biomedical Data
It has been argued that big data will enable efficiencies and accountability in health care. However, to date, other industries have been far more successful at obtaining value from large-scale integration and analysis of heterogeneous data sources. What these industries have figured out is that big data becomes transformative when disparate data sets can be linked at the individual person level. In contrast, big biomedical data are scattered across institutions and intentionally isolated to protect patient privacy. Both technical and social challenges to linking these data must be addressed before big biomedical data can have their full influence on health care. It is this linkage challenge that we address in this Viewpoint.
Political campaigns, government, and businesses use big data to learn everything possible about their constituents or customers, and then apply advanced computation to hone strategy. The 2012 Obama campaign identified, approached, and influenced swing voters using data fused from Facebook, census, voter lists, and active outreach. The National Security Agency employs massive data on individuals from phone and Internet companies to identify terrorists. Google personalizes search results with the user’s web history and geographic context. In all these examples, the key has been to go beyond aggregate data and link information to individual people. Knowing that there are many swing voters in a zip code is helpful, but contacting those specific individuals may help to win an election.
Linking big data will enable physicians and researchers to test new hypotheses and identify areas of possible intervention. For example, do grocery shopping patterns obtained from stores in various areas predict rates of obesity and type 2 diabetes in public health databases? Does level of exercise recorded by home monitoring devices correlate with response rates of cholesterol-lowering drugs, as measured by continued refills at the pharmacy? Does increased physical distance from patients’ homes to hospitals and pharmacies affect utilization of health care and result in distinct patterns in claims data? To what extent do patients’ Facebook friends influence lifestyle choices and compliance with medical treatments? It is unknown whether these types of correlative inferences will really be found in big data and how physicians would use that information. However, being able to link data at the patient level is a prerequisite to exploring the possibilities.
The first challenge in using big biomedical data effectively is to identify what the potential sources of health care information are and to determine the value of linking these together. The Figure presents a potential way of approaching this problem by organizing data sets along different dimensions of “bigness.” Although some big data, such as electronic health records (EHRs), provide depth by including multiple types of data (eg, images, notes, etc) about individual patient encounters, others, such as claims data provide longitudinality—a view of a patient’s medical history over an extended period for a narrow range of categories. Linking data adds value when they help fill in the gaps. With this in mind, it becomes easier to see how nontraditional sources of biomedical data outside of the health care system fit into the picture. Social media, credit card purchases, census records, and numerous other types of data, despite varying degrees of quality, can help assemble a holistic view of a patient, and, in particular, shed light on social and environmental factors that may be influencing health.
CDA数据分析师:http://cda.pinggu.org/
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-02最近我发现一个绝招,用DeepSeek AI处理Excel数据简直太爽了!处理速度嘎嘎快! 平常一整天的表格处理工作,现在只要三步就能搞 ...
2025-04-01你是否被统计学复杂的理论和晦涩的公式劝退过?别担心,“山有木兮:统计学极简入门(Python)” 将为你一一化解这些难题。课程 ...
2025-03-31在电商、零售、甚至内容付费业务中,你真的了解你的客户吗? 有些客户下了一两次单就消失了,有些人每个月都回购,有些人曾经是 ...
2025-03-31在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的需求持续飙升。世界经济论坛发布的《未来就业报告》, ...
2025-03-28你有没有遇到过这样的情况?流量进来了,转化率却不高,辛辛苦苦拉来的用户,最后大部分都悄无声息地离开了,这时候漏斗分析就非 ...
2025-03-27TensorFlow Datasets(TFDS)是一个用于下载、管理和预处理机器学习数据集的库。它提供了易于使用的API,允许用户从现有集合中 ...
2025-03-26"不谋全局者,不足谋一域。"在数据驱动的商业时代,战略级数据分析能力已成为职场核心竞争力。《CDA二级教材:商业策略数据分析 ...
2025-03-26当你在某宝刷到【猜你喜欢】时,当抖音精准推来你的梦中情猫时,当美团外卖弹窗刚好是你想吃的火锅店…… 恭喜你,你正在被用户 ...
2025-03-26当面试官问起随机森林时,他到底在考察什么? ""请解释随机森林的原理""——这是数据分析岗位面试中的经典问题。但你可能不知道 ...
2025-03-25在数字化浪潮席卷的当下,数据俨然成为企业的命脉,贯穿于业务运作的各个环节。从线上到线下,从平台的交易数据,到门店的运营 ...
2025-03-25在互联网和移动应用领域,DAU(日活跃用户数)是一个耳熟能详的指标。无论是产品经理、运营,还是数据分析师,DAU都是衡量产品 ...
2025-03-24ABtest做的好,产品优化效果差不了!可见ABtest在评估优化策略的效果方面地位还是很高的,那么如何在业务中应用ABtest? 结合企业 ...
2025-03-21在企业数据分析中,指标体系是至关重要的工具。不仅帮助企业统一数据标准、提升数据质量,还能为业务决策提供有力支持。本文将围 ...
2025-03-20解锁数据分析师高薪密码,CDA 脱产就业班助你逆袭! 在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的 ...
2025-03-19在 MySQL 数据库中,查询一张表但是不包含某个字段可以通过以下两种方法实现:使用 SELECT 子句以明确指定想要的字段,或者使 ...
2025-03-17在当今数字化时代,数据成为企业发展的关键驱动力,而用户画像作为数据分析的重要成果,改变了企业理解用户、开展业务的方式。无 ...
2025-03-172025年是智能体(AI Agent)的元年,大模型和智能体的发展比较迅猛。感觉年初的deepseek刚火没多久,这几天Manus又成为媒体头条 ...
2025-03-14以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-13