上海在招岗位岗位信息聚合

医疗大模型的相关研究

腾讯 · 转正未明
面议
工作城市 上海学历 大专专业要求 福利待遇 岗位类型 实习实习分类 暑期未明确转正

课题描述

近年来,大语言模型(LLM)与多模态大模型(MLLM)技术快速发展,在自然语言处理(NLP)领域,LLM 已在文本翻译、阅读理解等任务中确立了新的 SOTA 标准;与此同时, MLLM 通过引入视觉等编码器,实现了跨模态的语义对齐,在图文问答、视觉推理等复合任务中同样取得了突破性进展。

这些技术正在全面赋能医学领域

一方面,LLM 广泛应用于以文本为核心的场景,如智能医患对话、病历信息提取、临床指南检索及出院报告生成,已展现出通过医师资格考试的专业知识储备;
另一方面,MLLM 则深入到了以影像和信号为核心的诊疗环节,能够对 CT/MRI 影像、病理切片以及心电信号进行精准解读,辅助医生完成从视觉特征到临床结论的推理。
当前正在推进这两类技术在医学场景下的落地,无论是基于文本的逻辑推理,还是基于多模态数据的综合研判,都已成为智慧医疗的重要支柱。
基于大语言模型(LLM)和多模态大语言模型(MLLM)的技术特性,在医疗健康领域有三方面的价值:
1、赋能患者端的普惠服务:提升医疗可及性与公平性(社会价值)
利用 LLM 强大的自然语言理解与共情能力,能够为患者提供全天候的智能预问诊、用药咨询及慢病管理服务。这不仅打破了复杂的医学专业术语壁垒,降低了患者获取高质量医疗信息的门槛,还有效缓解了医疗资源地域分布不均的问题,极大地促进了社会医疗资源的公平普惠;
2、助力医生端的增效提质:确立多模态诊疗的新技术标杆(技术领先)
通过 MLLM 对医学影像(CT/MRI)、生理信号及临床文本等异构数据的深度融合与跨模态推理,提升模型在辅助诊断、病理分析及自动化报告生成等任务上的能力。这不仅能为医生提供精准的临床决策支持,降低误诊漏诊率,还能大幅减少文书撰写等重复性工作,让医生回归诊疗核心,显著提升临床效率;
3、驱动医疗体系的范式变革:缓解资源矛盾与推动科研创新(综合价值)
大模型技术的应用推动了医疗服务从“人力密集型”向“人机协同型”的范式转变。它不仅在宏观上有效应对了老龄化社会带来的医疗资源供需矛盾,实现了医疗系统的降本增效;同时,模型在处理海量医学数据中涌现出的新知识发现能力,也为医学科研探索提供了新的工具与方向。

课题要求

1、克服“幻觉”现象与提升事实一致性
医疗领域具有极低的容错率,模型生成内容中的事实性错误(即“幻觉”)可能导致严重的医疗事故。当前的主要挑战在于如何抑制模型生成看似合理但毫无依据的诊断建议或虚假文献;如何引入知识增强(RAG)与事实核查机制,确保模型的输出严格基于循证医学证据,实现从“概率生成”到“可信推理”的转变。
2、增强复杂临床推理与跨模态语义对齐(能力挑战)
医疗诊疗不是简单的问答,而是基于多源信息的复杂逻辑推理过程。
对于LLM: 挑战在于如何提升模型在长文本病历中的因果推理能力,使其能够像医生一样处理时序错综复杂的病情演变。
对于MLLM: 挑战在于解决跨模态语义鸿沟,即如何实现医学影像(像素特征)与临床文本(语义特征)的精准对齐(Alignment),确保模型能准确识别微小的病灶特征并将其转化为准确的文本描述,而非产生图文不符的描述。
3、解决领域适配、可解释性与数据隐私难题(落地挑战)
通用大模型缺乏特定专科的深度知识(如罕见病、特定术式),面临着领域微调(Fine-tuning)中灾难性遗忘的风险。此外,医疗决策需要高度的可解释性(即模型不仅要给出结论,还要给出推导过程),“黑盒”模型难以获得医生信任。同时,如何在保护患者隐私数据(HIPAA合规)的前提下,利用高质量、小样本的医疗数据高效训练模型,也是亟待攻克的技术壁垒。

职位方向

CSIG

工作地点

上海

参加面试的城市

远程面试

招聘部门和工作地

CSIG云与智慧产业事业群
腾讯健康
腾讯健康一直践行"科技助医,互联为健",用科技守护百姓健康,推动社会价值持续创新。一方面,以"腾讯健康"小程序为载体,助力个人,打通资讯、挂号、问诊、购药、支付等健康服务环节,实现线上线下一体化的医疗健康服务;腾讯健康药箱化身家庭"用药助手",帮助用户便捷管理家庭成员的用药并建立健康档案,提醒用药不遗漏;微信医保服务依托医保码和微信基础能力,让全国13亿参保人通过微信就能随时进行医保查询、办理、支付报销,就医购药更便捷,更省心;腾讯医典作为权威医学科普平台,携手海量专业医生与机构,为大众提供看得懂、可信赖的健康知识科普。 另一方面,通过数字化解决方案助力政府、医院、医疗机构、医药企业的智慧升级,依托"数字运河"打通医疗数据要素的汇聚、治理与流通,为医疗机构和区域医疗建设坚实的技术底座;推出医疗健康行业"AI Agent全栈解决方案",覆盖从底层模型、智能体开发平台到上层应用的全链路能力,助力医院与医药企业加速智能化转型。医行无疆,科技向善,加入我们,一起用科技力量传递腾讯温度!
工作地点上海
内容来自「腾讯校招」官方招聘页面