Towards Developing Foundation Model For Medicine

近年来，基础大模型（Foundation Models）在计算机视觉和自然语言处理领域取得了前所未有的成功。然而，尽管医疗领域具有巨大的潜力，基础大模型在该领域的发展仍然相对滞后。该报告中，我将从以下几个方面介绍我们在医疗人工智能（AI4Health）方面的一些努力和尝试，包括：(1) 开源数据集的构建，例如 PMC-OA、RP3D，RadMD 等；(2) 训练医学专用的语言模型或视觉-语言模型，例如 PMC-LLaMA、MMedLLaMA、PMC-CLIP、RadFM 等；（3）增强医学知识的表示学习和通用分割模型，例如在 X 光、病理或更广泛的放射影像等方面，例如 KAD，KEP，SAT。在以上工作中，团队旨在弥合通用人工智能的进展与医疗应用之间的差距，为医疗领域提供更加健壮和多功能的人工智能解决方案。更多信息，请查阅这里的论文：https://weidixie.github.io/research.html