在人工智能快速发展的今天,AI在医疗领域展现出巨大潜力。这项技术不仅能够提高诊断准确性,还能扩大医疗服务覆盖范围,减轻医护人员的行政负担,使他们能够将更多精力投入到病患护理中。然而,医疗AI的开发门槛依然很高,需要海量数据、专业知识和强大的计算资源。为了降低这一门槛,Google研究院健康AI团队于近日推出了全新的开源模型套件——Health AI Developer Foundations(HAI-DEF)。
在人工智能快速发展的今天,AI在医疗领域展现出巨大潜力。这项技术不仅能够提高诊断准确性,还能扩大医疗服务覆盖范围,减轻医护人员的行政负担,使他们能够将更多精力投入到病患护理中。然而,医疗AI的开发门槛依然很高,需要海量数据、专业知识和强大的计算资源。为了降低这一门槛,Google研究院健康AI团队于近日推出了全新的开源模型套件——Health AI Developer Foundations(HAI-DEF)。
医疗领域的应用场景极其广泛,远超现有开发者能够覆盖的范围。由于临床应用对模型性能要求极高,再加上数据获取难度大、专业门槛高等因素,导致许多潜在的开发者难以将他们的创新理念从概念转化为原型,更不用说最终应用到临床实践中。为了让更多开发者能够投身医疗AI创新,Google推出的HAI-DEF提供了开源权重模型、教学用Colab笔记本以及全面的开发文档,这些资源覆盖了从早期研究到商业化的各个阶段。
在本次HAI-DEF的首次发布中,Google推出了三个专注于医疗影像应用的重要模型。首先是CXR Foundation胸部X光模型,该模型基于EfficientNet-L2架构,使用超过80万张X光片进行训练,支持图像分类、语义搜索和零样本分类等功能。其次是Derm Foundation皮肤影像模型,它采用BiT ResNet-101x3架构,可用于皮炎、黑色素瘤等皮肤病诊断,同时支持身体部位识别和图像质量评估。第三个是Path Foundation病理学模型,它基于ViT-S架构,专门处理H&E染色图像,可用于肿瘤分级、组织分类等重要临床任务。
为了确保这些模型能够真正服务于开发者社群,Google提供了多种灵活的使用方式。开发者可以通过Vertex AI Model Garden和Hugging Face平台下载这些模型,并在本地或云端环境中运行。更重要的是,这些模型不仅可以用于研究项目,还支持商业应用开发。开发者还可以根据具体需求对模型进行微调,以提升特定场景下的性能表现。
HAI-DEF的发布标志着Google在支持医疗AI生态发展方面迈出了重要一步。该项目与此前发布的Medical AI Research Foundations、Open Health Stack以及Population Dynamics Foundation Model等项目形成互补,共同推动医疗AI的民主化进程。Google表示将继续投入资源支持这一领域的发展,通过不断扩充模型库和完善技术文档,帮助全球开发者更好地发挥AI在医疗健康领域的潜力。
医疗AI的未来发展需要更多创新者的参与和探索。通过开源这些基础模型,Google正在为构建一个更加开放、创新的医疗AI生态系统铺平道路。这不仅将帮助开发者更容易地进入这个领域,更重要的是,它将推动医疗AI技术的快速发展,最终造福更多患者。
医疗领域的应用场景极其广泛,远超现有开发者能够覆盖的范围。由于临床应用对模型性能要求极高,再加上数据获取难度大、专业门槛高等因素,导致许多潜在的开发者难以将他们的创新理念从概念转化为原型,更不用说最终应用到临床实践中。为了让更多开发者能够投身医疗AI创新,Google推出的HAI-DEF提供了开源权重模型、教学用Colab笔记本以及全面的开发文档,这些资源覆盖了从早期研究到商业化的各个阶段。
在本次HAI-DEF的首次发布中,Google推出了三个专注于医疗影像应用的重要模型。首先是CXR Foundation胸部X光模型,该模型基于EfficientNet-L2架构,使用超过80万张X光片进行训练,支持图像分类、语义搜索和零样本分类等功能。其次是Derm Foundation皮肤影像模型,它采用BiT ResNet-101x3架构,可用于皮炎、黑色素瘤等皮肤病诊断,同时支持身体部位识别和图像质量评估。第三个是Path Foundation病理学模型,它基于ViT-S架构,专门处理H&E染色图像,可用于肿瘤分级、组织分类等重要临床任务。
为了确保这些模型能够真正服务于开发者社群,Google提供了多种灵活的使用方式。开发者可以通过Vertex AI Model Garden和Hugging Face平台下载这些模型,并在本地或云端环境中运行。更重要的是,这些模型不仅可以用于研究项目,还支持商业应用开发。开发者还可以根据具体需求对模型进行微调,以提升特定场景下的性能表现。
HAI-DEF的发布标志着Google在支持医疗AI生态发展方面迈出了重要一步。该项目与此前发布的Medical AI Research Foundations、Open Health Stack以及Population Dynamics Foundation Model等项目形成互补,共同推动医疗AI的民主化进程。Google表示将继续投入资源支持这一领域的发展,通过不断扩充模型库和完善技术文档,帮助全球开发者更好地发挥AI在医疗健康领域的潜力。
医疗AI的未来发展需要更多创新者的参与和探索。通过开源这些基础模型,Google正在为构建一个更加开放、创新的医疗AI生态系统铺平道路。这不仅将帮助开发者更容易地进入这个领域,更重要的是,它将推动医疗AI技术的快速发展,最终造福更多患者。
文章来自微信公众号 “ HealthX “
【开源免费】DeepBI是一款AI原生的数据分析平台。DeepBI充分利用大语言模型的能力来探索、查询、可视化和共享来自任何数据源的数据。用户可以使用DeepBI洞察数据并做出数据驱动的决策。
项目地址:https://github.com/DeepInsight-AI/DeepBI?tab=readme-ov-file
本地安装:https://www.deepbi.com/
【开源免费】airda(Air Data Agent)是面向数据分析的AI智能体,能够理解数据开发和数据分析需求、根据用户需要让数据可视化。
项目地址:https://github.com/hitsz-ids/airda
【开源免费】XTuner 是一个高效、灵活、全能的轻量化大模型微调工具库。它帮助开发者提供一个简单易用的平台,可以对大语言模型(LLM)和多模态图文模型(VLM)进行预训练和轻量级微调。XTuner 支持多种微调算法,如 QLoRA、LoRA 和全量参数微调。
项目地址:https://github.com/InternLM/xtuner