AI导航

Google三款新模型发布:AI在医疗、无障碍和动物语言领域的应用前景

AI资讯
2 min read
402 次阅读

Google发布三款基于Gemma模型的变体:MedGemma、SignGemma与DolphinGemma

一、MedGemma:面向医疗领域的多模态与文本推理模型

Google推出的MedGemma是基于Gemma 3架构的医疗AI模型,分为两个版本:

  • MedGemma 4B:多模态模型,结合了SigLIP图像编码器和语言模型,专为处理医学图像与文本任务设计。该模型在胸部X光、皮肤科、眼科和病理切片等多种医学图像数据上进行了预训练,适用于医学图像分类、报告生成和视觉问答等任务。
  • MedGemma 27B:纯文本模型,专注于医学文本的理解与推理,适用于临床总结、决策支持和复杂医学问答等任务。该模型在医学文本数据上进行了优化,提升了推理能力和推断效率。

二、SignGemma:多语言手语翻译模型

SignGemma是Google开发的手语理解模型,旨在将手语视频翻译为文本,支持多种语言。该模型采用双流注意力机制,结合手语视频和文本编码器,提升了手语翻译的准确性和流畅性。SignGemma的推出,有望改善听障人士的交流体验,促进无障碍技术的发展。

三、DolphinGemma:海豚语言模型

DolphinGemma是Google研究团队开发的海豚语言模型,旨在理解和生成海豚的声音信号。该模型通过分析海豚的声音模式,尝试解码其交流方式,并生成类似的声音序列。DolphinGemma的研究为跨物种交流提供了新的可能性,推动了动物语言研究的进展。

四、总结

Google推出的这三款Gemma模型变体,分别面向医疗、无障碍交流和动物语言研究等领域,展示了AI技术在多模态理解和生成方面的广泛应用潜力。随着这些模型的开源和应用推广,预计将在相关领域产生深远影响。

推荐工具

NVIDIA Chat with RTX AI聊天 Chat with RTX 是 NVIDIA 面向 RTX 电脑的本地 AI 聊天工具,可围绕本地文档和视频资料做问答,适合重视隐私、离线检索并具备硬件条件的用户更适合资料不便上传云 文心一言 AI聊天 文心一言 是百度文心大模型 AI 助手,支持百度 AI 聊天、文案创作和图像理解,适合中文用户和内容创作者完成 AI 对话、资料问答和任务协作,适合上线前核对权限、成本和资料质量。 HuggingChat AI聊天 HuggingChat 是 Hugging Face 的开源模型聊天应用,支持 Omni 自动选模型,也可手动选社区开放模型对话。它适合体验开源模型、技术探索和问答,结果可能不稳定,重要内容需复核。 纳米AI搜索 AI搜索 纳米AI 是 360 旗下 AI 搜索和智能体入口,支持文字、语音、拍照提问、多模型协作与内容创作,适合中文用户做日常搜索、学习问答、移动查询、热点追踪、生活决策、知识整理和轻量创作。 Meta AI AI聊天 Meta AI 是 Meta 的个人 AI 助手,可在网页、应用、AI 眼镜及 WhatsApp、Instagram 中使用,支持问答、图像理解和语音交流,适合社交与生活场景,部分功能受地区限制。 Pi AI AI聊天 Pi AI 是 Inflection AI 推出的个人 AI 助手,强调情绪理解、陪伴式交流、生产力建议和安全对话,可在 pi.ai 与移动端使用。它适合日常思考、学习陪练和规划,不替代专业心理支持。