中国科学院香港创新研究院人工智能与机器人创新中心(简称「中国科学院香港创新院AI中心」)于3月11日在香港科学园正式发布最新研发的面向医疗垂直领域的AI多模态大模型——CARES Copilot 1.0。
中国科学院香港创新研究院是中国科学院在港设立的首个国家级新型研发机构。CARES Copilot大模型最早在2023年9月第八届华为全联接大会上亮相。彼时,CARES Copilot已在香港中文大学威尔士亲王医院和中山大学附属第一医院开始测试,并在经鼻颅底手术和呼吸介入治疗手术中取得了显著进展。
据介绍,CARES Copilot是一个可信赖、可解释、面向医疗垂直领域并能与智能医疗设备高度集成的大模型系统。CARES Copilot 1.0实现了图像、文本、语音、视频、MRI、CT、超声等多模态的手术数据理解。支持超过100K上下文的长窗口理解和高效分析,能理解超过3000页的复杂手术教材,对于年轻医生的培训和教学具有极高的实用价值。此外,该系统能通过深度检索功能,快速精确地提取手术教材、专家指南、医学论文等专业文档的信息,确保其提供的答案具有高度的可信度和可追溯性。经测试,系统能在一秒钟内完成百万级数据的快速检索,同时保持95%的准确率。该系统已在多家医院的不同科室进行了内部测试和迭代优化。
中国科学院香港创新院AI中心执行主任刘宏斌教授介绍,国际医学大模型测评榜单结果显示,CARES Copilot 1.0多项指标国际排名第一。同时,他强调,中心对CARES Copilot 1.0进行了轻量化部署。作为一个700亿参数的大模型,CARES Copilot 1.0现在可以做到一个消费级的显卡上,同时保证性能没有损失,从而可以在每个医院,甚至每一个手术室部署。
刘宏斌教授表示,检验人工智能技术价值的唯一目标是看它是否真正能为医生赋能,解决他们的痛点,拓展他们的能力边界,也只有这样,人工智能技术才能真正推动人类医学的进步。
香港中文大学外科学系神经外科组主任陈达明教授指出,开放式人工智能已经在改变全人类的生活,在医疗上肯定会做出更大的改变。而转为神经科学研发的大模型,可以超越一般教学的要求,能够配合手术,影像导航及机器人的大模型应用,在临床、手术室及研究院,直接辅助前线医护面对突发状况,督导、预警、防止手术步骤风险,推进神经科学的疆界。
北京协和医院神经外科主任医师、研究生导师冯铭教授介绍,手术大模型和手术导航结合起來,可以为术者提供实时的解剖定位信息,提高手术安全性。
首都医科大学附属北京同仁医院神经外科主任、研究生导师康军教授认为,AI技术与手术机器人技术相结合,会给外科手术的发展带来巨大变革,未来无论从手术方式、理念、器械、设备等方面,神经外科医生都要应对AI技术和机器人技术带来的新问题和新挑战。