微软

重点新闻（0616～0630）

微软   视觉语言模型   Chatbot 

图文通吃！微软打造生医领域专用的生成式AI Chatbot

微软最近开发一款可处理生医图片和文字的多模态生成式AI聊天机器人LLaVA-Med，能回答关於生物医学图像的开放式研究问题。团队先是从美国政府维护的生医数位资料库PubMed Central，提取大量生医图像和相对应的图说，来建立训练资料集，并以GPT-4根据图说来自我指导，生成开放式、指令遵从的资料，接着再用课程学习方法，来微调一个大型通用的视觉-语言模型。

也就是说，这个模型的形成可分为2阶段，首先是利用生医图像-图说的配对组资料，来让模型学习生医单字，再来是用GPT-4产出的遵从指令的资料，来学习开放式对话语意，也就是模仿外行人学习生医知识的过程。团队总共用8张A100 GPU，不到15小时就完成LLaVA-Med的训练，而且能准确回答关於生医影像的问题。团队指出，经3项生医视觉问答资料集测试，LLaVA-Med比各项监督式SOTA模型还要好，接下来，微软团队将释出遵从指令的训练数据和模型本身。（详全文）

 Epic   电子病历   GPT-4

美医疗IT系统大厂Epic要用GPT-4快速生成病历

美国医疗系统龙头厂商Epic日前联手微软子公司Nuance，要开发一套医疗行政管理解决方案DAX Express，并整合微软Azure OpenAI服务的大模型GPT-4，来加速行政工作、给Epic使用者采用。简单来说，该解决方案是一款临床文件应用程式，要透过自动生成的临床文件，来优化医疗机构的行政工作流程、扩大对病人的照护服务。

使用DAX Express for Epic的医疗机构，能在医院检验检查室或进行远距医疗时，自动建立临床记录草稿，医师可马上检视这些资讯，也能在病患看诊後完成这些临床记录。密西根大学西部医院资讯长Josh Wilda指出，DAX将原本需要数小时的临床记录工作缩短为几秒钟，同时还能提高病患照护的品质。（详全文）

远距医疗   处方笺   慢性病 

韩国要将远距医疗服务常态化，处方笺可传真或Email到指定药局

根据美国医疗资讯与管理系统学会（HIMSS）旗下媒体报导，韩国卫生福利部正展开为期3个月的远距医疗试点计画，范围涵盖全国，只要医师认为必要且安全时，就能对病患进行远距医疗。进一步来说，这个远距医疗服务的适用对象，包括非首次看诊的慢性病患（首次看诊须为实体看诊）、需要回诊的儿科患者（只限於例假日和夜晚时刻）、居住於离岛和偏远地区的民众、身障人士，以及超过65岁的长者和患上感染疾病的民众。

这项试点计画适用於诊所和提供罕见疾病照护、手术後照护的医院，不过，医疗机构也能透过这项计画来提供谘询服务，若视讯难以进行，医疗机构也能用电话提供谘询。而处方笺可透过传真、电子邮件方式，寄送到患者制定的药局。至於取药，患者可亲自领取、委由代理人领取，或是由药局送药到府，但送药到府只限於居住在离岛和偏远地区的民众，以及不便行动、患有罕病或传染病的民众。（详全文）

 Google Lens   皮肤   Bard 

新版Google Lens可检测皮肤症状、将整合Bard

Google日前更新智慧镜头（Google Lens），新添检测皮肤症状功能，也预告将整合Bard AI助理。2021年，Google就推出名为DermAssist的智慧镜头功能，使用者上传3张皮肤照片、回答一些问题，应用程式就会提供可能的皮肤问题资讯。在目前的最新版本中，使用者用Google Lens拍照或上传皮肤相片，就能以视觉搜寻来找出可能的病症资讯。

该功能也能用於其他身体异状，如嘴唇上的突起、指甲表面纹路或掉发问题。Google指出，DermAssist可辨识288种皮肤、指甲和头发症状。另一方面，再过几个星期，使用者就能在Bard输入图片，Bard会启动Google Lens来辨识图片内容。而Google在去年12月宣布，正在开发能看懂医师手写处方笺的AI模型，以及能辨识医师手写医嘱并加强显示药物资讯，这些新功能未来也将整合到Google Lens中。（详全文）

 南澳大利亚  虚拟照护   远距医疗

南澳政府拨1.3亿澳元要提供常态性虚拟照护服务，要降低医院床位紧绷压力

南澳大利亚政府最近宣布投入1.3亿澳元来发展常态性的儿童与成人虚拟照护，包括发展未来4年的儿童与青少年虚拟紧急照护服务（CAVUCS），以及未来5年的南澳成人虚拟照护服务（SAVCS），目标是要解放医院床位。

南澳政府表示，就CAVUCS来说，这项政策是要扩展COVID-19疫情间设置的远距医疗服务，来让当地妇女及儿童医院的急诊科医护团队，能继续提供虚拟照护服务给当地儿童和青少年。南澳政府统计，自2021年8月启动以来，CAVUCS已服务了2万4千多名儿童，还免去了90%的不必要到院急诊；他们也启用1,000多辆救护车，来让医护至家中治疗儿童，而非把他们送到医院。

另一方面，就SAVCS来说，南澳政府则是要透过医师、护理师团队提供虚拟照护，来降低医院急诊人流压力、释放更多床位。自2021年12月启动该服务以来，已有1万8千多人受惠，其中80%避免了不必要的急诊就诊，在家中接受品质更好的照护服务。（详全文）

 UNC Health   生成式AI   资料搜寻 

北卡罗莱纳大学医院用生成式AI Chatbot加速资料搜寻工作

北卡罗莱纳大学体系医院（UNC Health）参与电子病历大厂Epic和微软的生成式AI计画，要利用微软Azure OpenAI服务，来打造内部专用的聊天机器人工具，初期将给部分临床医师和行政职员使用。

进一步来说，医院医护团队可以自然语言提出问题，让Chatbot搜寻资料库、给出答案，来节省医护手动搜寻数百篇操作文件的时间。UNC Health表示，这只是生成式AI的应用案例之一，他们还要在今年晚些时候，将这项应用扩大到旗下15家医院、19个院区和900多家诊所。（详全文）

 兽医   远距医疗   亚利桑那州 

美国亚利桑那州通过兽医远距医疗照护立法

美国亚利桑那州州长Katie Hobbs日前签署兽医远距医疗照护法规，允许该州兽医透过远距医疗来提供宠物照护服务。该法名为SB1053，有别於美国大多数州的规定，SB1053可让宠物在第一次就诊时，就能使用远距医疗来与兽医沟通，而非要实体就诊。

在COVID-19疫情间，这种兽医远距医疗需求大增，在美国就有19个州通过立法，亚利桑那州就是其一，也是最早将这项服务常态化的州。根据美国兽医虚拟照护协会统计，只有爱达荷州、维吉尼亚州和新泽西州允许无条件的兽医远距医疗，其他33州要求宠物进行远距医疗前，至少要先实体就诊过，或做过某些检验检查，才能接受远距医疗照护；目前只有纽约州禁止兽医提供远距照护服务。（详全文）

图片来源／微软、Google

  MedTech医疗科技近期新闻 

1. 微软开发BioViL-T模型，可强化放射线影像报告准确度

2. Walmart在全美新添70家爱滋病药房点，明年要扩大提供自身免疫疾病药物

资料来源：iThome整理，2023年6月