老刘说NLP_刘焕勇
26-05-18 09:07 微博认证:AI博主

【GraphRAG结合Agent做医疗幻觉检测及Video2GUI Agent训练数据合成思路】先来看GraphRAG与Agent结合用于医学幻觉检测思路,针对出院小结生成中忠实性幻觉问题【大模型生成的内容与原始病历记录相矛盾的陈述】,现有检测方法缺乏系统化医疗幻觉自动生成机制、未基于患者专属EHR上下文验证、无结构化可解释证据支撑。所以可以做个优化,利用GraphRAG建模EH中诊断、用药、检验等跨表关系的优势,再结合智能体去做检测,构建患者专属知识图谱,设计7类幻觉类型与E1-E4四级证据分级,通过闭环生成-检测pipeline实现句子级幻觉检测与可解释证据链输出。另一个是数据合成的进展,讲的故事是Video2GUI自动化数据合成框架,通过粗到细视频过滤、轨迹提取与动作空间定位,从5亿+互联网视频中构建目前最大规模GUI预训练数据集WildGUI(含1270万条交互轨迹、1.245亿张截图、覆盖1500+应用/网站),最终在Qwen2.5-VL与Mimo-VL上预训练后,模型在多基准实现 5–20%的 性能提升,看看具体怎么做的这个数据,也会有收获。http://t.cn/AXinnRX7,思路都不错,推荐看看

发布于 北京