跳到正文
掘金· 码云之上·· 9 天前精选AI 评分78

中后台 Web Agent 如何定位 10 颗同名 Edit 按钮:AST 站点地图、DOM 打分与 SoM 视觉兜底

10 颗一模一样的「Edit」:中后台 Web Agent 怎么找到对的那一行

AI 导读

xingwu-vision-agent 用三层约束解决中后台 Web Agent 找入口的问题,在 vue-element-admin 4.4.0 本地靶场跑通 15 个页面状态且全部自动完成。

借鉴点

能拿走三层入口定位的具体做法,AST 扫路由配模板状态、DOM 打分并列即熔断、SoM 编号加动作租约兜底;落到软件工厂的 UI 自动化测试线,代价是适配器只覆盖 Element UI 四类容器,人工接管链路无实跑样本。

来源:掘金 · juejin.cn