Commit Graph

10 Commits

Author SHA1 Message Date
zimoyin d7e50675f0 控件属性显示内容文本;拾取命中容器时向深处收敛
用户反馈两点:

1) 控件属性里也要看到内容(输入框/富文本/多行编辑器的正文)
   - UiaElementInfo 新增只读展示字段「文本内容」(不序列化,选中节点时现算)
   - 与取值键「文本内容」同源:Value → Text → Name
   - 实测(真实 Windows 11 记事本文档节点):
     文本内容="agfa\r\raaaaa",Name="文本编辑器"(通用标题)
     ControlPath=/Window[1]/Pane[@ClassName='NotepadTextBox']/Document[@ClassName='RichEditD2DPT']

2) 拾取不能正确识别(实测:记事本正文拾取到 Pane[NotepadTextBox] 而不是里面的
   Document[RichEditD2DPT])
   - 根因:提供者的命中测试经常先返回"容器",代码直接接受了它
   - FromHandleAtPoint 命中后新增 RefineHitAtPoint:在命中元素内部继续往
     "包含光标的最深/最小元素"收敛(有界:节点数/深度/3 秒)
   - MainForm 的"只拿到窗口再重探一次"扩展到"只拿到容器(Window/Pane/Group/Custom)
     也重探一次":无障碍树按需生成的客户端第一次通常只给容器,600ms 后第二次才给到叶子

实测(真实记事本窗口内 49 个采样点):
  42 × ControlType.Document / RichEditD2DPT(正文),其余为工具栏按钮/输入法宿主
  修复前同一组采样中正文区域会命中 Pane

回归 27/27 通过
2026-10-13 16:41:56 +08:00
zimoyin 529f7910a1 新增跨来源取值键「文本内容」,修好富文本/输入框读不到内容
问题:富文本(RichTextBox、Chromium/CEF、UWP 文本框)的 UIA Name 往往是通用标题
(实测夹具里是 "RichEdit Control"),真正的内容只在 ValuePattern/TextPattern 里;
而新增监控项时默认 ValueKey 是 Name,于是读回来的是标题而不是内容。

- ControlValueKeys 新增跨来源键「文本内容」:UIA 按 Value → Text → Name 顺序取,
  MSAA = accValue → accName,Win32 = 窗口标题;三种都取不到才报错并说明各自原因
- 新增/拾取控件时默认 ValueKey 改为「文本内容」(旧条目不受影响,仍按各自保存的键读)
- 「文本内容」加进三个来源的可选键列表,监控列表下拉里能直接选
- 夹具新增多行富文本 FixtureRichText(内容只在 Value/Text 里)
- 回归新增 ValueKeyTests(键表、Name 兜底、默认键),共 27/27 通过

实测(跨进程,目标为独立进程里的夹具窗口):
- 文本框 文本内容="可编辑文本";富文本 文本内容="富文本第一行\r富文本第二行\r";
  按钮(无 Value/Text 模式)自动退回 Name="测试按钮"
- 拾取点在两个控件上都精确命中 Edit / Document,且能在窗口树里找到同一节点
- 无界面读取端到端:2 条配置(//Document[...]、//Edit[...] + 文本内容)全部命中并取到值
2026-10-13 16:22:03 +08:00
zimoyin 44fb305dc4 所有配置文件统一放到 exe 同目录
- control-monitors.json 从 %LocalAppData%\pacs_win_uia\ 改到 exe 同目录
  (settings.json / out.json / 截图与 OCR 目录本来就是 exe 同目录,现在一致)
- 首次读取时把旧位置的监控配置复制过来(只复制不删除),并记日志;
  exe 目录不可写时退化为直接读旧文件,保存会明确报错,不会丢配置
- ControlMonitorStore.GetDefaultFilePath()/GetLegacyFilePath() 公开,
  Program 的 --read-saved 与设置页「关于」都改用同一套路径
- 回归新增用例:默认配置与设置文件都必须在 exe 同目录、旧路径与当前路径必须不同
- 实测(隔离宿主):默认路径=exe 同目录;旧位置有 1 条配置被复制过来并能正常读出

测试 24/24 通过,
2026-10-13 16:18:57 +08:00
zimoyin 695b98dd35 监控列表定位后必然联动控件树,并把本工具窗口排除出定位框遮挡判断
用户反馈:在控件监控列表里定位显示已定位到「control」,但控件树不展开也不选中。
根因:MonitorEditorOnControlLocated 在画不出高亮框时直接 return,跳过了
SelectTreeNodeFor/EnsureTreeShows;而画不出框的常见原因就是本工具自己的窗口
压在目标上(CanShowLocateFrame 用的是严格可见性)。

- 定位成功一律先展开并选中控件树节点,画框与否只影响高亮框
- 画不出框时状态栏说明原因,但不再吞掉树联动
- HighlightFollower/CanShowLocateFrame 与本工具悬浮条统一规则:本工具自身
  窗口不算遮挡,只有别的程序挡住目标才隐藏定位框
- EnsureTreeShows 返回已去读另一个窗口的树,避免状态栏提示被覆盖
- 实测(进程内宿主+镜像树模拟解析器返回的另一实例):定位后树中选中该节点、
  祖先展开、切到控件树页、Path 横条同步;无矩形时同样选中
- 回归测试 23/23 通过

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 16:10:25 +08:00
zimoyin 66ab309939 给全部源码补中文注释,并新增代码导览
- 67 个 .cs 文件加中文注释:每个文件顶部说明职责/调用方/线程与节拍/
  已知限制/「要改什么就改哪里」,字段与方法逐条一行说明,复杂逻辑内插关键步骤
- 纯注释改动:脚本校验所有新增行都是注释、无非注释改动(仅 2 个文件的 BOM
  随新头部注释下移,文件仍以 BOM 开头)
- 新增 docs/代码导览.md:模块地图、「我要改 X 看哪个文件」对照表、易踩的坑、
  悬浮条显示规则、测试与验收指引
- 编译通过,回归测试 23/23 通过

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 15:44:15 +08:00
zimoyin 9eff3ec410 悬浮条:锚定窗口只需未被完全遮挡,并跳过最小化的同名窗口
两个原因让悬浮条一直不显示:
1) 可见性规则过严——锚定窗口只要被任何外部窗口压住一角就隐藏。现在改为
   只要求“未被完全遮住”,部分遮挡不影响显示。
2) UWP 应用会留下最小化的同名框架窗口(矩形在 -32000),窗口匹配可能选中它,
   于是报“矩形过小或不在屏幕范围内”。现在优先选可见窗口;只有最小化窗口时
   明确说明原因。

实测(真实 Windows 设置窗口 + 本工具窗口压在其上 + 置顶小工具压住一角):
canShow=True,悬浮条在锚定窗口左上角显示,3 个按钮正常绘制。

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 15:12:05 +08:00
zimoyin 0b2f84860e 悬浮条:本工具自身窗口不再算遮挡
在设置页里测试时,设置窗口正盖着锚定窗口,运行时判断因此一直隐藏悬浮条,
表现为“按钮不显示”。现在运行时的可见性判断与设置页检测一致:只把其他程序
的窗口当作遮挡,本工具窗口(主界面/设置窗口/覆盖层)一律忽略。

验证(独立宿主 + 真实窗口):
- 目标无遮挡 → 悬浮条显示(112x40,1 个按钮,逐像素透明)
- 本工具窗口完全盖住目标 → 悬浮条仍显示(修复前隐藏)
- 外部进程窗口盖住目标 → 隐藏,并在检测结果里点名该窗口

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 14:51:41 +08:00
zimoyin 4f53047429 修复悬浮条条件下拉显示与设置页遮挡误报
- 下拉建议框:DisplayMember 保证编辑区始终是实际进程名/窗口类/标题,
  下拉列表用 OwnerDraw 显示友好描述;不再在选择提交时清空 SelectedIndex,
  避免原生 CBN_SELCHANGE 把输入框覆盖为空
- 检测显示条件忽略本工具自身窗口(设置窗口正在遮挡目标),
  并在结果里点名具体遮挡窗口;运行时判断保持严格
- 补 STA 回归:原生鼠标/键盘选择、刷新、保存重载,以及遮挡窗口分类

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 14:43:28 +08:00
zimoyin f31b50bb36 完善 XPath 定位与控件监控体验
- 增加简明到深入的 XPath 定位教程
- 保留增量控件树刷新与可编辑 Path
- 完善悬浮条条件选择和诊断

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-13 13:00:10 +08:00
zimoyin b4c736d58b 基线提交:三来源控件树/拾取 + 无界面读取 + 设置框架
在继续做界面收敛与监控引擎之前先固化当前可编译、可运行的状态,便于回退。

已完成:
- 控件树与拾取支持三种来源:UIA / MSAA(oleacc) / Win32(EnumChildWindows),可下拉切换与自动降级
- 列表读取:祖先链 + 向下查找 + 子元素遍历降级;区分「没找到」与「找到但取不到值」
- 无界面读取:--read-config / --read-saved,输出 JSON(含逐步 resolution 诊断)
- 监控列表:结构化定位字段(进程/窗口类/标题关键词/UIA 路径/MSAA PathKey/Win32 类名+序号)
- 设置框架:settings.json(随输出目录拷贝,不嵌入 exe)+ 设置界面 + 命令生命周期钩子 + 悬浮按钮
- 控制台日志、布局自检、控件树搜索、窗口列表前台高亮

已知未实现:OCR(仅配置占位)、截图、监控引擎(事件监听)。

Co-Authored-By: Claude Code <noreply@anthropic.com>
2026-10-12 14:33:49 +08:00