AccessibleObjectFromPoint 正在返回客户端对象而不是复选框

Question

我正在使用 Visual Studio 2017。我在一个解决方案中添加了两个项目。一个项目是在 C# 中使用 WPF。另一个是在带有 ATL 的 VC++ 中。 从 C# 中，我调用了 VC++ 项目中的一个函数，该函数设置了低级鼠标钩子。鼠标低级proc部分代码如下：

MSLLHOOKSTRUCT stMouse = *(MSLLHOOKSTRUCT*)(lParam);
POINT pt = stMouse.pt;
IAccessible* pAcc;
VARIANT varChild;
HRESULT hr = AccessibleObjectFromPoint(pt, &pAcc, &varChild);
VARIANT varRole;
hr = pAcc->get_accRole(varChild, &varRole);

当我通过单击 MS Word 2013 中“查看”选项卡下的复选框进行测试时，我将获得 WM_LBUTTONDOWN 和 WM_LBUTTONUP 消息的客户端角色。但我应该将角色作为复选框。 我检查了 Windows 10 SDK 附带的 Inspect.exe。 Inspect.exe 将角色正确显示为复选框。 Inspect.exe 有两个选项 - 一个查看 UI 自动化属性，另一个查看 MSAA 属性。我正在查看 MSAA 属性。 如何获得正确的角色？ deos Inspect.exe 使用什么方法？

Answer 1

Microsoft Active Accessibility / MSAA（基于IAccessible 接口）是旧版 API。您现在应该使用Windows Automation。 UIA 基于 COM，使用接口，最重要的接口是IUIAutomationElement。 Inspect.exe 使用 UIA 或 MSAA。

注意 .NET 与 UIA 兼容，WPF 可以通过 AutomationPeer class 和 UIElement.OnCreateAutomationPeer Method 方法轻松地将其 UI 元素公开给 UIA。 WPF 提供了一个默认实现，可以根据需要进行调整。

这是一个与您在 C++ 中使用 UIA API 而不是 MSAA 的示例类似的示例（我们可以使用 C# 编写相同的示例）：

#include "stdafx.h" // needs <uiautomation.h>

class CCoInitialize { // https://blogs.msdn.microsoft.com/oldnewthing/20040520-00/?p=39243
public:
  CCoInitialize() : m_hr(CoInitialize(NULL)) { }
  ~CCoInitialize() { if (SUCCEEDED(m_hr)) CoUninitialize(); }
  operator HRESULT() const { return m_hr; }
  HRESULT m_hr;
};

// this is a poor-man COM object class
class CHandler : public IUIAutomationEventHandler
{
public:
  HRESULT QueryInterface(REFIID riid, LPVOID * ppv)
  {
    if (!ppv) return E_INVALIDARG;

    *ppv = NULL;
    if (riid == IID_IUnknown || riid == IID_IUIAutomationEventHandler)
    {
      *ppv = this;
      return NOERROR;
    }
    return E_NOINTERFACE;
  }
  ULONG AddRef() { return 1; }
  ULONG Release() { return 1; }

  // this will be called by UIA
  HRESULT HandleAutomationEvent(IUIAutomationElement *sender, EVENTID eventId)
  {
    wprintf(L"Event id: %u\n", eventId);
    return S_OK;
  }
};

int main()
{
  CCoInitialize init;

  // this sample uses Visual Studio's ATL smart pointers, but it's not mandatory at all
  CComPtr<IUIAutomation> uia;
  if (SUCCEEDED(uia.CoCreateInstance(CLSID_CUIAutomation)))
  {
    // get mouse pos now
    POINT pt;
    GetCursorPos(&pt);

    // find what type of "control" was under the mouse
    CComPtr<IUIAutomationElement> element;
    if (SUCCEEDED(uia->ElementFromPoint(pt, &element)))
    {
      CComBSTR type;
      element->get_CurrentLocalizedControlType(&type);
      wprintf(L"type at %u,%u: %s\n", pt.x, pt.y, type.m_str);
    }

    // get root
    CComPtr<IUIAutomationElement> root;
    if (SUCCEEDED(uia->GetRootElement(&root)))
    {
      // add a handler that will trigger every time you open any window on the desktop
      // in the real world, you'll need to delete this pointer to avoid memory leaks of course
      CHandler *pHandler = new CHandler();
      if (SUCCEEDED(uia->AddAutomationEventHandler(UIA_Window_WindowOpenedEventId, root, TreeScope::TreeScope_Children, NULL, pHandler)))
      {
        // since this is a console app, we need to run the Windows message loop otherwise, you'll never get any UIA events
        // for this sample, just press CTRL-C to stop the program. in the real world, you'll need to get out properly
        // if you have a standard windows app, the loop will be already there
        while (TRUE)
        {
          MSG msg;
          while (PeekMessage(&msg, NULL, 0, 0, PM_REMOVE))
          {
            TranslateMessage(&msg);
            DispatchMessage(&msg);
          }
        }
      }
    }
  }
  return 0;
}