c++ - 如何通过将光标悬停在UIAutomationElement的NamePropertyId上?

原文 标签 c++ ui-automation microsoft-ui-automation

我正在尝试使用UIAutomation构建自己的屏幕阅读器。我希望程序返回光标指向的元素的NameProperty

到目前为止,这是我所做的;无论如何,这只是示例代码:

#include <iostream>
#include <windows.h>
#include <UIAutomation.h>

const int MAX_WND_TEXT = 60;

IUIAutomation *automation = NULL;

BOOL InitializeUIAutomation(IUIAutomation **pAutomation)
{
    CoInitialize(NULL);
    HRESULT hr = CoCreateInstance(__uuidof(CUIAutomation), NULL,
        CLSCTX_INPROC_SERVER,
        __uuidof(IUIAutomation), (void**)pAutomation);
    return (SUCCEEDED(hr));
}

int main()
{
    POINT p;

    IUIAutomationElement *elem;
    wchar_t wndName[MAX_WND_TEXT];
    BOOL stat = InitializeUIAutomation(&automation);
    while (true)
    {
        if (stat)
        {
            GetCursorPos(&p);
            HRESULT hr = automation->ElementFromPoint(p, &elem);
            if (SUCCEEDED(hr))
            {
                HRESULT hr = elem->GetCurrentPropertyValue(UIA_NamePropertyId,
                    (VARIANT*)wndName);
                if (SUCCEEDED(hr))
                    std::cout << wndName << std::endl;
                else
                    wndName[0] = '\0';
            }
            else
                std::cout << "No element selected." << std::endl;

            Sleep(100);
            elem->Release();
        }
    }
    automation->Release();
    CoUninitialize();
    return 0;
}

现在的问题是我无法打印所需的值。该程序仅输出特定的十六进制数。而且我仍然是UIAutomation的初学者,所以我仍然迷路。

您能帮我还是给我一些解决问题的技巧?

最佳答案

使用此代码解决了我的问题。

#include <iostream>
#include <string>
#include <Windows.h>
#include <UIAutomation.h>

BOOL InitializeUIAutomation(IUIAutomation **automation)
{
    CoInitialize(NULL);
    HRESULT hr = CoCreateInstance(__uuidof(CUIAutomation), NULL,
        CLSCTX_INPROC_SERVER, __uuidof(IUIAutomation),
        (void**)automation);
    return (SUCCEEDED(hr));
}

int main()
{
    IUIAutomation *automation = NULL;
    IUIAutomationElement *elem = NULL;
    BOOL stat = InitializeUIAutomation(&automation);
    POINT mousePt;
    BSTR elemName = NULL;
    if (stat)
    {
        while(true)
        {
            GetCursorPos(&mousePt);
            HRESULT hr = automation->ElementFromPoint(mousePt, &elem);
            if (SUCCEEDED(hr) && elem != NULL)
            {
                elem->get_CurrentName(&elemName);
                std::wstring ws(elemName, SysStringLen(elemName));
                std::wcout << ws << std::endl;
            }
            SysFreeString(elemName);
            elem->Release();
            Sleep(200);
        }
    }
    automation->Release();
    CoUninitialize();

    return 0;
}

毕竟,打印的十六进制数字是BSTR header 。通过将BSTR转换为wstring解决我的问题。

相关文章:

c# - Selenium:从文件系统拖放到WebDriver?

ios - 使用UI自动化以编程方式打开/关闭真实iOS设备上的wifi

c# - UI自动化是否有任何依赖关系?

c++ - 生成数组的所有排列而没有重复结果

c++ - 获取索引和元素- vector 问题

c++ - 什么时候调用构造函数以及如何不调用它们

c++ - 无法使用GCC编译器4.7.3在AIX上编译具有线程支持的C++程序

c# - 如何通过RangeValuePattern从AutomationElement中获取微调器的值?

c++ - MSAA UI自动化get_accChildCount为Winforms中的基础设施UltraTree错误地返回0

c# - 使用System.Windows.Automation读取Edge浏览器标题和URL