如何在QML中模拟鼠标点击?

16
我正在尝试向当前显示的 QML 对象发送一个 QMouseEvent。但是,QApplication::sendEvent() 总是返回 false,这意味着我的事件没有被处理,但我不知道为什么。也许我把事件发送到了错误的对象?我应该把它发送到哪里?我还尝试过使用 QGraphicsSceneMouseEvent 而非 QMouseEvent,但都没有成功。 我已经尝试通过调试器来追踪事件代码,但它对我来说太复杂了,无法看出为什么它不能正常工作。
背景:我正在开发一款能够通过简单触摸屏幕进行控制的软件。我通过以太网接收触摸事件,并希望从中合成鼠标单击事件。这样,目标设备上的软件就可以像在开发人员 PC 上一样进行控制。
更新:
1.如 fejd 所指出的那样,点击代码是在 QApplication::Exec() 之前执行的,因此我将其移到了一个定时器处理程序中,在 exec() 运行时触发它。 2.添加了适用于 Windows 的代码,已经按预期工作。 3.添加了更多的 Qt 尝试,无论 sendEvent() 返回 true 还是 false,都不起作用。
到目前为止,我有以下代码:
#include <QtGui/QApplication>
#include "qmlapplicationviewer.h"

#include "clicksimulator.h"

#include <QTimer>

int main(int argc, char *argv[])
{
    QApplication app(argc, argv);

    QmlApplicationViewer viewer;
    viewer.setOrientation(QmlApplicationViewer::ScreenOrientationAuto);
    viewer.setMainQmlFile(QLatin1String("qml/qmlClickSimulator/main.qml"));
    viewer.showMaximized();

    ClickSimulator sim(&viewer);
    QTimer timer;
    sim.connect(&timer, SIGNAL(timeout()), SLOT(click()));
    timer.start(100);

    return app.exec();
}

clicksimulator.h

#ifndef CLICKSIMULATOR_H
#define CLICKSIMULATOR_H

#include <QObject>

class QmlApplicationViewer;

class ClickSimulator : public QObject
{
    Q_OBJECT
    QmlApplicationViewer* m_viewer;
public:
    explicit ClickSimulator(QmlApplicationViewer* viewer, QObject *parent = 0);

public slots:
    void click();    
};

#endif // CLICKSIMULATOR_H

clicksimulator.cpp

#include "clicksimulator.h"
#include "qmlapplicationviewer.h"

#include <QMouseEvent>
#include <QDebug>
#include <QGraphicsSceneMouseEvent>
#include <QApplication>
#include <QGraphicsScene>
#include <QTest>

#define _WIN32_WINNT 0x0501
#define WINVER 0x0501
#include "Windows.h"


ClickSimulator::ClickSimulator(QmlApplicationViewer* viewer, QObject *parent) :
QObject(parent)
, m_viewer(viewer)
{
}

void ClickSimulator::click()
{
    if (NULL != m_viewer)
    {
        const int x = qrand() % 500 + 100, y = qrand() % 500 + 100;

        {
           QMouseEvent pressEvent(QEvent::MouseButtonPress, QPoint(x, y), Qt::LeftButton, Qt::LeftButton, Qt::NoModifier);
//            QMouseEvent pressEvent(
//                QEvent::MouseButtonPress, 
//                QPoint(x, y),
//                Qt::LeftButton, Qt::LeftButton, Qt::NoModifier);
           const bool isSent = QApplication::sendEvent(m_viewer->scene(), &pressEvent);
           qDebug() << "'Press' at (" << x << "," << y << ") successful? " << isSent;
        }

        {
            QGraphicsSceneMouseEvent pressEvent(QEvent::GraphicsSceneMousePress);
            pressEvent.setScenePos(QPointF(x, y));
            pressEvent.setButton(Qt::LeftButton);
            pressEvent.setButtons(Qt::LeftButton);

            QGraphicsItem* item = m_viewer->itemAt(x, y);
            const bool isSent = m_viewer->scene()->sendEvent(item, &pressEvent);
            //const bool isSent = QApplication::sendEvent(m_viewer->scene(), &pressEvent);
            qDebug() << "'Press' at (" << x << "," << y << ") successful? " << isSent;
        }

        // This platform specific code works...
        {
            const double fScreenWidth = ::GetSystemMetrics( SM_CXSCREEN )-1; 
            const double fScreenHeight = ::GetSystemMetrics( SM_CYSCREEN )-1; 
            const double fx = x*(65535.0f/fScreenWidth);
            const double fy = y*(65535.0f/fScreenHeight);

            INPUT inp[3];
            inp[0].type = INPUT_MOUSE;

            MOUSEINPUT & mi = inp[0].mi;
            mi.dx = fx;
            mi.dy = fy;
            mi.mouseData = 0;
            mi.dwFlags = MOUSEEVENTF_MOVE | MOUSEEVENTF_ABSOLUTE;
            mi.time = 0;
            mi.dwExtraInfo = 0;

            inp[1] = inp[0];
            inp[1].mi.dwFlags = MOUSEEVENTF_LEFTDOWN;

            inp[2] = inp[0];
            inp[2].mi.dwFlags = MOUSEEVENTF_LEFTUP;

            SendInput(3, inp, sizeof(INPUT));
        }
    }
}

主函数.qml

import QtQuick 1.0

Rectangle {
    width: 360
    height: 360
    Text {
        id: text1
        text: qsTr("This text is placed at the click coordinates")
    }

    MouseArea {
        id: mousearea1
        anchors.fill: parent
        onClicked: {
        console.log("click at " + mouse.x + ", " + mouse.y);
            text1.pos.x = mouse.x;
            text1.pos.y = mouse.y;
        }
    }
}

输出

'Press' at ( 147 , 244 ) successful?  false 
'Press' at ( 147 , 244 ) successful?  true 

你尝试过使用指定globalPos的MouseEvent吗?globalPos()被初始化为QCursor::pos(),这可能不合适。使用其他构造函数来明确指定全局位置。 - coyotte508
2个回答

13

由于您在app.exec()之前发送了事件,我认为主事件循环还未启动。您可以尝试使用postEvent,但如果exec()在启动之前清除了事件队列,则可能也会失败。在这种情况下,也许您可以在exec()之后的某个地方发布它?

更新: 看了一下QDeclarativeMouseArea自动测试,现在已经搞定了。缺少的是释放事件。这对我有用:

QGraphicsSceneMouseEvent pressEvent(QEvent::GraphicsSceneMousePress);
pressEvent.setScenePos(QPointF(x, y));
pressEvent.setButton(Qt::LeftButton);
pressEvent.setButtons(Qt::LeftButton);
QApplication::sendEvent(m_viewer->scene(), &pressEvent);

QGraphicsSceneMouseEvent releaseEvent(QEvent::GraphicsSceneMouseRelease);
releaseEvent.setScenePos(QPointF(x, y));
releaseEvent.setButton(Qt::LeftButton);
releaseEvent.setButtons(Qt::LeftButton);
QApplication::sendEvent(m_viewer->scene(), &releaseEvent);

有点奇怪的是,在QML文件中的onPressed没有在按下事件后被调用,只有在释放事件也被发送后才被调用。


关于exec()的观点很好。不过将代码移动到计时器处理程序中也没有起作用。我已经使用我的当前测试代码更新了问题。 - foraidt
@foraidt 我已更新答案。虽然在 Mac 上进行了测试,但希望在 Windows 上的行为相同。 - fejd

1
已有的答案可行,但有更好的方法。只需使用QGraphicScene即可。
bool sendEvent(QGraphicsItem* item, QEvent* event)

函数。如果您知道要将事件发送到哪个项。


网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接