13

ピクセルカラーデータにアクセスして画像認識を行うために、画面を(印刷画面として)キャプチャする必要があります。その後、左クリック、ドラッグアンドドロップ(マウスの移動)などの画面上でマウスイベントを生成する必要がありますボタンを押しながら離す)。完了したら、画像は削除されます。

注:ユーザーが見ることができるすべての画面をキャプチャする必要があり、プログラムのウィンドウ外のクリックをシミュレートする必要があります(違いがある場合)

仕様: Linux ubuntu 言語: C++

パフォーマンスはそれほど重要ではありません。「プリント スクリーン」機能は 10 秒に 1 回実行されます。プロセスの期間は最大24時間になる可能性があるため、メソッドは安定している必要があり、メモリリークはありません(いつものように:)

Win GDI といくつかの Windows イベントを使用して Windows で実行できましたが、Linux で実行する方法がわかりません。

どうもありがとう

4

4 に答える 4

20
//sg

//Solution using Xlib for those who use Linux
#include <X11/Xlib.h>
#include<stdio.h>
#include<unistd.h>
#include <stdlib.h>
#include <string.h>

#include <unistd.h>

#include <X11/Xlib.h>
#include <X11/Xutil.h>

void mouseClick(int button)
{
    Display *display = XOpenDisplay(NULL);

    XEvent event;

    if(display == NULL)
    {
        fprintf(stderr, "Cannot initialize the display\n");
        exit(EXIT_FAILURE);
    }

    memset(&event, 0x00, sizeof(event));

    event.type = ButtonPress;
    event.xbutton.button = button;
    event.xbutton.same_screen = True;

    XQueryPointer(display, RootWindow(display, DefaultScreen(display)), &event.xbutton.root, &event.xbutton.window, &event.xbutton.x_root, &event.xbutton.y_root, &event.xbutton.x, &event.xbutton.y, &event.xbutton.state);

    event.xbutton.subwindow = event.xbutton.window;

    while(event.xbutton.subwindow)
    {
        event.xbutton.window = event.xbutton.subwindow;

        XQueryPointer(display, event.xbutton.window, &event.xbutton.root, &event.xbutton.subwindow, &event.xbutton.x_root, &event.xbutton.y_root, &event.xbutton.x, &event.xbutton.y, &event.xbutton.state);
    }

    if(XSendEvent(display, PointerWindow, True, 0xfff, &event) == 0) fprintf(stderr, "Error\n");

    XFlush(display);

    usleep(100000);

    event.type = ButtonRelease;
    event.xbutton.state = 0x100;

    if(XSendEvent(display, PointerWindow, True, 0xfff, &event) == 0) fprintf(stderr, "Error\n");

    XFlush(display);

    XCloseDisplay(display);
}
int main(int argc,char * argv[]) {

    int x , y;
    x=atoi(argv[1]);
    y=atoi(argv[2]);
    Display *display = XOpenDisplay(0);

    Window root = DefaultRootWindow(display);
    XWarpPointer(display, None, root, 0, 0, 0, 0, x, y);
    mouseClick(Button1);
    XFlush(display);
    XCloseDisplay(display);
    return 0;
}

それをビルドしてから、x ,y でのクリックをシミュレートするには、次のようにします。

$ ./a.out x y

すなわち

$ g++ -lX11 sgmousesim2.cpp

$ ./a.out 123 13

まだ興味がある場合に備えて。

于 2012-01-09T18:02:00.020 に答える
1

Swinputは、マウス/キー イベントをシミュレートするためのソリューションです。おそらくカーネル用にコンパイルする必要があります。Xorg はマウス/キー イベントを記録するためのヘッダーをいくつか提供していましたが、現時点では壊れていると思います。ファイルからイベントをキャプチャするために使用できるCコードevtestがあります。役立つことがあります。/dev/input/eventX/dev/input/mice

編集:

バグはXorg レコード拡張で修正されているので、それも機能している可能性があります

于 2010-04-09T11:58:13.250 に答える