12.3 實現模擬滑鼠錄製回放

lyshark發表於2023-10-09

本節將向讀者介紹如何使用鍵盤滑鼠操控模擬技術，鍵盤滑鼠操控模擬技術是一種非常實用的技術，可以自動化執行一些重複性的任務，提高工作效率，在Windows系統下，透過使用各種鍵盤滑鼠控制函式實現動態捕捉和模擬特定功能的操作。

有時我們經常需要進行重複性的滑鼠操作，例如繁瑣的點選、拖拽。這些任務可能消耗大量時間和精力，為了解決這個問題，可自行設計並實現一個簡單而強大的滑鼠錄製回放工具，旨在幫助使用者輕鬆錄製滑鼠動作，透過藉助滑鼠錄製回放工具，使用者可以輕鬆實現自動化操作，從而解放雙手。

首先我們需要建立一個Write_File函式，當使用者每次呼叫該函式時都會向特定的檔案內追加寫入一條記錄，此外還需要增加一個split函式，該函式用於將特定的一條記錄根據特定的分隔符切割，保留分隔符後面的座標資訊。

// 切割字串
int split(char dst[][32], char* str, const char* spl)
{
    int n = 0;
    char* result = NULL;
    result = strtok(str, spl);
    while (result != NULL)
    {
        strcpy(dst[n++], result);
        result = strtok(NULL, spl);
    }
    return n;
}

// 每次寫入一行
int Write_File(char* path, char* msg)
{
    FILE* fp = fopen(path, "a+");
    if (fp == NULL) return -1;

    char ch, buffer[1024];

    int index = 0;
    while (msg[index] != '\0')
    {
        fputc(msg[index], fp);
        index++;
    }
    fclose(fp);
    return 1;
}

接著我們需要實現Recording()函式部分，該函式的左右是用於捕捉當前滑鼠座標與點選事件，函式中透過呼叫GetCursorPos()獲取當前滑鼠的螢幕座標位置，這個函式引數傳遞非常簡單，只需要傳入一個POINT型別的結構體變數，其函式原型如下所示；

BOOL GetCursorPos(LPPOINT lpPoint);

引數：

  • lpPoint：指向 POINT 結構的指標，用於接收滑鼠的螢幕座標位置。

返回值：

  • 如果函式成功，返回值為非零，表示獲取滑鼠位置成功；
  • 如果函式失敗，返回值為零，表示獲取滑鼠位置失敗。

POINT 結構包含了兩個成員變數 x 和 y，分別表示滑鼠在螢幕上的橫座標和縱座標。

當有了當前滑鼠座標位置以後，接著就是需要獲取到滑鼠點選事件，滑鼠點選可使用GetAsyncKeyState 獲取指定虛擬鍵碼對應的鍵盤鍵的狀態，該函式原型如下所示；

SHORT GetAsyncKeyState(int vKey);

引數：

  • vKey：指定虛擬鍵碼，它是一個整數，表示要獲取的鍵的鍵碼。

返回值：

  • 如果指定的虛擬鍵處於按下狀態，返回值的最高位（符號位）為 1，其餘位表示次數（持續時間）。如果指定的虛擬鍵處於釋放狀態或者引數無效，返回值為 0。

GetAsyncKeyState 函式允許檢測鍵盤中某個虛擬鍵的狀態，無論這個虛擬鍵是否處於焦點的視窗中。它適用於各種應用，透過VK_LBUTTON可用於檢測滑鼠左鍵是否被按下，透過VK_RBUTTON則可用於檢測滑鼠右鍵狀態。

程式碼的主要功能如下：

  1. 在 Recording 函式中，使用一個死迴圈不斷檢測滑鼠的位置和按鍵狀態。
  2. 使用 GetCursorPos 函式獲取當前滑鼠的位置，並將其儲存在 x 和 y 變數中。
  3. 使用 GetAsyncKeyState 函式檢測滑鼠左鍵和右鍵的狀態，並將其儲存在 lbutton 和 rbutton 變數中。
  4. 如果當前的滑鼠位置或按鍵狀態與之前儲存的值不同，表示滑鼠動作發生了變化，將當前的位置和按鍵狀態記錄下來。
  5. 將記錄的滑鼠動作資訊以字串的形式寫入指令碼檔案，格式為 "X:位置,Y:位置,L:左鍵狀態,R:右鍵狀態"。
  6. 儲存當前的滑鼠位置和按鍵狀態，用於下一次迴圈時比較是否發生了變化。
// 錄製指令碼
void Recording(char *script)
{
    int static_x = 0, static_y = 0;
    bool static_lbutton = 0, static_rbutton = 0;

    while (1)
    {
        POINT Position;
        GetCursorPos(&Position);

        int x = Position.x;
        int y = Position.y;
        bool lbutton = GetAsyncKeyState(VK_LBUTTON);
        bool rbutton = GetAsyncKeyState(VK_RBUTTON);

        if (x != static_x || y != static_y || lbutton != static_lbutton || rbutton != static_rbutton)
        {
            char szBuf[1024] = { 0 };
            std::cout << "X軸 = " << x << " Y軸 = " << y << " 滑鼠左鍵 = " << lbutton << " 滑鼠右鍵 = " << rbutton << std::endl;

            sprintf(szBuf, "X:%d,Y:%d,L:%d,R:%d\n", x, y, lbutton, rbutton);
            Write_File((char*)script, szBuf);

            static_x = x;
            static_y = y;
            static_lbutton = lbutton;
            static_rbutton = rbutton;
        }
    }
}

接著我們繼續封裝Play()回放功能，該功能的實現原理與錄製保持一致，透過逐條讀取傳入檔案中的引數，並呼叫SetCursorPos實現滑鼠位置的移動操作，該函式與獲取引數傳遞保持一致，這裡我們需要注意mouse_event函式，該函式用於模擬滑鼠的各種事件，如滑鼠移動、滑鼠按鍵的點選和釋放等，其函式原型如下所示；

void mouse_event(DWORD dwFlags, DWORD dx, DWORD dy, DWORD dwData, ULONG_PTR dwExtraInfo);

其中dwFlags指定要模擬的滑鼠事件型別和選項。可以是以下常量的組合；

  • MOUSEEVENTF_ABSOLUTE：指定滑鼠位置是絕對座標。如果不設定此標誌，則座標是相對於當前滑鼠位置的增量。
  • MOUSEEVENTF_MOVE：模擬滑鼠移動事件。
  • MOUSEEVENTF_LEFTDOWN：模擬滑鼠左鍵按下事件。
  • MOUSEEVENTF_LEFTUP：模擬滑鼠左鍵釋放事件。
  • MOUSEEVENTF_RIGHTDOWN：模擬滑鼠右鍵按下事件。
  • MOUSEEVENTF_RIGHTUP：模擬滑鼠右鍵釋放事件。

其他常量可根據需要自行查閱相關文件。

  • dx：滑鼠事件發生時的橫座標（絕對座標或增量座標，根據 dwFlags 決定）。
  • dy：滑鼠事件發生時的縱座標（絕對座標或增量座標，根據 dwFlags 決定）。
  • dwData：滑鼠事件的一些資料。對於滾輪事件，它表示滾動的數量。對於其他事件，通常設為 0。
  • dwExtraInfo：額外的資訊。通常設為 0。

mouse_event 函式允許模擬滑鼠事件，透過設定 dwFlags 引數來指定需要模擬的事件型別，設定 dx 和 dy 引數來指定事件發生時的滑鼠位置。透過呼叫這個函式，可以實現自動化滑鼠操作，如模擬滑鼠點選、拖動等。

如下程式碼段實現了滑鼠動作指令碼的回放功能，它從之前錄製儲存的指令碼檔案中讀取滑鼠動作資訊，並按照指令碼中記錄的順序模擬滑鼠動作，實現滑鼠動作的回放。

程式碼的主要功能如下：

  1. 在 Play 函式中，開啟之前儲存的指令碼檔案，並使用 fgets 函式每次讀取一行資料，儲存在 buf 字元陣列中。
  2. 使用 split 函式切割每行資料，將每行資料切割成以逗號分隔的四個字串，並將這四個字串轉換為整數型別儲存在 key_item 陣列中。
  3. 根據 key_item 陣列中的資料，判斷是否需要進行滑鼠點選動作，並呼叫 mouse_event 函式模擬滑鼠點選。
  4. 呼叫 SetCursorPos 函式設定滑鼠的位置，並使用 Sleep 函式模擬滑鼠移動的延時，實現滑鼠動作的回放。
  5. 迴圈執行以上步驟，直到指令碼檔案中的所有動作都被回放完畢。
// 回放指令碼
void Play(char *script)
{
    FILE* fp = fopen(script, "r");
    char buf[1024];

    while (feof(fp) == 0)
    {
        // 每次讀入一行
        memset(buf, 0, 1024);
        fgets(buf, 1024, fp);

        // 以逗號切割
        char split_comma[4][32] = { 0 };
        int comma_count = split(split_comma, buf, ",");

        int key_item[4] = { 0 };

        // std::cout << "長度: " << comma_count << std::endl;
        for (int x = 0; x < comma_count; x++)
        {
            // 繼續切割冒號
            char split_colon[2][32] = { 0 };
            split(split_colon, split_comma[x], ":");

            // std::cout << "字典鍵 = " << split_colon[0] << " 字典值 = " << split_colon[1] << std::endl;
            key_item[x] = atoi(split_colon[1]);
        }

        if (key_item[3] != 0)
        {
            mouse_event(MOUSEEVENTF_LEFTUP | MOUSEEVENTF_LEFTDOWN, 0, 0, 0, 0);
        }
        if (key_item[4] != 0)
        {
            mouse_event(MOUSEEVENTF_RIGHTUP | MOUSEEVENTF_RIGHTDOWN, 0, 0, 0, 0);
        }

        // 得到資料後開始回放
        SetCursorPos(key_item[0], key_item[1]);
        Sleep(70);
    }
}

最後是主函式部分，我們透過RegisterHotKey函式註冊兩個全域性熱鍵，透過F1實現滑鼠錄製部分，透過F2則實現滑鼠回放，最後透過GetMessage函式接收全域性訊息事件，當出現WM_HOTKEY訊息則依次判斷是否啟用錄製回放等功能，程式碼如下所示；

int main(int argc, char* argv[])
{
    // 註冊熱鍵 F1 , F2
    if (0 == RegisterHotKey(NULL, 1,0, VK_F1))
    {
        cout << GetLastError() << endl;
    }
    if (0 == RegisterHotKey(NULL, 2,0, VK_F2))
    {
        cout << GetLastError() << endl;
    }
    if (0 == RegisterHotKey(NULL, 3, 0, VK_F3))
    {
        cout << GetLastError() << endl;
    }

    // 訊息迴圈
    MSG msg = { 0 };

    while (GetMessage(&msg, NULL, 0, 0))
    {
        switch (msg.message)
        {
        case WM_HOTKEY:
        {
            if (1 == msg.wParam)
            {
                std::cout << "錄製指令碼" << std::endl;
                Recording((char *)"d://script.txt");
            }

            else if (2 == msg.wParam)
            {
                std::cout << "回放指令碼" << std::endl;
                Play((char *)"d://script.txt");
            }

            else if (3 == msg.wParam)
            {
                exit(0);
                return 0;
            }

            break;
        }
        default:
            break;
        }
    }
    return 0;
}

讀者可自行編譯並執行這段程式碼，透過錄制一段滑鼠功能並回放，輸出效果圖如下所示；

本文作者： 王瑞
本文連結： https://www.lyshark.com/post/d3a88993.html
版權宣告： 本部落格所有文章除特別宣告外，均採用 BY-NC-SA 許可協議。轉載請註明出處！

相關文章