Swoole來實現實時非同步任務佇列

航空母艦發表於2016-03-24
非同步佇列

假如要發100封郵件，for迴圈100遍，使用者直接揭竿而起，什麼破網站！
但實際上，我們很可能有超過1萬的郵件。怎麼處理這個延遲的問題？
答案就是用非同步。把“發郵件”這個操作封裝，然後後臺非同步地執行1萬遍。這樣的話，使用者提交網頁後，他所等待的時間只是“把發郵件任務請求推送進佇列裡”的時間。而我們的後臺服務將在使用者看不見的地方跑。
在實現“非同步佇列”這點上，有人採用mysql表或者redis來存放待傳送的郵件，然後，每分鐘定時讀取待傳送列表，然後處理。這便是定時非同步任務佇列。但當前提交的任務要一分鐘後才能執行，在某些實時性要求應用場景裡還是不快。有些場景要求，只有一提交任務，便馬上執行，但使用者不需要等待返回結果。
本文將探討用php擴充套件swoole實現實時非同步任務佇列的方案。

服務端

在打算放置指令碼的目錄（你也可以自行新建）新建Server.php，程式碼如下

<?php

class Server
{
    private $serv;

    public function __construct()
    {
        $this->serv = new swoole_server("0.0.0.0", 9501);
        $this->serv->set(array(
            'worker_num' => 1, //一般設定為伺服器CPU數的1-4倍
            'daemonize' => 1, //以守護程式執行
            'max_request' => 10000,
            'dispatch_mode' => 2,
            'task_worker_num' => 8, //task程式的數量
            "task_ipc_mode " => 3, //使用訊息佇列通訊，並設定為爭搶模式
            //"log_file" => "log/taskqueueu.log" ,//日誌
        ));
        $this->serv->on('Receive', array($this, 'onReceive'));
        // bind callback
        $this->serv->on('Task', array($this, 'onTask'));
        $this->serv->on('Finish', array($this, 'onFinish'));
        $this->serv->start();
    }

    public function onReceive(swoole_server $serv, $fd, $from_id, $data)
    {
        //echo "Get Message From Client {$fd}:{$data}\n";
        // send a task to task worker.
        $serv->task($data);
    }

    public function onTask($serv, $task_id, $from_id, $data)
    {
        $array = json_decode($data, true);
        if ($array['url']) {
            return $this->httpGet($array['url'], $array['param']);
        }
    }

    public function onFinish($serv, $task_id, $data)
    {
        //echo "Task {$task_id} finish\n";
        //echo "Result: {$data}\n";
    }

    protected function httpGet($url, $data)
    {
        if ($data) {
            $url .= '?' . http_build_query($data);
        }
        $curlObj = curl_init(); //初始化curl，
        curl_setopt($curlObj, CURLOPT_URL, $url); //設定網址
        curl_setopt($curlObj, CURLOPT_RETURNTRANSFER, 1); //將curl_exec的結果返回
        curl_setopt($curlObj, CURLOPT_SSL_VERIFYPEER, FALSE);
        curl_setopt($curlObj, CURLOPT_SSL_VERIFYHOST, FALSE);
        curl_setopt($curlObj, CURLOPT_HEADER, 0); //是否輸出返回頭資訊
        $response = curl_exec($curlObj); //執行
        curl_close($curlObj); //關閉會話
        return $response;
    }

}

$server = new Server();

客戶端

啟動服務後，讓我們看看如何呼叫服務。新建測試檔案Client_test.php

<?php

class Client
{
    private $client;

    public function __construct()
    {
        $this->client = new swoole_client(SWOOLE_SOCK_TCP);
    }

    public function connect()
    {
        if (!$this->client->connect("127.0.0.1", 9501, 1)) {
            throw new Exception(sprintf('Swoole Error: %s', $this->client->errCode));
        }
    }

    public function send($data)
    {
        if ($this->client->isConnected()) {
            if (!is_string($data)) {
                $data = json_encode($data);
            }

            return $this->client->send($data);
        } else {
            throw new Exception('Swoole Server does not connected.');
        }
    }

    public function close()
    {
        $this->client->close();
    }
}

$data = array(
    "url" => "http://192.168.10.19/send_mail",
    "param" => array(
        "username" => 'test',
        "password" => 'test'
    )
);
$client = new Client();
$client->connect();
if ($client->send($data)) {
    echo 'success';
} else {
    echo 'fail';
}
$client->close();

在上面程式碼中，url即為任務所在地址，param為所需傳遞引數。
儲存好程式碼，在命令列或者瀏覽器中執行Client_test.php,便實現了非同步任務佇列。你所填寫的URL，將會在每次非同步任務被提交後，以HTTP GET的方式非同步執行。

 

相關文章