大家好,我是 V 哥。在高併發應用場景下,執行緒池的使用是必然的,那線上程中的佇列都有哪些呢?下面 V 哥整理的幾種常見的執行緒池佇列以及適用場景案例,分享給大家。
執行緒池中的佇列主要用於存放等待執行的任務,以下是幾種常見的執行緒池佇列:
1. 無界佇列(Unbounded Queue)
- LinkedBlockingQueue(基於連結串列的阻塞佇列):
- 特點:它是一個基於連結串列實現的阻塞佇列,預設情況下容量為
Integer.MAX_VALUE
,也就是幾乎可以看作是無界的(實際受限於系統記憶體等因素)。當執行緒池中的執行緒處理任務速度小於任務提交速度時,任務會不斷被新增到這個佇列中,理論上不會出現佇列滿的情況,因此可以避免任務拒絕的情況發生,但如果任務持續快速堆積,可能會導致記憶體溢位等問題。 - 適用場景:適用於任務量波動較大,但對任務拒絕比較敏感,希望儘可能容納所有提交任務的場景,比如一些後臺非同步任務處理場景,像日誌記錄非同步處理等,只要記憶體資源允許,儘量接收並處理所有待記錄的日誌資訊。
- 特點:它是一個基於連結串列實現的阻塞佇列,預設情況下容量為
下面來看一個案例:
以下是一個簡單的使用Java實現的LinkedBlockingQueue
類似功能的程式碼示例,這裡為了突出核心邏輯,簡化了一些邊界情況處理等,但涵蓋了其主要的阻塞佇列特性,比如當佇列滿時阻塞插入執行緒,佇列空時阻塞獲取執行緒等,示例程式碼如下:
import java.util.concurrent.locks.Condition;
import java.util.concurrent.locks.Lock;
import java.util.concurrent.locks.ReentrantLock;
// 自定義的簡單LinkedBlockingQueue實現
public class MyLinkedBlockingQueue<E> {
// 連結串列節點類,用於儲存佇列中的元素
private static class Node<E> {
E item;
Node<E> next;
Node(E x) {
item = x;
}
}
// 佇列頭節點
private Node<E> head;
// 佇列尾節點
private Node<E> last;
// 佇列當前元素個數
private int count;
// 佇列容量,這裡設定為Integer.MAX_VALUE模擬無界(實際受記憶體限制)
private final int capacity = Integer.MAX_VALUE;
// 用於併發控制的鎖
private final Lock lock = new ReentrantLock();
// 佇列非空條件,用於獲取元素時等待佇列有元素可用
private final Condition notEmpty = lock.newCondition();
// 佇列未滿條件,用於插入元素時等待佇列有空間
private final Condition notFull = lock.newCondition();
// 構造方法,初始化頭節點和尾節點
public MyLinkedBlockingQueue() {
head = new Node<>(null);
last = head;
}
// 往佇列中插入元素的方法
public void put(E e) throws InterruptedException {
lock.lock();
try {
// 如果佇列已滿(這裡實際很難滿,除非記憶體耗盡等極端情況),阻塞等待有空間
while (count == capacity) {
notFull.await();
}
// 將新元素新增到佇列尾部
Node<E> newNode = new Node<>(e);
last.next = newNode;
last = newNode;
count++;
// 插入元素後通知等待獲取元素的執行緒,佇列有元素了
notEmpty.signal();
} finally {
lock.unlock();
}
}
// 從佇列中獲取元素的方法
public E take() throws InterruptedException {
lock.lock();
try {
// 如果佇列空,阻塞等待有元素可獲取
while (count == 0) {
notEmpty.await();
}
// 獲取頭節點的下一個節點(實際要獲取的元素所在節點)
Node<E> first = head.next;
E element = first.item;
// 將頭節點指向下一個節點,移除當前獲取的元素
head.next = first.next;
if (last == first) {
last = head;
}
count--;
// 通知等待插入元素的執行緒,佇列有空間了
notFull.signal();
return element;
} finally {
lock.unlock();
}
}
// 獲取當前佇列中元素的數量
public int size() {
lock.lock();
try {
return count;
} finally {
lock.unlock();
}
}
}
以下是一個簡單的測試類,用於演示如何使用這個自定義的MyLinkedBlockingQueue
來模擬處理日誌記錄這樣的非同步任務場景:
public class TestMyLinkedBlockingQueue {
public static void main(String[] args) {
MyLinkedBlockingQueue<String> queue = new MyLinkedBlockingQueue<>();
// 模擬生產者執行緒,不斷產生日誌資訊並放入佇列
Thread producerThread = new Thread(() -> {
for (int i = 0; i < 1000; i++) {
try {
String logMessage = "Log message " + i;
queue.put(logMessage);
System.out.println("Produced: " + logMessage);
Thread.sleep(100);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
// 模擬消費者執行緒,從佇列中獲取日誌資訊並處理(這裡簡單列印模擬處理)
Thread consumerThread = new Thread(() -> {
while (true) {
try {
String log = queue.take();
System.out.println("Consumed: " + log);
Thread.sleep(200);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
producerThread.start();
consumerThread.start();
try {
producerThread.join();
consumerThread.join();
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
}
在上述程式碼中:
MyLinkedBlockingQueue
類是核心的自定義阻塞佇列實現:- 內部透過定義連結串列節點類
Node
來構建連結串列結構儲存元素。 - 使用
ReentrantLock
來實現併發控制,配合Condition
物件(notEmpty
和notFull
)來實現當佇列空時阻塞獲取元素的執行緒、佇列滿時阻塞插入元素的執行緒的功能。 put
方法用於向佇列中插入元素,當佇列元素個數達到設定容量(這裡模擬無界情況)時,執行緒會等待直到有空間可以插入元素,插入後會通知等待獲取元素的執行緒。take
方法用於從佇列中獲取元素,當佇列空時,執行緒會等待直到有元素可獲取,獲取元素後會通知等待插入元素的執行緒。
- 內部透過定義連結串列節點類
TestMyLinkedBlockingQueue
類是用於測試的主類:- 建立了自定義的阻塞佇列例項,並啟動了生產者執行緒和消費者執行緒。
- 生產者執行緒不斷生成日誌資訊(模擬)並放入佇列,消費者執行緒從佇列中取出日誌資訊並模擬處理(簡單列印),展示了在非同步任務處理場景下該阻塞佇列的基本使用方式。
需要注意的是,真正的LinkedBlockingQueue
在Java的java.util.concurrent
包中有著更完善的功能、異常處理以及效能最佳化等方面的設計,比如支援可中斷的插入和獲取操作、更精細的記憶體管理等,但這個示例可以幫助理解其基本的阻塞佇列原理和實現思路。
2. 有界佇列(Bounded Queue)
- ArrayBlockingQueue(基於陣列的阻塞佇列):
- 特點:基於陣列實現的阻塞佇列,在建立時需要指定佇列的容量大小。當佇列已滿時,若再有新的任務提交,提交任務的執行緒會被阻塞,直到佇列有空閒空間為止。它是一個有界的、遵循先進先出(FIFO)原則的佇列,保證了任務按照提交的先後順序依次執行。
- 適用場景:適用於對資源使用有明確限制,需要控制佇列中任務數量的場景,例如在一個資源有限的伺服器環境下,對同時處理的網路請求任務數量進行限制,避免過多工堆積耗盡系統資源,透過設定合適的佇列容量,確保系統的穩定性和響應效能。
來看一個案例實現:
以下是一個使用Java實現的簡單ArrayBlockingQueue
類似功能的程式碼示例,重點體現了其基於陣列的阻塞佇列特性,包括有界容量、佇列滿時阻塞插入執行緒、佇列空時阻塞獲取執行緒等關鍵功能,示例程式碼如下:
import java.util.concurrent.locks.Condition;
import java.util.concurrent.locks.Lock;
import java.util.concurrent.locks.ReentrantLock;
// 自定義的簡單ArrayBlockingQueue實現
public class MyArrayBlockingQueue<E> {
private final E[] items; // 用於儲存元素的陣列
private int takeIndex; // 下一個獲取元素的索引
private int putIndex; // 下一個插入元素的索引
private int count; // 當前佇列中元素的數量
private final Lock lock = new ReentrantLock();
private final Condition notEmpty = lock.newCondition();
private final Condition notFull = lock.newCondition();
// 構造方法,傳入佇列容量大小,初始化陣列等相關屬性
@SuppressWarnings("unchecked")
public MyArrayBlockingQueue(int capacity) {
if (capacity <= 0) {
throw new IllegalArgumentException("Capacity must be greater than 0");
}
items = (E[]) new Object[capacity];
takeIndex = 0;
putIndex = 0;
count = 0;
}
// 向佇列中插入元素的方法
public void put(E e) throws InterruptedException {
lock.lock();
try {
// 如果佇列已滿,阻塞等待有空間
while (count == items.length) {
notFull.await();
}
// 將元素放入陣列指定位置(根據putIndex)
items[putIndex] = e;
// 更新putIndex,迴圈利用陣列空間,達到陣列末尾後回到開頭
putIndex = (putIndex + 1) % items.length;
count++;
// 插入元素後通知等待獲取元素的執行緒,佇列有元素了
notEmpty.signal();
} finally {
lock.unlock();
}
}
// 從佇列中獲取元素的方法
public E take() throws InterruptedException {
lock.lock();
try {
// 如果佇列空,阻塞等待有元素可獲取
while (count == 0) {
notEmpty.await();
}
// 獲取當前takeIndex位置的元素
E element = items[takeIndex];
// 將該位置元素置空,方便垃圾回收
items[takeIndex] = null;
// 更新takeIndex,迴圈利用陣列空間
takeIndex = (takeIndex + 1) % items.length;
count--;
// 通知等待插入元素的執行緒,佇列有空間了
notFull.signal();
return element;
} finally {
lock.unlock();
}
}
// 獲取當前佇列中元素的數量
public int size() {
lock.lock();
try {
return count;
} finally {
lock.unlock();
}
}
}
來寫一個簡單的測試類,用於演示如何使用這個自定義的MyArrayBlockingQueue
來模擬在資源有限環境下對網路請求任務數量進行限制的場景:
public class TestMyArrayBlockingQueue {
public static void main(String[] args) {
// 設定佇列容量為5,模擬限制同時處理的任務數量
MyArrayBlockingQueue<String> queue = new MyArrayBlockingQueue<>(5);
// 模擬生產者執行緒,不斷產生網路請求任務並放入佇列
Thread producerThread = new Thread(() -> {
for (int i = 0; i < 10; i++) {
try {
String request = "Network Request " + i;
queue.put(request);
System.out.println("Produced: " + request);
Thread.sleep(100);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
// 模擬消費者執行緒,從佇列中獲取網路請求任務並處理(這裡簡單列印模擬處理)
Thread consumerThread = new Thread(() -> {
while (true) {
try {
String request = queue.take();
System.out.println("Consumed: " + request);
Thread.sleep(200);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
producerThread.start();
consumerThread.start();
try {
producerThread.join();
consumerThread.join();
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
}
在上述程式碼中:
MyArrayBlockingQueue
類是核心的自定義阻塞佇列實現:- 內部使用一個泛型陣列
items
來儲存佇列中的元素,透過takeIndex
和putIndex
來分別標記獲取元素和插入元素的索引位置,利用count
記錄當前佇列中元素的數量。 - 使用
ReentrantLock
進行併發控制,並配合Condition
物件(notEmpty
和notFull
)實現了佇列空時阻塞獲取元素的執行緒、佇列滿時阻塞插入元素的執行緒的功能。 put
方法用於向佇列中插入元素,當佇列已滿(元素數量達到陣列容量)時,執行緒會等待直到有空間可以插入元素,插入元素後會通知等待獲取元素的執行緒。take
方法用於從佇列中獲取元素,當佇列空時,執行緒會等待直到有元素可獲取,獲取元素後會通知等待插入元素的執行緒。
- 內部使用一個泛型陣列
TestMyArrayBlockingQueue
類是用於測試的主類:- 建立了自定義的阻塞佇列例項,並設定了容量為5,模擬對網路請求任務數量的限制場景。
- 啟動了生產者執行緒和消費者執行緒,生產者執行緒不斷生成網路請求任務(模擬)並放入佇列,消費者執行緒從佇列中取出任務並模擬處理(簡單列印),展示了在資源有限場景下該阻塞佇列的基本使用方式。
以上案例程式碼,可以收藏起來,慢慢消化哈。
- LinkedBlockingDeque(基於連結串列的雙向阻塞佇列):
- 特點:它也是基於連結串列結構,但與LinkedBlockingQueue不同的是,它是一個雙向佇列,支援在佇列的兩端進行插入和移除操作,同樣可以設定容量限制成為有界佇列。在多執行緒環境下,這種雙向操作特性可以提供更靈活的任務排程方式,比如可以實現將高優先順序任務從隊頭插入優先執行等情況。
- 適用場景:適合需要靈活調整任務執行順序,同時又要對佇列規模進行控制的場景,比如在一個任務處理系統中,有緊急任務需要插隊優先處理時,可以透過在隊頭插入的方式讓其儘快被執行,並且透過設定容量防止過多工無序堆積。
下面來看一個案例:
以下是一個使用Java實現的簡單LinkedBlockingDeque
類似功能的程式碼示例,體現了其基於連結串列的雙向阻塞佇列特性,包括可以在兩端插入和移除元素、設定容量限制、佇列滿或空時阻塞相應操作執行緒等關鍵功能,示例程式碼如下:
import java.util.concurrent.locks.Condition;
import java.util.concurrent.locks.Lock;
import java.util.concurrent.locks.ReentrantLock;
// 自定義的簡單LinkedBlockingDeque實現
public class MyLinkedBlockingDeque<E> {
// 連結串列節點類,用於儲存佇列中的元素
private static class Node<E> {
E item;
Node<E> prev;
Node<E> next;
Node(E x) {
item = x;
}
}
private Node<E> head; // 佇列頭節點
private Node<E> tail; // 佇列尾節點
private int count; // 當前佇列中元素的數量
private final int capacity; // 佇列容量,用於控制佇列規模
private final Lock lock = new ReentrantLock();
private final Condition notEmpty = lock.newCondition();
private final Condition notFull = lock.newCondition();
// 構造方法,傳入佇列容量,初始化頭節點和尾節點
public MyLinkedBlockingDeque(int capacity) {
if (capacity <= 0) {
throw new IllegalArgumentException("Capacity must be greater than 0");
}
this.capacity = capacity;
head = new Node<>(null);
tail = new Node<>(null);
head.next = tail;
tail.prev = head;
}
// 在佇列頭部插入元素的方法
public void putFirst(E e) throws InterruptedException {
lock.lock();
try {
// 如果佇列已滿,阻塞等待有空間
while (count == capacity) {
notFull.await();
}
Node<E> newNode = new Node<>(e);
// 將新節點插入到頭部
Node<E> next = head.next;
head.next = newNode;
newNode.prev = head;
newNode.next = next;
next.prev = newNode;
count++;
// 插入元素後通知等待獲取元素的執行緒,佇列有元素了
notEmpty.signal();
} finally {
lock.unlock();
}
}
// 在佇列尾部插入元素的方法
public void putLast(E e) throws InterruptedException {
lock.lock();
try {
// 如果佇列已滿,阻塞等待有空間
while (count == capacity) {
notFull.await();
}
Node<E> newNode = new Node<>(e);
// 將新節點插入到尾部
Node<E> prev = tail.prev;
prev.next = newNode;
newNode.prev = prev;
newNode.next = tail;
tail.prev = newNode;
count++;
// 插入元素後通知等待獲取元素的執行緒,佇列有元素了
notEmpty.signal();
} finally {
lock.unlock();
}
}
// 從佇列頭部獲取元素的方法
public E takeFirst() throws InterruptedException {
lock.lock();
try {
// 如果佇列空,阻塞等待有元素可獲取
while (count == 0) {
notEmpty.await();
}
Node<E> first = head.next;
// 移除頭節點
Node<E> next = first.next;
head.next = next;
next.prev = head;
E element = first.item;
first.item = null;
count--;
// 通知等待插入元素的執行緒,佇列有空間了
notFull.signal();
return element;
} finally {
lock.unlock();
}
}
// 從佇列尾部獲取元素的方法
public E takeLast() throws InterruptedException {
lock.lock();
try {
// 如果佇列空,阻塞等待有元素可獲取
while (count == 0) {
notEmpty.await();
}
Node<E> last = tail.prev;
// 移除尾節點
Node<E> prev = last.prev;
prev.next = tail;
tail.prev = prev;
E element = last.item;
last.item = null;
count--;
// 通知等待插入元素的執行緒,佇列有元素了
notFull.signal();
return element;
} finally {
lock.unlock();
}
}
// 獲取當前佇列中元素的數量
public int size() {
lock.lock();
try {
return count;
} finally {
lock.unlock();
}
}
}
咱們來寫一個測試類,用於演示如何使用這個自定義的MyLinkedBlockingDeque
來模擬在任務處理系統中對任務執行順序靈活調整以及控制佇列規模的場景:
public class TestMyLinkedBlockingDeque {
public static void main(String[] args) {
// 設定佇列容量為5,模擬控制佇列規模
MyLinkedBlockingDeque<String> queue = new MyLinkedBlockingDeque<>(5);
// 模擬生產者執行緒,產生任務並插入佇列(先插入普通任務到尾部)
Thread producerThread = new Thread(() -> {
for (int i = 0; i < 8; i++) {
try {
String task = "Task " + i;
if (i < 5) {
queue.putLast(task);
} else {
// 模擬有緊急任務,插入到頭部
queue.putFirst("Urgent Task " + (i - 5));
}
System.out.println("Produced: " + task);
Thread.sleep(100);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
// 模擬消費者執行緒,從佇列中獲取任務並處理(這裡簡單列印模擬處理)
Thread consumerThread = new Thread(() -> {
while (true) {
try {
String task = queue.takeFirst();
System.out.println("Consumed: " + task);
Thread.sleep(200);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
producerThread.start();
consumerThread.start();
try {
producerThread.join();
consumerThread.join();
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
}
在上述程式碼中:
MyLinkedBlockingDeque
類是核心的自定義雙向阻塞佇列實現:- 內部透過定義
Node
類構建雙向連結串列結構來儲存元素,有頭節點head
和尾節點tail
,透過指標維護節點之間的雙向關係。 - 使用
ReentrantLock
進行併發控制,並配合Condition
物件(notEmpty
和notFull
)實現佇列空時阻塞獲取元素的執行緒、佇列滿時阻塞插入元素的執行緒的功能。 putFirst
和putLast
方法分別用於向佇列頭部和尾部插入元素,當佇列已滿時,相應執行緒會等待直到有空間可插入,插入後通知等待獲取元素的執行緒。takeFirst
和takeLast
方法分別用於從佇列頭部和尾部獲取元素,當佇列空時,相應執行緒會等待直到有元素可獲取,獲取後通知等待插入元素的執行緒。
- 內部透過定義
TestMyLinkedBlockingDeque
類是用於測試的主類:- 建立了自定義的雙向阻塞佇列例項,並設定容量為5,模擬控制佇列規模的場景。
- 啟動了生產者執行緒和消費者執行緒,生產者執行緒先正常往佇列尾部插入任務,然後模擬有緊急任務往佇列頭部插入,消費者執行緒從佇列頭部獲取任務並模擬處理(簡單列印),展示了在任務處理系統中該雙向阻塞佇列靈活調整任務執行順序以及控制佇列規模的基本使用方式。
學肥了麼,還不懂歡迎關注威哥愛程式設計私信給我,慢慢給你細說。
- PriorityBlockingQueue(基於優先順序的阻塞佇列):
- 特點:這是一個支援優先順序排序的無界阻塞佇列(雖然說是無界,但實際受系統資源限制),佇列中的元素(即任務)需要實現
Comparable
介面或者在建立佇列時傳入自定義的比較器Comparator
,以此來確定任務的優先順序順序。每次從佇列中取出任務時,會優先取出優先順序最高的任務進行執行。 - 適用場景:適用於任務有明顯優先順序區分的情況,例如在一個監控系統中,告警任務有不同的嚴重級別,嚴重級別高的告警任務(如伺服器當機告警)優先順序更高,需要優先處理,就可以將這些告警任務放入PriorityBlockingQueue中,按照優先順序高低依次執行。
- 特點:這是一個支援優先順序排序的無界阻塞佇列(雖然說是無界,但實際受系統資源限制),佇列中的元素(即任務)需要實現
來看一個案例:
以下是一個使用Java實現的簡單PriorityBlockingQueue
類似功能的程式碼示例,重點體現了基於優先順序的阻塞佇列特性,即佇列中的元素需要實現Comparable
介面來定義優先順序順序,佇列能根據優先順序高低來決定元素的取出順序,同時具備阻塞等待的功能,示例程式碼如下:
import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.locks.Condition;
import java.util.concurrent.locks.Lock;
import java.util.concurrent.locks.ReentrantLock;
// 自定義的簡單PriorityBlockingQueue實現
public class MyPriorityBlockingQueue<E extends Comparable<? super E>> {
private final List<E> queue; // 用於儲存元素的列表
private final Lock lock = new ReentrantLock();
private final Condition notEmpty = lock.newCondition();
// 構造方法,初始化儲存列表
public MyPriorityBlockingQueue() {
queue = new ArrayList<>();
}
// 向佇列中插入元素的方法
public void put(E e) throws InterruptedException {
lock.lock();
try {
queue.add(e);
// 插入元素後進行上浮操作,確保滿足優先順序順序
siftUp(queue.size() - 1);
// 插入元素後通知等待獲取元素的執行緒,佇列有元素了
notEmpty.signal();
} finally {
lock.unlock();
}
}
// 從佇列中獲取並移除優先順序最高的元素(即隊頭元素)的方法
public E take() throws InterruptedException {
lock.lock();
try {
// 如果佇列空,阻塞等待有元素可獲取
while (queue.size() == 0) {
notEmpty.await();
}
E result = queue.get(0);
int lastIndex = queue.size() - 1;
// 將隊尾元素移到隊頭
E last = queue.get(lastIndex);
queue.set(0, last);
queue.remove(lastIndex);
// 進行下沉操作,重新調整優先順序順序
siftDown(0);
return result;
} finally {
lock.unlock();
}
}
// 獲取當前佇列中元素的數量
public int size() {
lock.lock();
try {
return queue.size();
} finally {
lock.unlock();
}
}
// 上浮操作,確保元素在合適的優先順序位置(類似堆排序中的上浮操作)
private void siftUp(int k) {
while (k > 0) {
int parent = (k - 1) / 2;
E element = queue.get(k);
E parentElement = queue.get(parent);
if (element.compareTo(parentElement) >= 0) {
break;
}
// 交換元素位置
swap(parent, k);
k = parent;
}
}
// 下沉操作,確保元素在合適的優先順序位置(類似堆排序中的下沉操作)
private void siftDown(int k) {
int half = queue.size() / 2;
while (k < half) {
int leftChild = 2 * k + 1;
int rightChild = leftChild + 1;
int childToSwap = leftChild;
E element = queue.get(k);
E leftChildElement = queue.get(leftChild);
if (rightChild < queue.size() && leftChildElement.compareTo(queue.get(rightChild)) > 0) {
childToSwap = rightChild;
}
E childToSwapElement = queue.get(childToSwap);
if (element.compareTo(childToSwapElement) <= 0) {
break;
}
// 交換元素位置
swap(k, childToSwap);
k = childToSwap;
}
}
// 交換列表中兩個位置的元素
private void swap(int i, int j) {
E temp = queue.get(i);
queue.set(i, queue.get(j));
queue.set(j, temp);
}
}
下面咱們來寫個測試類,用於模擬在監控系統中使用這個自定義的MyPriorityBlockingQueue
來處理不同優先順序告警任務的場景:
class AlertTask implements Comparable<AlertTask> {
private final String message;
private final int priority;
public AlertTask(String message, int priority) {
this.message = message;
this.priority = priority;
}
@Override
public int compareTo(AlertTask other) {
// 按照優先順序從小到大排序,優先順序數值越小越優先,這裡返回差值來比較
return Integer.compare(this.priority, other.priority);
}
@Override
public String toString() {
return "AlertTask{" +
"message='" + message + '\'' +
", priority=" + priority +
'}';
}
}
public class TestMyPriorityBlockingQueue {
public static void main(String[] args) {
MyPriorityBlockingQueue<AlertTask> queue = new MyPriorityBlockingQueue<>();
// 模擬生產者執行緒,產生不同優先順序的告警任務並放入佇列
Thread producerThread = new Thread(() -> {
AlertTask highPriorityTask = new AlertTask("Server Down Alert", 1);
AlertTask mediumPriorityTask = new AlertTask("High CPU Usage Alert", 3);
AlertTask lowPriorityTask = new AlertTask("Disk Space Low Alert", 5);
try {
queue.put(highPriorityTask);
queue.put(mediumPriorityTask);
queue.put(lowPriorityTask);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
});
// 模擬消費者執行緒,從佇列中獲取告警任務並處理(這裡簡單列印模擬處理)
Thread consumerThread = new Thread(() -> {
while (true) {
try {
AlertTask task = queue.take();
System.out.println("Processing: " + task);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
producerThread.start();
consumerThread.start();
try {
producerThread.join();
consumerThread.join();
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
}
在上述程式碼中:
MyPriorityBlockingQueue
類是核心的自定義基於優先順序的阻塞佇列實現:- 內部使用
ArrayList
來儲存佇列中的元素,透過ReentrantLock
進行併發控制,並配合Condition
物件notEmpty
實現佇列空時阻塞獲取元素的執行緒的功能。 put
方法用於向佇列中插入元素,插入後會呼叫siftUp
方法進行上浮操作,以保證佇列中的元素始終按照優先順序順序排列(基於元素實現的Comparable
介面來比較),插入完成後還會通知等待獲取元素的執行緒。take
方法用於從佇列中獲取並移除優先順序最高的元素(即隊頭元素),當佇列空時,執行緒會等待直到有元素可獲取,獲取元素前會先將隊尾元素移到隊頭並呼叫siftDown
方法進行下沉操作,重新調整優先順序順序,然後返回獲取的元素。siftUp
和siftDown
方法分別實現了類似堆排序中的上浮和下沉操作,透過不斷比較元素的優先順序並交換位置,來確保佇列中的元素符合優先順序順序要求,swap
方法用於交換列表中兩個位置的元素。
- 內部使用
TestMyPriorityBlockingQueue
類是用於測試的主類:- 首先定義了
AlertTask
類實現Comparable
介面,用於表示告警任務並定義其優先順序比較規則,根據給定的優先順序數值來確定任務的優先順序高低。 - 建立了自定義的基於優先順序的阻塞佇列例項,啟動了生產者執行緒和消費者執行緒,生產者執行緒生成不同優先順序的告警任務並放入佇列,消費者執行緒從佇列中獲取告警任務並模擬處理(簡單列印),展示了在監控系統場景下該優先順序阻塞佇列的基本使用方式。
- 首先定義了
這個案例可以幫助你理解基於優先順序的阻塞佇列原理和實現思路。Get 到了麼,有任何疑問可以關注威哥愛程式設計私信給我。
3. 同步佇列(Synchronous Queue)
- SynchronousQueue:
- 特點:它是一種特殊的佇列,內部沒有實際的儲存容量,每插入一個任務必須等待有執行緒來獲取並執行這個任務,反之,執行緒來獲取任務時,如果沒有任務可用,執行緒會被阻塞等待任務提交。這種佇列更像是一種任務傳遞的媒介,直接將任務從提交者傳遞到執行執行緒手上,保證了任務的即時處理,不存在任務排隊等待的情況。
- 適用場景:適用於要求任務提交後能立即被執行,不允許有任務等待堆積的場景,比如在一些對實時性要求極高的互動場景中,像線上實時交易系統中處理下單請求,希望下單任務能馬上被執行緒處理,而不是先放入佇列等待,以保障交易的及時性和流暢性。
來看一個案例程式碼:
以下是一個使用Java實現的簡單同步佇列(SynchronousQueue)類似功能的程式碼示例,重點體現了其核心特性,即每插入一個任務必須等待有執行緒來獲取並執行這個任務,反之,執行緒來獲取任務時,如果沒有任務可用,執行緒會被阻塞等待任務提交,示例程式碼如下:
import java.util.concurrent.locks.Condition;
import java.util.concurrent.locks.Lock;
import java.util.concurrent.locks.ReentrantLock;
// 自定義的簡單同步佇列實現
public class MySynchronousQueue<E> {
private E element; // 用於存放當前要傳遞的元素
private boolean hasElement = false; // 標記是否有元素存在
private final Lock lock = new ReentrantLock();
private final Condition isEmpty = lock.newCondition();
private final Condition isFull = lock.newCondition();
// 向佇列中插入元素的方法
public void put(E e) throws InterruptedException {
lock.lock();
try {
// 如果已經有元素了,阻塞等待元素被取走
while (hasElement) {
isFull.await();
}
element = e;
hasElement = true;
// 通知等待獲取元素的執行緒,有元素可獲取了
isEmpty.signal();
} finally {
lock.unlock();
}
}
// 從佇列中獲取元素的方法
public E take() throws InterruptedException {
lock.lock();
try {
// 如果沒有元素,阻塞等待元素被放入
while (!hasElement) {
isEmpty.await();
}
E result = element;
hasElement = false;
// 通知等待插入元素的執行緒,可以插入新元素了
isFull.signal();
return result;
} finally {
lock.unlock();
}
}
}
來來來,寫一個簡單的測試類,模擬線上實時交易系統中處理下單請求這樣的高實時性場景下使用這個自定義的同步佇列:
public class TestMySynchronousQueue {
public static void main(String[] args) {
MySynchronousQueue<String> queue = new MySynchronousQueue<>();
// 模擬生產者執行緒,不斷產生下單請求並放入佇列
Thread producerThread = new Thread(() -> {
for (int i = 0; i < 10; i++) {
try {
String orderRequest = "Order Request " + i;
queue.put(orderRequest);
System.out.println("Produced: " + orderRequest);
Thread.sleep(100);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
// 模擬消費者執行緒,從佇列中獲取下單請求並處理(這裡簡單列印模擬處理)
Thread consumerThread = new Thread(() -> {
while (true) {
try {
String order = queue.take();
System.out.println("Consumed: " + order);
Thread.sleep(200);
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
});
producerThread.start();
consumerThread.start();
try {
producerThread.join();
consumerThread.join();
} catch (InterruptedException e) {
Thread.currentThread().interrupt();
}
}
}
在上述程式碼中:
MySynchronousQueue
類是核心的自定義同步佇列實現:- 使用一個變數
element
來臨時存放要傳遞的元素,透過hasElement
變數來標記當前是否有元素存在於佇列中(其實它內部沒有真正的佇列儲存結構,只是起到一個元素傳遞的作用)。 - 利用
ReentrantLock
進行併發控制,並配合Condition
物件isEmpty
和isFull
來實現當沒有元素時阻塞獲取元素的執行緒、有元素時阻塞插入元素的執行緒的功能。 put
方法用於向佇列中插入元素,當已經有元素存在(即hasElement
為true
)時,插入執行緒會等待直到元素被取走,插入元素後會通知等待獲取元素的執行緒。take
方法用於從佇列中獲取元素,當沒有元素(即hasElement
為false
)時,獲取執行緒會等待直到有元素被放入,獲取元素後會通知等待插入元素的執行緒。
- 使用一個變數
TestMySynchronousQueue
類是用於測試的主類:- 建立了自定義的同步佇列例項,啟動了生產者執行緒和消費者執行緒,生產者執行緒不斷生成下單請求(模擬)並放入佇列,消費者執行緒從佇列中取出請求並模擬處理(簡單列印),展示了在高實時性要求場景下該同步佇列的基本使用方式。
透過以上案例的學習,幫助咱們理解其基本的同步佇列原理和實現思路。
最後
不同的執行緒池佇列有著各自的特點和適用場景,在實際使用執行緒池時,需要根據具體的業務需求、系統資源狀況以及對任務執行順序、響應時間等方面的要求,合理選擇相應的佇列來構建執行緒池,以實現高效的任務處理。 關注威哥愛程式設計,學習程式設計不迷茫,關注威哥愛程式設計,程式碼世界任縱橫。