背景
應該是在去年的時候，刷知乎看到一個問題，大概是說怎麼刷網易雲音樂個人累計聽歌數，然後有一個高贊回答，貼了一段js程式碼，直接在瀏覽器console執行就可以了。當時試了下，直接一下子刷了有好幾萬。悲劇的是，第二天又回到原來的樣子了，很明顯這種方式被網易雲音樂發現封掉了。而且後續網易雲還針對累計聽歌數加了一些限制，每天最多增加300首。今天帶來一種通過java+selenium的方式，自動播放歌曲，來達到刷累計聽歌數的效果。另外借助這個demo，對selenium的使用更加熟悉，也算是爬蟲應用中一些有趣的東西了。
思路
-
登入，有以下兩種方式可以選擇： a. 模擬web端的登入過程。優點：這種方式更加通用，便於動態切換賬號。缺點：比直接使用cookie稍微麻煩一些，並且有一定機率會出現圖形驗證碼，需要考慮這種情況。 b. 設定cookie。優點：不用處理登入過程，比較簡單方便，在cookie的過期時間比較長情況下還是比較方便的，不用頻繁切換。缺點：切換賬號比較麻煩，不能達到自動化。我這裡選擇的該方式。
-
播放：上一個步驟中登入成功後，直接開啟歌單列表頁面。如下圖
-
獲取播放動態：為了確定播放是否在正常進行，可以通過實時獲取個人home頁面的累計聽歌數相關資訊，用於監控，由於已經有一個頁面在播放歌曲了，為了不影響原有播放歌曲的頁面，可以開啟一個新的tab頁來獲取個人home頁面，開啟新的table頁，這裡採用js的方式
window.open('about:blank')。最終都會看到如下類似如下格式日誌，那就說明成功了：
2019-03-26 09:25:10,406 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-00:00 / 00:00---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:16,817 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:00 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:23,157 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:06 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:29,394 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:13 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:35,592 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:19 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:41,974 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:25 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
複製程式碼完整程式碼
package com.github.wycm;
import org.openqa.selenium.*;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import java.util.*;
import java.util.concurrent.TimeUnit;
import java.util.regex.Matcher;
import java.util.regex.Pattern;
/**
* Created by wycm
*/
public class Music163 {
private static Logger logger = LoggerFactory.getLogger(Music163.class);
//拷貝登入成功的瀏覽器原始cookie
private final static String RAW_COOKIES = "cookie1=value1; cookie2=value2";
private final static String CHROME_DRIVER_PATH = "/Users/wangyang/Downloads/chromedriver";
//歌曲列表id
private static String startId = "22336453";
private static String userId = null;
private static Set<String> playListSet = new HashSet<>();
private static Pattern pattern = Pattern.compile("<span class=\"j-flag time\"><em>(.*?)</em>(.*?)</span>");
private static Pattern songName = Pattern.compile("class=\"f-thide name fc1 f-fl\" title=\"(.*?)\"");
private static ChromeOptions chromeOptions = new ChromeOptions();
private static WebDriver driver = null;
static {
System.setProperty("webdriver.chrome.driver", CHROME_DRIVER_PATH);
chromeOptions.addArguments("--no-sandbox");
}
public static void main(String[] args) throws InterruptedException {
while (true){
try {
driver = new ChromeDriver(chromeOptions);
playListSet.add(startId);
invoke();
} catch (Exception e){
logger.error(e.getMessage(), e);
} finally {
driver.quit();
}
Thread.sleep(1000 * 10);
}
}
/**
* 初始化cookies
*/
private static void initCookies(){
Arrays.stream(RAW_COOKIES.split("; ")).forEach(rawCookie -> {
String[] ss = rawCookie.split("=");
Cookie cookie = new Cookie.Builder(ss[0], ss[1]).domain(".163.com").build();
driver.manage().addCookie(cookie);
});
}
private static void invoke() throws InterruptedException {
driver.manage().timeouts().implicitlyWait(5, TimeUnit.SECONDS);
driver.manage().timeouts().pageLoadTimeout(15, TimeUnit.SECONDS);
String s = null;
driver.get("http://music.163.com/");
initCookies();
driver.get("http://music.163.com/");
s = driver.getPageSource();
userId = group(s, "userId:(\\d+)", 1);
driver.get("https://music.163.com/#/playlist?id=" + startId);
driver.switchTo().frame("contentFrame");
WebElement element = driver.findElement(By.cssSelector("[id=content-operation]>a:first-child"));
element.click();
((JavascriptExecutor) driver).executeScript("window.open('about:blank')");
ArrayList<String> tabs = new ArrayList<String>(driver.getWindowHandles());
driver.switchTo().window(tabs.get(0));
driver.switchTo().defaultContent();
int i = 0;
String lastSongName = "";
int count = 0;
while (true){
if(i > Integer.MAX_VALUE - 2){
break;
}
i++;
s = driver.getPageSource();
driver.switchTo().window(tabs.get(1)); //switches to new tab
String songs = null;
try{
driver.get("https://music.163.com/user/home?id=" + userId);
driver.switchTo().frame("contentFrame");
songs = group(driver.getPageSource(), "累積聽歌(\\d+)首", 1);
} catch (TimeoutException e){
logger.error(e.getMessage(), e);
}
driver.switchTo().window(tabs.get(0));
Matcher matcher = pattern.matcher(s);
Matcher songNameMatcher = songName.matcher(s);
if (matcher.find() && songNameMatcher.find()){
String songNameStr = songNameMatcher.group(1);
if (!songNameStr.equals(lastSongName)){
count++;
lastSongName = songNameStr;
}
logger.info(songNameStr + "-" + matcher.group(1) + matcher.group(2) + "---當前播放第" + count + "首歌曲, 累計聽歌:" + songs);
} else {
logger.info("解析歌曲播放記錄或歌曲名失敗");
}
Thread.sleep(1000 * 30);
}
}
public static String group(String str, String regex, int index) {
Pattern pattern = Pattern.compile(regex);
Matcher matcher = pattern.matcher(str);
return matcher.find() ? matcher.group(index) : "";
}
}
複製程式碼執行注意事項
- 修改自己相關chromedriver路徑配置
- 登入自己的web端網易雲音樂：music.163.com/
- 複製自己登入成功的原始cookies，至程式碼中的RAW_COOKIES欄位
- 切換歌單，如果預設的歌單播放完成後，可以搜尋一些沒有播放過的歌單，類似
https://music.163.com/#/playlist?id=22336453的url，提取出id，直接替換程式碼中的startId欄位。
總結
- 大家可能會有疑問，我想把這個任務放到自己的伺服器上直接後臺執行。這就是伺服器上搭建selenium執行環境的問題了，可以參考我上一篇文章。阿里雲和騰訊雲最低配的伺服器都能夠跑起來的。
- 另外這裡為啥採用selenium的方式，有沒有其他更簡單的方式，直接通過簡單的Http請求的方式達到刷的效果。我個人嘗試過像通過純http 請求的方式，找到增加個人累計聽歌數的請求，由於網銀雲的請求都做了加密，最終沒有找到。所以就用selenium的方式來代替。
最後
- 完整工程程式碼見:github.com/wycm/crawle…
版權宣告 作者：wycm
出處：juejin.im/post/5c9ac9… 您的支援是對博主最大的鼓勵，感謝您的認真閱讀。
本文版權歸作者所有，歡迎轉載，但未經作者同意必須保留此段宣告，且在文章頁面明顯位置給出原文連線，否則保留追究法律責任的權利。