Python訪問小程式簡單方法程式碼例項詳解
大家都知道了嗎?全國住房公積金小程式正式上線執行啦,通過小程式可實時查詢個人住房公積金繳存、提取、貸款資訊,我們可以隨時掌握住房公積金變化情況。並且還可以同時可實現住房公積金賬戶、資金跨城市轉移 “一鍵辦”,不再需要前往櫃檯辦理,簡直不要太方便啦。
剛好最近在練習python,那我們今天就實踐一下, 使用python獲取住房公積金小程式的一些資料,這裡就寫個簡單的爬蟲demo
package htmlunit; import org.apache.http.auth.AuthScope; import org.apache.http.auth.UsernamePasswordCredentials; import org.apache.http.client.CredentialsProvider; import org.apache.http.impl.client.BasicCredentialsProvider; import com.gargoylesoftware.htmlunit.BrowserVersion; import com.gargoylesoftware.htmlunit.NicelyResynchronizingAjaxController; import com.gargoylesoftware.htmlunit.WebClient; import com.gargoylesoftware.htmlunit.html.HtmlPage; public class HtmlunitDemo { // 代理伺服器(產品官網 ) final static String proxyHost = "t.16yun.cn"; final static Integer proxyPort = 31111; // 代理驗證資訊 final static String proxyUser = "USERNAME"; final static String proxyPass = "PASSWORD"; public static void main(String[] args) { CredentialsProvider credsProvider = new BasicCredentialsProvider(); credsProvider.setCredentials( new AuthScope(proxyHost, proxyPort), new UsernamePasswordCredentials(proxyUser, proxyPass)); WebClient webClient = new WebClient(BrowserVersion.CHROME,proxyHost, proxyPort); webClient.setCredentialsProvider(credsProvider); webClient.setAjaxController(new NicelyResynchronizingAjaxController()); webClient.getOptions().setJavaScriptEnabled(true); webClient.getOptions().setThrowExceptionOnScriptError(false); webClient.getOptions().setThrowExceptionOnFailingStatusCode(false); webClient.getOptions().setActiveXNative(false); webClient.getOptions().setCssEnabled(false); HtmlPage page = null; try { page = webClient.getPage("); } catch (Exception e) { e.printStackTrace(); } finally { webClient.close(); } webClient.waitForBackgroundJavaScript(30000); String pageXml = page.asXml(); System.out.println(pageXml); } }
有關獲取到的資料以及分析結果下次分享,今天主要給大家分享下Python爬取小程式通用方法程式碼例項詳解,文中通過示例程式碼介紹的非常詳細,如果對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下呀,獲取的資料和分析結果我們下次分享,感興趣的小夥伴可以關注我一起交流學習爬蟲經驗。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31522063/viewspace-2837596/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- Python中的類、模組和包究竟是什麼?
- 程式設計師反捲指南 - 打工人也需要生活
- SAP MM 事務程式碼RWBE查詢庫存
- 程式設計師寫簡歷時的技術詞彙拼寫規範備忘錄
- UPS系統維護方法
- 解決Mac版微信因為特殊字元記憶體飆升卡死的方法
- 在建立應用程式時,將資料隱私和合規性放在首位有多重要?
- 微信小程式AR行業應用分析(家居篇)
- 這幾種Java異常處理方法,你會嗎?
- 微信小程式內判斷是否關注公眾號(JAVA)
- 為什麼說短視訊本地團購小程式是2021年普通人逆襲的絕佳機會?
- Python培訓中有哪些是必須學的運算子?
- 得物技術淺談自動化生成程式碼幾種方案的演變
- 螞蟻集團技術風險程式碼化平臺實踐(MaaS)
- iOS Swift結構體與類的方法排程
- 七牛雲的 python sdk 是如何 批量刪除資源的
- Python筆記_1語法總結
- 西瓜播放器前端程式碼
- 支付寶小程式效能分析
- 【架構設計】無狀態狀態機在程式碼中的實踐