天天看點

PHP模拟登入并擷取資料

舉例:從某網站顯示行情圖表的頁面抓取資料,用到自己的網站中。

觀察:是從 http://*****.com/HQ/Get

post:兩個參數,goods,line就能傳回json資料格式。

用postman,調用接口能夠傳回此json資料。

那現在怎麼使用到自己的網站呢?

前台:主要代碼

<a href="https://s1.51cto.com/wyfs02/M00/8E/BC/wKioL1jKT4fwOuoYAADWZ2ikn_I991.png" target="_blank"></a>

後端:主要代碼

Application/Home/Controller/H*Controller.class.php中

然後highcharts圖表輸出。

===

感謝下面一篇的介紹,寫得更詳細。

參考來源:

<a href="http://www.helloweba.com/view-blog-253.html" target="_blank">http://www.helloweba.com/view-blog-253.html</a>

<a href="http://www.helloweba.com/view-blog-253.html" target="_blank"></a>

CURL 是一個功能強大的PHP庫,使用PHP的cURL庫可以簡單和有效地抓取網頁并采集内容,設定cookie完成模拟登入網頁,curl提供了豐富的函數,開發者可以從PHP手冊中擷取更多關于cURL資訊。本文以模拟登入開源中國(oschina)為例,和大家分享cURL的使用。

PHP的curl()在抓取網頁的效率方面是比較高的,而且支援多線程,而file_get_contents()效率就要稍低些,當然,使用curl時需要開啟下curl擴充。

先來看登入部分的代碼:

函數login_post()首先初始化curl_init(),然後使用curl_setopt()設定相關選項資訊,包括要送出的url位址,儲存的cookie檔案,post的資料(使用者名和密碼等資訊),是否傳回資訊等等,然後curl_exec執行curl,最後curl_close()釋放資源。注意PHP自帶的http_build_query()可以将數組轉換成相連接配接的字元串。

接下來如果登入成功後,我們要擷取登入成功後的頁面資訊。

函數get_content()中也是先初始化curl,然後設定相關選項,執行curl,釋放資源。其中我們設定CURLOPT_RETURNTRANSFER為1即自動傳回資訊,而CURLOPT_COOKIEFILE可以讀取到登入時儲存的cookie資訊,最後将頁面内容傳回。

我們的最終目的是要擷取到模拟登入後的資訊,也就是隻有正常登入成功後才能擷取的有用資訊。接下來我們以登入開源中國的移動版為例,看看如何抓取到登入成功後的資訊。

運作上述代碼後,我們會看到最終擷取到登入使用者的頭像圖檔。

1、初始化curl;

2、使用curl_setopt設定目标url,和其他選項;

3、curl_exec,執行curl;

4、執行後,關閉curl;

5、輸出資料。

     本文轉自phpervip 51CTO部落格,原文連結:http://blog.51cto.com/phpervip/1907266,如需轉載請自行聯系原作者