來源:不言 發(fā)布時(shí)間:2018-09-18 15:28:36 閱讀量:804
本篇文章給大家?guī)淼膬?nèi)容是關(guān)于php如何實(shí)現(xiàn)爬取數(shù)據(jù)(附代碼),有一定的參考價(jià)值,有需要的朋友可以參考一下,希望對(duì)你有所幫助。
官方網(wǎng)站站點(diǎn):簡單、 靈活、強(qiáng)大的PHP采集工具,讓采集更簡單一點(diǎn)。
簡介:
QueryList使用jQuery選擇器來做采集,讓你告別復(fù)雜的正則表達(dá)式;QueryList具有jQuery一樣的DOM操作能力、Http網(wǎng)絡(luò)操作能力、亂碼解決能力、內(nèi)容過濾能力以及可擴(kuò)展能力;可以輕松實(shí)現(xiàn)諸如:模擬登陸、偽造瀏覽器、HTTP代理等意復(fù)雜的網(wǎng)絡(luò)請(qǐng)求;擁有豐富的插件,支持多線程采集以及使用PhantomJS采集JavaScript動(dòng)態(tài)渲染的頁面。
安裝
通過Composer安裝:
1 | composer require jaeger/querylist |
使用教程:
直接上代碼:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 | <?php include './vendor/autoload.php' ; // 使用composer安裝后引入目錄 use QL\QueryList; // 使用插件 $html = file_get_contents ( 'https://www.biqudu.com/14_14778/' ); // 手動(dòng)獲取頁面 $data = QueryList::html( $html ); // 得到頁面內(nèi)容 $data = QueryList::setHtml( 'https://www.biqudu.com/14_14778/' ); // 等同于上面的html() $data ->rules([ // 采集所有a標(biāo)簽的href屬性 'link' => [ 'a' , 'href' ], // 采集所有a標(biāo)簽的文本內(nèi)容 'text' => [ 'a' , 'text' ] ]); // 此處$data = 上面已經(jīng)獲取到網(wǎng)頁內(nèi)容之后的對(duì)象 // 設(shè)置采集規(guī)則 替代了傳統(tǒng)正則 $data ->query(); // 此處$data = 上面已經(jīng)獲取到網(wǎng)頁內(nèi)容之后的對(duì)象 // query 執(zhí)行操作 $data ->getData(); // 此處$data = 上面已經(jīng)獲取到網(wǎng)頁內(nèi)容之后的對(duì)象 // 得到數(shù)據(jù)結(jié)果 $data ->all(); // 此處$data = 上面已經(jīng)獲取到網(wǎng)頁內(nèi)容之后的對(duì)象 // 將數(shù)據(jù)轉(zhuǎn)換成二維數(shù)組 print_r( $data ->all()); // 打印結(jié)果 |
上面的基本使用方法就是這樣了 這樣我們已經(jīng)可以抓取到一定的數(shù)據(jù)了
相關(guān)推薦:
php爬取天貓和淘寶商品數(shù)據(jù)步驟詳解(附代碼)
PHP代碼實(shí)現(xiàn)爬蟲記錄超管用,php代碼爬蟲
以上就是php如何實(shí)現(xiàn)爬取數(shù)據(jù)(附代碼)的詳細(xì)內(nèi)容,更多請(qǐng)關(guān)注php中文網(wǎng)其它相關(guān)文章!
在線
客服
服務(wù)時(shí)間:周一至周日 08:30-18:00
選擇下列產(chǎn)品馬上在線溝通:
客服
熱線
7*24小時(shí)客服服務(wù)熱線
關(guān)注
微信
關(guān)注官方微信