《PHP學(xué)習(xí):在laravel中使用Symfony的Crawler組件分析HTML》要點:
本文介紹了PHP學(xué)習(xí):在laravel中使用Symfony的Crawler組件分析HTML,希望對您有用。如果有疑問,可以聯(lián)系我們。
Crawler全名是DomCrawler,是Symfony框架的組件.令人發(fā)指的是DomCrawler的沒有中文文檔,Symfony也沒有翻譯該部分,所以使用DomCrawler開發(fā)只能一點一點摸索,現(xiàn)將使用過程中的經(jīng)驗總結(jié).PHP教程
首先是安裝PHP教程
composer require symfony/dom-crawler composer require symfony/css-selector
css-seelctor 是 css選擇器,用css選擇節(jié)點時一些函數(shù)會用到PHP教程
手冊里面使用的例子是PHP教程
use Symfony\Component\DomCrawler\Crawler; $html = <<<‘HTML‘ Hello World! Hello Crawler! HTML; $crawler = new Crawler($html); foreach ($crawler as $domElement) { var_dump($domElement->nodeName); }
打印的結(jié)果是PHP教程
string ‘html‘ (length=4)
因為這段html代碼的nodeName就是html,英語不好,開始使用的時候還以為程序錯了...PHP教程
實際使用過程,如果new Crawler($html)會出現(xiàn)亂碼問題,應(yīng)該是與頁面編碼有關(guān),所以可以采用下面的方式,先初始化crawler,然后添加nodePHP教程
$crawler = new Crawler(); $crawler->addHtmlContent($html);
addHtmlContent的第二個參數(shù)是charset,默認是utf-8.PHP教程
其他例子可以參考官方文檔,http://symfony.com/doc/current/components/dom_crawler.htmlPHP教程
記錄一下工作中一點點試出來的用法PHP教程
filterXPath(string $xpath) 方法,按照手冊上的說法,該方法的參數(shù)是$xpath,經(jīng)常用的是p,div等塊.PHP教程
echo $crawler->filterXPath(‘//body/p‘)->text(); echo $crawler->filterXPath(‘//body/p‘)->last()->text();
輸出是第一個和下一個p標(biāo)簽塊的文本PHP教程
var_dump($crawler->filterXPath(‘//body‘)->html());
輸出body內(nèi)的htmlPHP教程
foreach ($crawler->filterXPath(‘//body/p‘) as $i => $node) { $c = new Crawler($node); echo $c->filter(‘p‘)->text(); }
filterXPath獲得的是DOMElement塊的數(shù)組,每個DOMElement塊可以使用新的crawler對象繼續(xù)解析PHP教程
$nodeValues = $crawler->filterXPath(‘//body/p‘)->each(function (Crawler $node, $i) { return $node->text(); });
crawler提供了each循環(huán),使用閉包函數(shù)簡化代碼,不過注意的是,這種寫法$nodeValues得到的是數(shù)組,需要進一步處理.PHP教程
其他用法PHP教程
echo $crawler->filterXPath(‘//body/p‘)->attr(‘class‘);
可以獲得第一個p標(biāo)簽對應(yīng)class屬性的值“message”PHP教程
$crawler->filterXPath(‘//div[@class="樣式"]‘)->filter(‘a(chǎn)‘)->attr(‘href‘); $crawler->filterXPath(‘//div[@class="樣式"]‘)->filter(‘a(chǎn)>img‘)->extract(array(‘a(chǎn)lt‘, ‘href‘))
以上是獲得標(biāo)簽屬性的一些方法PHP教程
filter和filterXPath不同,手冊上寫的是css選擇器,不太明白,我理解是div這種XPath節(jié)點包含的元素,具體情況還需要在實際開發(fā)中去嘗試.PHP教程
總的來說感覺DomCrawler要比simple html dom好用一些,可能是我用的比較淺顯.PHP教程
上述只是Crawler的基本功能,更過用法請查閱symfony手冊關(guān)于Crawler部分的函數(shù)PHP教程
http://api.symfony.com/3.2/Symfony/Component/DomCrawler/Crawler.htmlPHP教程
Crawler主要問題還是示例太少,函數(shù)手冊里面沒有使用實例,只能在實際使用中去摸索....PHP教程
symfony關(guān)于DomCrawler的文檔,里面有少數(shù)例子PHP教程
http://symfony.com/doc/current/components/dom_crawler.htmlPHP教程
以上所述是小編給大家介紹的在laravel中使用Symfony的Crawler組件分析HTML,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的.在此也非常感謝大家對維易PHP網(wǎng)站的支持!PHP教程
轉(zhuǎn)載請注明本頁網(wǎng)址:
http://www.fzlkiss.com/jiaocheng/606.html