php解析html类库simple_html_dom

下载地址:https://github.com/samacs/simple_html_dom

一直以来使用php解析html文档树都是一个难题。Simple HTML DOM parser 帮我们很好地解决了这个问题。可以通过这个php类来解析html文档,对其中的html元素进行操作 (PHP5+以上版本)。

解析器不仅仅只是帮助我们验证html文档;更能解析不符合W3C标准的html文档。它使用了类似jQuery的元素选择器,通过元素的id,class,tag等等来查找定位;同时还提供添加、删除、修改文档树的功能。当然,这样一款强大的html Dom解析器也不是尽善尽美;在使用的过程中需要十分小心内存消耗的情况。不过,不要担心;本文中,笔者在最后会为各位介绍如何避免消耗过多的内存。

开始使用

上传类文件以后,有三种方式调用这个类:

从url中加载html文档

从字符串中加载html文档

从文件中加载html文档

// 新建一个Dom实例
$html = new simple_html_dom();

// 从url中加载
$html->load_file(‘http://www.cnphp.info/php-simple-html-dom-parser-intro.html‘);

// 从字符串中加载
$html->load(‘<html><body>从字符串中加载html文档演示</body></html>‘);

//从文件中加载
$html->load_file(‘path/file/test.html‘);

如果从字符串加载html文档,需要先从网络上下载。建议使用cURL来抓取html文档并加载DOM中。

查找html元素

可以使用find函数来查找html文档中的元素。返回的结果是一个包含了对象的数组。我们使用HTML DOM解析类中的函数来访问这些对象,下面给出几个示例:

//查找html文档中的超链接元素
$a = $html->find(‘a‘);

//查找文档中第(N)个超链接,如果没有找到则返回空数组.
$a = $html->find(‘a‘, 0);

// 查找id为main的div元素
$main = $html->find(‘div[id=main]‘,0);

// 查找所有包含有id属性的div元素
$divs = $html->find(‘div[id]‘);

// 查找所有包含有id属性的元素
$divs = $html->find(‘[id]‘);

还可以使用类似jQuery的选择器来查找定位元素:

// 查找id=‘#container‘的元素
$ret = $html->find(‘#container‘);

// 找到所有class=foo的元素
$ret = $html->find(‘.foo‘);

// 查找多个html标签
$ret = $html->find(‘a, img‘);

// 还可以这样用
$ret = $html->find(‘a[title], img[title]‘);

解析器支持对子元素的查找

// 查找 ul列表中所有的li项
$ret = $html->find(‘ul li‘);

//查找 ul 列表指定class=selected的li项
$ret = $html->find(‘ul li.selected‘);

如果你觉得这样用起来麻烦,使用内置函数可以轻松定位元素的父元素、子元素与相邻元素

// 返回父元素
$e->parent;

// 返回子元素数组
$e->children;

// 通过索引号返回指定子元素
$e->children(0);

// 返回第一个资源速
$e->first_child ();

// 返回最后一个子元素
$e->last _child ();

// 返回上一个相邻元素
$e->prev_sibling ();

//返回下一个相邻元素
$e->next_sibling ();

元素属性操作

使用简单的正则表达式来操作属性选择器。

[attribute] – 选择包含某属性的html元素

[attribute=value] – 选择所有指定值属性的html元素

[attribute!=value]- 选择所有非指定值属性的html元素

[attribute^=value] -选择所有指定值开头属性的html元素

[attribute$=value] 选择所有指定值结尾属性的html元素

[attribute*=value] -选择所有包含指定值属性的html元素

在解析器中调用元素属性

在DOM中元素属性也是对象:

// 本例中将$a的锚链接值赋给$link变量
$link = $a->href;

或者:

$link = $html->find(‘a‘,0)->href;

每个对象都有4个基本对象属性:

tag – 返回html标签名

innertext – 返回innerHTML

outertext – 返回outerHTML

plaintext – 返回html标签中的文本

在解析器中编辑元素

编辑元素属性的用法和调用它们是类似的:

//给$a的锚链接赋新值
$a->href = ‘http://www.cnphp.info‘;

// 删除锚链接
$a->href = null;

// 检测是否存在锚链接
if(isset($a->href)) {
//代码
}

解析器中没有专门的方法来添加、删除元素,不过可以变通一下使用:

// 封装元素
$e->outertext = ‘<div class="wrap">‘ . $e->outertext . ‘<div>‘;

// 删除元素
$e->outertext = ‘‘;

// 添加元素
$e->outertext = $e->outertext . ‘<div>foo<div>‘;

// 插入元素
$e->outertext = ‘<div>foo<div>‘ . $e->outertext;

保存修改后的html DOM文档也非常简单:

$doc = $html;

// 输出
echo $doc;

如何避免解析器消耗过多内存

在本文的开篇中,笔者就提到了Simple HTML DOM解析器消耗内存过多的问题。如果php脚本占用内存太多,会导致网站停止响应等一系列严重的问题。解决的方法也很简单,在解析器加载html文档并使用完成后,记得清理掉这个对象就可以了。当然,也不要把问题看得太严重了。如果只是加载了2、3个文档,清理或不清理是没有多大区别的。当你加载了5个10个甚至更多的文档的时候,用完一个就清理一下内存绝对是对自己负责啦^_^

$html->clear();
时间: 2024-10-24 16:16:15

php解析html类库simple_html_dom的相关文章

我最优惠网系列(1)——HTML 解析类库HtmlAgilityPack

关于我最优惠 首先“我最优惠”是一个网站(www.wozuiyouhui.com),是一个汇总各大电商优惠商品的网站. 我是多年的网购重症用户,还记得第一次网购是在大二,花了50块钱在淘宝上买了一对所谓925纯银对戒,一直戴到两个月前才被婚戒替换,纹理早已被磨平.目前它被我用钻戒级的包装放在抽屉的最里面,代表着我最青春最活力时光的逝去. 作为资深网购er,购物前会查看很多导购网站,比如什么值得买,比如惠喵(原来叫留住你).但是这类导购网站实在太多了,并且更新速度也很快,所以早期我做了个抓取这些网

iOS GET、POST数据解析

在实际开发中,JSON数据解析更简单易行,一般均使用json数据解析,因此,程序猿们请务必和后台搞好关系,让他给你json数据.    XML解析: ios SDK提供了NSXMLParser和libxml2两个类库,另外还有很多第三方类库可选:TBXML.TouchXML.KissXML.TinyXML和GDataXML. 解析XML通常有两种方式:DOM和SAX DOM解析XML时,读入整个XML文档并构建一个驻留内存的树结构(节点树),遍历树结构可以检索任意XML节点,读取它的属性和值.

iOS-数据解析XML解析的多种平台介绍

在iPhone开发中,XML的解析有很多选择,iOS SDK提供了NSXMLParser和libxml2两个类库,另外还有很多第三方类库可选,例如TBXML.TouchXML.KissXML.TinyXML和GDataXML.问题是应该选择哪一个呢? 解析 XML 通常有两种方式,DOM 和 SAX: DOM解析XML时,读入整个XML文档并构建一个驻留内存的树结构(节点树),通过遍历树结构可以检索任意XML节点,读取它的属性和值.而且通常情况下,可以借助XPath,直接查询XML节点. SAX

2、ZK框架安装、相关类库、web及zk配置

1.先去ZK官网注册一个账号 2.在MyEclipse菜单栏中Help----Eclipse Marketplace中搜索ZK Studio,点击install安装即可       3.相关类库 bsh.jar:BeanShell Java代码解析器 commons-el.jar:Apache的表达式语言(EL)解析器类库 commons-fileupload.jar:Apache的文件上传类库 commons-io.jar:Apache的I/O流处理类库(和文件上传包一起使用) dojoz.j

.net Json和Xml解析

引言    Json和Xml是现在跨平台传输数据的主流格式,关于它们的解析,网上资料很多,我稍作整理,写成一个小demo,方便日后使用. JSON解析     能进行json解析的类库有很多,例如JavaScriptSerializer,DataContractJsonSerializer和开源类库Newtonsoft.Json.这里使用Newtonsoft.Json作个演示. 1.定义示例的类 public class Data { public string Name { get; set;

Android 开源项目源码解析(第二期)

Android 开源项目源码解析(第二期) 阅读目录 android-Ultra-Pull-To-Refresh 源码解析 DynamicLoadApk 源码解析 NineOldAnimations 源码解析 SlidingMenu 源码解析 Cling 源码解析 BaseAdapterHelper 源码分析 Side Menu.Android 源码解析 DiscreteSeekBar 源码解析 CalendarListView 源码解析 PagerSlidingTabStrip 源码解析 公共

在.net中运用HTMLParser解析网页的原理和方法

本文介绍了.net 版的一个HTMLParser网页解析开源类库(Winista.HTMLParser)的功能特性.工作原理和使用方法.对于使用.net进行Web信息提取的开发人员进行了一次HTMLParser的初步讲解.应用实例将会在日后的文中介绍,敬请关注. 一.背景知识 HTMLParser原本是一个在sourceforge上的一个Java开源项目,使用这个Java类库可以用来线性地或嵌套地解析HTML文本.他的功能强大和开源等特性吸引了大量Web信息提取的工作者.然而,许多.net开发者

【PHP爬虫】curl+simple_html_dom 抓取百度最新消息新闻标题,来源,URL

<title>新闻转载统计</title> <script> function submit(){ wd=document.getElementById('name').value; page=document.getElementById('page').value; source=document.getElementById('source').value; window.location.href='getbaidu.php?wd='+wd+'&page

C#解析JSON实例

本文以实例形式讲述了C#解析JSON的方法,C#封装了对XML和JSON解析的类库,使用相当方便!具体用法如下: 1.主要用到的类: 主要用到了JavaScriptSerializer类,该类在System.Web.Script.Serialization命名空间(在System.Web.Extensions.dll 中),需要把.NET版本修改为 .NET Framework 4(默认是.NET Framework 4 Client Profile)才能在Add Reference的 .NET