详解JSOUP的select选择器语法

详解JSOUP的select选择器语法

本文参考:JSOUP中文文档

问题

你想使用类似于CSS或jQuery的语法来查找和操作元素。

方法

可以使用Element.select(String selector)Elements.select(String selector) 方法实现:

//从本地加载html文件
File input = new File("/tmp/input.html");
Document doc = Jsoup.parse(input, "UTF-8", "http://example.com/");//编码以及HTML页面URL前戳

Elements links = doc.select("a[href]"); //带有href属性的a元素
Elements pngs = doc.select("img[src$=.png]"); //扩展名为.png的图片

Element masthead = doc.select("div.masthead").first(); //class等于masthead的div标签

Elements resultLinks = doc.select("h3.r > a"); //在h3元素之后的a元素

说明

jsoup elements对象支持类似于CSS (或jquery)的选择器语法,来实现非常强大和灵活的查找功能。.

这个select 方法在Document, Element,或Elements对象中都可以使用。且是上下文相关的,因此可实现指定元素的过滤,或者链式选择访问。

Select方法将返回一个Elements集合,并提供一组方法来抽取和处理结果。

Selector选择器概述

  • tagname: 通过标签查找元素,比如:a
  • ns|tag: 通过标签在命名空间查找元素,比如:可以用 fb|name 语法来查找 <fb:name> 元素
  • #id: 通过ID查找元素,比如:#logo
  • .class: 通过class名称查找元素,比如:.masthead
  • [attribute]: 利用属性查找元素,比如:[href]
  • [^attr]: 利用属性名前缀来查找元素,比如:可以用[^data-] 来查找带有HTML5 Dataset属性的元素
  • [attr=value]: 利用属性值来查找元素,比如:[width=500]
  • [attr^=value], [attr$=value], [attr*=value]: 利用匹配属性值开头、结尾或包含属性值来查找元素,比如:[href*=/path/]
  • [attr~=regex]: 利用属性值匹配正则表达式来查找元素,比如: img[src~=(?i)\.(png|jpe?g)]
  • *: 这个符号将匹配所有元素

Selector选择器组合使用

  • el#id: 元素+ID,比如: div#logo
  • el.class: 元素+class,比如: div.masthead
  • el[attr]: 元素+class,比如: a[href]
  • 任意组合,比如:a[href].highlight
  • ancestor child: 查找某个元素下子元素,比如:可以用.body p 查找在"body"元素下的所有 p元素
  • parent > child: 查找某个父元素下的直接子元素,比如:可以用div.content > p 查找 p 元素,也可以用body > * 查找body标签下所有直接子元素
  • siblingA + siblingB: 查找在A元素之前第一个同级元素B,比如:div.head + div
  • siblingA ~ siblingX: 查找A元素之前的同级X元素,比如:h1 ~ p
  • el, el, el:多个选择器组合,查找匹配任一选择器的唯一元素,例如:div.masthead, div.logo

伪选择器selectors

  • :lt(n): 查找哪些元素的同级索引值(它的位置在DOM树中是相对于它的父节点)小于n,比如:td:lt(3) 表示小于三列的元素
  • :gt(n):查找哪些元素的同级索引值大于n``,比如div p:gt(2)表示哪些div中有包含2个以上的p元素
  • :eq(n): 查找哪些元素的同级索引值与n相等,比如:form input:eq(1)表示包含一个input标签的Form元素
  • :has(seletor): 查找匹配选择器包含元素的元素,比如:div:has(p)表示哪些div包含了p元素
  • :not(selector): 查找与选择器不匹配的元素,比如: div:not(.logo) 表示不包含 class=logo 元素的所有 div 列表
  • :contains(text): 查找包含给定文本的元素,搜索不区分大不写,比如: p:contains(jsoup)
  • :containsOwn(text): 查找直接包含给定文本的元素
  • :matches(regex): 查找哪些元素的文本匹配指定的正则表达式,比如:div:matches((?i)login)
  • :matchesOwn(regex): 查找自身包含文本匹配指定正则表达式的元素
  • 注意:上述伪选择器索引是从0开始的,也就是说第一个元素索引值为0,第二个元素index为1等

可以查看Selector API参考来了解更详细的内容

如何选择多个class值的元素

示例:<ul class="ul-ss-3 jb-xx-ks">

方法:

Elements select = document.select(".ul-ss-3").select(".jb-xx-bw");

或者

Elements select = document.getElementsByClass("ul-ss-3 jb-xx-bw");

Selector API文档

官方API原文:Selector (jsoup Java HTML Parser 1.11.3 API)

Pattern Matches Example
* 任何元素 *
tag 具有给定标签名的元素 div
*|E 类型E在任何名称空间中的元素。 *|name finds <fb:name>elements
ns|E 类型E在名称空间中的元素。 fb|name finds <fb:name>elements
#id 具有“ID”属性ID的元素 div#wrap, #logo
.class 类名为“class”的元素 div.left, .result
[attr] 属性为“attr”(任何值)的元素 a[href], [title]
[^attrPrefix] 属性名称以“attrPrefix”开头的元素。使用HTML5数据集查找元素 [^data-], div[^data-]
[attr=val] 元素的属性为“attr”,值为“val” img[width=500], a[rel=nofollow]
[attr="val"] 元素的属性为“attr”,值为“val” span[hello="Cleveland"][goodbye="Columbus"], a[rel="nofollow"]
[attr^=valPrefix] 元素的属性为“attr”,值以“valPrefix”开头 a[href^=http:]
[attr$=valSuffix] 元素的属性为“attr”,值以“valfix”结尾 img[src$=.png]
[attr*=valContaining] 元素的属性为“attr”,包含属性值“valcontains” a[href*=/search/]
[attr~=*regex*] 元素具有名为“attr”的属性,值与正则表达式匹配 img[src~=(?i)\\.(png|jpe?g)]
以上可以按任何顺序合并。 div.header[title]

关系选择器Combinators

Pattern Matches Example
E F 由E元素衍生而来的F元素 div a, .logo h1
E > F F是E的直接子结点 ol > li
E + F 一个F元素,紧接在E的前面 li + li, div.head + div
E ~ F 在F元素前面加上E h1 ~ p
E, F, G 所有匹配元素E F G a[href], div, h3

Pseudo selectors

Pattern Matches Example
:lt(*n*) 其同胞指数小于n的元素 td:lt(3) 找到每一行的前3个单元格
:gt(*n*) 其同胞指数大于n的元素 td:gt(1) 在跳过前两个单元后查找单元格
:eq(*n*) 其同胞指数等于n的元素 td:eq(0) 找到每一行的第一个单元格
:has(*selector*) 包含至少一个与选择器匹配的元素的元素 div:has(p) 查找包含p元素的div
:not(*selector*) 不匹配选择器的元素。参见Elements.not(String) div:not(.logo) 查找所有没有“logo”类的divs。 div:not(:has(div)) 查找不包含div的div。
:contains(*text*) 包含指定文本的元素。搜索是大小写不敏感的。文本可以出现在找到的元素中,也可以出现在它的任何后代元素中。 p:contains(jsoup) 查找包含“jsoup”文本的p元素。
:matches(*regex*) 其文本与指定正则表达式匹配的元素。文本可以出现在找到的元素中,也可以出现在它的任何后代元素中。 td:matches(\\d+) 查找包含数字的表单元格。 div:matches((?i)login) 找到包含文本的div,不敏感的情况。
:containsOwn(*text*) 直接包含指定文本的元素。搜索是大小写不敏感的。文本必须出现在找到的元素中,而不是它的任何后代元素中。 p:containsOwn(jsoup) 查找具有自己的文本“jsoup”的p元素。
:matchesOwn(*regex*) 元素,其自身的文本与指定的正则表达式匹配。文本必须出现在找到的元素中,而不是它的任何后代元素中。 td:matchesOwn(\\d+) 查找直接包含数字的表单元格。 div:matchesOwn((?i)login) 找到包含文本的div,不敏感的情况。
:containsData(*data*) 包含指定数据的元素。scriptstyle的内容元素,和comment节点(等)被认为是数据节点,而不是文本节点。搜索是大小写不敏感的。数据可能出现在已找到的元素中,也可能出现在其任何子代中。 script:contains(jsoup) 查找包含数据“jsoup”的脚本元素。
上述可按任何顺序与其他选择器组合 .light:contains(name):eq(0)
:matchText 将文本节点视为元素,因此允许您匹配并选择文本节点。注意,使用此选择器将修改DOM,因此您可能希望在使用之前克隆文档。 p:matchText:firstChild 与输入 <p>One<br />Two</p> 将返回一个 PseudoTextElement 与文本 "One".

Structural pseudo selectors

Pattern Matches Example
:root 元素是文档的根。在HTML中,这是 html 元素 :root
:nth-child(*a*n+*b*) 在文档树中有*a*n+*b*-1兄妹的元素,对于任何正整数或零值的n,并具有父元素。对于a和b大于零的值,这有效地将元素的子元素划分为元素的组(最后一个组取其余的部分),并选择每个组的第bth元素。例如,这允许选择器处理表中的其他行,并可以用于在一个4周期中替换段落文本的颜色。 a和b的值必须是整数(正数、负数或零)。元素的第一个子元素的索引是1。除此之外, :nth-child() 可以采用奇数和偶数作为参数。 奇数与2n+1的意义相同,偶数与2n的意义相同。 tr:nth-child(2n+1) 查找表中的每一行。 :nth-child(10n-1) 第9,第19,第29,等等,元素。 li:nth-child(5) the 5h li
:nth-last-child(*a*n+*b*) 在文档树中后面有*a*n+*b*-1兄弟元素。否则像:nth-child() tr:nth-last-child(-n+2) 表的最后两行
:nth-of-type(*a*n+*b*) 伪类表示法表示一个元素,该元素具有*a*n+*b*-1个兄弟元素,在文档树前具有相同的扩展元素名,对于任何0或正整数值为n,并且具有父元素 img:nth-of-type(2n+1)
:nth-last-of-type(*a*n+*b*) 伪类表示法表示一个元素,该元素具有*a*n+*b*-1个兄弟元素,在文档树中,对于任何0或正整数值为n的元素,该元素具有一个父元素 img:nth-last-of-type(2n+1)
:first-child 元素是其他元素的第一个子元素。 div > p:first-child
:last-child 其他元素的最后一个子元素。 ol > li:last-child
:first-of-type 在父元素的子元素列表中是其类型的第一个兄弟元素 dl dt:first-of-type
:last-of-type 元素,它是其父元素的子元素列表中类型的最后一个兄弟元素。 tr > td:last-of-type
:only-child 具有父元素且父元素没有其他元素子元素的元素
:only-of-type 具有父元素的元素,其父元素没有具有相同展开元素名称的其他元素子元素
:empty 没有孩子的元素。

原文地址:https://www.cnblogs.com/smiletianya/p/9373943.html

时间: 2024-11-13 09:35:42

详解JSOUP的select选择器语法的相关文章

C# LINQ 详解 From Where Select Group Into OrderBy Let Join

目录 1. 概述 2. from子句 3. where子句 4. select子句 5. group子句 6. into子句 7. 排序子句 8. let子句 9. join子句 10. 小结 1. 概述 LINQ的全称是Language Integrated Query,中文译成"语言集成查询".LINQ作为一种查询技术,首先要解决数据源的封装,大致使用了三大组件来实现这个封装,分别是LINQ to Object.LINQ to ADO.NET.LINQ to XML.它们和.NET

less可以做什么?less详解!(less嵌套选择器实现纯CSS二级导航)

前端技术众多,作为一名前端工程师,我们每接触新技术首先要懂得此技术的优势和劣势,这是最基本的.往深入了说还需要懂得技术的应用场景,与之配合的技术等,方便为以后架构做准备.而less作为一门CSS预处理语言,拥有函数式变成的特点,主要优点就是高效.主要适用于包含众多CSS的大型项目.主要体现在:项目公共样式的定义,如页面主色.固定数值(宽.高.时间等).公用样式模板.封装省略浏览器兼容前缀的函数等. 1.less的两种使用方式 1.1 直接调用需要引入less.js,和less样式文件,需要注意的

CSS3 基础(1)——选择器详解

CSS3选择器详解 一. 属性选择器 在CSS3中,追加了三个属性选择器分别为:[att*=val].[att^=val]和[att$=val],使得属性选择器有了通配符的概念. 选择器 示例 描述 [attribute^=value] [src^="https"] 选择每一个src属性的值以"https"开头的元素 [attribute$=value] [src$=".pdf"] 选择每一个src属性的值以".pdf"结尾的

Java 里的异常(Exception)详解

作为一位初学者, 本屌也没有能力对异常谈得很深入.   只不过Java里关于Exception的东西实在是很多. 所以这篇文章很长就是了.. 一, 什么是java里的异常 由于java是c\c++ 发展而来的,  首先我们先看看c语言里的错误. 1.1 c语言里的错误 我们实现1个程序的过程包括,  代码编写, 编译代码成为程序,  执行程序. . 其中大部分常见的语法错误都会被编译代码这样部过滤掉.   但是即使通过了编译. 执行程序这一步可能还是会有错误. 原因很多, 例如常见的除数为0,

06 nginx Location详解之精准匹配

一:Location详解之精准匹配 location 语法 location 有”定位”的意思, 根据Uri来进行不同的定位. 在虚拟主机的配置中,是必不可少的,location可以把网站的不同部分,定位到不同的处理方式上. 比如, 碰到.php, 如何调用PHP解释器?  --这时就需要location location 的语法 location [=|~|~*|^~] patt { } 中括号可以不写任何参数,此时称为一般匹配 也可以写参数 因此,大类型可以分为3种 location = p

linux下iptables命令的应用与详解

一.iptables的规则表和链. 表(tables)提供特定的功能,iptables内置了4个表,即filter表.nat表.mangle表和raw表,分别用于实现包过滤,网络地址转换.包重构(修改)和数据跟踪处理.   链(chains)是数据包传播的路径,每一条链其实就是众多规则中的一个检查清单,每一条链中可以有一 条或数条规则.当一个数据包到达一个链时,iptables就会从链中第一条规则开始检查,看该数据包是否满足规则所定义的条件.如果满足,系统就会根据 该条规则所定义的方法处理该数据

java爬取网页内容 简单例子(2)——附jsoup的select用法详解

http://www.cnblogs.com/xiaoMzjm/p/3899366.html [背景] 在上一篇博文java爬取网页内容 简单例子(1)——使用正则表达式 里面,介绍了如何使用正则表达式去解析网页的内容,虽然该正则表达式比较通用,但繁琐,代码量多,现实中想要想出一条简单的正则表达式 对于没有很好正则表达式基础的人——比如说我T_T——是一件蛮困难的事.这一篇,我们改用jsoup,一个强大的解析html工具,去解析html,你会发现,一切都变得很容易. [准备工作] 下载:jsou

jQuery选择器代码详解(二)——select方法

原创文章,转载请注明出处,多谢! /* * @param selector 已去掉头尾空白的选择器字符串 * @param context 执行匹配的最初的上下文(即DOM元素集合).若context没有赋值,则取document. * @param results 已匹配出的部分最终结果.若results没有赋值,则赋予空数组. * @param seed 初始集合 */ function select(selector, context, results, seed) { var i, to

JSoup 用法详解

清单 1 // 直接从字符串中输入 HTML 文档 String html = "<html><head><title> 开源中国社区 </title></head>" + "<body><p> 这里是 jsoup 项目的相关文章 </p></body></html>"; Document doc = Jsoup.parse(html); // 从