scrapy 2.3 xpath表达式中的变量

2021-06-03 14:41 更新

xpath允许您引用xpath表达式中的变量,使用 ​$somevariable​ 语法。这与SQL世界中的参数化查询或准备好的语句有点类似,在SQL世界中,将查询中的某些参数替换为诸如 ​?​ ,然后用查询传递的值替换。

下面是一个基于元素“id”属性值匹配元素的示例,而不必对其进行硬编码(如前所示):

>>> # `$val` used in the expression, a `val` argument needs to be passed
>>> response.xpath('//div[@id=$val]/a/text()', val='images').get()
'Name: My image 1 '

下面是另一个示例,用于查找 ​<div>​ 包含五个的标签 ​<a>​ 孩子们(在这里我们传递价值 ​5​ 整数形式):

>>> response.xpath('//div[count(a)=$cnt]/@id', cnt=5).get()
'images'

调用时,所有变量引用都必须具有绑定值 ​.xpath()​ (否则你会得到 ​ValueError: XPath error:​ 例外)。这是通过根据需要传递尽可能多的命名参数来实现的。

parsel _为scrappy选择器供电的库提供了更多的细节和示例 XPath variables .

以上内容是否对您有帮助:
在线笔记
App下载
App下载

扫描二维码

下载编程狮App

公众号
微信公众号

编程狮公众号