社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  Python

如何在xpath命令中使用python scrapy进行web抓取

Gianluca • 6 年前 • 1727 次点击  

如何在Python(SoRy)中定义XPath命令以接受代码中所指示的位置的任何数字。我已经试过 * any() 在那个位置。

table = response.xpath('//*[@id="olnof_**here I want to accept any value**_altlinesodd"]/tr[1]/TD[1]/A[1]')
Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/43794
文章 [ 3 ]  |  最新文章 6 年前
Andersson
Reply   •   1 楼
Andersson    7 年前

你可以试试下面的变通方法:

'//*[starts-with(@id, "olnof_") and contains(@id, "_altlinesodd")]/tr[1]/TD[1]/A[1]'

ends-with(@id, "_altlinesodd") 在这种情况下,套房更好,但scrapy不支持 ends-with 语法,所以 contains 代替使用

ThunderMind
Reply   •   2 楼
ThunderMind    7 年前

现在假设你有任何类似的,所以你可以试试这个。 x_path = '//*[@id="olnof_{}_altlinesodd"]/tr[1]/TD[1]/A[1]' x_path.format("put your any here, may b from rand function or extracting the value from somewhere else.") 然后, table = response.xpath(x_path) 这就行了。

stranac
Reply   •   3 楼
stranac    7 年前

你可以这样做 regular expressions :

table = response.xpath('//*[re:test(@id, "^olnof_.+_altlinesodd$")]/tr[1]/TD[1]/A[1]')