代码之家 › 专栏 › 技术社区 › Deba

无法刮取横幅图像

scrapy web-scraping python

Deba · 技术社区 · 6 年前

我正在尝试从以下链接中删除横幅图像(较大图像)的链接: https://allevents.in/pune/filmmaking-workshop/20001033616713 .为此,我尝试使用这两个命令,这两个命令都返回一个空列表。

response.xpath('//img[@class="event-banner-image"]/@src').extract()

response.xpath('//*[@class="event-banner-image"]/@src').extract()

我正在将Scrapy与Python结合使用。

1 回复 | 直到 6 年前

Developer Guy Adam 6 年前

实际上,您在页面源中查找的图像有多个源。

只需单击 ctrl键 + U (在某些浏览器上可能有所不同)以“查看页面源”并搜索url字符串。

我发现你可以在meta标签下面看到图像:

$ scrapy shell https://allevents.in/pune/filmmaking-workshop/20001033616713
In : response.xpath('//meta[@property="og:image"]/@content').extract()
Out: ['https://cdn-az.allevents.in/banners/2d76d5624f4e4b83155a51d60b3872fb-rimg-w525-h350-gmir.jpg']

推荐文章

Omega500 · AttributeError:ResultSet对象没有属性“find\u all”

2 年前

Christina Norwood · 我需要什么Python技术来获取二进制边距数据?

2 年前

mexicanRmy · Selenium Select不处理下拉元素

2 年前

yash agarwal · Python Selenium-如何基于span标记内的文本提取元素?

2 年前

Amar · 漂亮汤错误:“NoneType”对象没有属性“find\u all”

2 年前

Fadi Ft Ftena · 基于类名的Web抓取

2 年前

Amen Aziz · 熊猫中的数据被覆盖

2 年前

Amen Aziz · csv文件中的数据不提供任何信息

2 年前

Jensen Holm · 在非常大的字符串中查找链接时遇到问题

2 年前

Yungi Jeong · 在使用selenium进行web抓取后,我在csv文件中得到了奇怪的结果。。内容不是特定的内容,而是html代码

2 年前