代码之家 › 专栏 › 技术社区 › Shyama Sonti

从HTTPS获取最新的XML文件

request beautifulsoup https python

Shyama Sonti · 技术社区 · 7 年前

我试图修改这段代码,但没有成功。请帮忙。

from bs4 import BeautifulSoup
import urllib.request
import requests

url = 'https://www.oasis.oati.com/cgi-bin/webplus.dll?script=/woa/woa-planned-outages-report.html&Provider=MISO'
response = requests.get(url, verify=False)
#html = urllib.request.urlopen(url,verify=False)
soup = BeautifulSoup(response)

我想beautifulsoup不读取响应对象。如果我使用urlopen函数,它会抛出SSL错误。

2 回复 | 直到 7 年前

alecxe 7 年前

BeautifulSoup 不理解 requests 的 Response .content 并将其传递给“soup”进行解析:

soup = BeautifulSoup(response.content, "html.parser")  # you can also use "lxml" or "html5lib" instead of "html.parser"

也理解“类似文件”的对象-这意味着,一旦您解决了SSL错误问题,您可以执行以下操作:

data = urllib.request.urlopen(url)
soup = BeautifulSoup(data, "html.parser")

Shyama Sonti 7 年前

首先,我没有正确地提出我的问题。但在进一步研究之后,我发现我确实在试图提取引用的url标记中的所有url。再加上一些靓汤的背景,我会用汤。查找所有('a')。

推荐文章

Jaimin Modi · 从Flutter中的Head呼叫响应中获取特定Header值

2 年前

Daavee18 · 节点。未设置“数据”侦听器时,js http模块未关闭连接

2 年前

Karthi Jayaprakasam · 具有客户端证书的SSL流

2 年前

Nicole Demera · ASP。NET Core 6如何使用。设置https的pem链文件

2 年前

RAJU KOPPISETTI · JFrog artifactory中的HTTPS配置

2 年前

Parapluie · Php PayPal IPN返回无效

6 年前

cespon Tom · Laravel强制www和HTTPS错误:重定向到索引。php

6 年前

HotDudeSmith · 我的域及其子文件夹能否连接到EC2?

6 年前

uptoyou · HTTP会话安全性和会话ID

6 年前

Cathal · 在django开发服务器上使用LetsEncrypt/Certbot?

6 年前