代码之家 › 专栏 › 技术社区 › King in the world.

如何实现铲运机或履带式铲运机的动态价值?

scraper casperjs web-crawler phantomjs node.js

King in the world. · 技术社区 · 6 年前

我有一些问题,我试着在图像下刮取一些数据。

这个网站在不断变化。它似乎在不断获取动态数据。

当然,您可以在一定的时间内完成此操作(例如,每5秒提取一次数据)

我认为浪费了很多资源。

我们使用chrome的开发工具查看网络,但它没有改变。

然而,数据仍在更新中。

在这种情况下,有没有办法每隔几秒钟检查一次数据?

我不能像观察者那样继续观察那个部分吗?

1 回复 | 直到 6 年前

Mario Nikolaus 6 年前

此网站使用websockets。。。

如果在Chrome的网络选项卡下过滤WS,则可以检查websocket流量。然后选择要检查的插座连接并检查机架。

尽管如此,PhantomJS对此有着奇特的支持,所以我想您最好在某个时间间隔内刮取数据。。。

推荐文章

user3622142 · CasperJs电子邮件在textbox上无效

6 年前

ludwig · casperjs在设置id后找不到id

6 年前

King in the world. · 如何实现铲运机或履带式铲运机的动态价值?

6 年前

Chem · 如何使用casperjs arvgs进行评估?

6 年前

khadija.EL · Casperjs:如何操作javascript分页(javascript重载的链接)

6 年前

Javier Sega · Phantomjs/Casperjs现在无法工作网站检测到机器人

7 年前

yarek · casperjs:如何获取包含文本的链接?

7 年前

Vlad Balanescu · AJAX PUT请求在CasperJS中不起作用

7 年前

Oasis · 带幻影XHR的Sinon-窗口。sinon未定义

7 年前

Morton · 如何拆分结果数?

7 年前