代码之家 › 专栏 › 技术社区 › skibee

调试dask-检测客户端失败

dask-distributed dask debugging

1

skibee · 技术社区 · 7 年前

我的 dask groupby 脚本失败( Memory Error
我已经更新了 logging 在 config.yaml 存档
logging: distributed: debug bokeh: debug tornado: info

dask distributed example computation 更新如下:

from distributed import LocalCluster  
c=LocalCluster()

和一个更新的脚本 range 修订为 range(10000)

当脚本运行(并成功完成)时,我在 Jupyter Notebook 它会重复自身,直到脚本完成。

bokeh.server。tornado-调试-[pid 3088]/系统有0个会话使用0个未使用的bokeh.server。tornado-调试-[pid 3088]/偷窃 /workers有0个会话,其中有0个未使用的bokeh.server。tornado-调试- [pid 3088]/events有0个会话,其中有0个未使用的bokeh.server.tornado 0未使用的bokeh.server。tornado-调试-[pid 3088]/状态为0 0未使用的会话

为什么我没有看到任何正在运行的工人?

当运行 c = LocalCluster()

bokeh.server。服务器-警告-主机通配符' '可以暴露应用程序到HTTP主机标头攻击。主机通配符应仅为通配符' '会使应用程序遭受HTTP主机头攻击。主机通配符只能用于测试目的。 '] bokeh.server。tornado-调试-这些主机源可以连接到 websocket:[' “]bokeh.server。tornado-调试-模式包括: bokeh.server。tornado-调试-{application\u context': ,bokeh.server。tornado-调试-
('/system/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-
{application\u context': ,bokeh.server。tornado-调试-
'bokeh_websocket_path':'/system/ws'}),bokeh.server。tornado-调试- bokeh.server。tornado-调试-{application\u context': ,bokeh.server。tornado-调试-
(“/Steering/?”,bokeh.server.tornado-调试-,bokeh.server.tornado- ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/steering/ws}),bokeh.server。tornado-调试
{application\u context': ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/steering/ws}),bokeh.server。tornado-调试 -('/steering/autoload.js',bokeh.server.tornado-调试-, ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/steering/ws}),bokeh.server。tornado-调试 -(“/workers/?”,bokeh.server.tornado-调试-,bokeh.server.tornado- ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/workers/ws”}),bokeh.server。tornado-调试 -('/workers/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-
{application\u context': ,bokeh.server。tornado-调试-
-('/workers/autoload.js',bokeh.server.tornado-调试-, ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/workers/ws”}),bokeh.server。tornado-调试 -(“/events/?”,bokeh.server.tornado-调试-,bokeh.server.tornado- ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/events/ws”}),bokeh.server。tornado-调试- ('/events/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-

“bokeh\u websocket\u path”:“/events/ws”}),bokeh.server。tornado-调试- ,bokeh.server。tornado-调试-
(“/counters/?”,bokeh.server.tornado-调试-,bokeh.server.tornado- 调试-{application\u context': ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/counters/ws}),bokeh.server。tornado-调试 -('/counters/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-
{application\u context': ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/counters/ws}),bokeh.server。tornado-调试 bokeh.server。tornado-调试-{application\u context': ,bokeh.server。tornado-调试-
-(“/tasks/?”,bokeh.server.tornado-调试-,bokeh.server.tornado- 调试-{application\u context': ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/tasks/ws”}),bokeh.server。tornado-调试- ('/tasks/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-
{application\u context':
“bokeh\u websocket\u path”:“/tasks/ws”}),bokeh.server。tornado-调试- ('/tasks/autoload.js',bokeh.server.tornado-调试-, ,bokeh.server。tornado-调试-
调试-{application\u context':
“bokeh\u websocket\u path”:“/status/ws”}),bokeh.server。tornado-调试- ('/status/ws',bokeh.server.tornado-调试-,bokeh.server.tornado-调试-
{application\u context': ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/status/ws”}),bokeh.server。tornado-调试- ,bokeh.server。tornado-调试-
“bokeh\u websocket\u path”:“/status/ws”}),bokeh.server。tornado-调试- 调试-{applications':{counters': ,bokeh.server。tornado-调试-

“/状态”:,bokeh.server。tornado-调试-
“/偷窃”:,bokeh.server。tornado-调试-

“/tasks”:,bokeh.server。tornado-调试-

'前缀':'',bokeh.server。tornado-调试-“使用重定向”: True}),bokeh.server。tornado-调试-('/static/(.*), bokeh.server。tornado-调试-]

1 回复 | 直到 5 年前

1

MRocklin 7 年前

您看到的日志消息来自Bokeh诊断仪表板。他们本质上是说没有人在看诊断网页。您可能希望减少Bokeh日志的详细程度。我认为这些信息与你无关。