jupyterlab-sparkmonitor:JupyterLab扩展,可从笔记本中监视启动的Apache Spark作业

时间:2024-06-01 14:54:09
【文件属性】:

文件名称:jupyterlab-sparkmonitor:JupyterLab扩展,可从笔记本中监视启动的Apache Spark作业

文件大小:248KB

文件格式:ZIP

更新时间:2024-06-01 14:54:09

spark apache-spark jupyter pyspark jupyterlab

Spark Monitor-Jupyter Lab的扩展 该项目最初由krishnan-r编写,是Jupyter Notebook的Google Summer of Code项目。 作为Yelp的软件工程师实习的一部分,我创建了这个fork来更新扩展,使其与JupyterLab兼容-Julp选择在笔记本上共享和协作的选择。 关于 + = SparkMonitor是Jupyter Lab的扩展,它可以实时监视从笔记本生成的Apache Spark Jobs。 该扩展提供了一些功能,可从笔记本界面本身内部监视和调试Spark作业。 要求 至少JupyterLab 2.0.0(获取单元执行元数据所必需) pyspark 2.XX或更早版本(当前不支持pyspark 3.X) 特征 在Jupyter笔记本中运行Spark作业的单元下方自动显示实时监视工具 带有进度条的作业和阶段表 显示


【文件预览】:
jupyterlab-sparkmonitor-master
----MANIFEST.in(53B)
----requirements-bootstrap.txt(106B)
----VERSION(7B)
----.eslintrc.js(369B)
----webpack.config.js(3KB)
----example.ipynb(4KB)
----Dockerfile(554B)
----scalalistener()
--------CustomListener.scala(26KB)
--------build.sbt(357B)
----js()
--------styles.css(6KB)
--------taskdetails.js(10KB)
--------images()
--------CurrentCell.js(4KB)
--------jobtable.css(3KB)
--------timeline.css(2KB)
--------CellMonitor.js(33KB)
--------TaskChart.js(9KB)
--------SparkMonitor.js(13KB)
--------Timeline.js(21KB)
--------index.js(2KB)
--------taskdetails.css(3KB)
----requirements-dev.txt(30B)
----tox.ini(156B)
----LICENSE(11KB)
----setup.cfg(40B)
----setup.py(1KB)
----README.md(7KB)
----Makefile(1KB)
----.pre-commit-config.yaml(1KB)
----sparkmonitor()
--------listener.jar(219KB)
--------serverextension.py(6KB)
--------__init__.py(886B)
--------kernelextension.py(7KB)
----.npmrc(19B)
----prettier.config.js(109B)
----.ipython()
--------profile_default()
----.gitignore(193B)
----package.json(2KB)

网友评论