文件名称:spark-janelia:在janelia群集上使用spark的脚本
文件大小:3.53MB
文件格式:ZIP
更新时间:2024-06-17 10:32:14
Python
斯帕·简妮莉亚(Spark Janelia) 用于在Janelia Research Center集群上启动Spark的脚本,实用程序和社区。 如果有疑问,可以在gitter上的公共Freeman Lab中闲逛(或在freenode上的#thefreemanlab)。 使用Spark 这些脚本可自动执行启动和管理Spark作业所需的许多任务。 初始设置 SSH进入Janelia的群集登录节点之一(有关更多信息,请参见《 》)。 ssh login2.int.janelia.org 如果您从未这样做过,请设置无密钥SSH ssh-keygen -t dsa 点击三下“ return”,接受所有默认设置。 然后继续 cd .ssh cat id_dsa.pub >> authorized_keys 导航到主目录中将存储这些脚本的位置,然后调用 git clone https:/
【文件预览】:
spark-janelia-master
----examples()
--------spark-tutorial.ipynb(2.14MB)
--------lsd-example.py(349B)
--------example-data()
----setup-notebook-janelia(632B)
----README.md(5KB)
----spark-janelia(9KB)