django_hadoop:Django 的 Hadoop 集成

时间:2024-07-09 20:01:48
【文件属性】:

文件名称:django_hadoop:Django 的 Hadoop 集成

文件大小:16KB

文件格式:ZIP

更新时间:2024-07-09 20:01:48

Python

Django 的 Hadoop 集成(通过 Oozie REST API 或本地作业执行)。 此代码允许从 Django 视图运行 MapReduce 任务。 安装 像往常一样安装这个 django 应用程序(urls.py、settings.py 等)。 在项目的 settings.py 中准备常见的 Hadoop 相关设置: HADOOP_MAIN = 'node' NAMENODE = 'hdfs://%s:8020' % HADOOP_MAIN # Hadoop namenode JOB_USER = 'oozie' # Hadoop user for jobs & HDFS stuff JOB_MANAGER_CLASS = 'yo


【文件预览】:
django_hadoop-master
----LICENSE(687B)
----django_hadoop()
--------results.py(1KB)
--------models.py(2KB)
--------job_spawner.py(3KB)
--------runner.py(5KB)
--------utils.py(2KB)
--------management()
--------hdfs.py(931B)
--------__init__.py(4KB)
--------migrations()
--------views.py(2KB)
--------admin.py(1KB)
--------tests.py(2KB)
--------urls.py(409B)
----setup.py(452B)
----.gitignore(77B)
----README.md(4KB)

网友评论