pyspark3-template:使用诗歌和Pex的pyspark项目

【文件属性】：

文件名称：pyspark3-template:使用诗歌和Pex的pyspark项目

文件大小：1KB

文件格式：ZIP

更新时间：2024-05-02 18:42:59

Pyspark3模板 概括 该项目使用请求作为依赖项，基于Poetry创建了一个结构，并将应用程序与诗歌的构建一起打包，而依赖项与pex打包在一起。 要求 Python^ 3.9 诗歌^ 1.1（安装诗歌指南： ： ） Apache Spark> = 3.1（指导Apache Spark安装： : ） 项目创建 用诗歌创建结构并添加请求依赖 poetry new pyspark3-template cd pyspark3-template && poetry add requests 将pex添加到virtualenv poetry shell pip install "pex>=2.1" 按照以下结构创建driver.py和requester.py代码 . ├── README.rst ├── poetry.lock ├── pyproject.toml ├──

【文件预览】：
pyspark3-template-main
----README.md(2KB)