开终端或 Anaconda Prompt。
创建一个新的环境(可选):
1
2codeconda create --name mypysparkenv
conda activate mypysparkenv安装 PySpark:
1
codeconda install -c conda-forge pyspark
输入以下命令,以退出 Anaconda 环境:
1
Copy codeconda deactivate
激活
1 | conda activate mypysparkenv |
查看版本
1 | import pyspark |
1 | conda install -n mypysparkenv ipykernel --update-deps --force-reinstall |
1 | conda install -n mypysparkenv ipykernel --update-deps --force-reinstall |
1 | export SPARK_HOME=/path/to/spark/installation/in/anaconda/envs/myenv/lib/pythonX.X/site-packages/pyspark |
1 | export PYSPARK_HOME=/usr/local/spark |
有关deb文件
1 | sudo dpkg -i mysql-connector-j_8.0.33-1ubuntu22.04_all.deb |