0%

linux安装一些软件

1685630139372

  1. 开终端或 Anaconda Prompt。

  2. 创建一个新的环境(可选):

    1
    2
    codeconda create --name mypysparkenv
    conda activate mypysparkenv
  3. 安装 PySpark:

    1
    codeconda install -c conda-forge pyspark
  4. 输入以下命令,以退出 Anaconda 环境:

    1
    Copy codeconda deactivate

激活

1
conda activate  mypysparkenv

查看版本

1
2
import pyspark
>>> print(pyspark.__version__)
1
conda install -n mypysparkenv ipykernel --update-deps --force-reinstall
1
conda install -n mypysparkenv ipykernel --update-deps --force-reinstall
1
2
export SPARK_HOME=/path/to/spark/installation/in/anaconda/envs/myenv/lib/pythonX.X/site-packages/pyspark

1
2
3
export PYSPARK_HOME=/usr/local/spark
export PYTHONPATH=$PYSPARK_HOME/python:$PYTHONPATH
export PYTHONPATH=$PYSPARK_HOME/python/lib/py4j-0.10.4-src.zip:$PYTHONPATH

有关deb文件

1
2
sudo dpkg -i mysql-connector-j_8.0.33-1ubuntu22.04_all.deb

-------------本文结束感谢您的阅读-------------
老板你好,讨口饭吃