anaconda中安装pyspark库报错

img

img


在pycharm中写代码，安装pyspark报错cmd不是内部命令。

  • 这篇文章讲的很详细，请看：pycharm中使用pyspark
  • 除此之外, 这篇博客: pycharm配置pyspark环境中的 pycharm配置pyspark环境 部分也许能够解决你的问题, 你可以仔细阅读以下内容或跳转源博客中阅读:

  • 参考这篇博客， 比较靠谱：
    https://blog.csdn.net/ringsuling/article/details/84448369
    用到的配置环境变量：
    还没配置成功

    #spark的安装位置
C:\file\spark_package\spark-2.4.4-bin-hadoop2.7
将
C:\file\spark_package\spark-2.4.4-bin-hadoop2.7\python\pyspark
拷贝到
C:\Users\Carry Wan\AppData\Local\Programs\Python\Python37-32\Lib\site-packages

拷贝过去
C:\Users\Carry Wan\AppData\Local\Programs\Python\Python37-32\Lib\site-packages\pyspark

SPARK_HOME   C:\file\spark_package\spark-2.4.4-bin-hadoop2.7
PYTHONPATH   C:\file\spark_package\spark-2.4.4-bin-hadoop2.7\python

pip install py4j 


JAVA_HOME    C:\Program Files\Java\jdk1.8.0_162\bin

添加
C:\file\spark_package\spark-2.4.4-bin-hadoop2.7\python\lib\py4j-0.10.7-src.zip
C:\file\spark_package\spark-2.4.4-bin-hadoop2.7\python\lib\pyspark.zip