spark3.0-python教程:准备开发环境-安装findspark库

说明

执行 pyspark程序,报错如下:

py4j.protocol.Py4JError: org.apache.spark.api.python.PythonUtils.getPythonAuthSocketTimeout does not exist in the JVM

解决方法一(推荐)

安装 findspark,由该库初始化 pyspark 环境

pip3 install findspark

解决方法二

将环境变量添加到 ~/.bashrc

缺点:执行 jupyter-notebook 还是会报错


原文出处:/show_1IX3EiKK7u68.html