分类：PySpark导入Python

2020
09-27

如何将PySpark导入Python的放实现(2种)

方法一使用findspark使用pip安装findspark：pipinstallfindspark在py文件中引入findspark：>>>importfindspark>>>findspark.init()导入你要使用的pyspark库>>>frompysparkimport*优点：简单快捷缺点：治标不治本，每次写一个新的Application都要加载一遍findspark方法二把预编译包中的Python库文件添加到Python的环境变量中exportSPARK_HOME=你的PySpark目录exportPYTHONPATH=$SPARK_HOME/libexec/python:$SPARK_HOME/l... 继续阅读 >