已经通过pip install 安装库了,但是运行pyspark还是找不到
第一步:找到安装库的位置,比如我的是/usr/lib/python2.6/site-packages,将需要用的库打成zip包
第二步:sc.addPyFile添加zip文件
第三步:命令使用--py-files引用zip文件
第四步:运行成功
已经通过pip install 安装库了,但是运行pyspark还是找不到
第一步:找到安装库的位置,比如我的是/usr/lib/python2.6/site-packages,将需要用的库打成zip包
第二步:sc.addPyFile添加zip文件
第三步:命令使用--py-files引用zip文件
第四步:运行成功
相关文章: