pycharm编写spark程序,导入pyspark包的3中实现方法


Posted in Python onAugust 02, 2019

一种方法:

File --> Default Setting --> 选中Project Interpreter中的一个python版本-->点击右边锯齿形图标(设置)-->选择more-->选择刚才选中的那个python版本-->点击最下方编辑(也就是增加到这个python版本下)-->点击➕-->选中spark安装目录下的python目录-->一路OK。

再次在python文件中写入如下

from pyspark import SparkConf

如果上一种不管用,则采用下一种。

With PySpark package (Spark 2.2.0 and later)

另一种操作方法:

1.Go to File -> Settings -> Project Interpreter

2.Click on install button and search for PySpark

第三种方法(需要先下载spark安装包):

下载spark安装包,将spark主目录中python目录中的pyspark目录拷贝到

/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages

目录中,在pycharm中

from pyspark import SparkContext

成功,可以愉快的用python编写spark程序了。。。。

Python 相关文章推荐
wxPython学习之主框架实例
Sep 28 Python
Python利用多进程将大量数据放入有限内存的教程
Apr 01 Python
CentOS下使用yum安装python-pip失败的完美解决方法
Aug 16 Python
详解如何在python中读写和存储matlab的数据文件(*.mat)
Feb 24 Python
Python cookbook(数据结构与算法)实现对不原生支持比较操作的对象排序算法示例
Mar 15 Python
解决python中os.listdir()函数读取文件夹下文件的乱序和排序问题
Oct 17 Python
python 将大文件切分为多个小文件的实例
Jan 14 Python
django+echart数据动态显示的例子
Aug 12 Python
python3 实现爬取TOP500的音乐信息并存储到mongoDB数据库中
Aug 24 Python
基于python实现对文件进行切分行
Apr 26 Python
浅谈sklearn中predict与predict_proba区别
Jun 28 Python
python爬取招聘要求等信息实例
Nov 20 Python
Python适配器模式代码实现解析
Aug 02 #Python
Python3网络爬虫开发实战之极验滑动验证码的识别
Aug 02 #Python
pandas中DataFrame修改index、columns名的方法示例
Aug 02 #Python
pandas DataFrame的修改方法(值、列、索引)
Aug 02 #Python
Flask框架钩子函数功能与用法分析
Aug 02 #Python
pandas DataFrame行或列的删除方法的实现示例
Aug 02 #Python
Python基于BeautifulSoup和requests实现的爬虫功能示例
Aug 02 #Python
You might like
第十四节 命名空间 [14]
2006/10/09 PHP
PHP面向对象概念
2011/11/06 PHP
thinkPHP的表达式查询用法详解
2016/09/14 PHP
YII框架实现自定义第三方扩展操作示例
2019/04/26 PHP
php简单计算权重的方法示例【适合抽奖类应用】
2019/06/10 PHP
JavaScript转换农历类实现及调用方法
2013/01/27 Javascript
分享一则javascript 调试技巧
2015/01/02 Javascript
JavaScript实现的简单幂函数实例
2015/04/17 Javascript
JavaScript实现自动对页面上敏感词进行屏蔽的方法
2015/07/27 Javascript
微信小程序 闭包写法详细介绍
2016/12/14 Javascript
微信小程序后台解密用户数据实例详解
2017/06/28 Javascript
vue 2.0封装model组件的方法
2017/08/03 Javascript
React+react-dropzone+node.js实现图片上传的示例代码
2017/08/23 Javascript
详解VueJS应用中管理用户权限
2018/02/02 Javascript
vue 中 命名视图的用法实例详解
2019/08/14 Javascript
使用flow来规范javascript的变量类型
2019/09/12 Javascript
vue 动态表单开发方法案例详解
2019/12/02 Javascript
[00:35]DOTA2上海特级锦标赛 EG战队宣传片
2016/03/04 DOTA
python实现折半查找和归并排序算法
2017/04/14 Python
python合并同类型excel表格的方法
2018/04/01 Python
tensorflow学习笔记之mnist的卷积神经网络实例
2018/04/15 Python
python打包生成的exe文件运行时提示缺少模块的解决方法
2018/10/31 Python
python GUI库图形界面开发之PyQt5 Qt Designer工具(Qt设计师)详细使用方法及Designer ui文件转py文件方法
2020/02/26 Python
keras 权重保存和权重载入方式
2020/05/21 Python
详解CSS3的box-shadow属性制作边框阴影效果的方法
2016/05/10 HTML / CSS
Love, Bonito国际官网:新加坡女装品牌
2021/03/13 全球购物
博柏利美国官方网站:Burberry美国
2020/11/19 全球购物
党的群众路线教育实践活动个人剖析材料
2014/10/07 职场文书
离职信范本
2015/06/23 职场文书
学生会招新宣传语
2015/07/13 职场文书
优秀党员主要事迹材料
2015/11/04 职场文书
机械生产实习心得体会
2016/01/22 职场文书
小学运动会开幕词
2016/03/04 职场文书
2016年第二十届“母亲节暨幸福工程救助贫困母亲活动日”活动总结
2016/04/06 职场文书
Python实现学生管理系统(面向对象版)
2021/06/24 Python
古见同学有交流障碍症 第二季宣传CM公开播出
2022/04/11 日漫