- 安装pyCharm；
- 安装python，选用python 2.7.9版本；
- 安装py4j包：
从py4j 0.10.4(https://pypi.python.org/pypi/py4j/0.10.4)链接下载py4j包，这里选的是py4j 0.10.4版本
解压py4j包，打开py4j文件夹，在此路径下打开cmd，执行python setup.py install命令 - 安装numpy：
从https://pypi.python.org/pypi/numpy 路径下载numpy包，这里选择的是[numpy-1.13.3-cp27-none-win_amd64.whl]版本。在放置whl的路径下执行pip install numpy-1.13.3-cp27-none-win_amd64.whl命令即可 - 下载hadoop和spark包，选用的版本是hadoop-2.4.0（https://archive.apache.org/dist/hadoop/common/）和spark-2.1.0-bin-hadoop2.4.tgz（http://spark.apache.org/downloads.html）（基于hadoop-2.4.0的预编译版本）
- 将spark解压目录下python/pyspark包拷贝至python安装路径下的lib/site-packages下面
- pyCharm 配置Run configuration
SPARK_HOME = spark包解压目录
PYTHONPATH = %SPARK_HOME%/python - 如果想直接在pyCharm里面运行pySpark程序，需要保证spark Driver用的python版本（spark-2.1.0默认用的是python2.7）和pyCharm配置的python版本是一致的，否则会报版本不匹配错误：
【机器学习】搭建pySpark ML开发环境
最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着，像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上，一...
- 文/苍兰香墨 我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
推荐阅读更多精彩内容
- # Python 资源大全中文版 我想很多程序员应该记得 GitHub 上有一个 Awesome - XXX 系列...
- Spark SQL, DataFrames and Datasets Guide Overview SQL Dat...
- Spark SQL, DataFrames and Datasets Guide Overview SQL Dat...
- linux和windows下安装python拓展包-pycharm、numpy、scipy、matplotlib、...
