window7下搭建PYCHARM+PYTHON+SPARK集成开发环境

最新推荐文章于 2026-05-11 11:02:52 发布
原创 最新推荐文章于 2026-05-11 11:02:52 发布 · 761 阅读 · 0
标签
#PYSPARK
本文记录了在Windows 7环境下搭建PyCharm、Python和Spark集成开发环境的详细步骤，包括安装Java、Scala、Spark、Hadoop，配置环境变量，安装Python和Anaconda，以及在PyCharm中设置项目解释器的过程。最后通过运行代码验证环境配置成功。

查看了很多博客和历史记录，没有一个能完整的解决自己碰到的问题，这里做个记录，方便有需要的人搭建自己的开发环境。

  1. 软件版本

hadoop 2.7.3

spark 2.2.1

scala 2.1.8

java 1.8

pycharm 2019.1

windows 7旗舰版

 

2.安装java1.8

配置环境变量

添加变量 JAVA_HOME 值为jdk目录

在path 追加 ;%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin;

 

保存后

cmd 运行 java -version

 

3.安装scala

windows 下直接下载msi 直接运行 会自动写入到path

安装完毕，验证Scala

 

4.安装spark

解压文件即可。

 

5.安装hadoop

下载hadoop解压之后 ，设置环境变量

添加 HADOOP_HOME 值为hadoop解压目录

最低0.47元/天 解锁文章
ERROR: JAVA_HOME not found in your environment. Please set the JAVA_HOME variable in your environmen
知识改变命运，ヾ(◍°∇°◍)ﾉﾞ【求关注】
07-09 3195
最近Windows安装maven出现如下错误：
Win7老机器救星：用Pycharm社区版+这些插件，实现专业版90%的核心功能
最新发布
weixin_42554151的博客
05-11 453
本文为Win7老旧电脑用户提供了一套高效的Pycharm社区版优化方案，通过精选插件和系统调优，实现专业版90%的核心功能。实测显示，社区版安装包大小减少64%，内存占用降低50%，适合低配置设备流畅运行Python开发环境。关键插件如Database Navigator和Remote Development弥补了专业版功能缺失。
如何在Pycharm中正确配置pyspark
weixin_46668726的博客
07-28 8495
如何正确在Pycharm配置Pyspark 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客： 全新的界面设计 ，将会带来全新的写作体验； 在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式 进行展示；
Windows下Pycharm的Spark、Hadoop、Scala安装及常见报错（graphframes避坑、jupyter的文件位置更换、conda环境建立）
soberld的博客
07-24 2731
环境 jdk1.8.0_333 python3.7.13 scala2.11.8 hadoop2.7.1 spark2.4.3-bin-hadoop2.7
window配置安装pyspark
sinat_26566137的博客
05-05 2562
window配置安装pyspark,值得信赖的教程：win10下安装pyspark ，按照教程安装并配置好后，在cmd窗口下输入pyspark即可运行；但是，在pycharm下的黑窗口下输入pyspark，会报错：c:\Windows\System32>pyspark Java not found and JAVA_HOME environment variable is not set...
Win7系统安装Pycharm专业版
~~信我有鬼~~
11-29 9346
目录    0. 前言    1. 下载Pycharm安装包    2. 开始安装    3. 激活    4. 简单配置pycharm    5. 结束语 0. 前言 回到顶部????   之前写了个python安装，接下来就要安装IDE（编辑器），个人推荐pycharm 专业版，本文以此为例介绍如何在win7安装pycharm专业版。 1. 下载python安装包 回到顶部????   首先是要下载pycharm的安装包，登录pycharm官网下载专业版安装包，如下图所示： 这里选择window
Windows 上面搭建 Spark + Pycharm/idea scala/python 本地编写Spark程序，测试通过后再提交到Linux集群上
CLHugh的博客
07-06 4766
Windows 上面搭建 Spark + Pycharm/idea scala/python 本地编写Spark程序，测试通过后再提交到Linux集群上
window7下在pycharm上配置pyspark 搭建spark测试环境
casion
01-29 4634
因为在虚拟机linux上已经部署好了spark，但是每次编写好spark的python脚本程序都得在虚拟机上测试，很麻烦，所以就在本地的win7系统下，结合pycharm开发工具，搭建可本地测试运行环境。 本地运行spark的python脚本程序，当然需要spark的相关环境，所以前提也要在本地win7下搭建好spark环境 【步骤思路如下】 1. 搭建本地测试的spark环境...
PyCharm搭建Spark开发环境&windows下安装pyspark
qq_43192537的博客
08-24 4007
PyCharm搭建Spark开发环境&windows下安装pyspark
windows下python3.6+pycharm+spark2.3+jdk1.8+hadoop2.7环境搭建
m0_37752104的博客
07-03 3292
最近要做日志分析 所以想搭建spark环境 但是又觉得双系统有点麻烦 而且文件量不大 所以就用了windows系统。在网上看了很多博客  有篇博客介绍说spark不支持python3.6  但是我发现搭建以后测试程序也成功运行了 所以写出来跟大家分享一下。把错误写在前头：我一开始用的jdk1.7，在控制台输入pyspark的时候一直报版本不匹配的错误，后来我换成了jdk1.8就好了。下载jdk1....
java not found_java_home not found in your enviroment 问题解决方法
weixin_36327991的博客
02-12 5910
java_home not found in your enviroment 错误原因有一下几点1. JAVA_HOME系统环境没配置, JAVA_HOME环境变量配置方法:<1> 右击计算机图标 -> 属性 -> 点击"更改配置" -> 高级 -> 环境变量 -> 系统变量 -> 点击"新建" -> 变量名: JAVA_HOME, 变量值:...
Pycharm 软件的安装（win10 & win7）
le_u_6的博客
05-01 1万+
Pycharm是一个集成开发环境(IDE)，专门用于 Python 编程语言。它提供代码分析、图形化用户界面的调试、测试运行、代码重构、智能代码补全等功能，可以帮助我们提高编程效率。PyCharm 有两个版本:免费的社区版(Community Edition) 和付费的专业版 (Professional Edition)。这里主要介绍安装免费社区版的：方法一：官网安装往下划有：社区版Community Edition，点击Download下载。方法二：网盘下载安装。
关于python下解决pyspark报错问题
m0_63601143的博客
06-02 4025
关于python下解决pyspark报错问题
windows7装python哪个版本好,win7安装哪个版本的python
pingf123的博客
12-13 6642
在这里推荐使用PyCharm:，PyCharm是一种Python IDE，带有一整套可以帮助用户在使用Python语言开发时提高其效率的工具，比如调试、语法高亮、Project管理、代码跳转、智能提示、自动完成、单元测试、版本控制。1、登录官网 https://www.python.org，下载需要的安装包，这里下载的是3.6.5版本。4、验证python是否安装成功，出现下图情况，则已经安装成功。安装完成，需要重启电脑，你可以选择立刻重启，或者是稍后重启。设置安装目录，本人是 D:\Python36。
(解决）vscode新建web项目Error: JAVA_HOME not found in your environment.Please set the JAVA_HOME variable i
qq_42851898的博客
11-16 2333
在Windows的环境变量设置中，确实需要在PATH环境变量中添加Java的bin目录路径，这样我们在命令行窗口中输入Java相关命令时，系统能够找到正确的可执行文件。JAVA_HOME是指向你的Java安装目录的环境变量，许多Java相关的程序（如Apache Maven、Apache Tomcat）需要用到这个环境变量。但是，JAVA_HOME环境变量是指向Java安装目录的，它通常被其他Java相关的程序使用，以找到Java的安装位置。2、右键点击“我的电脑”或“此电脑”，选择“属性”。
Error: JAVA_HOME not found in your environment. Please set the JAVA_HOME variable in your environmen
jsxjlps的博客
05-03 6218
问题 Error: JAVA_HOME not found in your environment. Please set the JAVA_HOME variable in your environment to match the location of your Java installation. jdk明明能用，maven的环境配置也没错，就是提示检测不到。 解决方案 一、首先maven可能只能识别JAVA_HOME，也就是如果直接把jdk配置到Path中，maven并不能识别到。。。 如果你mv
window pyspark + conda下配置
weixin_40970506的博客
05-27 747
window10 + pyspark + conda下的envs下的虚拟环境配置 1、java配置 版本：jdk-8u291-windows-x64.exe 安装：双击exe，安装java 在系统变量中设置java相关变量 CLASS_PATH：C:\Program Files\Java\jdk1.8.0_291\lib JAVA_HOME：C:\Program Files\Java\jdk1.8.0_291 #这样做是因为环境变量太长，无法添加路径 JAVA_PATH：C:\Program Files\
maven配置报错以及The JAVA_HOME environment variable is not defined correctly的解决方法
热门推荐
cms18374672699的博客
10-20 18万+
版权声明：本文为博主原创文章，未经博主允许不得转载。https://mp.csdn.net/postedit/83212263 maven配置报错以及The JAVA_HOME environment variable is not defined correctly的解决方法 1、什么是Maven Maven是一个项目管理和整合的工具。Maven为开发者提供了一套完整的构建生命周期框...
安装maven出现“JAVA_HOME”环境变量的配置问题
shaohuaweifu的博客
03-05 2412
maven 安装 环境变量配置
tomcat如何配置环境变量
笨鸟快飞的专栏
01-25 2258
方法/步骤 一、安装JDK和Tomcat 1，安装JDK：直接运行jdk-7-windows-i586.exe可执行程序，默认安装即可。 备注：路径可以其他盘符，不建议路径包含中文名及特殊符号。 2、安装Tomcat：直接解压缩下载文件“apache-tomcat-7.0.33-windows-x86.zip”到C盘下。安装路径建议修改为：c:\tomcat。 备注：如下
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值