windows搭建pyspark环境详细教程 |
您所在的位置:网站首页 › androidstudio环境搭建 › windows搭建pyspark环境详细教程 |
一.安装jdk及配置环境变量: 下载地址: https://www.oracle.com/java/technologies/downloads/#java8-windows 安装步骤: 二.安装spark及配置环境变量: 下载地址: https://archive.apache.org/dist/spark/ 点击想安装的版本(我安装的是spark-3.0.0): 开始配置spark的系统环境变量: 三.安装hadoop及配置环境变量: 下载地址: https://archive.apache.org/dist/hadoop/common/ 选择与spark对应的版本: winutils.exe: https://github.com/steveloughran/winutils/blob/master/hadoop-2.7.1/bin/winutils.exe 下载方式同上 将hadoop.dll和winutils.exe均拷贝到D:\hadoop-2.7.1\bin下和C:\Windows\System32下(两个文件各拷贝一份) 开始配置hadoop的系统环境变量: |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |