在Windows上安装Apache Spark

本教程讲解了如何在Windows操作系统上安装Apache Spark。还将解释如何启动历史服务器并使用Web UI监视作业。

1. 安装 Java 8+

要在Windows操作系统上安装Apache Spark,需要Java 8或最新版本,因此从Oracle下载Java版本并将其安装在Windows系统上。

下载后,双击下载的.exe (例如,jdk-8u201-windows-x64.exe)文件,以便将其安装在windows系统上。选择任意自定义目录或保留默认位置。

注意:本教程在Java 8上安装Apache Spark,同样的步骤也适用于Java 11和Java 13版本。

2. 安装 Apache Spark

Apache Spark是以tar/zip压缩文件的形式出现的,因此在Windows系统上安装并不太麻烦,只需要下载并解压缩该文件即可。

通过访问Spark下载页面下载Apache Spark,默认为最新版本的Spark。 如果想使用不同版本的Spark和Hadoop,请从下拉框中选择自己想要的版本。随着您的选择,列表项3上的链接也随之更改为所选版本,并提供更新后的下载链接。 点击列表项3对应的下载链接下载,如下图所示:

会员登录


《Flink原理深入与编程实战》