背景
spark 可以运行在多个环境中,当然在开发过程中,基本还是以本机搭建单机环境以快速调试。本文主要介绍在mac 下如何快速搭建spark单机版。
安装准备
mac 下基本安装应用都是试用brew。如果没有可以执行如下命令快速安装:
/usr/bin/ruby -e “$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)“
- 安装jdk
brew cask install homebrew/cask-versions/java8
- 安装scala
brew install scala
安装spark
- 安装命令
brew install apache-spark
- 检查是否安装成功
cd /usr/local/Cellar/apache-spark/1.3.0/bin/
输入:./spark-shell启动spark