インタラクティブなspark-shellを実行すると、sparkバージョン(2.2.0)とscalaバージョン(2.11.8)が表示されます。
Welcome to
____ __
/ __/__ ___ _____/ /__
_\ \/ _ \/ _ `/ __/ '_/
/___/ .__/\_,_/_/ /_/\_\ version 2.2.0
/_/
Using Scala version 2.11.8 (OpenJDK 64-Bit Server VM, Java 1.8.0_131)
ただし、Zeppelin(localhost)で使用しているSparkとScalaのバージョンを確認したい
Zeppelinがインタラクティブシェルで同じspark / scalaを実行するかどうかはわかりません。
(https://community.hortonworks.com/questions/54918/how-do-i-tell-which-version-ofspark-i-am-running.htmlを確認しましたが、Zeppelinをホストしているため、これは必要ありません。 localhost)
Sparkバージョンの場合は実行できsc.version
、scalaバージョンの場合はutil.Properties.versionString
ツェッペリンノートで実行できます
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加