web-dev-qa-db-ja.com

Emr 5.29.0でscala 2.12を実行しています

scala 2.12でコンパイルされたjarファイルがあり、それをemr 5.29.0で実行したいと思います。 emr 5.29.0のデフォルトバージョンはscala 2.11なので、どのように実行しますか。

6
Ram

ただのアイデアですが、待つことが選択肢にない場合は!

最新のscala jarを、適切なmavenスコープが定義されたアプリケーションと共にパッケージ化し、これらのパッケージをsparkプロパティ--properties spark.jars.repositories ??

おそらく、jarをドライバーノードに転送する方法を理解する必要があります。 s3が中間ストレージとして使用できるオプションの場合。

0
Mikhu Rakshit