Sparkバージョン2.2.0がインストールされた4ノードのHadoopクラスターがあります。ローカルクラスターからグーグルコンピューティングエンジンインスタンスにファイルを移動したい。Apache Sparkを使用してそれを行う方法はありますか？どんな助けでも大歓迎です！前もって感謝します。
ComputeEngineインスタンスにファイルを転送するために利用できるさまざまなオプションがあります[1]。
このビデオ[2]は、SparkとHadoopのワークロードをGCPに移行する方法を理解するのに役立ちます。
[1] https://cloud.google.com/compute/docs/instances/transfer-files
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加