以前は正常に実行されていたOozieジョブを実行しています。そして今、S3ファイルにアクセスするときにパーミッション拒否エラーが発生しました。使用している資格情報とそれらを修正する場所を特定しようとしています。
私が知る限り、資格情報はいくつかの場所から来ているようで、優先順位がわかりません（たとえば、〜/ .aws / creditals、環境変数、hadoop構成、IAMロールなど）。
使用されているアクティブな資格情報を確認する方法はありますか？アクティブなAWSアカウントキーIDをsparkログに出力することは可能ですか？
s3aコネクタでは、順序は次のとおりです。
認証プロバイダーのリストを構成して、順序を変更したり、削除したりすることができます。
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加