Redshiftに接続し、一連のSQLコマンドを実行し、新しい派生テーブルを生成するPythonスクリプトがあります。
しかし、私の人生では、毎日自動的に実行する方法を見つけることができません。
AWS Data Pipelineを試しましたが、シェルスクリプトで最初のcopyステートメントが実行されません。会社のIAMポリシーが制限されているため、LambdaまたはGlueを機能させることができません。Airflowは、毎日1つのPythonスクリプトを実行するのはやり過ぎのようです。
調査するサービスに関する提案はありますか?
ec2インスタンスでcronジョブを使用するか、スケジュールされたイベントを設定して、awspythonラムダ関数を呼び出しますhttp://docs.aws.amazon.com/lambda/latest/dg/with-scheduled-events.html
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加