AWS DataSync でオンプレミスと AWS 間のデータ転送を自動化する

前提条件

1. リージョン: ap-northeast-1（東京）
2. AWS マネジメントコンソールにログイン済み
3. 転送元の S3 バケットが作成済みで、1つ以上のオブジェクトが格納されていること
4. 転送先の S3 バケットが作成済みであること（空の状態）

転送タスクを作成する

1. AWS マネジメントコンソールにログインし、リージョンが ap-northeast-1（東京）であることを確認します
2. 上部の検索バーに DataSync と入力し、表示された「DataSync」を選択します
3. 左側ナビゲーションの「タスク」を選択します
4. 「タスクを作成する」をクリックします。タスクの作成は「送信元ロケーションを設定」→「送信先ロケーションを設定」→「設定」→「レビュー」の 4 ステップのウィザードで、転送元・転送先のロケーションもこの中で作ります

転送元ロケーションを設定する

1. 「新しいロケーションを作成」を選択し、「ロケーションタイプ」で「Simple Storage Service (Amazon S3)」を選択します
2. 以下を設定します
   • S3 URI: s3://datasync-source-<アカウントID>/ と入力します（バケット全体が対象になります）
   • S3 バケット所有者: 「This AWS account」のまま
   • IAM ロール: 「自動生成する」をクリックします。DataSync がこのバケットにアクセスするための IAM ロールとポリシーが作られ、AWSDataSyncS3BucketAccess-datasync-source-… のような名前のロールが選択されます
3. 「次へ」をクリックします

転送先ロケーションを設定する

1. 「新しいロケーションを作成」を選択し、「ロケーションタイプ」で「Simple Storage Service (Amazon S3)」を選択します
2. 以下を設定します
   • S3 URI: s3://datasync-dest-<アカウントID>/ と入力します
   • S3 ストレージクラス: 「標準」のまま（送信先にだけある項目です）
   • IAM ロール: 「自動生成する」をクリックします
3. 「次へ」をクリックします

タスクの設定を行う

1. 「タスクモード」で「拡張」を選択します。拡張モードは、データの一覧表示・転送・検証を並行して行うため、基本モードより高速です。S3 間の転送はどちらのモードでもできますが、タスクモードはタスクを作成したあとで変更できません
2. 「名前」に s3-to-s3-transfer と入力します
3. その他の設定はデフォルトのままにします
   • スキャンするコンテンツ: すべて
   • 転送モード: 変更されたデータのみを転送
   • 検証: 転送されたデータのみを検証
4. 「次へ」をクリックします

1. レビュー画面で設定内容を確認し、「タスクを作成する」をクリックします

タスクの詳細画面に「タスクが作成されました」と表示され、ステータスが「利用可能」になっていることを確認します。

タスクを実行する

1. タスクの詳細画面で「開始」をクリックし、「デフォルトから開始する」を選択します。確認画面は無く、すぐに実行が始まります

転送結果を確認する

1. タスクの詳細画面で「Task executions」タブを選択します
2. タスク実行のステータスが「成功」になるまで待ちます。今回は、実行の準備に 4 分ほどかかり、転送そのものは 30 秒ほどで終わりました

1. 実行 ID をクリックすると、転送されたファイル数やデータ量の詳細を確認できます
2. 転送先の S3 バケットを開き、転送元のオブジェクト（sample.txt と data/ 配下の 2 ファイル）がコピーされていることを確認します