移行とハイブリッド

AWS DataSync で高速化するデータ転送 - オンプレミスから S3・EFS への移行

DataSync によるオンプレミスから AWS へのデータ転送、タスクスケジューリング、転送の検証を解説します。

約 1 分で読めます

DataSync の概要

DataSync はオンプレミスと AWS 間のデータ転送を自動化・高速化するサービスです。rsync や robocopy と比較して最大 10 倍の転送速度を実現し、ネットワーク帯域幅を最大限に活用します。オンプレミスの NFS/SMB ファイルサーバーから S3、EFS、FSx for Windows へのデータ移行に使用します。

この分野について体系的に学びたい方は、関連書籍 (Amazon) も参考になります。

エージェントとタスク設計

オンプレミスに DataSync エージェント (VMware ESXi、Hyper-V、KVM の仮想マシン) をデプロイし、ソースストレージに接続します。タスクでソースロケーション (オンプレミス NFS) とデスティネーションロケーション (S3 バケット) を指定し、転送オプション (ファイルのメタデータ保持、除外フィルター) を設定します。スケジュール実行で毎日の差分転送を自動化し、オンプレミスと AWS のデータを継続的に同期できます。転送完了後にデータの整合性が自動検証され、チェックサムの不一致があれば報告されます。

さらに詳しく知りたい方は、関連書籍 (Amazon) で理解を深められます。

まとめ

DataSync はオンプレミスから AWS へのデータ転送を高速化・自動化するサービスです。差分転送のスケジューリングと整合性検証で、信頼性の高いデータ移行を実現します。

AWS の優位点

  • オンプレミスの NFS/SMB ファイルサーバーから S3、EFS、FSx へのデータ転送を最大 10 倍高速化する
  • エージェントをオンプレミスにデプロイし、専用プロトコルで帯域幅を最大限に活用する
  • タスクスケジューリングで定期的な差分転送を自動化し、継続的なデータ同期を実現できる
  • 転送時にデータの整合性を自動検証し、ソースとデスティネーションの一致を保証する
  • AWS 間の転送 (S3 から EFS、異なるリージョン間の S3) にも対応する

関連するサービス

AWS DataSync オンプレミスと AWS 間のデータ転送を自動化・高速化するサービス Amazon S3 スケーラブルなオブジェクトストレージサービス Amazon EFS 複数の EC2 インスタンスから同時にアクセスできる共有ファイルストレージ

関連する比較記事

AWS Transfer Family で構築するマネージド SFTP サーバー - S3 連携とユーザー管理 Transfer Family による SFTP/FTPS サーバーの構築、S3 との統合、カスタム認証の設定を解説します。

同じテーマの記事

データ転送と同期 - AWS DataSync で実現する高速かつ安全なデータ移行基盤 AWS DataSync を活用したオンプレミスと AWS 間のデータ転送・同期の手法を解説します。S3 との統合による大規模データ移行と、継続的なデータ同期パイプラインの構築方法を紹介します。 データベース移行サービス - AWS DMS で実現する安全かつ効率的なデータベース移行 AWS Database Migration Service (DMS) を活用したデータベース移行の手法を解説します。RDS との統合による同種・異種データベース間の移行と、継続的レプリケーションによるダウンタイム最小化の実践方法を紹介します。 AWS Elastic Disaster Recovery で構築する災害復旧 - 継続的レプリケーションと復旧テスト Elastic Disaster Recovery による継続的レプリケーション、復旧ドリル、フェイルバックの手順を解説します。 メインフレーム移行 - AWS Mainframe Modernization でレガシーシステムをクラウド化する AWS Mainframe Modernization を使ったメインフレームのクラウド移行を解説。リプラットフォーム (Micro Focus) とリファクタリング (Blu Age) の 2 パターンと移行戦略を紹介します。 AWS Mainframe Modernization でメインフレームを AWS に移行 - リプラットフォームとリファクタ Mainframe Modernization によるメインフレームアプリケーションの移行パターン、Blu Age と Micro Focus の使い分けを解説します。 メインフレーム刷新を加速する - AWS Transform でレガシー COBOL を数か月でモダナイズ AWS Transform for mainframe によるメインフレームモダナイゼーションを解説。COBOL コードの自動分析、Java への変換、段階的な移行戦略を紹介します。 AWS MGN による大規模移行の計画と実行 - ウェーブ設計とカットオーバー自動化 MGN を使った数百台規模のサーバー移行におけるウェーブ設計、自動化スクリプト、移行後の最適化手法を解説します。 AWS Application Migration Service (MGN) によるリフト&シフト移行の実践 MGN を使ったオンプレミスサーバーの AWS 移行を解説。エージェントのインストールからカットオーバーまでの手順と設計上の注意点を紹介します。 移行の一元管理 - AWS Migration Hub でクラウド移行の進捗を可視化する AWS Migration Hub を使ったクラウド移行の一元管理を解説。移行進捗の可視化、Application Discovery Service との統合、移行戦略の選択支援を紹介します。 AWS Migration Hub で一元管理する移行プロジェクト - 進捗追跡とアプリケーショングループ化 Migration Hub による移行プロジェクトの一元管理、アプリケーションの依存関係マッピング、進捗ダッシュボードの活用を解説します。 オフラインデータ転送 - AWS Snow Family で実現する大規模データのクラウド移行 AWS Snow Family (Snowcone、Snowball Edge、Snowmobile) による大規模データのオフライン転送と、AWS DataSync との組み合わせによるハイブリッドデータ移行戦略を解説します。ペタバイト規模のデータ移行の実践手法を紹介します。 AWS Migration Hub Refactor Spaces で実践するストラングラーフィグパターン - 段階的マイクロサービス化 Refactor Spaces によるストラングラーフィグパターンの実装、ルーティング制御、段階的な移行を解説します。 AWS Snow ファミリーによるオフラインデータ転送とエッジコンピューティング Snowcone、Snowball Edge、Snowmobile の選定基準、エッジコンピューティングの活用、大規模データ移行の計画手法を解説します。 AWS Transfer Family で構築するマネージド SFTP サーバー - S3 連携とユーザー管理 Transfer Family による SFTP/FTPS サーバーの構築、S3 との統合、カスタム認証の設定を解説します。 VMware ワークロードのクラウド移行 - Amazon EVS で既存環境をそのまま AWS へ Amazon Elastic VMware Service (EVS) を使った VMware ワークロードの AWS 移行を解説。VPC 統合、HCX による移行手順、オンプレミスとの接続設計を紹介します。 VMware ワークロードの EC2 変換 - AWS Transform for VMware で仮想マシンをクラウドネイティブ化 AWS Transform for VMware による VMware ワークロードの EC2 変換を解説。自動アセスメント、変換計画の生成、段階的な移行実行を紹介します。 Windows ワークロードのモダナイゼーション - AWS Transform で .NET と SQL Server を一括変換 AWS Transform for Windows による .NET Framework と SQL Server のモダナイゼーションを解説。フルスタック変換、ウェーブ方式の移行、コスト削減効果を紹介します。