AWS DataSync
AWS DataSync
AWS DataSync API 在数据源（NFS、SMB、HDFS、对象存储）和 AWS 存储（S3、EFS、FSx）之间高效迁移和同步数据。
比手动 aws s3 cp 快 10 倍以上（并行化 + 增量）
按传输 GB 计费（约 0.0125 美元/GB）
CreateAgent（如果有 on-prem 源），CreateLocation 配置源和目标，CreateTask 创建迁移任务，StartTaskExecution 执行。
可用率 · 30 天窗口
GitHub 活跃度
关于这个 API
DataSync 是 AWS 的数据迁移服务。如果你要把 TB 或 PB 级的数据搬到 AWS（典型场景：on-prem 数据中心退役迁云、定期备份、混合云数据同步），单靠 aws s3 cp 太慢——网络带宽利用率低、没有增量、没有校验。DataSync 是专为这个场景设计的工具：并行多线程传输打满带宽、自动增量（只传变化的文件）、自动校验完整性、支持调度做定期同步。on-prem 端需要部署一个 DataSync agent（VMware/Hyper-V/EC2 形态的虚机），这个 agent 充当本地协议（NFS/SMB）和 AWS 之间的桥。和 Storage Gateway 区别：Storage Gateway 是"实时混合接入"，DataSync 是"一次性或定期搬迁"。
你可以做什么
- 1on-prem NFS 数据迁到 S3
- 2定期备份 on-prem 文件服务器到 AWS
- 3跨 region S3 数据同步
- 4云间数据搬迁（Azure Blob 到 S3）
优劣对比
优点
- 比手动 aws s3 cp 快 10 倍以上（并行化 + 增量）
- 内置完整性验证（MD5/SHA-256）
- 支持调度和 incremental sync
- on-prem 部署 DataSync agent（虚拟机）
注意事项
- 按传输 GB 计费（约 0.0125 美元/GB）
- agent 需要部署在 on-prem，运维一次性成本
快速开始
CreateAgent（如果有 on-prem 源），CreateLocation 配置源和目标，CreateTask 创建迁移任务，StartTaskExecution 执行。
常见问题
DataSync vs Storage Gateway 怎么选？+
一次性迁移或定期同步：DataSync。on-prem 应用持续访问 AWS 存储（像本地一样）：Storage Gateway。
数据量大于 100TB 应该用 Snowball 吗？+
PB 级或者带宽紧张：Snowball（邮寄硬盘）。100TB 且有 1Gbps 网络：DataSync 也可以。
技术细节
- 认证方式
- unknown
- 计费
- unknown
- 协议
- REST
- SDK
- python, javascript, go, java, csharp
- 响应时间
- 47 ms
- 上次巡检
- 2026/6/26 06:22:15
更多来自 Amazon Web Services 的 API
AWS IAM Access Analyzer API 分析 IAM 资源策略找潜在的过度授权或外部访问，主动识别安全风险。
Alexa for Business帮助企业在组织内使用Alexa设备和服务。
Amazon API Gateway帮助开发者构建安全且可扩展的移动和网页应用后端。
用于创建、管理和快速部署应用配置的服务。
Amazon AppFlow 提供云端数据流管理和集成服务。支持不同云服务间的数据传输和同步。
Amazon AppIntegrations 服务用于配置和重用与外部应用的连接。
Amazon AppStream 2.0 提供云端应用程序流式传输服务，支持远程访问和管理。
Amazon Athena 是一种交互式查询服务，允许使用标准 SQL 直接分析存储在 Amazon S3 中的数据。