提高Amazon EC2上的数据传输率

|| 我已经将一个1G EBS卷安装到EC2实例, 我正在从本地硬盘驱动器复制600MB二进制数据(通过RDS连接) 并且复制过程窗口显示剩余10小时。 虽然我有高速连接(100 + Mbps) 无论数据量多大,数据传输速率均为1分钟/ MB(即16Kbs /秒) 我在阅读工作站前的Moby Dick还是休假之间都有些犹豫。 有什么合理的选择可以加快传输速率? (理想情况下至少为512 Kbps /秒) 我非常乐意采用任何解决方案来缩短EC2实例的上载/下载时间。 提前致谢。 编辑: 我偶然发现了[Amazon Export / Import Service] [1] \“ AWS Import / Export加速了在您寄给我们的AWS云与便携式存储设备之间的大量数据传输\”“寄给我们”的字面意思是您“实质性地”将存储设备运送到亚马逊不要说这是Stoneage,这是全新的技术,Dude! :-) 编辑2: 听起来不错:[适用于AW的Aspera] [2],但不幸的是价格太贵;为有大量需求和大量现金的财富500强企业量身定制。     
已邀请:
有时候,如果您想完成某件事,最好自己动手做:-) 我在网上找不到任何令我满意的东西,所以我花了一整晚时间做自己的完全基准测试。 我已经测试了一些替代方案/场景,结果如下: EC2上安装的FTP服务器是Filezilla服务器(正确的配置很容易) 用于此基准测试的FTP客户端是WinSPC(Filezilla客户端不起作用。请参阅此其他文章 图例:[HC]代表家庭连接(100MBps) 上载带宽 RDS上传:15 Kb / S =>更糟 FTP上传[在EC2上安装FTP服务器]:100 Kb / S 从HC从AWS管理控制台上传到S3:60 Kb / S 使用AWS控制台界面从EC2上传到S3:145 Kb / S 使用HC上的S3浏览器上传到S3:120 Kb / S 从EC2使用S3浏览器上传到S3:2000 Kb / S 下载带宽 RDS下载和上传:15 Kb / S =>更糟 FTP下载[在EC2上安装FTP服务器]:360 Kb / S 从EC2的S3 AWS控制台界面下载:350 Kb / S 使用S3浏览器从S3下载:从HC:380至620 Kb / S 使用S3浏览器从S3下载:从EC2下载:3000 Kb / S 结论: 因此,到目前为止,Amazon S3与S3 Browser结合使用可获得最佳结果。 (S3浏览器只是S3之上的一层,我不明白为什么上传速度会更好) 但是,请记住,EC2实例上的FTP服务器具有将本地EC2目录直接映射到EC2的巨大优势。与S3不同,仅涉及一次转移。实际上,S3需要进行2次传输:从本地资源到S3 /从S3到EC2,反之亦然,而FTP访问则通过缩短传输周期来立即进行传输。此外,它节省了S3铲斗的成本。 有趣的是,EC2实例的带宽确实很强。因此,有趣的是-不用说,使用真正利用它的协议,例如S3或FTP,而不是RDS。 我希望这对面临相同问题的其他人有用,并节省他们宝贵的时间。     
使用Aspera或Tsunami UDP,并将600 MB移至您的Amazon EC2基础设施(跳框)。然后在内部从Jumpbox复制到Windows ec2。我的基准测试显示,与传统模式相比,海啸UDP的速度要快得多。     

要回复问题请先登录注册