URLからAmazon S3にデータをインポートする方法


14

S3バケットと大きなファイルのURLがあります。S3バケットのURLにあるコンテンツを保存したいと思います。

ファイルをローカルマシンにダウンロードしてから、CloudberryまたはJunglediskなどを使用してS3にアップロードできます。ただし、ファイルが大きい場合、ファイルを2回転送する必要があり、ネットワーク接続がAmazonよりはるかに遅いため、これには長い時間がかかる場合があります。

S3に保存するデータが多い場合、EC2インスタンスを起動し、curlまたはwgetを使用してインスタンスにファイルを取得し、EC2インスタンスからS3にデータをプッシュできます。これは機能しますが、ファイルを1つだけアーカイブしたい場合には多くの手順が必要です。

助言がありますか?

回答:


3

Amazon S3の実行方法、ファイルへのデータの投稿、データの取得は行われないという理由だけで、ファイルをローカルに保持するステップなしでこれを実行できる方法は知りません。


2

これは古い質問であることがわかりますが、まだ興味のある人に答えています。
私の会社では、クラウドサービス間でファイルを転送するための多くのオプションを備えた新しいWebサイトをリリースしました。
これらの機能のいずれかを使用すると、ファイルをコンピューターにダウンロードせずに目的の操作を行うことができます。URLからAmazon S3に直接移動します。ウェブサイトには、www.example.com / files / myなどの完全なファイルURLが必要です.jpg。
WebサイトのURL:http : //www.autofilemove.com
http://www.autofilemove.com/Support/Features Web Url機能をチェック

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.