S3アカウント間でファイルを直接移動しますか？

かなり基本的な質問ですが、答えを見つけることができませんでした。Transitを使用すると、あるAWSアカウントの1つのS3バケットから別のAWSアカウントの別のS3バケットにファイルを「移動」できますが、実際には、最初のファイルからファイルをダウンロードし、2番目のファイルにアップロードします。

間にファイルをダウンロードせずに、S3アカウント間でファイルを直接移動する方法はありますか？

既製のソリューションを探しているだけの場合、これを実行できるソリューションがいくつかあります。バケットエクスプローラーはMacとWindowsで動作し、Cloudberry S3エクスプローラー とS3ブラウザーと同様にアカウント間でコピーできますが、これらはWindowsのみであるため、機能しない場合があります。

私は疑うAWSコンソールはまた、適切なアクセス権の設定でそれを行うことができますが、私はこれをテストしていません。

宛先バケットへの書き込み権限を使用しているAWSアカウントを付与している限り、AWS APIを使用してそれを行うこともできます。

はい、方法があります。そして、それを見つけるのは難しいですが、それはかなりシンプルです。8）

たとえば、最初のアカウントのユーザー名がacc1@gmail.comで、2番目がacc2@gmail.comであるとします。

オープンAWS Management Consoleの ACC1として。Amazon S3バケットのプロパティに移動し、[Permissions]タブで[Add more permissions]をクリックします。次に、「認証済みユーザー」のリストおよび表示権限を追加します。

次に、acc2のAWS IAM（コンソールタブからアクセス可能）で、S3バケットへのフルアクセス権を持つユーザーを作成します（より安全にするために、正確なアクセス許可を設定できますが、転送用の一時ユーザーを作成することをお勧めします）削除します）。

次に、s3cmdを使用して（acc2で新しく作成されたユーザーの資格情報を使用）、次のようなことを実行できます。

s3cmd cp s3://acc1_bucket/folder/ s3://acc2_bucket/folder --recursive

すべての転送は、Amazon側で行われます。

使用のAWS CLIを（私は14 EC2インスタンスのUbuntuを使用）し、ちょうど次のコマンドを実行します。

aws s3 sync s3://bucket1 s3://bucket2

一方のアカウントの詳細を指定する必要があり、もう一方へのパブリック書き込みアクセスまたはパブリック読み取りアクセスを持っています。

これにより、2つのバケットが同期されます。後でもう一度同じコマンドを使用して、すばやく同期できます。最良の部分は、帯域幅を必要としないように見えることです（たとえば、ファイルがローカルコンピューターを通過しないなど）。

botoはうまく機能します。このスレッドを参照してください。botoを使用すると、オブジェクトをローカルマシンにダウンロードして別のバケットにアップロードするのではなく、オブジェクトをバケット間で直接コピーできます。

Mac OS XIでは、PanicのTransmitアプリを使用しました。S3アカウントごとに1つのウィンドウを開きました（APIキーとシークレットを使用）。次に、あるウィンドウの1つのバケットから別のウィンドウの別のバケットにドラッグできます。最初にローカルでファイルをダウンロードする必要はありません。

Andrewは正解です。Transmitはローカルでファイルをダウンロードしてから、ファイルをアップロードします。

S3ファイルをあるアカウントから別のアカウントに移動する

ソースアカウントと宛先アカウントの2つのアカウントがあるとします。そして、2つのバケットsource-bucketとdestination bucket。私たちは、すべてのファイルを移動したいsource-bucketのdestination-bucket。次の手順でそれを行うことができます：

1. aws configure
   • 認証情報またはIAMロールを使用して宛先アカウントを構成します。
2. 宛先アカウントユーザーのユーザーポリシーを作成します。
3. ソースバケットポリシーを変更し、そこに宛先アカウントユーザーポリシーを追加して、宛先ユーザーにソースバケットへのアクセス権を付与します。このようにして、宛先ユーザーはソースバケットにアクセスできます。
4. aws s3 ls s3://source-bucket/
   • これにより、宛先アカウントがソースバケットにアクセスできるかどうかが確認されます。確認のためだけにこれを行います。
5. aws s3 cp s3://source-bucket s3://destination-bucket --recursive
   • これにより、source-bucketのすべてのファイルがdestination-bucketにコピーされます。すべてのファイルは--recursiveフラグを使用してコピーされます。
6. aws s3 mv s3://source-bucket s3://destination-bucket --recursive
   • これにより、すべてのファイルがソースバケットから宛先バケットに移動します。

代わりに、syncコマンドを使用できます- aws s3 sync s3://source-bucket s3://detination-bucket

より良い説明のためにリンクに従ってください

CrossFTPは、S3ファイルをダウンロードすることなく、バケット間で直接コピーできます。これは、Windows、Mac、およびLinuxで動作するGUI S3クライアントです。

Cyber​​duck（オープンソース）を使用できます。

新しく作成されたファイル（既存のオブジェクトではない）の場合、AWSの新機能を利用できます。これは、クロスリージョンレプリケーションです（S3バケットの「バージョン管理」の下）。新しいオブジェクトを別のアカウントのバケットに複製できるようにするポリシーを作成できます。

既存のオブジェクトについては、別の方法を使用してオブジェクトをコピーする必要があります-AWSが将来これにネイティブ機能を導入しない限り。

次のように実行することでそれを行うことができます：

aws s3 mv (sync for keeping buckets in sync) s3://source-bucket s3://destination-bucket --recursive

1. ソースアカウントのソースバケットにバケットポリシーをアタッチします。

2. AWS Identity and Access Management（IAM）ポリシーを宛先アカウントのユーザーまたはロールにアタッチします。

3. 移行先アカウントのIAMユーザーまたはロールを使用して、クロスアカウント移動を実行します。