Pertanyaan yang cukup mendasar tetapi saya belum dapat menemukan jawabannya. Dengan menggunakan Transit, saya dapat "memindahkan" file dari satu bucket S3 di satu akun AWS ke bucket S3 lain di akun AWS lain, tetapi yang sebenarnya dilakukannya adalah mengunduh file dari yang pertama lalu mengunggahnya ke yang kedua.
Apakah ada cara untuk memindahkan file secara langsung dari satu akun S3 ke yang lain tanpa mengunduhnya di antaranya?
Jawaban:
Jika Anda hanya mencari solusi siap pakai, ada beberapa solusi di luar sana yang dapat melakukan ini. Bucket Explorer bekerja di Mac dan Windows dan dapat menyalin di seluruh akun seperti halnya Cloudberry S3 Explorer dan S3 Browser tetapi mereka hanya untuk Windows sehingga mungkin tidak berfungsi untuk Anda.
Saya menduga konsol AWS juga dapat melakukannya dengan pengaturan izin yang sesuai tetapi saya belum menguji ini.
Anda juga dapat melakukannya menggunakan AWS API selama Anda telah memberikan akun AWS yang Anda gunakan izin tulis ke bucket tujuan.
Ya, ada caranya. Dan itu sangat sederhana, meskipun sulit untuk menemukannya. 8)
Misalnya, nama pengguna akun pertama Anda adalah acc1@gmail.com dan yang kedua adalah acc2@gmail.com.
Buka AWS Management Console sebagai acc1. Buka properti bucket Amazon S3, dan di tab "Izin" klik "Tambahkan lebih banyak izin". Kemudian tambahkan Izin Daftar dan Lihat untuk "Pengguna yang Diotentikasi".
Selanjutnya, di AWS IAM (dapat diakses dari antara tab konsol) acc2 buat pengguna dengan akses penuh ke bucket S3 (agar lebih aman, Anda dapat mengatur izin yang tepat, tetapi saya lebih suka membuat pengguna sementara untuk transfer lalu hapus).
Kemudian Anda dapat menggunakan s3cmd (menggunakan kredensial pengguna yang baru dibuat di acc2) untuk melakukan sesuatu seperti:
s3cmd cp s3://acc1_bucket/folder/ s3://acc2_bucket/folder --recursive
Semua transfer akan dilakukan di pihak Amazon.
rsync, Anda dapat menggunakan s3cmd sync s3://acc1_bucket s3://acc2_bucket.
s3cmddapat diinstal dengan homebrew juga, fyi
--acl-publicsebaliknya, semua file bersifat pribadi (setidaknya untuk saya ketika saya melakukan perintah). dengan begitu banyak file pribadi, saya harus menambahkan kebijakan di keranjang untuk membuatnya menjadi publik lagi
Gunakan aws cli (saya menggunakan ubuntu 14 ec2 instance) dan jalankan perintah berikut:
aws s3 sync s3://bucket1 s3://bucket2
Anda perlu menentukan detail akun untuk satu akun, dan memiliki akses tulis publik atau akses baca publik ke akun lainnya.
Ini akan menyinkronkan kedua keranjang. Anda dapat menggunakan perintah yang sama lagi nanti untuk menyinkronkan dengan cepat. Bagian terbaiknya adalah sepertinya tidak memerlukan bandwidth (mis. File tidak melewati komputer lokal).
aws s3 synctampaknya berjalan sekitar urutan besarnya lebih cepat dari s3cmd cp.
--grantsopsi. Info lebih lanjut di dokumentasi: docs.aws.amazon.com/cli/latest/reference/s3/sync.html
--grants. Saya mempelajari ini setelah menyalin banyak data dan kemudian harus mengulangi sinkronisasi ke keranjang baru. --grants read=uri=http://acs.amazonaws.com/groups/global/AllUsersmengatur izin baca untuk pengguna publik.
s3cmdsaya, dan juga dapat menyinkronkan file perubahan daripada menyalin ulang semuanya jika Anda perlu menjalankan kembali perintah di masa mendatang - jauh lebih baik!
Di Mac OS XI menggunakan aplikasi Transmit dari Panic. Saya membuka satu jendela untuk setiap akun S3 (menggunakan Kunci dan rahasia API). Saya kemudian dapat menyeret dari satu ember di satu jendela ke ember lain di jendela lain. Tidak perlu mengunduh file secara lokal terlebih dahulu .
Andrew benar, Transmit mengunduh file secara lokal kemudian mengunggah file.
Mari kita pertimbangkan ada dua akun sumber akun dan akun tujuan. Dan dua ember source-bucketdan destination bucket. Kami ingin memindahkan semua file dari source-bucketke destination-bucket. Kita bisa melakukannya dengan langkah-langkah berikut:
aws configure
aws s3 ls s3://source-bucket/
aws s3 cp s3://source-bucket s3://destination-bucket --recursive
aws s3 mv s3://source-bucket s3://destination-bucket --recursive
Alternatif Anda dapat menggunakan perintah sinkronisasi - aws s3 sync s3://source-bucket s3://detination-bucket
Untuk Penjelasan Lebih Baik ikuti tautannya
CrossFTP dapat menyalin file S3 langsung dari satu wadah ke wadah lain tanpa mengunduhnya. Ini adalah klien GUI S3 yang bekerja di Windows, Mac, dan Linux.
Anda dapat menggunakan Cyberduck (open source)
Untuk file yang baru dibuat (BUKAN objek yang ada), Anda dapat memanfaatkan fungsionalitas baru dari AWS. Ini adalah Replikasi Lintas Wilayah (di bawah "Pembuatan Versi" untuk bucket S3). Anda dapat membuat kebijakan yang memungkinkan Anda mereplikasi objek baru ke keranjang di akun lain.
Untuk objek yang sudah ada, Anda masih perlu menyalin objek Anda menggunakan metode lain - kecuali AWS memperkenalkan fungsionalitas asli untuk ini di masa mendatang.
Satu dapat melakukannya dengan menjalankan berikut:
aws s3 mv (sync for keeping buckets in sync) s3://source-bucket s3://destination-bucket --recursive
Lampirkan kebijakan keranjang ke keranjang sumber di Akun Sumber.
Lampirkan kebijakan AWS Identity and Access Management (IAM) ke pengguna atau peran di Akun Tujuan.
Gunakan pengguna atau peran IAM di Akun Tujuan untuk melakukan pemindahan lintas akun.