Pindahkan fail ke storan objek.
Bawa fail daripada Amazon S3, Google Cloud Storage, mana-mana storan serasi S3 atau folder pada pelayan anda ke dalam bucket: salin semuanya sekali gus, atau pindahkan secara beransur-ansur tanpa henti tugas.
Sudah menyimpan fail di tempat lain? Pindahkannya ke bucket aplikasi anda dengan salah satu daripada dua cara. Kedua-duanya bermula dari panel: aplikasi → Storan → bucket → Pindahkan fail masuk.
| Salin semuanya sekarang | Pindah beransur-ansur, tanpa henti tugas | |
|---|---|---|
| Apa yang berlaku | setiap fail disalin sekali gus | fail disalin kali pertama aplikasi anda membacanya |
| Bila menukar aplikasi anda | selepas salinan selesai | serta-merta |
| Kemajuan | fail ditemui, disalin, dilangkau, tidak disalin; jeda, sambung, hentikan | aktif sehingga anda mematikannya |
| Storan lama | Amazon S3, Google Cloud Storage, serasi S3 | Amazon S3, Google Cloud Storage |
Salinan berjalan di pihak kami — komputer anda tidak perlu terus hidup. Apabila ia selesai (atau jika ia berhenti sebelum tamat), anda akan menerima e-mel dan mesej Telegram.
Pemindahan fail tersedia untuk pemilik akaun dan Pentadbir aplikasi (lihat Akses pasukan), dan juga melalui API, CLI dan MCP.
Sebelum bermula: kunci yang hanya boleh membaca
Buat kunci berasingan untuk pemindahan ini dalam storan lama anda yang hanya boleh menyenaraikan dan membaca satu bucket tersebut. Jangan sekali-kali menampal kunci utama anda. Kunci hanya digunakan untuk pemindahan ini; kami tidak menyimpannya, dan ia tidak akan dipaparkan lagi. Padamkannya di penyedia lama sebaik sahaja pemindahan selesai.
Amazon S3
Dalam IAM, cipta pengguna (atau peranan dengan kunci akses) dengan polisi ini — gantikan my-old-bucket dengan bucket anda:
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": ["s3:List*", "s3:Get*"],
"Resource": ["arn:aws:s3:::my-old-bucket", "arn:aws:s3:::my-old-bucket/*"]
}
]
}Kemudian cipta kunci akses untuknya. Dalam panel, anda memerlukan ID kunci akses, kunci akses rahsia, nama bucket dan rantaunya (contohnya eu-central-1; ia dipaparkan di sebelah bucket dalam konsol S3).
Google Cloud Storage
Cipta akaun perkhidmatan dengan akses baca ke bucket dan muat turun kunci JSONnya:
gcloud iam service-accounts create rivervo-move --display-name="Move files to Rivervo"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
--iam-account="rivervo-move@MY-PROJECT.iam.gserviceaccount.com"Storage Object Viewer membaca fail; Storage Legacy Bucket Reader membolehkan salinan membaca bucket itu sendiri. Dalam panel, tampal keseluruhan kandungan key.json. Padamkan fail kunci daripada komputer anda selepas itu.
Storan serasi S3 yang lain
Mana-mana storan dengan API S3 berfungsi dengan cara yang sama: cipta kunci yang hanya boleh menyenaraikan dan membaca bucket (kebanyakan penyedia memanggilnya kunci «read-only» atau «restricted»), dan cari alamat S3 bagi rantau bucket — contohnya https://s3.eu-central-003.backblazeb2.com. Masukkan alamat tanpa nama bucket.
Salin semuanya sekarang
- Aplikasi → Storan → bucket → Pindahkan fail masuk.
- Pilih Salin semuanya sekarang, storan lama, bucket di sana, rantau atau alamat S3, dan tampal kunci.
- Pilihan: folder — salin
photos/sahaja, contohnya. - Fail yang sudah ada di sini: secara lalai, fail dengan nama yang sama yang sudah ada dalam bucket dikekalkan dan fail daripada storan lama dilangkau. Hidupkan Gantikannya untuk menulis ganti.
- Mulakan salinan dan sahkan.
Kad menunjukkan bilangan fail yang ditemui, disalin, dilangkau dan tidak disalin, bersama bar kemajuan; Tunjukkan log menamakan fail yang dilangkau atau tidak dapat disalin. Anda boleh Jeda, Sambung atau Hentikan salinan — fail yang sudah disalin kekal. Sebaik sahaja salinan selesai, tukar aplikasi anda ke bucket (ia sudah mempunyai pemboleh ubah S3_*).
Fail mengekalkan namanya (kunci). Menjalankan salinan sekali lagi kemudian hanya menyalin apa yang tiada (dengan Gantikannya dimatikan).
Pindah beransur-ansur, tanpa henti tugas
Berguna apabila aplikasi mesti terus berfungsi dan fail sentiasa ditambah:
- Pindahkan fail masuk → Pindah beransur-ansur, tanpa henti tugas, storan lama, bucket dan kunci → Hidupkan pemindahan beransur-ansur.
- Tukar aplikasi anda ke bucket ini dengan segera (pemboleh ubah
S3_*nya) dan lakukan deploy. - Apabila aplikasi membaca fail yang belum ada dalam bucket, fail itu disalin daripada storan lama pada saat itu dan dihidangkan. Muat naik baharu terus masuk ke bucket.
- Untuk menamatkan: jalankan Salin semuanya sekarang bagi fail yang belum pernah dibaca (dengan Gantikannya dimatikan, supaya fail yang lebih baharu kekal), tunggu sehingga selesai, kemudian Matikan pemindahan beransur-ansur.
Sehingga anda mematikannya, storan lama mesti kekal tersedia dengan kunci yang sama. Fail yang tidak pernah dibaca dan tidak disalin tidak akan diambil lagi selepas ia dimatikan.
Daripada folder pada pelayan anda
Untuk memindahkan fail daripada VPS atau mana-mana pelayan lain (contohnya storage/app/public bagi laman web Laravel), gunakan rclone dengan kunci bucket itu sendiri. Cari kunci tersebut di tab Pemboleh ubah aplikasi: S3_ENDPOINT, S3_BUCKET, S3_KEY dan S3_SECRET (bucket kedua mempunyai namanya di hadapan: MEDIA_S3_KEY …).
# Pasang rclone (Linux)
curl https://rclone.org/install.sh | sudo bash
# Kunci bucket sebagai pemboleh ubah persekitaran — ia tidak disimpan dalam fail konfigurasi
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='nilai S3_ENDPOINT'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='nilai S3_KEY'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='nilai S3_SECRET'
# Salin folder ke dalam bucket (nilai S3_BUCKET), dengan mengekalkan struktur folder
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
# Semak bahawa setiap fail telah tiba
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-wayrclone copy tidak pernah memadam apa-apa dalam bucket dan melangkau fail yang sudah ada tanpa perubahan, jadi anda boleh menjalankannya semula selepas terhenti. Jalankannya di dalam tmux atau screen pada pelayan untuk salinan yang panjang — dengan itu ia terus berjalan jika sambungan SSH anda terputus.
Kosnya
Tiada caj untuk pemindahan itu sendiri. Fail dalam bucket dikenakan harga storan objek biasa, dibayar daripada baki anda:
- storan: US$0.025 setiap GB sebulan — 50 GB berharga kira-kira US$1.25 sebulan;
- penulisan: US$6.00 setiap sejuta — setiap fail yang disalin adalah kira-kira satu penulisan, jadi 100 000 fail berharga kira-kira US$0.60 (fail yang sangat besar dimuat naik dalam beberapa bahagian dan dikira sebagai beberapa penulisan);
- bacaan yang dibuat semasa pemindahan beransur-ansur adalah bacaan biasa (US$0.50 setiap sejuta).
Kebanyakan penyedia storan awan mengenakan caj untuk data yang keluar (egress). Semak senarai harga penyedia lama anda sebelum memindahkan data yang banyak.
Pemindahan fail memerlukan baki positif, sama seperti menambah bucket. Ia tidak tersedia semasa percubaan percuma dan tidak ke bucket yang dalam mod baca sahaja (melebihi had saiznya, atau melebihi apa yang dapat dibayar oleh baki) — panel menerangkan sebabnya dan menawarkan tambah baki jika ia membantu. Jika bucket menjadi baca sahaja semasa salinan berjalan, salinan dijeda dan bersambung dengan sendirinya sebaik sahaja penulisan boleh dilakukan semula.
Had
- Satu salinan dan satu pemindahan beransur-ansur pada satu masa bagi setiap bucket.
- Fail yang lebih besar daripada 1 TB dilangkau oleh salinan.
- Fail dalam kelas arkib yang perlu dipulihkan sebelum dibaca (S3 Glacier Flexible Retrieval, Glacier Deep Archive) dilangkau; pulihkannya dahulu.
- Hanya metadata anda sendiri (
x-amz-meta-*) dipindahkan bersama fail; ETag fail mungkin berbeza daripada yang lama. - Fail yang dipadam daripada bucket semasa pemindahan beransur-ansur aktif akan disalin semula pada kali seterusnya ia dibaca.