Premještanje datoteka u objektnu pohranu.
Prenesite datoteke iz Amazon S3, Google Cloud Storagea, bilo koje S3-kompatibilne pohrane ili mape na svom serveru u bucket: kopirajte sve odjednom ili ih premještajte postupno, bez prekida rada.
Već držite datoteke negdje drugdje? Premjestite ih u bucket svoje aplikacije na jedan od dva načina. Oba počinju u panelu: aplikacija → Pohrana → bucket → Premjesti datoteke ovamo.
| Kopiraj sve sada | Premještaj postupno, bez prekida rada | |
|---|---|---|
| Što se događa | sve se datoteke kopiraju odjednom | datoteka se kopira kad je vaša aplikacija prvi put pročita |
| Kada prebaciti aplikaciju | nakon što kopiranje završi | odmah |
| Napredak | pronađene, kopirane, preskočene i nekopirane datoteke; pauza, nastavak, zaustavljanje | uključeno dok ga ne isključite |
| Stara pohrana | Amazon S3, Google Cloud Storage, S3-kompatibilna | Amazon S3, Google Cloud Storage |
Kopiranje se odvija na našoj strani — vaše računalo ne mora ostati uključeno. Kad završi (ili ako se zaustavi prije kraja), dobit ćete e-poruku i poruku na Telegramu.
Premještanje datoteka dostupno je vlasniku računa i administratorima aplikacije (pogledajte Pristup tima), a također i putem API-ja, CLI-ja i MCP-a.
Prije početka: ključ koji može samo čitati
U staroj pohrani izradite zaseban ključ za ovo premještanje koji može samo izlistati i čitati taj jedan bucket. Nikad ne lijepite svoje glavne ključeve. Ključ se koristi samo za ovo premještanje; ne čuvamo ga i više se nikad ne prikazuje. Kad premještanje završi, izbrišite ga kod starog pružatelja.
Amazon S3
U IAM-u izradite korisnika (ili ulogu s pristupnim ključem) s ovim pravilom — zamijenite my-old-bucket svojim bucketom:
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": ["s3:List*", "s3:Get*"],
"Resource": ["arn:aws:s3:::my-old-bucket", "arn:aws:s3:::my-old-bucket/*"]
}
]
}Zatim za njega izradite pristupni ključ. U panelu su vam potrebni ID pristupnog ključa, tajni pristupni ključ, naziv bucketa i njegova regija (na primjer eu-central-1; prikazana je pokraj bucketa u S3 konzoli).
Google Cloud Storage
Izradite servisni račun s pristupom za čitanje bucketa i preuzmite njegov JSON ključ:
gcloud iam service-accounts create rivervo-move --display-name="Move files to Rivervo"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
--iam-account="rivervo-move@MY-PROJECT.iam.gserviceaccount.com"Storage Object Viewer čita datoteke; Storage Legacy Bucket Reader omogućuje kopiranju da čita sam bucket. U panel zalijepite cijeli sadržaj datoteke key.json. Nakon toga izbrišite datoteku s ključem sa svog računala.
Druga S3-kompatibilna pohrana
Svaka pohrana sa S3 API-jem radi na isti način: izradite ključ koji može samo izlistati i čitati bucket (većina pružatelja zove ga ključ «samo za čitanje» ili «ograničeni» ključ) i pronađite S3 adresu regije bucketa — na primjer https://s3.eu-central-003.backblazeb2.com. Unesite adresu bez naziva bucketa.
Kopiraj sve sada
- Aplikacija → Pohrana → bucket → Premjesti datoteke ovamo.
- Odaberite Kopiraj sve sada, staru pohranu, bucket u njoj, regiju ili S3 adresu i zalijepite ključ.
- Neobavezno: mapa — kopirajte, na primjer, samo
photos/. - Datoteke koje su već ovdje: prema zadanim postavkama datoteka s istim nazivom koja je već u bucketu se zadržava, a ona iz stare pohrane preskače. Uključite Zamijeni ih za prepisivanje.
- Pokreni kopiranje i potvrdite.
Kartica prikazuje koliko je datoteka pronađeno, kopirano, preskočeno i nije kopirano, uz traku napretka; Prikaži zapis navodi datoteke koje su preskočene ili se nisu mogle kopirati. Možete kliknuti Pauziraj, Nastavi ili Zaustavi kopiranje — već kopirane datoteke ostaju. Kad kopiranje završi, prebacite aplikaciju na bucket (ona već ima S3_* varijable).
Datoteke zadržavaju svoje nazive (ključeve). Ako kasnije ponovno pokrenete kopiranje, kopira se samo ono što nedostaje (uz isključeno Zamijeni ih).
Premještaj postupno, bez prekida rada
Korisno kad aplikacija mora nastaviti raditi, a datoteke se stalno dodaju:
- Premjesti datoteke ovamo → Premještaj postupno, bez prekida rada, stara pohrana, bucket i ključ → Uključi postupno premještanje.
- Odmah prebacite aplikaciju na ovaj bucket (njegove
S3_*varijable) i pokrenite deploy. - Kad aplikacija čita datoteku koje još nema u bucketu, ona se u tom trenutku kopira iz stare pohrane i isporučuje. Novi prijenosi idu izravno u bucket.
- Za završetak: pokrenite Kopiraj sve sada za datoteke koje još nitko nije pročitao (uz isključeno Zamijeni ih, da novije datoteke ostanu), pričekajte da završi, zatim Isključi postupno premještanje.
Dok ga ne isključite, stara pohrana mora ostati dostupna s istim ključem. Datoteke koje nikad nisu pročitane ni kopirane nakon isključivanja više se ne dohvaćaju.
Iz mape na vašem serveru
Za premještanje datoteka s VPS-a ili bilo kojeg drugog servera (na primjer storage/app/public Laravel stranice) koristite rclone s vlastitim ključevima bucketa. Pronaći ćete ih na kartici Varijable aplikacije: S3_ENDPOINT, S3_BUCKET, S3_KEY i S3_SECRET (drugi bucket ima svoj naziv ispred: MEDIA_S3_KEY …).
# Instalirajte rclone (Linux)
curl https://rclone.org/install.sh | sudo bash
# Ključevi bucketa kao varijable okruženja — ne završavaju u konfiguracijskoj datoteci
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='vrijednost S3_ENDPOINT'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='vrijednost S3_KEY'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='vrijednost S3_SECRET'
# Kopirajte mapu u bucket (vrijednost S3_BUCKET), uz zadržavanje strukture mapa
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
# Provjerite jesu li stigle sve datoteke
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-wayrclone copy nikad ništa ne briše u bucketu i preskače datoteke koje su već ondje nepromijenjene, pa ga nakon prekida možete ponovno pokrenuti. Za dugo kopiranje pokrenite ga unutar tmux ili screen na serveru — tada nastavlja raditi i ako se vaša SSH veza prekine.
Koliko košta
Za samo premještanje nema naknade. Datoteke u bucketu naplaćuju se po uobičajenim cijenama objektne pohrane, s vašeg salda:
- pohrana: 0,025 USD po GB mjesečno — 50 GB stoji oko 1,25 USD mjesečno;
- upisi: 6,00 USD po milijunu — svaka kopirana datoteka otprilike je jedan upis, pa 100.000 datoteka stoji oko 0,60 USD (vrlo velika datoteka prenosi se u dijelovima i broji se kao nekoliko upisa);
- čitanja tijekom postupnog premještanja obična su čitanja (0,50 USD po milijunu).
Većina pružatelja pohrane u oblaku naplaćuje podatke koji od njih odlaze (egress). Prije premještanja veće količine podataka provjerite cjenik starog pružatelja.
Za premještanje datoteka potreban je pozitivan saldo, kao i za dodavanje bucketa. Nije dostupno tijekom besplatnog probnog razdoblja ni u bucket koji je samo za čitanje (iznad ograničenja veličine ili iznad onoga što saldo pokriva) — panel navodi razlog i nudi nadoplatu ondje gdje to pomaže. Ako tijekom kopiranja bucket postane samo za čitanje, kopiranje se pauzira i samo nastavlja čim upisivanje ponovno bude moguće.
Ograničenja
- Jedno kopiranje i jedno postupno premještanje istodobno po bucketu.
- Datoteke veće od 1 TB kopiranje preskače.
- Datoteke u arhivskim klasama koje se prije čitanja moraju vratiti (S3 Glacier Flexible Retrieval, Glacier Deep Archive) preskaču se; najprije ih vratite.
- S datotekom se premještaju samo vaši vlastiti metapodaci (
x-amz-meta-*); ETag datoteke može se razlikovati od starog. - Datoteka izbrisana iz bucketa dok je postupno premještanje uključeno ponovno se kopira kad se sljedeći put pročita.