Premeštanje fajlova u objektno skladište.
Prenesite fajlove iz Amazon S3, Google Cloud Storage, bilo kog S3-kompatibilnog skladišta ili foldera na svom serveru u bucket: kopirajte sve odjednom ili premeštajte postepeno, bez prekida rada.
Već čuvate fajlove negde drugde? Premestite ih u bucket svoje aplikacije na jedan od dva načina. Oba počinju iz panela: aplikacija → Skladište → bucket → Premesti fajlove ovde.
| Kopiraj sve sada | Premeštaj postepeno, bez prekida rada | |
|---|---|---|
| Šta se dešava | svi fajlovi se kopiraju u jednom potezu | fajl se kopira kada ga vaša aplikacija prvi put pročita |
| Kada prebaciti aplikaciju | kada se kopiranje završi | odmah |
| Napredak | pronađeni, kopirani, preskočeni, nekopirani fajlovi; pauza, nastavak, zaustavljanje | uključeno dok ga ne isključite |
| Staro skladište | Amazon S3, Google Cloud Storage, S3-kompatibilno | Amazon S3, Google Cloud Storage |
Kopiranje se izvršava na našoj strani — vaš računar ne mora da ostane uključen. Kada se završi (ili ako se zaustavi pre kraja), dobijate imejl i Telegram poruku.
Premeštanje fajlova dostupno je vlasniku naloga i administratorima aplikacije (pogledajte Pristup tima), a takođe i preko API-ja, CLI-ja i MCP-a.
Pre početka: ključ koji može samo da čita
U starom skladištu napravite poseban ključ za ovo premeštanje koji može samo da izlistava i čita taj jedan bucket. Nikada ne lepite svoje glavne ključeve. Ključ se koristi samo za ovo premeštanje; ne čuvamo ga i nikada se ponovo ne prikazuje. Obrišite ga kod starog provajdera kada premeštanje bude završeno.
Amazon S3
U IAM-u napravite korisnika (ili ulogu sa pristupnim ključem) sa ovom polisom — zamenite my-old-bucket svojim bucketom:
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": ["s3:List*", "s3:Get*"],
"Resource": ["arn:aws:s3:::my-old-bucket", "arn:aws:s3:::my-old-bucket/*"]
}
]
}Zatim za njega napravite pristupni ključ. U panelu su vam potrebni ID pristupnog ključa, tajni pristupni ključ, ime bucketa i njegov region (na primer eu-central-1; prikazan je pored bucketa u S3 konzoli).
Google Cloud Storage
Napravite servisni nalog sa pravom čitanja bucketa i preuzmite njegov JSON ključ:
gcloud iam service-accounts create rivervo-move --display-name="Move files to Rivervo"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
--iam-account="rivervo-move@MY-PROJECT.iam.gserviceaccount.com"Storage Object Viewer čita fajlove; Storage Legacy Bucket Reader omogućava kopiranju da čita sam bucket. U panel nalepite ceo sadržaj fajla key.json. Posle toga obrišite fajl sa ključem sa svog računara.
Druga S3-kompatibilna skladišta
Svako skladište sa S3 API-jem radi na isti način: napravite ključ koji može samo da izlistava i čita bucket (većina provajdera ga zove „read-only“ ili „restricted“ ključ) i pronađite S3 adresu regiona bucketa — na primer https://s3.eu-central-003.backblazeb2.com. Unesite adresu bez imena bucketa.
Kopiraj sve sada
- Aplikacija → Skladište → bucket → Premesti fajlove ovde.
- Izaberite Kopiraj sve sada, staro skladište, bucket u njemu, region ili S3 adresu i nalepite ključ.
- Opciono: folder — na primer, kopirajte samo
photos/. - Fajlovi koji već postoje ovde: podrazumevano se fajl sa istim imenom koji već postoji u bucketu zadržava, a onaj iz starog skladišta preskače. Uključite Zameni ih da biste ih prepisali.
- Pokreni kopiranje i potvrdite.
Kartica prikazuje koliko je fajlova pronađeno, kopirano, preskočeno i nije kopirano, uz traku napretka; Prikaži log navodi fajlove koji su preskočeni ili nisu mogli da se kopiraju. Možete izabrati Pauziraj, Nastavi ili Zaustavi kopiranje — već kopirani fajlovi ostaju. Kada se kopiranje završi, prebacite aplikaciju na bucket (ona već ima S3_* promenljive).
Fajlovi zadržavaju svoja imena (ključeve). Ako kasnije ponovo pokrenete kopiranje, kopira se samo ono što nedostaje (uz isključeno Zameni ih).
Premeštaj postepeno, bez prekida rada
Korisno kada aplikacija mora da nastavi da radi, a fajlovi se stalno dodaju:
- Premesti fajlove ovde → Premeštaj postepeno, bez prekida rada, staro skladište, bucket i ključ → Uključi postepeno premeštanje.
- Odmah prebacite aplikaciju na ovaj bucket (njegove
S3_*promenljive) i uradite deploy. - Kada aplikacija čita fajl koji još nije u bucketu, on se u tom trenutku kopira iz starog skladišta i isporučuje. Nova otpremanja idu direktno u bucket.
- Za završetak: pokrenite Kopiraj sve sada za fajlove koje još niko nije pročitao (uz isključeno Zameni ih, kako bi noviji fajlovi ostali), sačekajte da se završi, a zatim Isključi postepeno premeštanje.
Dok ga ne isključite, staro skladište mora ostati dostupno sa istim ključem. Fajlovi koji nikada nisu pročitani i nisu kopirani više se ne preuzimaju kada se ono isključi.
Iz foldera na vašem serveru
Da biste premestili fajlove sa VPS-a ili bilo kog drugog servera (na primer storage/app/public Laravel sajta), koristite rclone sa sopstvenim ključevima bucketa. Pronaći ćete ih na kartici Promenljive aplikacije: S3_ENDPOINT, S3_BUCKET, S3_KEY i S3_SECRET (drugi bucket ima svoje ime ispred: MEDIA_S3_KEY …).
# Instalirajte rclone (Linux)
curl https://rclone.org/install.sh | sudo bash
# Ključevi bucketa kao promenljive okruženja — ne završavaju u konfiguracionom fajlu
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='vrednost S3_ENDPOINT'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='vrednost S3_KEY'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='vrednost S3_SECRET'
# Kopirajte folder u bucket (vrednost S3_BUCKET), uz očuvanu strukturu foldera
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
# Proverite da li su svi fajlovi stigli
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-wayrclone copy nikada ne briše ništa u bucketu i preskače fajlove koji su već tamo neizmenjeni, pa ga možete ponovo pokrenuti posle prekida. Za dugo kopiranje pokrenite ga unutar tmux ili screen na serveru — tada nastavlja da radi i ako vam se SSH veza prekine.
Koliko košta
Za samo premeštanje nema naknade. Fajlovi u bucketu koštaju po uobičajenim cenama objektnog skladišta, a plaćaju se sa vašeg stanja:
- čuvanje: 0,025 US$ po GB mesečno — 50 GB košta oko 1,25 US$ mesečno;
- upisi: 6,00 US$ po milion — svaki kopirani fajl je otprilike jedan upis, pa 100.000 fajlova košta oko 0,60 US$ (veoma veliki fajl se otprema u delovima i računa se kao nekoliko upisa);
- čitanja tokom postepenog premeštanja su obična čitanja (0,50 US$ po milion).
Većina provajdera cloud skladišta naplaćuje podatke koji odlaze od njih (egress). Pre premeštanja veće količine podataka proverite cenovnik svog starog provajdera.
Za premeštanje fajlova potrebno je pozitivno stanje, isto kao za dodavanje bucketa. Nije dostupno tokom besplatnog probnog perioda ni u bucket koji je samo za čitanje (preko ograničenja veličine ili preko onoga što stanje pokriva) — panel navodi razlog i nudi dopunu tamo gde to pomaže. Ako bucket tokom kopiranja postane samo za čitanje, kopiranje se pauzira i samo nastavlja kada upis ponovo bude moguć.
Ograničenja
- Jedno kopiranje i jedno postepeno premeštanje istovremeno po bucketu.
- Kopiranje preskače fajlove veće od 1 TB.
- Fajlovi u arhivskim klasama koji moraju da se vrate pre čitanja (S3 Glacier Flexible Retrieval, Glacier Deep Archive) se preskaču; prvo ih vratite.
- Sa fajlom se prenose samo vaši sopstveni metapodaci (
x-amz-meta-*); ETag fajla može se razlikovati od starog. - Fajl obrisan iz bucketa dok je postepeno premeštanje uključeno ponovo se kopira kada se sledeći put pročita.