Kom i gang

Flyt filer til objektlager.

Flyt filer fra Amazon S3, Google Cloud Storage, ethvert S3-kompatibelt lager eller en mappe på din server til en bucket: kopiér alt på én gang, eller flyt gradvist uden nedetid.

6 MIN. LÆSNING

Har du allerede filer liggende et andet sted? Flyt dem til en bucket i din applikation på en af to måder. Begge starter i panelet: applikationen → Lager → bucketen → Flyt filer hertil.

Kopiér alt nuFlyt gradvist uden nedetid
Hvad sker deralle filer kopieres på én gangen fil kopieres, første gang din applikation læser den
Hvornår du skifter din applikationnår kopieringen er færdigmed det samme
Forløbfundne, kopierede, sprunget over, ikke kopierede filer; pause, genoptag, stopaktiv, indtil du slår den fra
Gammelt lagerAmazon S3, Google Cloud Storage, S3-kompatibeltAmazon S3, Google Cloud Storage

Kopieringen kører hos os — din computer behøver ikke at være tændt. Når den er færdig (eller hvis den stopper før tid), får du en e-mail og en Telegram-besked.

Kontoejeren og applikationens administratorer kan flytte filer (se Teamadgang), og det kan også gøres fra API, CLI og MCP.

Før du starter: en nøgle, der kun kan læse

Lav en separat nøgle til denne flytning i dit gamle lager, som kun kan liste og læse den ene bucket. Indsæt aldrig dine hovednøgler. Nøglen bruges kun til denne flytning; vi gemmer den ikke, og den vises aldrig igen. Slet den hos den gamle udbyder, når flytningen er færdig.

Amazon S3

Opret i IAM en bruger (eller en rolle med en adgangsnøgle) med denne politik — erstat min-gamle-bucket med din bucket:

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": ["s3:List*", "s3:Get*"],
      "Resource": ["arn:aws:s3:::min-gamle-bucket", "arn:aws:s3:::min-gamle-bucket/*"]
    }
  ]
}

Opret derefter en adgangsnøgle til den. I panelet skal du bruge adgangsnøglens id, den hemmelige adgangsnøgle, bucketens navn og dens region (f.eks. eu-central-1; den vises ved bucketen i S3-konsollen).

Google Cloud Storage

Opret en tjenestekonto med læseadgang til bucketen, og download dens JSON-nøgle:

gcloud iam service-accounts create rivervo-move --display-name="Flyt filer til Rivervo"
gcloud storage buckets add-iam-policy-binding gs://min-gamle-bucket \
  --member="serviceAccount:rivervo-move@MIT-PROJEKT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://min-gamle-bucket \
  --member="serviceAccount:rivervo-move@MIT-PROJEKT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
  --iam-account="rivervo-move@MIT-PROJEKT.iam.gserviceaccount.com"

Storage Object Viewer læser filerne; Storage Legacy Bucket Reader lader kopieringen læse selve bucketen. Indsæt hele indholdet af key.json i panelet. Slet bagefter nøglefilen fra din computer.

Andet S3-kompatibelt lager

Ethvert lager med et S3 API virker på samme måde: opret en nøgle, der kun kan liste og læse bucketen (de fleste udbydere kalder det en «read-only»- eller «restricted»-nøgle), og find S3-adressen for bucketens region — f.eks. https://s3.eu-central-003.backblazeb2.com. Angiv adressen uden bucketens navn.

Kopiér alt nu

  1. Applikationen → Lager → bucketen → Flyt filer hertil.
  2. Vælg Kopiér alt nu, det gamle lager, bucketen der, regionen eller S3-adressen, og indsæt nøglen.
  3. Valgfrit: en mappe — kopiér f.eks. kun photos/.
  4. Filer, der allerede er her: som standard beholdes en fil med samme navn, der allerede ligger i bucketen, og filen fra det gamle lager springes over. Slå Erstat dem til for at overskrive.
  5. Start kopieringen, og bekræft.

Kortet viser, hvor mange filer der er fundet, kopieret, sprunget over og ikke kopieret, med en statuslinje; Vis log viser navnene på de filer, der blev sprunget over eller ikke kunne kopieres. Du kan klikke på Pause, Genoptag eller Stop kopieringen — filer, der allerede er kopieret, bliver. Når kopieringen er færdig, skifter du din applikation til bucketen (den har allerede S3_*-variablerne).

Filerne beholder deres navne (nøgler). Kører du kopieringen igen senere, kopieres kun det, der mangler (med Erstat dem slået fra).

Flyt gradvist uden nedetid

Nyttigt, når applikationen skal blive ved med at køre, og der hele tiden kommer nye filer til:

  1. Flyt filer hertil → Flyt gradvist uden nedetid, det gamle lager, bucketen og nøglen → Slå gradvis flytning til.
  2. Skift med det samme din applikation til denne bucket (dens S3_*-variabler), og deploy.
  3. Når applikationen læser en fil, der endnu ikke er i bucketen, kopieres den i det øjeblik fra det gamle lager og leveres. Nye uploads går direkte i bucketen.
  4. Sådan afslutter du: kør Kopiér alt nu for de filer, ingen har læst endnu (med Erstat dem slået fra, så de nyere filer bliver), vent, til den er færdig, og Slå derefter gradvis flytning fra.

Indtil du slår den fra, skal det gamle lager være tilgængeligt med den samme nøgle. Filer, der aldrig blev læst og ikke blev kopieret, hentes ikke længere, når den er slået fra.

Fra en mappe på din server

Vil du flytte filer fra en VPS eller en anden server (f.eks. storage/app/public på en Laravel-side), så brug rclone med bucketens egne nøgler. Du finder dem under applikationens fane Variabler: S3_ENDPOINT, S3_BUCKET, S3_KEY og S3_SECRET (en bucket mere har sit navn foran: MEDIA_S3_KEY …).

# Installer rclone (Linux)
curl https://rclone.org/install.sh | sudo bash
 
# Bucketens nøgler som miljøvariabler — de havner ikke i en konfigurationsfil
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='værdien af S3_ENDPOINT'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='værdien af S3_KEY'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='værdien af S3_SECRET'
 
# Kopiér mappen til bucketen (værdien af S3_BUCKET), og bevar mappestrukturen
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
 
# Tjek, at alle filer er kommet med
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-way

rclone copy sletter aldrig noget i bucketen og springer filer over, der allerede ligger der uændret, så du kan køre den igen efter en afbrydelse. Kør den i tmux eller screen på serveren ved en lang kopiering — så fortsætter den, selv om din SSH-forbindelse falder ud.

Hvad det koster

Der er intet gebyr for selve flytningen. Filer i bucketen koster de sædvanlige priser for objektlager, som betales fra din saldo:

  • lagring: 0,025 US$ pr. GB om måneden — 50 GB koster omkring 1,25 US$ om måneden;
  • skrivninger: 6,00 US$ pr. million — hver kopieret fil er omtrent én skrivning, så 100.000 filer koster omkring 0,60 US$ (en meget stor fil uploades i dele og tæller som nogle få skrivninger);
  • læsninger under gradvis flytning er almindelige læsninger (0,50 US$ pr. million).

De fleste udbydere af cloudlager tager betaling for data, der forlader dem (egress). Tjek din gamle udbyders prisliste, før du flytter store mængder data.

Flytning af filer kræver en positiv saldo, ligesom når du tilføjer en bucket. Det er ikke muligt i den gratis prøveperiode og ikke til en bucket, der er skrivebeskyttet (over sin størrelsesgrænse eller ud over, hvad saldoen dækker) — panelet forklarer hvorfor og tilbyder en indbetaling, hvor det hjælper. Hvis bucketen bliver skrivebeskyttet, mens en kopiering kører, sættes kopieringen på pause og fortsætter af sig selv, så snart der kan skrives igen.

Grænser

  • Én kopiering og én gradvis flytning ad gangen pr. bucket.
  • Filer større end 1 TB springes over af kopieringen.
  • Filer i arkivklasser, der skal gendannes før læsning (S3 Glacier Flexible Retrieval, Glacier Deep Archive), springes over; gendan dem først.
  • Kun dine egne metadata (x-amz-meta-*) flyttes med en fil; en fils ETag kan afvige fra den gamle.
  • En fil, der slettes fra bucketen, mens gradvis flytning er slået til, kopieres igen, næste gang den læses.

Sidder du stadig fast?

Chat med os — AI svarer med det samme, og en tekniker kommer på, når der er brug for det, uanset tidspunktet.

Kontakt support