Fájlok áthelyezése objektumtárba.
Hozz át fájlokat az Amazon S3-ból, a Google Cloud Storage-ből, bármely S3-kompatibilis tárolóból vagy a szervered egy mappájából egy bucketbe: másolj át mindent egyszerre, vagy költözz fokozatosan, leállás nélkül.
Máshol tárolod a fájljaidat? Kétféleképpen helyezheted át őket az alkalmazásod egyik bucketjébe. Mindkettő a panelből indul: az alkalmazás → Tárolás → a bucket → Fájlok áthozása.
| Mindent most átmásolok | Fokozatos áthelyezés, leállás nélkül | |
|---|---|---|
| Mi történik | minden fájlt egyszerre átmásolunk | egy fájlt akkor másolunk át, amikor az alkalmazásod először olvassa |
| Mikor állítsd át az alkalmazásodat | a másolás befejezése után | azonnal |
| Folyamat | talált, átmásolt, kihagyott, át nem másolt fájlok; szüneteltetés, folytatás, leállítás | bekapcsolva marad, amíg ki nem kapcsolod |
| Régi tároló | Amazon S3, Google Cloud Storage, S3-kompatibilis | Amazon S3, Google Cloud Storage |
A másolás a mi oldalunkon fut – a számítógépednek nem kell bekapcsolva maradnia. Amikor elkészült (vagy ha a vége előtt leáll), e-mailt és Telegram-üzenetet kapsz.
A fájlok áthelyezése a fiók tulajdonosa és az alkalmazás adminisztrátorai számára érhető el (lásd: Csapathozzáférés), valamint az API-n, a CLI-n és az MCP-n keresztül is.
Mielőtt elkezded: csak olvasni tudó kulcs
Készíts a régi tárolódban külön kulcsot ehhez az áthelyezéshez, amely csak listázni és olvasni tudja azt az egy bucketet. Soha ne a fő kulcsaidat illeszd be. A kulcsot csak ehhez az áthelyezéshez használjuk; nem tároljuk, és többé nem jelenik meg. Az áthelyezés végeztével töröld a régi szolgáltatónál.
Amazon S3
Az IAM-ben hozz létre egy felhasználót (vagy hozzáférési kulccsal rendelkező szerepkört) ezzel a szabályzattal – a my-old-bucket helyére a saját bucketed nevét írd:
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": ["s3:List*", "s3:Get*"],
"Resource": ["arn:aws:s3:::my-old-bucket", "arn:aws:s3:::my-old-bucket/*"]
}
]
}Ezután hozz létre hozzá egy hozzáférési kulcsot. A panelben szükséged lesz a hozzáférési kulcs azonosítójára, a titkos hozzáférési kulcsra, a bucket nevére és a régiójára (például eu-central-1; az S3-konzolban a bucket mellett látható).
Google Cloud Storage
Hozz létre egy szolgáltatásfiókot, amely olvasási hozzáféréssel rendelkezik a buckethez, és töltsd le a JSON-kulcsát:
gcloud iam service-accounts create rivervo-move --display-name="Move files to Rivervo"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
--iam-account="rivervo-move@MY-PROJECT.iam.gserviceaccount.com"A Storage Object Viewer olvassa a fájlokat; a Storage Legacy Bucket Reader lehetővé teszi, hogy a másolás magát a bucketet is olvassa. A panelbe illeszd be a key.json teljes tartalmát. Utána töröld a kulcsfájlt a számítógépedről.
Más S3-kompatibilis tároló
Bármely S3 API-val rendelkező tároló ugyanígy működik: hozz létre egy kulcsot, amely csak listázni és olvasni tudja a bucketet (a legtöbb szolgáltató „read-only” vagy „restricted” kulcsnak hívja), és keresd meg a bucket régiójának S3-címét – például https://s3.eu-central-003.backblazeb2.com. A címet a bucket neve nélkül add meg.
Mindent most átmásolok
- Az alkalmazás → Tárolás → a bucket → Fájlok áthozása.
- Válaszd a Mindent most átmásolok lehetőséget, a régi tárolót, az ottani bucketet, a régiót vagy az S3-címet, és illeszd be a kulcsot.
- Opcionális: egy mappa – például csak a
photos/átmásolása. - A már itt lévő fájlok: alapértelmezés szerint a bucketben már meglévő, azonos nevű fájl marad, a régi tárolóból származót pedig kihagyjuk. Felülíráshoz kapcsold be a Cseréld le őket lehetőséget.
- Másolás indítása, majd erősítsd meg.
A kártya mutatja, hány fájlt találtunk, másoltunk át, hagytunk ki és nem tudtunk átmásolni, egy folyamatjelzővel; a Napló megjelenítése megnevezi a kihagyott vagy át nem másolható fájlokat. Használhatod a Szüneteltetés, a Folytatás vagy a Másolás leállítása lehetőséget – a már átmásolt fájlok megmaradnak. Ha a másolás elkészült, állítsd át az alkalmazásodat a bucketre (az S3_* változók már megvannak hozzá).
A fájlok megtartják a nevüket (kulcsukat). Ha később újra futtatod a másolást, csak a hiányzókat másolja át (kikapcsolt Cseréld le őket mellett).
Fokozatos áthelyezés, leállás nélkül
Akkor hasznos, ha az alkalmazásnak működnie kell, és folyamatosan érkeznek új fájlok:
- Fájlok áthozása → Fokozatos áthelyezés, leállás nélkül, a régi tároló, a bucket és a kulcs → Fokozatos áthelyezés bekapcsolása.
- Állítsd át az alkalmazásodat azonnal erre a bucketre (az
S3_*változóira), és telepíts. - Amikor az alkalmazás olyan fájlt olvas, amely még nincs a bucketben, abban a pillanatban átmásoljuk a régi tárolóból, és kiszolgáljuk. Az új feltöltések közvetlenül a bucketbe kerülnek.
- A befejezéshez: futtasd a Mindent most átmásolok lehetőséget azokra a fájlokra, amelyeket még senki nem olvasott (kikapcsolt Cseréld le őket mellett, hogy az újabb fájlok megmaradjanak), várd meg, amíg elkészül, majd Kapcsold ki a fokozatos áthelyezést.
Amíg ki nem kapcsolod, a régi tárolónak ugyanazzal a kulccsal elérhetőnek kell maradnia. A soha nem olvasott és át nem másolt fájlokat a kikapcsolás után már nem hozzuk át.
A szervered egy mappájából
Ha egy VPS-ről vagy bármely más szerverről szeretnél fájlokat áthelyezni (például egy Laravel-oldal storage/app/public mappáját), használd az rclone eszközt a bucket saját kulcsaival. Ezeket az alkalmazás Változók fülén találod: S3_ENDPOINT, S3_BUCKET, S3_KEY és S3_SECRET (egy második bucketnél a neve áll elöl: MEDIA_S3_KEY …).
# Az rclone telepítése (Linux)
curl https://rclone.org/install.sh | sudo bash
# A bucket kulcsai környezeti változókként – így nem kerülnek konfigurációs fájlba
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='az S3_ENDPOINT értéke'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='az S3_KEY értéke'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='az S3_SECRET értéke'
# A mappa átmásolása a bucketbe (az S3_BUCKET értéke), a mappaszerkezet megtartásával
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
# Ellenőrzés, hogy minden fájl megérkezett-e
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-wayAz rclone copy soha nem töröl semmit a bucketben, és kihagyja a már ott lévő, változatlan fájlokat, így megszakítás után újra futtathatod. Hosszú másolásnál a szerveren tmux vagy screen alatt futtasd – így akkor is folytatódik, ha megszakad az SSH-kapcsolatod.
Mennyibe kerül
Magáért az áthelyezésért nem kell fizetni. A bucketben lévő fájlokért a szokásos objektumtár-árakat fizeted, az egyenlegedből:
- tárolás: havonta 0,025 USD / GB – 50 GB havonta körülbelül 1,25 USD;
- írások: 6,00 USD / millió – minden átmásolt fájl nagyjából egy írás, így 100 000 fájl körülbelül 0,60 USD (egy nagyon nagy fájl részekben töltődik fel, és több írásnak számít);
- a fokozatos áthelyezés közbeni olvasások szokásos olvasások (0,50 USD / millió).
A legtöbb felhőalapú tárolószolgáltató díjat számol fel a tőle kimenő adatforgalomért (egress). Mielőtt sok adatot helyeznél át, nézd meg a régi szolgáltatód árlistáját.
A fájlok áthelyezéséhez pozitív egyenleg kell, ugyanúgy, mint egy bucket hozzáadásához. Az ingyenes próbaidőszak alatt nem érhető el, és csak olvasható bucketbe sem (amely túllépte a méretkorlátját, vagy amelyet az egyenleg már nem fedez) – a panel megmondja az okát, és ahol segít, egyenlegfeltöltést kínál. Ha másolás közben a bucket csak olvashatóvá válik, a másolás szünetel, és magától folytatódik, amint újra lehet írni.
Korlátok
- Bucketenként egyszerre egy másolás és egy fokozatos áthelyezés.
- Az 1 TB-nál nagyobb fájlokat a másolás kihagyja.
- Az olyan archív tárolási osztályokban lévő fájlokat, amelyeket olvasás előtt vissza kell állítani (S3 Glacier Flexible Retrieval, Glacier Deep Archive), kihagyjuk; előbb állítsd vissza őket.
- Egy fájllal csak a saját metaadataid (
x-amz-meta-*) költöznek; a fájl ETagje eltérhet a régitől. - Ha egy fájlt bekapcsolt fokozatos áthelyezés mellett törölsz a bucketből, a következő olvasáskor újra átmásoljuk.