ย้ายไฟล์เข้า Object Storage
นำไฟล์จาก Amazon S3, Google Cloud Storage, ที่เก็บข้อมูลที่เข้ากันได้กับ S3 หรือโฟลเดอร์บนเซิร์ฟเวอร์ของคุณเข้าบักเก็ต: คัดลอกทั้งหมดในครั้งเดียว หรือย้ายทีละน้อยโดยไม่มีดาวน์ไทม์
เก็บไฟล์ไว้ที่อื่นอยู่แล้วใช่ไหม ย้ายไฟล์เข้าบักเก็ตของแอปพลิเคชันได้สองวิธี ทั้งสองวิธีเริ่มจากแผงควบคุม: แอปพลิเคชัน → ที่เก็บข้อมูล → บักเก็ต → ย้ายไฟล์เข้า
| คัดลอกทั้งหมดตอนนี้ | ย้ายทีละน้อย โดยไม่มีดาวน์ไทม์ | |
|---|---|---|
| สิ่งที่เกิดขึ้น | คัดลอกทุกไฟล์ในครั้งเดียว | ไฟล์จะถูกคัดลอกเมื่อแอปพลิเคชันอ่านไฟล์นั้นครั้งแรก |
| เมื่อใดควรสลับแอปพลิเคชัน | หลังคัดลอกเสร็จ | ทันที |
| ความคืบหน้า | ไฟล์ที่พบ คัดลอกแล้ว ข้าม ไม่ได้คัดลอก; หยุดชั่วคราว ทำต่อ หยุด | ทำงานจนกว่าคุณจะปิด |
| ที่เก็บข้อมูลเดิม | Amazon S3, Google Cloud Storage, ที่เข้ากันได้กับ S3 | Amazon S3, Google Cloud Storage |
การคัดลอกทำงานที่ฝั่งเรา คอมพิวเตอร์ของคุณไม่ต้องเปิดค้างไว้ เมื่อเสร็จ (หรือหากหยุดก่อนเสร็จ) คุณจะได้รับอีเมลและข้อความ Telegram
การย้ายไฟล์ทำได้โดยเจ้าของบัญชีและ ผู้ดูแลระบบ ของแอปพลิเคชัน (ดู การเข้าถึงของทีม) และทำผ่าน API, CLI และ MCP ได้ด้วย
ก่อนเริ่ม: คีย์ที่อ่านได้อย่างเดียว
สร้าง คีย์แยกสำหรับการย้ายครั้งนี้ ในที่เก็บข้อมูลเดิม ที่แสดงรายการและอ่านได้เฉพาะบักเก็ตนั้น ห้ามวางคีย์หลักของคุณ คีย์นี้ใช้สำหรับการย้ายครั้งนี้เท่านั้น เราไม่เก็บไว้ และจะไม่แสดงอีก ลบคีย์ที่ผู้ให้บริการเดิมเมื่อย้ายเสร็จ
Amazon S3
ใน IAM สร้างผู้ใช้ (หรือ Role ที่มี Access Key) ด้วยนโยบายนี้ แทนที่ my-old-bucket ด้วยบักเก็ตของคุณ:
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": ["s3:List*", "s3:Get*"],
"Resource": ["arn:aws:s3:::my-old-bucket", "arn:aws:s3:::my-old-bucket/*"]
}
]
}จากนั้นสร้าง Access Key สำหรับผู้ใช้นั้น ในแผงควบคุมคุณต้องใช้ Access Key ID, Secret Access Key, ชื่อบักเก็ต และ รีเจียน (เช่น eu-central-1 แสดงอยู่ข้างบักเก็ตในคอนโซล S3)
Google Cloud Storage
สร้าง Service Account ที่มีสิทธิ์อ่านบักเก็ต แล้วดาวน์โหลดคีย์ JSON:
gcloud iam service-accounts create rivervo-move --display-name="Move files to Rivervo"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.objectViewer"
gcloud storage buckets add-iam-policy-binding gs://my-old-bucket \
--member="serviceAccount:rivervo-move@MY-PROJECT.iam.gserviceaccount.com" --role="roles/storage.legacyBucketReader"
gcloud iam service-accounts keys create key.json \
--iam-account="rivervo-move@MY-PROJECT.iam.gserviceaccount.com"Storage Object Viewer อ่านไฟล์ Storage Legacy Bucket Reader ให้การคัดลอกอ่านตัวบักเก็ตได้ ในแผงควบคุม ให้วางเนื้อหาทั้งหมดของ key.json ลบไฟล์คีย์ออกจากคอมพิวเตอร์ของคุณหลังจากนั้น
ที่เก็บข้อมูลอื่นที่เข้ากันได้กับ S3
ที่เก็บข้อมูลใดก็ตามที่มี S3 API ใช้ได้แบบเดียวกัน: สร้างคีย์ที่แสดงรายการและอ่านบักเก็ตได้อย่างเดียว (ผู้ให้บริการส่วนใหญ่เรียกว่าคีย์ “read-only” หรือ “restricted”) และหา ที่อยู่ S3 ของรีเจียนบักเก็ต เช่น https://s3.eu-central-003.backblazeb2.com ป้อนที่อยู่โดยไม่มีชื่อบักเก็ต
คัดลอกทั้งหมดตอนนี้
- แอปพลิเคชัน → ที่เก็บข้อมูล → บักเก็ต → ย้ายไฟล์เข้า
- เลือก คัดลอกทั้งหมดตอนนี้ ที่เก็บข้อมูลเดิม บักเก็ตที่นั่น รีเจียนหรือที่อยู่ S3 แล้ววางคีย์
- ไม่บังคับ: โฟลเดอร์ เช่น คัดลอกเฉพาะ
photos/ - ไฟล์ที่มีอยู่แล้วที่นี่: โดยค่าเริ่มต้น ไฟล์ชื่อเดียวกันที่มีอยู่ในบักเก็ตแล้วจะถูกเก็บไว้ และไฟล์จากที่เก็บข้อมูลเดิมจะถูกข้าม เปิด แทนที่ไฟล์เหล่านั้น เพื่อเขียนทับ
- เริ่มคัดลอก แล้วยืนยัน
การ์ดแสดงจำนวนไฟล์ที่พบ คัดลอกแล้ว ข้าม และไม่ได้คัดลอก พร้อมแถบความคืบหน้า แสดงบันทึก ระบุไฟล์ที่ถูกข้ามหรือคัดลอกไม่ได้ คุณ หยุดชั่วคราว ทำต่อ หรือ หยุดการคัดลอก ได้ ไฟล์ที่คัดลอกแล้วยังคงอยู่ เมื่อคัดลอกเสร็จ ให้สลับแอปพลิเคชันมาใช้บักเก็ต (ซึ่งมี ตัวแปร S3_* อยู่แล้ว)
ไฟล์ยังคงชื่อ (คีย์) เดิม การคัดลอกซ้ำภายหลังจะคัดลอกเฉพาะไฟล์ที่ขาด (เมื่อปิด แทนที่ไฟล์เหล่านั้น)
ย้ายทีละน้อย โดยไม่มีดาวน์ไทม์
เหมาะเมื่อแอปพลิเคชันต้องทำงานต่อเนื่องและมีไฟล์เพิ่มเข้ามาตลอดเวลา:
- ย้ายไฟล์เข้า → ย้ายทีละน้อย โดยไม่มีดาวน์ไทม์ ที่เก็บข้อมูลเดิม บักเก็ต และคีย์ → เปิดการย้ายทีละน้อย
- สลับแอปพลิเคชันมาใช้บักเก็ตนี้ทันที (ตัวแปร
S3_*ของบักเก็ต) แล้วดีพลอย - เมื่อแอปพลิเคชันอ่านไฟล์ที่ยังไม่มีในบักเก็ต ไฟล์จะถูกคัดลอกจากที่เก็บข้อมูลเดิมในขณะนั้นและส่งให้ ไฟล์ที่อัปโหลดใหม่จะเข้าบักเก็ตโดยตรง
- หากต้องการปิดงาน: รัน คัดลอกทั้งหมดตอนนี้ สำหรับไฟล์ที่ยังไม่มีใครอ่าน (โดยปิด แทนที่ไฟล์เหล่านั้น เพื่อให้ไฟล์ใหม่กว่ายังอยู่) รอจนเสร็จ แล้ว ปิด การย้ายทีละน้อย
จนกว่าคุณจะปิด ที่เก็บข้อมูลเดิมต้องยังใช้งานได้ด้วยคีย์เดิม ไฟล์ที่ไม่เคยถูกอ่านและไม่ได้คัดลอกจะไม่ถูกดึงมาอีกหลังจากปิด
จากโฟลเดอร์บนเซิร์ฟเวอร์ของคุณ
หากต้องการย้ายไฟล์จาก VPS หรือเซิร์ฟเวอร์อื่น (เช่น storage/app/public ของเว็บไซต์ Laravel) ให้ใช้ rclone ด้วยคีย์ของบักเก็ตเอง หาคีย์ได้ในแท็บ ตัวแปร ของแอปพลิเคชัน: S3_ENDPOINT, S3_BUCKET, S3_KEY และ S3_SECRET (บักเก็ตที่สองจะมีชื่อนำหน้า: MEDIA_S3_KEY …)
# ติดตั้ง rclone (Linux)
curl https://rclone.org/install.sh | sudo bash
# คีย์ของบักเก็ตเป็นตัวแปรสภาพแวดล้อม — จะไม่ถูกบันทึกลงไฟล์การตั้งค่า
export RCLONE_CONFIG_RIVERVO_TYPE=s3
export RCLONE_CONFIG_RIVERVO_PROVIDER=Other
export RCLONE_CONFIG_RIVERVO_REGION=auto
export RCLONE_CONFIG_RIVERVO_ENDPOINT='ค่าของ S3_ENDPOINT'
export RCLONE_CONFIG_RIVERVO_ACCESS_KEY_ID='ค่าของ S3_KEY'
export RCLONE_CONFIG_RIVERVO_SECRET_ACCESS_KEY='ค่าของ S3_SECRET'
# คัดลอกโฟลเดอร์เข้าบักเก็ต (ค่าของ S3_BUCKET) โดยคงโครงสร้างโฟลเดอร์ไว้
rclone copy /var/www/shop/storage/app/public rivervo:BUCKET/public --progress --transfers 16
# ตรวจสอบว่าทุกไฟล์มาถึงแล้ว
rclone check /var/www/shop/storage/app/public rivervo:BUCKET/public --one-wayrclone copy ไม่ลบสิ่งใดในบักเก็ต และข้ามไฟล์ที่มีอยู่แล้วโดยไม่เปลี่ยนแปลง คุณจึงรันซ้ำได้หลังหยุดพัก สำหรับการคัดลอกที่ใช้เวลานาน ให้รันภายใน tmux หรือ screen บนเซิร์ฟเวอร์ การคัดลอกจะทำงานต่อแม้การเชื่อมต่อ SSH ของคุณหลุด
ค่าใช้จ่าย
ไม่มีค่าธรรมเนียมสำหรับการย้าย ไฟล์ในบักเก็ตคิดตาม ราคา Object Storage ปกติ ชำระจากยอดเงินของคุณ:
- การจัดเก็บ: US$0.025 ต่อ GB ต่อเดือน — 50 GB ประมาณ US$1.25 ต่อเดือน
- การเขียน: US$6.00 ต่อหนึ่งล้านครั้ง — แต่ละไฟล์ที่คัดลอกนับประมาณหนึ่งการเขียน ไฟล์ 100,000 ไฟล์จึงประมาณ US$0.60 (ไฟล์ขนาดใหญ่มากจะอัปโหลดเป็นส่วนๆ และนับหลายการเขียน)
- การอ่านระหว่างการย้ายทีละน้อยเป็นการอ่านปกติ (US$0.50 ต่อหนึ่งล้านครั้ง)
ผู้ให้บริการคลาวด์สตอเรจส่วนใหญ่ คิดค่าข้อมูลที่ออกจากระบบ (Egress) ตรวจสอบรายการราคาของผู้ให้บริการเดิมก่อนย้ายข้อมูลจำนวนมาก
การย้ายไฟล์ต้องมี ยอดเงินคงเหลือเป็นบวก เช่นเดียวกับการเพิ่มบักเก็ต ใช้ไม่ได้ระหว่างช่วงทดลองใช้ฟรี และย้ายเข้าบักเก็ตที่เป็นแบบอ่านอย่างเดียวไม่ได้ (เกินขีดจำกัดขนาด หรือเกินกว่าที่ยอดเงินครอบคลุม) แผงควบคุมจะบอกเหตุผลและเสนอให้เติมยอดเงินในกรณีที่ช่วยได้ หากบักเก็ตกลายเป็นแบบอ่านอย่างเดียวระหว่างการคัดลอก การคัดลอกจะหยุดชั่วคราวและทำต่อเองเมื่อเขียนได้อีกครั้ง
ข้อจำกัด
- การคัดลอกหนึ่งรายการและการย้ายทีละน้อยหนึ่งรายการต่อบักเก็ตในเวลาเดียวกัน
- ไฟล์ที่ใหญ่กว่า 1 TB จะถูกข้ามในการคัดลอก
- ไฟล์ในคลาสอาร์ไคฟ์ที่ต้องกู้คืนก่อนอ่าน (S3 Glacier Flexible Retrieval, Glacier Deep Archive) จะถูกข้าม ให้กู้คืนก่อน
- เฉพาะเมตาดาต้าของคุณเอง (
x-amz-meta-*) ที่ย้ายไปพร้อมไฟล์ ETag ของไฟล์อาจต่างจากเดิม - ไฟล์ที่ถูกลบจากบักเก็ตขณะเปิดการย้ายทีละน้อยจะถูกคัดลอกอีกครั้งเมื่อมีการอ่านครั้งถัดไป