Giới thiệu về bài toán lưu trữ trong cụm Docker Swarm

Khi triển khai các ứng dụng thực tế (stateful applications) trên cụm Docker Swarm, một trong những thách thức lớn nhất mà các kỹ sư hệ thống phải đối mặt là quản lý Persistent Volume (Dữ liệu lưu trữ vĩnh viễn). Không giống như Kubernetes với hệ sinh thái CSI (Container Storage Interface) vô cùng phong phú, Docker Swarm có phần hạn chế hơn trong việc cấu hình lưu trữ chia sẻ giữa các node (ReadWriteMany - RWX).

Nếu một container bị sập trên Node A và khởi động lại trên Node B, dữ liệu của nó phải luôn sẵn sàng và đồng bộ ngay lập tức. Các giải pháp truyền thống như NFS (Network File System) thường gặp vấn đề về bảo mật và thắt nút cổ chai hiệu năng (single point of failure). Trong khi đó, các hệ thống lưu trữ phân tán chuyên dụng như Ceph hoặc GlusterFS lại quá cồng kềnh, đòi hỏi tài nguyên phần cứng lớn và chi phí vận hành cực kỳ cao, không phù hợp cho các doanh nghiệp vừa và nhỏ hoặc các dự án có ngân sách tối ưu.

Bài viết này sẽ hướng dẫn bạn xây dựng một giải pháp lưu trữ vĩnh viễn hiệu năng cao, độ tin cậy lớn nhưng với chi phí cực kỳ rẻ: Kết hợp JuiceFS và Backblaze B2 để làm Persistent Volume cho cụm Docker Swarm.

---

Tại sao lại là sự kết hợp giữa JuiceFS và Backblaze B2?

JuiceFS là gì và cơ chế hoạt động ra sao?

JuiceFS là một hệ thống tệp tin phân tán mã nguồn mở (Open-source POSIX-file system) được thiết kế đặc biệt cho môi trường đám mây. Kiến trúc độc đáo của JuiceFS tách biệt hoàn toàn hai phần:

Metadata (Dữ liệu đặc tả): Được lưu trữ trong các cơ sở dữ liệu tốc độ cao như Redis, PostgreSQL, MySQL hoặc TiKV. Việc này giúp các thao tác duyệt thư mục, quản lý quyền truy cập diễn ra với độ trễ cực thấp (vài mili-giây).
Data (Dữ liệu thực tế): Được chia nhỏ thành các block và đẩy trực tiếp lên các dịch vụ Object Storage (như AWS S3, Google Cloud Storage, hoặc Backblaze B2).

Nhờ cơ chế này, JuiceFS mang lại hiệu năng đọc/ghi tệp tin mượt mà như ổ cứng cục bộ nhờ công nghệ Smart Caching ở phía client, đồng thời tận dụng được dung lượng lưu trữ gần như vô hạn của Cloud Object Storage.

Lợi thế chi phí từ Backblaze B2

Khi nhắc đến Object Storage giá rẻ nhưng có độ ổn định cấp doanh nghiệp, Backblaze B2 luôn là cái tên hàng đầu. So với Amazon S3, Backblaze B2 có mức giá rẻ hơn tới 3-4 lần cho mỗi GB lưu trữ hàng tháng, và chi phí băng thông tải ra (egress bandwidth) cũng cực kỳ cạnh tranh. Việc kết hợp JuiceFS (kiến trúc mã nguồn mở) và Backblaze B2 giúp doanh nghiệp sở hữu một hệ thống lưu trữ chuẩn doanh nghiệp với chi phí chỉ bằng một phần nhỏ so với các giải pháp truyền thống.

---

Kiến trúc triển khai hệ thống lưu trữ cho Docker Swarm

Để triển khai giải pháp này một cách tối ưu, chúng ta cần chuẩn bị các thành phần kiến trúc sau trên tất cả các node thuộc cụm Docker Swarm:

Cơ sở dữ liệu Metadata: Một instance Redis hoặc PostgreSQL để quản lý Metadata cho JuiceFS. Để đảm bảo an toàn, bạn nên sử dụng dịch vụ Managed Database hoặc cài đặt dạng Cluster độc lập bên ngoài Swarm. Tuy nhiên, với mục đích tối ưu chi phí, một container Redis cấu hình Persistence (AOF) tốt cũng là một lựa chọn hợp lý.
Dịch vụ Object Storage: Một Bucket đã được tạo sẵn trên Backblaze B2 cùng với cặp khóa truy cập (Application Key ID và Application Key).
JuiceFS Client: Được cài đặt trực tiếp trên tất cả các Node (Manager và Worker) của cụm Docker Swarm để thực hiện mount thư mục chia sẻ đồng bộ.

Lưu ý quan trọng: Tốc độ mạng giữa các Node trong cụm Docker Swarm đến Backblaze B2 và cơ sở dữ liệu Metadata sẽ quyết định trực tiếp đến hiệu năng tổng thể của hệ thống tệp tin. Hãy đảm bảo các node có băng thông Internet ổn định.

---

Hướng dẫn từng bước triển khai chi tiết

Bước 1: Chuẩn bị thông tin Backblaze B2 và Redis

Đầu tiên, hãy đăng nhập vào tài khoản Backblaze của bạn, tạo một Bucket mới (ví dụ tên là swarm-storage-juicefs). Sau đó, truy cập mục App Keys để tạo một khóa truy cập mới và lưu lại các thông tin sau:

Bucket URL / Name: swarm-storage-juicefs
KeyID: 005xxxxxxxxxxxxxxxxxxxxxx
ApplicationKey: K005xxxxxxxxxxxxxxxxxxxxxxxxxxxxxx

Tiếp theo, chuẩn bị chuỗi kết nối đến Redis của bạn (ví dụ: redis://:your_password@your_redis_host:6379/1).

Bước 2: Cài đặt JuiceFS Client trên các Node của Docker Swarm

Bạn cần chạy lệnh sau trên tất cả các Node thuộc cụm Swarm để tải và cài đặt phiên bản JuiceFS mới nhất:

curl -sSL [https://juicefs.com/static/juicefs-check_id](https://juicefs.com/static/juicefs-check_id) | sh
sudo curl -L [https://d.juicefs.com/release/Linux/x86_64/juicefs-1.1.0-linux-amd64.tar.gz](https://d.juicefs.com/release/Linux/x86_64/juicefs-1.1.0-linux-amd64.tar.gz) | tar -zxf - -C /usr/local/bin

Bước 3: Khởi tạo File System với JuiceFS

Trên một node bất kỳ (thường là Manager), thực hiện lệnh định dạng (format) file system mới, liên kết cơ sở dữ liệu dữ liệu đặc tả với cấu hình lưu trữ Backblaze B2:

juicefs format \
  --storage b2 \
  --bucket [https://swarm-storage-juicefs.b2xxxx.com](https://swarm-storage-juicefs.b2xxxx.com) \
  --access-key 005xxxxxxxxxxxxxxxxxxxxxx \
  --secret-key K005xxxxxxxxxxxxxxxxxxxxxxxxxxxxxx \
  redis://:your_password@your_redis_host:6379/1 \
  my-swarm-vol

Nếu màn hình hiển thị thông báo thành công, hệ thống tệp tin mã hóa tên là my-swarm-vol đã sẵn sàng để sử dụng.

Bước 4: Mount JuiceFS trên toàn bộ các Node

Thực hiện tạo thư mục đích và tiến hành mount hệ thống tệp tin này trên từng Node trong cụm Docker Swarm:

sudo mkdir -p /mnt/juicefs-shared
sudo juicefs mount -d redis://:your_password@your_redis_host:6379/1 /mnt/juicefs-shared --cache-dir=/tmp/juicefs-cache --cache-size=10240

Mẹo nhỏ: Tham số --cache-size=10240 cấp cho JuiceFS 10GB bộ nhớ đệm cục bộ (SSD/HDD nội bộ) trên mỗi node, giúp tăng tốc độ đọc các tệp tin thường xuyên sử dụng mà không cần tải lại từ Backblaze B2.

---

Cấu hình Docker Swarm Service sử dụng Persistent Volume

Khi toàn bộ các Node trong cụm đã mount chung một thư mục /mnt/juicefs-shared, chúng ta có thể sử dụng cơ chế Bind Mount của Docker để gán thư mục con vào bên trong các service của Swarm.

Dưới đây là một ví dụ về file docker-compose.yml triển khai một dịch vụ Nginx WordPress Cluster, nơi mà mã nguồn và dữ liệu tải lên được đồng bộ hóa tức thì giữa tất cả các Node sao chép (replicas):

version: '3.8'

services:
  web:
    image: wordpress:latest
    ports:
      - "8080:80"
    deploy:
      mode: replicated
      replicas: 3
      update_config:
        parallelism: 1
        delay: 10s
      restart_policy:
        condition: on-failure
    volumes:
      - type: bind
        source: /mnt/juicefs-shared/wordpress_data
        target: /var/www/html

Khi bạn triển khai stack này bằng lệnh docker stack deploy -c docker-compose.yml wp_cluster, 3 replica của WordPress có thể chạy ở 3 server vật lý hoàn toàn khác nhau nhưng đều nhìn thấy chính xác một thư mục dữ liệu, đảm bảo tính nhất quán tuyệt đối của hệ thống.

---

Đánh giá hiệu năng và các lưu ý tối ưu chi phí

Giải pháp kết hợp JuiceFS + Backblaze B2 mang lại những ưu điểm vượt trội cho các cụm Docker Swarm giá rẻ, nhưng doanh nghiệp cũng cần lưu ý một số điểm kỹ thuật sau để đạt hiệu quả cao nhất:

Tối ưu hóa Cache cục bộ: Hãy luôn cấu hình tham số --cache-dir trỏ về các phân vùng ổ cứng SSD có tốc độ đọc ghi cao trên node. Điều này giúp giảm đáng kể lượng request gửi tới Backblaze B2, từ đó vừa tăng tốc độ ứng dụng vừa giảm chi phí API của Backblaze.
Sao lưu Metadata: Bản thân dữ liệu trên Backblaze B2 rất an toàn nhờ chính sách phân tán của họ, tuy nhiên nếu bạn làm mất dữ liệu trong Redis (Metadata), toàn bộ file system sẽ không thể khôi phục. Hãy thiết lập chiến lược backup định kỳ cho database chứa Metadata này.
Giám sát băng thông: Mặc dù chi phí tải xuống của Backblaze B2 rất rẻ (hoặc miễn phí nếu dùng qua Cloudflare), việc truyền tải quá nhiều tệp tin dung lượng lớn liên tục vẫn có thể làm ảnh hưởng đến băng thông chung của server ứng dụng.

---

Kết luận

Triển khai JuiceFS kết hợp Backblaze B2 làm Persistent Volume cho cụm Docker Swarm là một kiến trúc thông minh, giải quyết triệt để bài toán kinh tế cho các hệ thống vừa và nhỏ. Bạn không còn phải lo lắng về việc duy trì các cụm lưu trữ Ceph phức tạp hay rủi ro mất an toàn thông tin từ NFS truyền thống. Sự linh hoạt của Docker Swarm kết hợp với sự bền bỉ của Cloud Object Storage thông qua cầu nối JuiceFS sẽ mang lại một hạ tầng Cloud Native vững chắc, hiệu năng cao và tiết kiệm tối đa chi phí cho doanh nghiệp của bạn.

Giải Pháp Lưu Trữ Vĩnh Viễn (Persistent Volume) Cho Cụm Docker Swarm Giá Rẻ Bằng JuiceFS Và Backblaze B2