Có gì mới trên Cloudian 8.2.8? Hỗ trợ Add Disk và S3 Event to Kafka

Trong các hệ thống Object Storage quy mô doanh nghiệp, khả năng tối ưu hóa chi phí đầu tư hạ tầng và tích hợp luồng dữ liệu thời gian thực là hai yếu tố then chốt. Phiên bản Cloudian HyperStore 8.2.8 mang đến hai nâng cấp quan trọng giải quyết trực tiếp bài toán này:

1. Mở rộng node bằng cách bổ sung ổ cứng (Scale-up by Adding Disks)

Trước đây, việc mở rộng dung lượng cụm Object Storage thường đi theo cơ chế mở rộng ngang (Scale-out) bằng cách bổ sung nguyên cụm node mới. Ở bản 8.2.8, Cloudian đã hỗ trợ tính năng Expand by adding disks (mã tính năng 61995):

• Tối ưu chi phí đầu tư ban đầu: Doanh nghiệp có thể đầu tư chassis máy chủ với nhiều khay ổ đĩa nhưng chỉ cắm một phần ổ cứng (HDD hoặc NVMe) ở giai đoạn đầu. Khi dung lượng chạm ngưỡng, quản trị viên chỉ cần gắn thêm ổ đĩa vào các khay trống trên node đang chạy để scale-up thay vì phải mua thêm server.

• Kiểm soát bằng license: Quyền mở rộng theo ổ đĩa được quy định trực tiếp trong thuộc tính license hệ thống (hiển thị trạng thái Enabled hoặc Unlicensed trên CMC).

• Quy trình chuẩn hóa: Việc thêm đĩa vào ring dữ liệu đang hoạt động được Cloudian Support hướng dẫn theo quy trình kỹ thuật chuẩn nhằm đảm bảo cân bằng tải và tính toàn vẹn dữ liệu.

2. Stream S3 Event Notifications trực tiếp đến Apache Kafka

Kiến trúc hướng sự kiện (Event-Driven Architecture) là tiêu chuẩn của các hệ thống xử lý dữ liệu hiện đại. Với tính năng mã 45256, Cloudian đã mở rộng hàm gọi SQS API (CreateQueue) để bắn thông báo sự kiện S3 trực tiếp vào cụm Apache Kafka bên ngoài thay vì chỉ giới hạn trong hàng đợi SQS thông thường:

• Truyền dữ liệu không gián đoạn: Mọi sự kiện phát sinh trên bucket (tạo mới, xóa đối tượng,…) được stream trực tiếp vào Kafka topic theo đúng định dạng chuẩn của AWS S3.

• Không cần sửa đổi ứng dụng downstream: Các ứng dụng phía dưới như Spark Streaming, Flink, AI/ML pipelines hoặc các dịch vụ microservices có thể đọc và xử lý dữ liệu ngay lập tức mà không cần dựng thêm tầng trung gian để poll dữ liệu từ SQS.

Một số cập nhật đáng chú ý khác

Bên cạnh 2 tính năng trọng tâm trên, Cloudian HyperStore 8.2.8 còn bổ sung các cải tiến quan trọng khác:

• Hỗ trợ Reverse Tiering & Bi-directional Tiering: Cho phép truy xuất và quản lý dữ liệu trên bucket S3 từ xa tương tự như trên bucket local.

• Bảo mật & Quản trị danh tính: Hỗ trợ liên kết danh tính qua OpenID Connect (OIDC) và các API quản lý IAM OIDC Provider.

• Hệ điều hành: Hỗ trợ chính thức Rocky Linux 9.8 (cho phép chạy mô hình kết hợp giữa Rocky Linux 8 và 9 trong cùng một cluster).

• Cân bằng tải: Tính năng HyperBalance Fusion tích hợp thêm cơ chế S3 Relay trực tiếp giữa các node để chống hiện tượng hotspot.

Tham khảo thêm tại đây