Thao tác hàng loạt trong Amazon S3

Teespring được thành lập năm 2011, cho phép người dùng tạo và bán trực tuyến các sản phẩm tùy chỉnh theo nhu cầu. Vì tất cả hàng hóa tùy chỉnh đều yêu cầu nhiều tài sản bên trong Teespring, nên chúng lưu trữ hàng petabyte dữ liệu trong Amazon S3.

"Amazon S3 Batch Operations đã giúp chúng tôi tối ưu hóa công việc lưu trữ nhờ sử dụng lớp lưu trữ Glacier của Amazon S3. Chúng tôi đã sử dụng siêu dữ liệu lưu trữ của mình để tạo ra các lô đối tượng cho phép di chuyển sang Amazon S3 Glacier. Nhờ Amazon S3 Glacier, chúng tôi đã tiết kiệm được trên 80% chi phí lưu trữ. Chúng tôi luôn tìm kiếm cơ hội để tự động hóa công việc quản lý lưu trữ và nhờ có S3 Batch Operations, chúng tôi có thể quản lý hàng triệu đối tượng chỉ trong vài phút.”

James Brady, Phó Chủ tịch chuyên trách Kỹ thuật - Teespring

Capital One là một ngân hàng được thành lập kết hợp giữa tài chính và công nghệ, đồng thời là một trong những thương hiệu được biết đến nhiều nhất ở Mỹ.

Capital One đã sử dụng Amazon S3 Batch Operations để sao chép dữ liệu giữa hai khu vực AWS nhằm tăng khả năng dự phòng dữ liệu và chuẩn hóa phạm vi dữ liệu của mình giữa hai địa điểm đó.

"Nhờ Amazon S3 Batch Operations, chúng tôi đã tạo ra một tác vụ để sao chép hàng triệu đối tượng chỉ trong vài giờ, thay vì mất nhiều tháng để hoàn thành. Chúng tôi đã sử dụng báo cáo kho của Amazon S3, bao gồm danh sách đối tượng trong vùng lưu trữ của chúng tôi, làm đầu vào cho tác vụ Amazon S3 Batch Operations. Amazon S3 là công cụ sao chép dữ liệu, cung cấp thông tin cập nhật tiến trình và báo cáo kiểm tra khi hoàn thành tác vụ. Tính năng này đã giúp nhóm chúng tôi giảm bớt nhiều tuần làm việc thủ công và biến công việc truyền dữ liệu quy mô lớn này thành một hoạt động thường xuyên.”

Franz Zemen, Phó Chủ tịch, Kỹ thuật Phần mềm - Capital One

ePlus, một đối tác tư vấn cao cấp của AWS, thường làm việc với khách hàng để tối ưu hóa môi trường CNTT và sử dụng các giải pháp, như S3 Batch Operations, để tiết kiệm thời gian cũng như tiền bạc cho khách hàng.

"S3 Batch Operations thật sự tuyệt vời. Giải pháp này không chỉ giúp một trong những khách hàng của chúng tôi tiết kiệm thời gian, giảm độ phức tạp và khó khăn khi tập hợp nhiều lựa chọn hoạt động S3, lên lịch tác vụ, sau đó hiển thị thông tin trên bảng thông tin dễ sử dụng, mà còn giúp xử lý một số trường hợp khó khăn mà tôi cho rằng chúng tôi sẽ không thể giải quyết xong trong một phần nhỏ thời gian mà S3 Batch Operations đã hoàn thành.

Ví dụ: S3 Batch Operations đã sao chép nhanh chóng hơn 2 triệu đối tượng trên các khu vực trong cùng một tài khoản mà vẫn đảm bảo sự nguyên vẹn của siêu dữ liệu. Giải pháp này đã thực hiện trơn tru các tác vụ tương tự trên nhiều tài khoản. Đáng chú ý nhất là giải pháp tạo ra một báo cáo hoàn thành tự động sàng lọc và tách riêng các hoạt động thành công và thất bại trong số 400 triệu đối tượng, cho phép xử lý các hoạt động thất bại một cách đơn giản trong một tệp.”

David Lin, Kiến trúc sư giải pháp cao cấp và chuyên gia được chứng nhận AWS - ePlus