Redshift hỗ trợ materialized view Iceberg, tái sử dụng kết quả truy vấn

Diễn biến chính

AWS vừa bổ sung khả năng hỗ trợ materialized views dựa trên Apache Iceberg vào Amazon Redshift. Tính năng này cho phép các nhóm dữ liệu tái sử dụng kết quả truy vấn đã được tính toán trước trên cả Spark và Athena, mà không cần sao chép dữ liệu sang môi trường khác. Theo InfoWorld, bản tin này dựa trên một bài đăng blog của chính AWS.

Cơ chế mới nhắm vào một điểm nghẽn quen thuộc của các nền tảng phân tích: cùng một phép tính thường phải được chạy lặp lại bởi nhiều công cụ và nhiều đội khác nhau. Thay vì tái xử lý hoặc nhân bản dữ liệu cho từng môi trường, các đội có thể dùng lại kết quả đã có sẵn trong hệ sinh thái Iceberg.

InfoWorld đóng khung đây là bước đi có thể giúp giảm chi phí phân tích. Tuy nhiên, bản tin không công bố con số cụ thể về mức tiết kiệm, và phần tóm tắt cũng chưa nêu rõ các chi tiết về thời điểm triển khai hay phạm vi áp dụng.

Vì sao điều này quan trọng

Với các tổ chức đang xây dựng nền tảng dữ liệu hiện đại, đây là ví dụ rõ về sự chuyển dịch trong vận hành: dữ liệu và kết quả tính toán dần được coi là tài sản dùng chung, thay vì các bản sao rời rạc. Khi nhiều công cụ phân tích cùng truy cập một lớp kết quả, quy trình ra quyết định trở nên nhất quán hơn và việc quản trị dữ liệu dễ kiểm soát hơn.

Chi phí truy vấn lặp lại thường khó nhận ra vì bị phân tán giữa nhiều đội, nhiều báo cáo và nhiều công cụ. Khi tái sử dụng kết quả trở thành mặc định, các lãnh đạo có thêm cơ hội nhìn thấy đâu là phần công việc trùng lặp. Với trải nghiệm khách hàng và nhân viên nội bộ, lợi ích gián tiếp nằm ở tốc độ phản hồi báo cáo và tính đồng nhất của con số, từ đó ảnh hưởng trực tiếp đến cách đội vận hành, chăm sóc khách hàng và quản lý dịch vụ đánh giá hiệu suất của chính mình.

Góc nhìn của Renascence

Phần lớn người đọc sẽ xem bản cập nhật này như một thông báo về hạ tầng và chi phí. Chúng tôi cho rằng giá trị thực sự nằm ở việc giảm số lần cùng một câu hỏi bị trả lời lại từ đầu, và đây là một bài toán thiết kế dịch vụ hơn là bài toán kỹ thuật thuần túy.

Mỗi lần một đội tính lại cùng một kết quả là một lần lãng phí cả thời gian lẫn niềm tin. Nguyên tắc hành vi phía sau rất đơn giản: con người chỉ thực sự tin và dùng một con số khi thấy nó nhất quán ở mọi nơi. Các nhà vận hành hướng đến khách hàng nên rà soát những báo cáo và truy vấn đang bị lặp, xác định đâu là "nguồn sự thật" cần được tính trước, rồi đo lường xem thời gian phản hồi và mức độ thống nhất giữa các đội có thực sự cải thiện hay không trước khi mở rộng.