Categories
Software Architecture

Phân tích AWS 6: Amazon Kinesis Data Firehose

Amazon Kinesis Data Firehose là cách dễ nhất để tải dữ liệu truyền trực tuyến một cách đáng tin cậy vào các kho dữ liệu và các công cụ phân tích. Nó có thể nắm bắt, chuyển đổi và tải dữ liệu phát trực tuyến vào Amazon S3, Amazon
Redshift, Amazon OpenSearch Service và Splunk, cho phép phân tích gần thời gian thực với các công cụ thông minh kinh doanh hiện có và bảng điều khiển mà bạn đang sử dụng hiện nay. Đây là một dịch vụ được quản lý hoàn toàn, tự động thay đổi tỷ lệ để phù hợp với thông lượng dữ liệu của bạn và không yêu cầu quản lý liên tục. Nó cũng có thể xử lý hàng loạt, nén, chuyển đổi và mã hóa dữ liệu trước khi tải, giảm thiểu dung lượng lưu trữ được sử dụng tại điểm đến và tăng cường bảo mật.

Bạn có thể dễ dàng tạo luồng phân phối Firehose từ Bảng điều khiển quản lý AWS, thiết lập luồng đó bằng một vài cú nhấp chuột và bắt đầu gửi dữ liệu tới luồng từ hàng trăm nghìn nguồn dữ liệu sẽ được tải liên tục lên AWS — tất cả chỉ trong vài phút. Bạn cũng có thể thiết lập luồng phân phối của mình để tự động chuyển đổi dữ liệu đến sang các định dạng cột như Apache Parquet và Apache ORC, trước khi dữ liệu được phân phối tới Amazon S3, để lưu trữ và phân tích chi phí thấp.

Leave a Reply

Your email address will not be published. Required fields are marked *