Starburst

Starburst là một nền tảng data lakehouse tinh vi được thiết kế để khai thác giá trị của dữ liệu phân tán cho phân tích và trí tuệ nhân tạo. Được xây dựng trên công cụ truy vấn mã nguồn mở mạnh mẽ Trino (trước đây là PrestoSQL), Starburst cung cấp một điểm truy cập duy nhất, thống nhất cho dữ liệu bất kể vị trí của nó—dù là trong các hồ dữ liệu đám mây, kho dữ liệu tại chỗ hay môi trường đa đám mây lai. Nguyên tắc cốt lõi của Starburst là đưa truy vấn đến dữ liệu, chứ không phải ngược lại. Điều này loại bỏ nhu cầu về các quy trình di chuyển dữ liệu và ETL tốn kém, phức tạp và chậm chạp, cho phép các tổ chức phân tích dữ liệu của họ tại chỗ, gần như trong thời gian thực.

Nền tảng này được thiết kế để có hiệu suất cao và khả năng mở rộng lớn, có khả năng chạy các truy vấn SQL phức tạp trên các tập dữ liệu quy mô petabyte với hàng nghìn người dùng đồng thời. Nó đóng vai trò là lớp truy vấn và truy cập trong các kiến trúc dữ liệu hiện đại như data lakehouse và data mesh, trao quyền cho các nhóm dữ liệu xây dựng các mô hình AI nhanh hơn, chính xác hơn và cung cấp thông tin kinh doanh thông minh nhanh hơn.

Cách sử dụng Starburst

Bắt đầu với Starburst được thiết kế để linh hoạt và phù hợp với chiến lược cơ sở hạ tầng của tổ chức bạn. Quá trình này thường bao gồm các bước sau:

1. Chọn mô hình triển khai của bạn: Chọn từ hai dịch vụ chính. Starburst Galaxy là một nền tảng SaaS được quản lý hoàn toàn, lý tưởng cho các nhóm muốn bắt đầu nhanh chóng trên đám mây mà không cần quản lý cơ sở hạ tầng. Starburst Enterprise là một gói phần mềm tự quản lý để triển khai trong các trung tâm dữ liệu tại chỗ hoặc đám mây riêng của bạn, cung cấp sự kiểm soát và tùy chỉnh tối đa.
2. Kết nối các nguồn dữ liệu của bạn: Sử dụng thư viện phong phú của Starburst với hơn 50 trình kết nối để liên kết với các nguồn dữ liệu khác nhau của bạn. Điều này bao gồm các hồ dữ liệu (Amazon S3, Google Cloud Storage, Azure Data Lake Storage), kho dữ liệu (Snowflake, Redshift), cơ sở dữ liệu quan hệ (PostgreSQL, MySQL), cơ sở dữ liệu NoSQL (MongoDB, Cassandra), và nhiều hơn nữa.
3. Khám phá và quản trị dữ liệu: Tận dụng các công cụ khám phá dữ liệu của nền tảng để tìm kiếm và hiểu các tập dữ liệu có sẵn trên tất cả các nguồn được kết nối. Thực hiện các chính sách bảo mật và quản trị mạnh mẽ bằng cách sử dụng các tính năng tích hợp cho kiểm soát truy cập dựa trên vai trò (RBAC) và kiểm soát truy cập dựa trên thuộc tính (ABAC) để đảm bảo dữ liệu được truy cập một cách an toàn và tuân thủ.
4. Truy vấn và phân tích: Các nhà khoa học dữ liệu, nhà phân tích và các ứng dụng AI giờ đây có thể sử dụng SQL ANSI tiêu chuẩn để chạy các truy vấn trên bất kỳ sự kết hợp nào của các nguồn dữ liệu được kết nối. Các truy vấn được thực thi bởi công cụ Trino phân tán, cung cấp kết quả nhanh chóng cho phân tích đột xuất, bảng điều khiển BI và chuẩn bị dữ liệu cho học máy.

Tính năng chính của Starburst

• Công cụ truy vấn hiệu suất cao: Được cung cấp bởi Trino, nó cung cấp xử lý song song hàng loạt (MPP) cho các truy vấn SQL nhanh như chớp trên các tập dữ liệu lớn.
• Liên kết dữ liệu: Một truy vấn duy nhất có thể kết hợp dữ liệu từ nhiều nguồn khác nhau (ví dụ: một hồ dữ liệu và một cơ sở dữ liệu quan hệ) mà không cần di chuyển dữ liệu.
• Kết nối mở rộng: Một thư viện rộng lớn với hơn 50 trình kết nối để truy cập dữ liệu ở bất cứ đâu, với sự hỗ trợ gốc cho các định dạng bảng mở như Apache Iceberg, Delta Lake và Apache Hudi.
• Warp Speed: Một công nghệ lập chỉ mục và bộ nhớ đệm thông minh độc quyền giúp tăng tốc đáng kể các truy vấn (lên đến 7 lần) và giảm chi phí tính toán bằng cách tự động tạo và quản lý các khung nhìn cụ thể hóa.
• Bảo mật cấp doanh nghiệp: Có tính năng kiểm soát truy cập chi tiết, bảo mật cấp cột, che giấu dữ liệu và kiểm toán toàn diện để đáp ứng các yêu cầu tuân thủ nghiêm ngặt.
• Triển khai linh hoạt: Có sẵn dưới dạng dịch vụ đám mây được quản lý hoàn toàn (Starburst Galaxy) hoặc nền tảng tự quản lý cho môi trường tại chỗ và lai (Starburst Enterprise).
• Khám phá và lập danh mục dữ liệu: Các công cụ tích hợp giúp người dùng dễ dàng tìm, hiểu và tin tưởng vào dữ liệu họ cần cho phân tích của mình.

Các trường hợp sử dụng Starburst

Starburst rất linh hoạt và giải quyết một số thách thức dữ liệu quan trọng:

• AI và Học máy: Cung cấp cho các mô hình AI quyền truy cập nhanh chóng và thống nhất vào tất cả dữ liệu doanh nghiệp, giảm đáng kể thời gian dành cho việc chuẩn bị dữ liệu và kỹ thuật tính năng.
• Phân tích Data Lakehouse: Cho phép các tổ chức xây dựng và truy vấn một data lakehouse hiệu suất cao trên lưu trữ đối tượng đám mây giá cả phải chăng, đạt được hiệu suất tương tự như kho dữ liệu với chi phí thấp hơn nhiều.
• BI và Phân tích tương tác: Cung cấp năng lượng cho các bảng điều khiển tương tác và các truy vấn đột xuất cho người dùng doanh nghiệp, cung cấp thông tin chi tiết trong vài giây hoặc vài phút, chứ không phải hàng giờ hoặc hàng ngày.
• Triển khai Data Mesh: Đóng vai trò là mặt phẳng truy vấn và truy cập dữ liệu phổ quát trong kiến trúc data mesh, cho phép các nhóm miền dễ dàng khám phá và sử dụng các sản phẩm dữ liệu từ khắp tổ chức.
• Phân tích đa đám mây và lai: Cho phép truy vấn và phân tích dữ liệu được phân tán trên các nhà cung cấp đám mây khác nhau (AWS, Azure, GCP) và các hệ thống tại chỗ mà không cần chuyển dữ liệu tốn kém.

Ưu điểm của Starburst

Những ưu điểm chính của việc áp dụng Starburst bao gồm:

• Tốc độ: Giảm đáng kể thời gian truy vấn, cho phép ra quyết định và đổi mới nhanh hơn.
• Hiệu quả chi phí: Loại bỏ việc sao chép dữ liệu tốn kém và giảm sự phụ thuộc vào các kho dữ liệu truyền thống đắt đỏ và các đường ống ETL phức tạp.
• Đơn giản: Cung cấp một điểm truy cập duy nhất và một phương ngữ SQL duy nhất cho tất cả dữ liệu, đơn giản hóa hệ thống dữ liệu và dân chủ hóa quyền truy cập dữ liệu.
• Linh hoạt: Hoạt động với dữ liệu và cơ sở hạ tầng hiện có của bạn, tránh bị khóa nhà cung cấp và hỗ trợ một kiến trúc mở, bền vững trong tương lai.
• Quản trị nâng cao: Tập trung hóa bảo mật dữ liệu và kiểm soát truy cập, giúp quản lý tuân thủ và giảm thiểu rủi ro dễ dàng hơn.

Giá cả và gói dịch vụ

Starburst cung cấp một cấu trúc giá linh hoạt phù hợp với các nhu cầu khác nhau:

• Starburst Galaxy: Hoạt động theo mô hình freemium và dựa trên mức tiêu thụ. Nó bao gồm một bản dùng thử miễn phí với tín dụng sử dụng lên tới 500 đô la để cho phép người dùng mới khám phá các khả năng của nền tảng. Sau thời gian dùng thử, giá cả dựa trên mức sử dụng, cung cấp khả năng mở rộng hiệu quả về chi phí.
• Starburst Enterprise: Tùy chọn tự quản lý này được định giá thông qua các giấy phép doanh nghiệp tùy chỉnh. Các bên quan tâm được khuyến khích liên hệ với đội ngũ bán hàng của Starburst để nhận báo giá cá nhân và yêu cầu khóa cấp phép dùng thử.