Hoạt động kinh doanh Quản lý dữ liệu gặp phải những vấn đề phức tạp mới khi các loại dữ liệu đa dạng bắt đầu được chuyển đến—với khối lượng khổng lồ thông qua nhiều kênh dữ liệu và theo thời gian thực. Việc phân tích dữ liệu kinh doanh đa loại, tốc độ rất cao, khối lượng lớn đòi hỏi sự tăng trưởng và phát triển của các công cụ và công nghệ Quản lý dữ liệu tiên tiến, đồng thời công nghệ điện toán đám mây ra đời từ nhu cầu đó. Sau đó đến kỷ nguyên của nhiều đám mây và Đám mây lai môi trường, sau khi một mạng đám mây công cộng hoặc riêng tư không mang lại kết quả kinh doanh mong muốn.

Quản lý dữ liệu thường bao gồm các nhiệm vụ rất phức tạp như lưu trữ dữ liệu, tích hợp dữ liệu, quản lý chất lượng dữ liệu, bảo mật dữ liệu và quản lý cơ sở dữ liệu. Với tốc độ và khối lượng dữ liệu ngày càng tăng, sự đa dạng về loại dữ liệu và kênh dữ liệu (dữ liệu cảm biến) không giới hạn, Quản lý dữ liệu sớm trở thành cơn ác mộng đòi hỏi các giải pháp công nghệ hiệu quả. Như đổ thêm dầu vào lửa, vấn đề chuyển dữ liệu từ kho dữ liệu đến máy chủ từ xa đã trở thành vấn đề đau đầu không thể giải quyết đối với hầu hết các doanh nghiệp.

It đã được dự báo rằng thị trường dịch vụ dựa trên đám mây sẽ phục vụ “90% tổ chức vào năm 2022”. Bên cạnh những tiềm năng to lớn của nền tảng đám mây, các nhà cung cấp dịch vụ đám mây cũng phải đối mặt với khá nhiều thách thức. Trong kỷ nguyên ưu tiên dữ liệu và AI hiện tại, nơi phân tích dữ liệu theo thời gian thực thống trị bối cảnh kinh doanh, những thách thức phức tạp của phân tích kinh doanh là:

• Kho lưu trữ dữ liệu bị đóng cửa ngăn chặn việc tích hợp dữ liệu liền mạch
• Dữ liệu chất lượng kém do sự gia tăng của nguồn dữ liệu, loại dữ liệu và khối lượng dữ liệu
• Sự văng mặt của nhân viên khoa học dữ liệu có trình độ
• Thiếu chính sách quản trị dữ liệu (DG) được xác định rõ ràng

Vì vậy, các doanh nghiệp đã bắt đầu tìm kiếm các giải pháp công nghệ về nền tảng và công cụ Quản lý dữ liệu có thể giải quyết tất cả các thách thức trên. Điều này cũng chuyển thành chiến lược Quản lý dữ liệu toàn diện có tính đến Chất lượng dữ liệu, Quản trị dữ liệu và cơ sở hạ tầng đám mây phức tạp cho tương lai.

Những thách thức về quản trị dữ liệu của Multi-Cloud

Hãy nghĩ đến một kịch bản kinh doanh, trong đó khách hàng phải quản lý nhiều đơn vị kinh doanh—mỗi đơn vị được trang bị môi trường điện toán biên riêng được lưu trữ và quản lý bởi một nhà cung cấp dịch vụ đám mây duy nhất. Việc quản lý dữ liệu phân tán về mặt địa lý và hoạt động như vậy có thể tạo ra sự cố Quản lý dữ liệu lớn. Lợi ích lớn nhất của multi-cloud là sự nhanh nhẹn—khả năng cung cấp giải pháp khi nào và ở đâu doanh nghiệp cần chúng.

Trong một cơ sở hạ tầng đám mây lai, tài nguyên được chia sẻ trên các môi trường tại chỗ, đám mây riêng và đám mây công cộng. Trở ngại lớn nhất để vận hành trơn tru các hoạt động trong Đám mây lai là thiếu quản trị và tuân thủ quy định.

Giảm thiểu những thách thức về quản lý dữ liệu trong đám mây lai tình trạng mặc dù các đám mây lai cung cấp các giải pháp trong tương lai nhưng các vấn đề về bảo mật và tuân thủ dữ liệu trên mạng lai là những điểm rắc rối mà doanh nghiệp phải chuẩn bị sẵn sàng để xử lý.

Chưa hết, trong một môi trường nhiều đám mây hoặc trong một đám mây lai, mặc dù tất cả các tài nguyên điện toán đều được trải rộng trên các mạng diện rộng; việc quản lý tài nguyên (máy chủ) có phần rời rạc, ảnh hưởng xấu đến luồng dịch vụ máy tính. Do đó, các kiểu thiết lập điện toán đám mây này dẫn đến sự thiếu nhất quán trong quản lý tài nguyên và gây ra lỗi, ảnh hưởng đến chất lượng hiệu suất mạng tổng thể. Hơn nữa, các mạng đám mây này hiện phải đối mặt với các vấn đề nghiêm trọng về tuân thủ và quản trị trong thế giới CNTT ngày càng được quản lý chặt chẽ. Những thách thức của quản trị dữ liệu trong thế giới đa đám mây giải thích một số phương pháp hay nhất về DG mà doanh nghiệp có thể áp dụng trong môi trường nhiều đám mây.

Những thách thức về quản trị dữ liệu của Cloud Warehouse

Sản phẩm tầm quan trọng ngày càng tăng của kho dữ liệu được lặp lại trong Báo cáo tình báo Mordor, chỉ ra rằng thị trường kho dữ liệu đang tăng trưởng với tốc độ CAGR là 11.17% từ 6.3 tỷ USD năm 2019 lên 11.95 tỷ USD vào năm 2025. Trên đám mây, việc phát triển kho dữ liệu được đơn giản hóa và tăng tốc hơn nữa. Tuy nhiên, quản trị dữ liệu và bảo mật vẫn tiếp tục là hai khía cạnh quan trọng cần được chú ý.

Theo Balaji Ganesan, Giám đốc điều hành của Privacera:

“Để trở nên phi tập trung và không đồng nhất như bối cảnh dữ liệu ngày nay, việc quản trị dữ liệu đòi hỏi phải có sự quản lý của trung tâm nhưng phải có sự thực thi của địa phương. Điều này thực sự có nghĩa là việc thực thi thực tế được thực hiện bởi cơ sở dữ liệu và ứng dụng càng gần dữ liệu càng tốt, không đưa vào một lớp khác, điều này sẽ trở thành một điểm lỗi duy nhất.

Sản phẩm Đám mây phân tán nổi lên như người chiến thắng cuối cùng

Để làm rõ sự khác biệt chính giữa đám mây lai và đám mây phân tán, Nhà phân tích Gartner nhận xét:

“Một phần của đám mây lai được kiến ​​trúc, sở hữu, kiểm soát và vận hành bởi khách hàng và phần còn lại do nhà cung cấp đám mây công cộng. Khách hàng vẫn chịu trách nhiệm về phần hoạt động của mình nhưng không thể tận dụng các khả năng (chẳng hạn như kỹ năng, tốc độ đổi mới, đầu tư và kỹ thuật) của nhà cung cấp đám mây công cộng. Đám mây phân tán, thế hệ điện toán đám mây tiếp theo, vẫn giữ được những lợi thế của điện toán đám mây đồng thời mở rộng phạm vi và trường hợp sử dụng cho đám mây. CIO có thể sử dụng các mô hình đám mây phân tán để nhắm mục tiêu vào các trường hợp sử dụng đám mây phụ thuộc vào vị trí sẽ được yêu cầu trong tương lai.”

Vậy môi trường đám mây phân tán là gì? Đám mây phân tán tạo điều kiện cho nhiều mạng đám mây công cộng cùng tồn tại trên khắp các khu vực địa lý, kết hợp các trung tâm dữ liệu tại chỗ, các mạng từ xa mạng của nhà cung cấp đám mâyvà các vị trí khác của bên thứ ba. Tuy nhiên, việc quản lý được kiểm soát tập trung từ một điểm duy nhất.

Trong mạng đám mây phân tán, vấn đề này đã được giải quyết tốt bằng cách cung cấp tính toán biên—cho phép cả máy chủ và ứng dụng thực thi rất gần với vị trí của dữ liệu, do đó cải thiện tốc độ, chất lượng và hiệu suất phân tích kinh doanh lên nhiều bậc. Đáng kể hơn, điện toán biên đã nhận được sự thúc đẩy kinh doanh với sự xuất hiện của các công nghệ dữ liệu tiên tiến như dữ liệu lớn, internet vạn vật (IoT) và trí tuệ nhân tạo (AI).

Edge giúp giải quyết các vấn đề tuân thủ trước đây bị bỏ qua trong đám mây đa đám mây hoặc đám mây lai. Điện toán đám mây phân tán và điện toán biên cùng nhau tạo ra các luồng ứng dụng nhất quán và dễ khiếu nại trên tất cả các hệ thống trong môi trường nhiều đám mây phức tạp.

Lợi ích lớn nhất của hoạt động đám mây phân tán là nó mở rộng khả năng và dịch vụ của đám mây trung tâm tới các mạng vệ tinh, từ xa. Ai là người hưởng lợi lớn nhất? Tất nhiên, khách hàng là người hiện quản lý tất cả các nhu cầu điện toán kinh doanh trên nhiều đơn vị kinh doanh phân tán về mặt địa lý từ vị trí của mình trên một “mặt phẳng điều khiển duy nhất”.

Trao quyền cho người tiêu dùng dữ liệu  

Trong tạp chí thời đại phân tích dữ liệu tự phục vụ, “trao quyền cho người tiêu dùng doanh nghiệp thông thường” là trọng tâm kinh doanh. Trong khi các quy định về dữ liệu như Quy định chung về bảo vệ dữ liệu (GDPR) và Đạo luật về quyền riêng tư của người tiêu dùng California (CCPA) đã gây áp lực rất lớn buộc các doanh nghiệp toàn cầu phải tuân thủ, thì một số thách thức mới hơn như kiến thức về dữ liệu doanh nghiệp đã thúc đẩy các tổ chức phá bỏ các kho dữ liệu và hướng tới khả năng chia sẻ dữ liệu được hỗ trợ về mặt công nghệ.

Trong tương lai: Quản lý dữ liệu phân tán là câu trả lời

Lộ trình quản lý dữ liệu phân tán chỉ ra rằng với sự gia tăng theo cấp số nhân của dữ liệu trong các tổ chức, các nhóm CNTT tập trung không thể quản lý và chi phối dữ liệu trên toàn doanh nghiệp. Để đảm bảo quyền truy cập dữ liệu được quản lý tốt và được quản lý tốt cho tất cả người dùng, các doanh nghiệp “phải chuyển sang mô hình quản lý dữ liệu phân tán”.

Trong mô hình quản lý dữ liệu phân tán, vai trò và trách nhiệm Quản lý dữ liệu được chia sẻ trên toàn doanh nghiệp. Trong kịch bản mới này, các nhóm chuyên gia phi tập trung sẽ “quản lý quyền truy cập và quyền truy cập dữ liệu đồng thời loại bỏ nút thắt cổ chai hiện tồn tại với CNTT tập trung”.

Điều này nghe có vẻ dễ dàng hơn và có thể sẽ mất vài năm để phát triển thành một giải pháp làm việc hoàn thiện. Các nền tảng Quản trị Dữ liệu trong tương lai sẽ cần quy tắc toàn diện để xử lý dữ liệu, bao gồm các vấn đề cốt lõi về bảo mật, tuân thủ, cùng với các nhiệm vụ Quản lý dữ liệu khác.

Hình ảnh được sử dụng theo giấy phép từ Shutterstock.com

PlatoAi. Web3 được mô phỏng lại. Khuếch đại dữ liệu thông minh.
Nhấn vào đây để truy cập.

Nguồn: https://www.dataversity.net/the-distributed-cloud-and-data-governance/