Logo Zephyrnet

6 xu hướng ngăn xếp dữ liệu hiện đại cần tìm kiếm trong năm 2021

Ngày:

TechRepublic đã nói chuyện với hàng chục chuyên gia, họ cho biết làn sóng các công ty quan tâm đến việc làm nhiều hơn với dữ liệu của họ ngày càng tăng.

đám mây-data-kho-cover-copy.jpg

Thông tin thêm về Dữ liệu lớn

Dữ liệu đã trở thành trò chơi dành cho hầu hết mọi doanh nghiệp khi các công ty và tổ chức đang tìm kiếm nhiều cách hơn để đón đầu xu hướng và xác định những sai lầm trong quá khứ. 

TechRepublic đã nói chuyện với các nhà lãnh đạo và chuyên gia trong ngành, những người đã thảo luận về sáu chủ đề và ý tưởng sẽ xuất hiện vào năm 2021 liên quan đến kho dữ liệu hiện đại.

Debanjan Saha, phó chủ tịch phân tích dữ liệu của Google Cloud, nhớ lại: “Tôi là một kỹ sư mạng khi cuộc cách mạng internet lớn xảy ra và tôi cảm thấy thực sự may mắn khi được ở giữa cuộc cách mạng dữ liệu và đám mây này”.

Saha nói thêm: “Tôi nghĩ năm tới và 500 năm tới sẽ chứng kiến ​​sự chuyển đổi kỹ thuật số được thúc đẩy bởi cuộc cách mạng dữ liệu”. Ông cho rằng vòng đời trung bình của một công ty Fortune 500 hoặc S&P XNUMX đang ngày càng ngắn hơn vì các doanh nghiệp đang phát triển và cập nhật nhanh hơn bao giờ hết. “Cách duy nhất để thích ứng và thay đổi là sử dụng dữ liệu và quan sát xung quanh bằng các mô hình dự đoán và AI/ML. Những yếu tố này phân biệt người thắng và kẻ thua trong nền kinh tế kỹ thuật số mới.”

XEM: Chính sách lưu trữ dữ liệu đám mây (TechRepublic cao cấp)

Phó chủ tịch Forrester và nhà phân tích chính Michele Goetz cho biết quản lý dữ liệu đang phát triển từ chiến lược phân tích đầu tiên sang chiến lược dựa trên kết quả, nghĩa là dữ liệu hiện ở dạng năng động, định hướng theo luồng và điều phối thông qua các quy trình và mô hình học máy. 

“Forrester nhận thấy ngăn xếp dữ liệu vượt ra ngoài kết cấu dữ liệu vào các mạng dữ liệu. Goetz cho biết, việc quản lý dữ liệu sẽ được tập trung hóa và siêu cục bộ để tạo ra trải nghiệm và thông tin kịp thời. “Cấu trúc giải pháp ngày càng dựa vào tính năng nhắn tin, cổng, API và dịch vụ vi mô trên một hệ sinh thái và bộ sưu tập khả năng. Tình báo bầy đàn và các trường hợp sử dụng thành phố thông minh là những ví dụ về điều này. Kiến trúc mạng trở thành kiến ​​trúc dữ liệu của ngày mai.”

Dân chủ hóa ngăn xếp dữ liệu

George Fraser, Giám đốc điều hành của công ty tích hợp dữ liệu Fivetran, cho biết làn sóng đơn giản hóa việc quản lý dữ liệu gần đây là một xu hướng rất quan trọng sẽ tiếp tục sang năm 2021. 

Ông giải thích rằng chỉ 5 năm trước, các công ty quan tâm đến việc quản lý tốt hơn lượng dữ liệu lớn như Netflix đã phải thực hiện rất nhiều công việc nặng nhọc, thuê nhiều kỹ sư dữ liệu và đầu tư hàng triệu USD vào công nghệ nguồn mở ấn tượng.

Ngày nay, phần lớn việc đó có thể được thực hiện thông qua việc đăng ký một trong những kho dữ liệu cao cấp.

“Việc quản lý dữ liệu ngày càng dễ dàng hơn. Công nghệ thường đi theo hướng khác, nó trở nên phức tạp hơn. Nhưng chúng ta đang chứng kiến ​​một sự sàng lọc và tôi nghĩ đó là điều quan trọng và tốt. Chi phí của các thành phần cơ bản đã giảm xuống nhưng cũng đúng là mọi người đang làm được nhiều việc hơn với dữ liệu,” ông nói. 

“Một số nhà phân tích có thể đạt được điều mà 10 năm trước Netflix phải đầu tư XNUMX triệu USD, điều này thật tuyệt. Nó giúp các công ty có trình độ kém hơn và các công ty không ở ven biển hoặc thuê những đội đẹp nhất có hồ sơ LinkedIn tốt nhất có thể tiếp cận được. Giống như những người phàm trần có thể làm được việc này, đó là một điều tốt.”

Các công ty chuyển sang đám mây và tận dụng multicloud

Donal Tobin, Giám đốc điều hành của công ty tích hợp dữ liệu Xplenty, cho biết ngày càng có nhiều công ty lớn thể hiện sự quan tâm đến đám mây, đặc biệt là những thứ như phân tích. 

“Những gì chúng tôi đang thấy là multicloud chắc chắn cũng được quan tâm. Tobin cho biết khả năng cải tiến nền tảng của bạn trong bất kỳ người chơi đám mây lớn nào ngày càng trở thành một yêu cầu. “Khách hàng muốn điều đó và họ không thích ý tưởng bị ràng buộc vào bất kỳ giải pháp nào với nền tảng đó hoặc một nền tảng.” 

Marc Linster, CTO của EnterpriseDB giải thích, sự chuyển đổi toàn ngành sang đám mây đang được thực hiện vì đám mây cho phép linh hoạt nhanh chóng công suất và cắt giảm chu kỳ cung cấp kéo dài cũng như đầu tư giấy phép trả trước. Khả năng linh hoạt năng lực để phù hợp với nhu cầu là chìa khóa để đáp ứng nhanh chóng như một phần của chiến lược chuyển đổi kỹ thuật số. 

Saha, từ Google Cloud, cho biết các công ty khởi nghiệp và công ty kỹ thuật số gốc là những người đầu tiên áp dụng Đám mây nhưng khi chúng ta bước sang năm 2021, nhiều doanh nghiệp truyền thống hơn đang áp dụng nền tảng đám mây.

Ông nói: “Mọi người ghét việc quản lý trung tâm dữ liệu của mình vì chúng đắt tiền. “Họ thực sự cảm thấy an toàn hơn khi đám mây được đầu tư nhiều hơn vào bảo mật, quyền riêng tư và quản trị dữ liệu.

Thật không may, đại dịch coronavirus đã khiến các doanh nghiệp trong mọi ngành không còn lựa chọn nào khác ngoài việc tận dụng các hệ thống kỹ thuật số và nền tảng đám mây để đáp ứng nhu cầu. 

Saha nói: “Về cơ bản, nó đã đẩy nhanh thách thức chuyển đổi kỹ thuật số này và tôi nghĩ trong tương lai, bất kể mọi người có do dự gì, chúng tôi cũng đã vượt qua được điều đó vào thời điểm này”.  

Colin Zima, giám đốc phân tích của công ty phân tích dữ liệu Looker do Google hậu thuẫn, cho biết nhiều khách hàng đang yêu cầu rằng các công ty có thể làm việc với nhiều loại bộ dữ liệu và nhà cung cấp đám mây khác nhau.

Nhưng ngoài các quy định của khu vực, hầu hết các công ty chỉ quan tâm đến việc lưu giữ dữ liệu của họ ở nhiều nơi.

“Bạn không thể đặt mọi thứ ở một nơi vì bạn cần bản sao lưu và bạn cần dự phòng. Vì vậy, ngay cả ở Looker, trước khi được Google mua lại, chúng tôi đã có bản sao lưu tại Amazon. Chúng tôi có các bản sao lưu tại Google, các bản sao lưu khác tại Microsoft và kiểu kết nối liên thông đó đang trở nên bình thường”, Zima nói. 

Andy Maguire, kỹ sư máy học cao cấp của Netdata, nói rằng điều thực sự cần thiết là một hồ dữ liệu liên kết có thể trải rộng trên nhiều đám mây. 

“Ví dụ: nếu bạn có dữ liệu luồng nhấp chuột của mình trong một cái gì đó như Google BigQuery cũng như các ứng dụng và nhật ký sản xuất cốt lõi của bạn trong Amazon Web Services (AWS), thì việc tập trung tất cả dữ liệu vào và ra khỏi mạng có thể quá tốn kém. Google Cloud Platform (GCP) hoặc AWS hoặc trên nền tảng của một số nhà cung cấp. Thay vào đó, chúng ta cần học cách sống chung với sự phức tạp của multicloud và cách điều hướng nó tốt nhất,” ông nói. 

Khám phá giá trị tiên đoán của dữ liệu

Các doanh nghiệp không có nền tảng về dữ liệu đang ngày càng nhận ra mức độ hữu ích của nó đối với các hành động dự đoán. Joe Maguire, giám đốc nghiên cứu cấp cao tại Gartner, cho biết rằng trong năm 2020 và chắc chắn là vào năm 2021, các doanh nghiệp không có bộ kỹ năng AI/ML nội bộ sẽ được hưởng lợi từ các tính năng AI/ML được tích hợp trong các sản phẩm của nhà cung cấp. 

“Việc căn chỉnh các đường dẫn dữ liệu, khoa học dữ liệu và ML cùng với quy trình triển khai ứng dụng là nền tảng để phân phối liên tục và tích hợp liên tục các mô hình ML được nâng cao định kỳ trong các giải pháp dựa trên AI. Điều này đòi hỏi phải tận dụng DataOps, MLOps và Platform Ops cho AI để mở rộng kiến ​​trúc AI. Do đó, các nền tảng điều phối AI để vận hành AI đang nổi lên”, ông nói.

Saha của Google Cloud nói rằng vấn đề không chỉ là xem xét dữ liệu của bạn trong quý trước hoặc tuần trước và cố gắng tìm hiểu những gì đã xảy ra trong quá khứ. 

Ông nói: “Đó là việc xem xét luồng sự kiện đang diễn ra và hành động trong thời gian thực”. “Việc phân tích theo thời gian thực sẽ thực sự quan trọng. Mọi người rất quan tâm đến việc quan sát xung quanh và dự đoán điều gì sẽ xảy ra. Nếu bạn có thể nhận được giá trị từ dữ liệu nhanh hơn những dữ liệu khác và bạn tạo ra giá trị khác biệt thực sự. Đó là lý do tại sao mọi người rất quan tâm đến phân tích dự đoán và mô hình dự đoán.”

Tăng cường sử dụng trí tuệ nhân tạo và học máy

Ali Siddiqui, giám đốc sản phẩm của BMC Software, lưu ý rằng yếu tố chính trong tương lai của kho dữ liệu hiện đại sẽ là sự bao gồm các khả năng phân tích dự đoán và thông minh do AI/ML điều khiển, tận dụng nhiều loại dữ liệu lịch sử và thời gian thực. .  

Trong không gian Quản lý Hoạt động CNTT, điều này bao gồm việc phân tích dữ liệu bao gồm số liệu, sự kiện, nhật ký, cấu trúc liên kết, sự cố và thay đổi, đồng thời yêu cầu các nền tảng mở và có thể tích hợp dữ liệu từ vô số công cụ và công nghệ, ông nói thêm rằng ngăn xếp sẽ cũng cần hỗ trợ khách hàng kết hợp dữ liệu từ cơ sở hạ tầng và ứng dụng của trung tâm dữ liệu tại chỗ cũng như nhiều tài sản đám mây.  

Siddiqui cho biết: “Khi các doanh nghiệp phát triển thành các doanh nghiệp kỹ thuật số tự trị, nó không chỉ đơn giản là thông tin chi tiết bổ sung từ phân tích dữ liệu mà còn về khả năng hành động – và khả năng thực hiện các hành động tự động nếu có thể”.

“Sau một năm đầy biến động, các doanh nghiệp sẽ phải lường trước những điều bất ngờ khi làm cho các ngăn xếp công nghệ trở nên chắc chắn và chủ động. Chúng tôi sẽ thấy nhu cầu về AIOps tiếp tục tăng vì nó có thể giải quyết và dự đoán những tình huống không mong muốn này bằng cách sử dụng AI, ML và phân tích dự đoán.”

Saha nói về Google Cloud rằng việc truyền tải AI và học máy đã trở thành một phần của mọi thứ. Các công cụ này được sử dụng rộng rãi để quản lý cơ sở hạ tầng bằng cách thực hiện tự động mở rộng quy mô, tự động sửa lỗi, tự động tối ưu hóa, v.v. 

Ông nói: “Cách mọi người, những người dùng doanh nghiệp bình thường, đang sử dụng AI/ML để làm những điều phi thường, sẽ thay đổi cách các doanh nghiệp vận hành trong tương lai”, đồng thời cho biết thêm rằng Google đang tìm cách dân chủ hóa hơn nữa AI và học máy để những người không có nền tảng dữ liệu có thể truy cập vào nó thông qua các bảng tính đơn giản. 

“Năm tới cũng sẽ có nhiều phân tích tăng cường hơn, nơi bạn sẽ thấy ngày càng nhiều AI và học máy được tích hợp vào quy trình kinh doanh tự nhiên của mọi người. BI hiện đại là về việc tạo API dữ liệu trên tài sản dữ liệu của bạn, sau đó tích hợp trang tổng quan và luồng công việc của bạn vào các ứng dụng kinh doanh của bạn.”

Zima cho biết mối quan tâm đến AI và học máy đã cho thấy nhiều hứa hẹn và thậm chí sẽ còn phổ biến hơn vào năm 2021. 

“Chúng tôi bắt đầu thấy mọi người thực sự xây dựng những sản phẩm dữ liệu này để sử dụng nội bộ. Chúng tôi làm việc với một vài dịch vụ phát trực tuyến và một trong số họ đã xây dựng một sản phẩm dữ liệu và tôi thường sử dụng sản phẩm đó vì nó thực sự là một bảng điều khiển bên dưới các trang tính, nhưng bạn thực sự duyệt qua các tiêu đề, giống như bạn làm trong một dịch vụ phát trực tuyến. Vì vậy, nó có biểu tượng của tất cả logo của sản phẩm và có thể chạm được, nhưng bạn nhấp vào nó và xem chi tiết để biết số liệu về nó,” Zima nói.

“Họ đang mang lại trải nghiệm giống như sản phẩm và tôi thấy điều đó ngày càng xảy ra nhiều hơn. Việc xây dựng những thứ đó sẽ tốn kém hơn. Nhưng tôi nghĩ ngày càng nhiều bạn sẽ thấy các sản phẩm dữ liệu được xây dựng để sử dụng nội bộ.”

Lo ngại về dữ liệu bị khóa

Một số chuyên gia bày tỏ lo ngại rằng vào năm 2021, một số tên tuổi lớn nhất về dữ liệu sẽ bắt đầu khóa dữ liệu của họ khỏi các nền tảng đối thủ. 

“Nỗi sợ hãi lớn nhất mà tôi luôn có là mọi người đang sử dụng ngày càng nhiều các công cụ SaaS này. Một công ty trung bình có rất nhiều công cụ SaaS và tất cả chúng đều có dữ liệu bị khóa. Vì vậy, Salesforce có một số dữ liệu bán hàng của bạn nhưng Slack có dữ liệu trò chuyện và bạn có tất cả các hệ thống này đang lưu trữ các tập dữ liệu,” Zima nói.

“Nỗi sợ hãi lớn nhất của tôi là các dịch vụ này sẽ bắt đầu cố gắng khóa dữ liệu của họ nhiều hơn. Salesforce vừa mua Slack và họ có Tableau. Và tôi luôn lo sợ rằng dữ liệu đó sẽ không có sẵn cho các sản phẩm hoặc dịch vụ khác.”

Robson Grieve, CMO tại OutSystems, lặp lại những lo ngại đó và cho biết vì các ứng dụng SaaS phù hợp với tất cả mọi người và không cho phép bất kỳ hình thức khác biệt hoặc tùy chỉnh nào, chúng ta có thể thấy một làn sóng các công ty hướng tới tương lai—những công ty đang áp dụng các phương pháp tiếp cận nền tảng ứng dụng hiện đại hơn—bỏ lại mô hình lỗi thời này để xây dựng ứng dụng của riêng họ nhằm trở nên thực sự khác biệt và tiết kiệm rất nhiều tiền trong quá trình này. 

Nhưng trong khi nỗi sợ hãi là có thật, các chuyên gia khác cho biết những lo ngại của khách hàng về việc bị mắc kẹt với một số nhà cung cấp nhất định sẽ buộc họ phải giữ dữ liệu của mình ở mức độ mở. 

Lewis Carr, giám đốc tiếp thị sản phẩm cấp cao của Actian, cho biết: “Các công cụ phân tích cố gắng trở thành cửa hàng tổng hợp cho tất cả các nhu cầu lưu trữ dữ liệu cơ bản và dữ liệu đám mây cũng sẽ gặp phải những thách thức, vì khách hàng sẽ cảnh giác với việc khóa nhà cung cấp”. “Để ngăn xếp dữ liệu hiện đại hoạt động, nó cần phải mở cho tất cả các nguồn gốc, đích phân tích và trực quan hóa.”

Nhu cầu bảo mật của ngăn xếp dữ liệu

Hầu hết mọi ngành đều có tính toán về an ninh mạng và việc quản lý dữ liệu cũng không ngoại lệ. Saha, từ Google Cloud, cho biết ngày càng có nhiều khách hàng yêu cầu một cấu trúc quản trị dữ liệu thống nhất, toàn diện trên nhiều phần khác nhau của dữ liệu.

Donal Tobin, Giám đốc điều hành của công ty tích hợp dữ liệu Xplenty, cho biết các công ty “về cơ bản đang tạo ra một quả bom hẹn giờ trong kho dữ liệu của bạn”. Ông cho biết khách hàng đang tìm kiếm thêm thông tin về bảo mật dữ liệu, đến mức các công ty như Xplenty hiện đang nhấn mạnh khả năng mã hóa của họ như một cách để đảm bảo với khách hàng rằng dữ liệu của họ sẽ được an toàn. 

“Tôi nghĩ đó là một trong những thay đổi lớn nhất mà bạn thấy sắp tới là mọi người hiện tại, chẳng hạn như trong vòng ba đến sáu tháng qua, bắt đầu nhận ra điều này và xem xét nó một cách nghiêm túc,” ông nói. 

Cũng thấy

Source: https://www.techrepublic.com/article/6-modern-data-stack-trends-to-look-for-in-2021/#ftag=RSS56d97e7

tại chỗ_img

Tin tức mới nhất

tại chỗ_img