Thời gian đọc ước tính: 7 minuti
Nếu có dữ liệu đến từ nhiều nguồn khác nhau, cho dù đó là CRM, nguồn cấp dữ liệu mạng xã hội hay dữ liệu sự kiện hành vi. Và dữ liệu này có thể được lưu trữ trong nhiều công cụ và hệ thống khác nhau trên toàn bộ công nghệ (chẳng hạn như hệ thống cũ, công cụ dựa trên đám mây và kho dữ liệu o hồ).
Bước đầu tiên trong việc điều phối dữ liệu là thu thập và sắp xếp dữ liệu từ tất cả các nguồn khác nhau này và đảm bảo rằng dữ liệu được định dạng chính xác cho đích đến. Điều này đưa chúng ta đến: sự biến đổi.
Dữ liệu có sẵn ở nhiều định dạng khác nhau. Nó có thể có cấu trúc, không cấu trúc hoặc bán cấu trúc hoặc cùng một sự kiện có thể có quy ước đặt tên khác nhau giữa hai nhóm nội bộ. Ví dụ: một hệ thống có thể thu thập và lưu trữ ngày là ngày 21 tháng 2022 năm 20220421 và một hệ thống khác có thể lưu trữ ngày đó ở định dạng số, XNUMX.
Để hiểu được tất cả dữ liệu này, các công ty thường cần chuyển đổi nó thành định dạng chuẩn. Việc điều phối dữ liệu có thể giúp giảm gánh nặng đối chiếu thủ công tất cả dữ liệu này và áp dụng các chuyển đổi dựa trên kế hoạch giám sát và chính sách quản trị dữ liệu của tổ chức bạn.
Một phần quan trọng của việc điều phối dữ liệu là cung cấp dữ liệu để kích hoạt. Điều này xảy ra khi dữ liệu hợp nhất, sạch sẽ được gửi đến các công cụ hạ nguồn để sử dụng ngay (ví dụ: tạo đối tượng chiến dịch hoặc cập nhật trang tổng quan thông tin kinh doanh).
Điều phối dữ liệu về cơ bản là hoàn tác dữ liệu bị cô lập và các hệ thống bị phân mảnh. Alluxio đánh giá cao rằng công nghệ dữ liệu trải qua những thay đổi lớn cứ sau 3-8 năm. Điều này có nghĩa là một công ty 21 tuổi có thể đã trải qua 7 hệ thống quản lý dữ liệu khác nhau kể từ khi thành lập.
Việc điều phối dữ liệu cũng giúp bạn tuân thủ luật về quyền riêng tư dữ liệu, loại bỏ các nút thắt về dữ liệu và thực thi quản trị dữ liệu – chỉ có ba (trong số rất nhiều) lý do chính đáng để triển khai điều này.
Luật bảo mật dữ liệu, chẳng hạn như GDPR và CCPA, có các hướng dẫn nghiêm ngặt về việc thu thập, sử dụng và lưu trữ dữ liệu. Một phần của việc tuân thủ là cung cấp cho người tiêu dùng tùy chọn từ chối thu thập dữ liệu hoặc yêu cầu công ty của bạn xóa tất cả dữ liệu cá nhân của họ. Nếu bạn không xử lý tốt nơi lưu trữ dữ liệu của mình và ai truy cập dữ liệu đó thì có thể khó đáp ứng được nhu cầu này.
Kể từ khi GDPR được ban hành, chúng tôi đã thấy hàng triệu yêu cầu xóa. Điều cần thiết là phải có sự hiểu biết vững chắc về toàn bộ vòng đời của dữ liệu để đảm bảo không có gì thoát ra được.
Nút thắt cổ chai là một thách thức đang diễn ra nếu không có sự phối hợp dữ liệu. Giả sử bạn là một công ty có nhiều hệ thống lưu trữ cần truy vấn thông tin. Người chịu trách nhiệm truy vấn các hệ thống này có thể có rất nhiều yêu cầu cần sàng lọc, nghĩa là có thể có sự chậm trễ giữa các nhóm mà họ cần của dữ liệu và những người ở đó họ nhận được một cách hiệu quả, do đó có thể làm cho thông tin trở nên lỗi thời.
Trong một môi trường được tổ chức tốt, kiểu khởi động và dừng này sẽ bị loại bỏ. Dữ liệu của bạn sẽ được gửi đến các công cụ tiếp theo để kích hoạt (và dữ liệu đó sẽ được chuẩn hóa, nghĩa là bạn có thể tin tưởng vào chất lượng của nó).
Quản trị dữ liệu gặp khó khăn khi dữ liệu được phân phối trên nhiều hệ thống. Các công ty không có cái nhìn đầy đủ về vòng đời dữ liệu và sự không chắc chắn về dữ liệu nào được lưu trữ (ví dụ: chim bồ câu) tạo ra các lỗ hổng, chẳng hạn như không bảo vệ đầy đủ thông tin nhận dạng cá nhân.
Điều phối dữ liệu giúp khắc phục vấn đề này bằng cách mang lại sự minh bạch cao hơn về cách quản lý dữ liệu. Điều này cho phép các công ty chủ động chặn dữ liệu xấu trước khi nó đến cơ sở dữ liệu hoặc tác động đến việc báo cáo và đặt quyền truy cập dữ liệu.
Có một số thách thức có thể phát sinh khi cố gắng triển khai Điều phối dữ liệu. Dưới đây là những điều phổ biến nhất cần lưu ý và cách tránh chúng.
Silo dữ liệu là một hiện tượng phổ biến, nếu không muốn nói là có hại, xảy ra giữa các doanh nghiệp. Khi các nhóm công nghệ phát triển và các nhóm khác nhau sở hữu các khía cạnh khác nhau của trải nghiệm khách hàng, dữ liệu rất dễ bị lưu trữ trên các công cụ và hệ thống khác nhau. Nhưng kết quả là sự hiểu biết chưa đầy đủ về hiệu quả hoạt động của công ty, từ những điểm mù trong hành trình của khách hàng đến sự nghi ngờ về tính chính xác của phân tích và báo cáo.
Các doanh nghiệp sẽ luôn có dữ liệu được truyền từ nhiều điểm tiếp xúc vào nhiều công cụ khác nhau. Nhưng việc phá bỏ các silo là điều cần thiết nếu các công ty này muốn nhận được giá trị từ dữ liệu của họ.
Trong những năm gần đây, một số xu hướng đã xuất hiện liên quan đến cách các công ty quản lý luồng và kích hoạt dữ liệu của họ. Một ví dụ về điều này là xử lý dữ liệu theo thời gian thực, đó là khi dữ liệu được xử lý trong vòng một phần nghìn giây kể từ khi tạo. Dữ liệu thời gian thực đã trở nên quan trọng trong tất cả các ngành, đóng vai trò quan trọng trongIOT (ví dụ: cảm biến tiệm cận trong ô tô), chăm sóc sức khỏe, quản lý chuỗi cung ứng, phát hiện gian lận và cá nhân hóa gần như ngay lập tức. Đặc biệt với những tiến bộ trong học máy và trí tuệ nhân tạo, dữ liệu thời gian thực cho phép các thuật toán vàtrí tuệ nhân tạo để học với tốc độ nhanh hơn.
Một xu hướng khác là sự chuyển đổi sang công nghệ dựa trên điện toán đám mây. Trong khi một số công ty đã chuyển hoàn toàn sang điện toán đám mây, những người khác có thể tiếp tục có sự kết hợp giữa hệ thống tại chỗ và giải pháp dựa trên đám mây.
Sau đó, có sự phát triển về cách phần mềm được xây dựng và triển khai, điều này tác động đến cách thực hiện việc sắp xếp dữ liệu.
– Không kết hợp làm sạch và xác nhận dữ liệu
– Không kiểm tra quy trình làm việc để đảm bảo quy trình diễn ra suôn sẻ và tối ưu
– Phản hồi chậm trễ đối với các vấn đề như dữ liệu không nhất quán, lỗi máy chủ, tắc nghẽn
– Không có tài liệu rõ ràng về lập bản đồ dữ liệu, dòng dữ liệu và kế hoạch giám sát
Để đo lường ROI của việc điều phối dữ liệu:
– Hiểu được hiệu suất cơ bản
– Có bộ mục tiêu, KPI và mục tiêu rõ ràng để điều phối dữ liệu
– Tính toán tổng chi phí công nghệ sử dụng, cùng với thời gian và nội lực
– Đo lường các số liệu quan trọng như thời gian tiết kiệm, tốc độ xử lý và tính khả dụng của dữ liệu, v.v.
BlogInnovazione.it
Ngành hải quân là một cường quốc kinh tế toàn cầu thực sự, đang hướng tới thị trường 150 tỷ...
Thứ Hai tuần trước, Financial Times đã công bố một thỏa thuận với OpenAI. FT cấp phép cho hoạt động báo chí đẳng cấp thế giới…
Hàng triệu người trả tiền cho các dịch vụ phát trực tuyến, trả phí thuê bao hàng tháng. Ý kiến chung là bạn…
Coveware của Veeam sẽ tiếp tục cung cấp dịch vụ ứng phó sự cố tống tiền trên mạng. Coveware sẽ cung cấp khả năng điều tra và khắc phục…
