Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

thanhlink — Wed, 24 Mar 2010 09:53:50 GMT

Mình đang cần tài liệu để nghiên cứu vì chưa biết phải bắt đầu từ đâu.Thực ra, mình muốn xây dựng kho dữ liệu đầu vào của ngành thống kê thì phải nghiên cứu những tài liệu gì?

Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

chucnv — Tue, 23 Mar 2010 16:10:26 GMT

Chào bạn, Thực ra không có mô hình kho dữ liệu chung cho nhiều đơn vị. Tuy nhiên khi xây dựng kho dữ liệu cho bất cú một đơn vị nào thì cũng cần tuân thủ một số qui tắc và đi theo qui trình nhất định. Các nguyên tắt và qui trình này tương đối dài dòng nên khó mà nêu chi tiết ở đây được. như Qui trình khảo sát yêu cầu, chọn mô hình dữ liệu, tích hợp và chia sẽ dữ liệu cho người dùng, bảo mật dữ liệu, Chọn hệ quản trị CSDL nhu thể nào, khả năng mở rộng và kết nối với các hệ thống khác....

nếu bạn có yêu cầu cụ thể thì cứ gởi lên diễn đàn, nếu có thể mình sẽ giúp bạn trong khả năng của mình.

Chúc bạn thành công.

Nguyễn Văn Chức

Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

thanhlink — Tue, 23 Mar 2010 14:41:16 GMT

chucnv có tài liệu về 'Xây dựng kho dữ liệu đầu vào cho 1 ngành KT - XH' không? và qui trình thực hiện ntn?

Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

chucnv — Wed, 10 Mar 2010 15:32:40 GMT

Nhiệm vụ quản trị kho dữ liệu gồm các nhiệm vụ cơ bản sau

Chuyển đổi dữ liệu (Data transformation): Nhiệm vụ rất quan trọng khi khởi tạo một kho dữ liệu lag cho phép người quản trị có thể chuyển đổi dữ liệu từ các định dạng khác nhau(MS Excel, MS Access, XML, SQL SERVER) từ các nguồn khác nhau (các khoa, phòng) đã tồn tại trước đó về định dạng thống nhất là ORACLE lưu trữ trong các Data Mart phục vụ công khai thác dữ liệu phục vụ hoạt động tác nghiệp của nhà trường. cũng như chuyển đổi dữ liệu từ ORACLE sang các định dạng dữ liệu khác để chia sẻ dữ liệu từ kho dữ liệu tới các người sử dụng cuối. Đây là chức năng rất thiết thực cho công tác thu thập dữ liệu vì hiện tại các khoa, phòng của nhà trường chưa có chương trình quản lý chung mà mỗi đơn vị ứng dụng máy tính một cách riêng lẻ, tự phát. Hiện nay XML là chuẩn dữ liệu phổ biến để trao đổi dữ liệu trên internet vì vậy hệ thống cũng hỗ trợ chuyển đổi qua lại từ định dạng XML vào các nguồn dữ liệu khác(SQL SERVER, ORACLE) làm tăng khả năng trao đổi thông tin của kho dữ liệu.

Tích hợp dữ liệu (Data Integration): Chức năng tích hợp dữ liệu cho phép người quản trị dữ liệu có thể trao đổi dữ liệu từ các Data Mart khác nhau trong nhà trường. Nguên tắc của tích hợp dữ liệu giữa các Data Mart các Data Mart trao đổi dữ liệu phải có các bảng có cấu trúc giống nhau và dựa trên khóa chính.

Đồng bộ dữ liệu (Data Replication) Chức năng này cho phép người quản trị kho dữ liệu so sánh, làm sạch dữ liệu để cho dữ liệu giữa các Data mart làm cho dữ liệu trong hệ thống có tính nhất quán cao. Chẳn hạn, kiểm tra, đối chiếu điểm của sinh viên giữa khoa và phòng đào tạo. Đây là chức năng rất cần thiết đối với công tác xử lý dữ liệu của nhà trường.

Tạo mới (New): Chức năng này cho phép tạo ra các bảng mới trong Data Mart đích trong các trường hợp Data Mart đích chưa có bảng dữ liệu tương ứng với Data mart nguồn. Công việc này rất cần thiết khi mới khởi tạo các Data Mart.

Lọc dữ liệu (Data Filter) Đây là chức năng cho phép trích chọn dữ liệu theo một số tiêu chí của dữ liệu trong Data Mart nào đó để kiểm tra, cập nhật hay đưa vào các Data Mart đích. Chẳn hạn, ta có thể lọc ra tất cả cả các sinh viên của một khoa náo đó để chuyển dữ liệu về lưu trữ trong Data Mart của khoa đó.

Phân tán dữ liệu (Data Distribution)Chức năng này cho phép người quản trị kho dữ liệu có thể phân tán dữ liệu giữa các Data Mart trong hệ thống. Phân tán ngang cho tạo ra các bảng dữ liệu được phân tán theo cách giữ nguyên cấu trúc bảng trong Data Mart nguồn nhưng có thể hiện dữ liệu khác. Chẳn hạn, khi dữ liệu về sinh viên trong nhà trường đã được cập nhật trong tổng kho của trường(DATAWH) thì có thể phân tán dữ liệu xuống các khoa, sinh viên khoa nào lưu trữ trong Data mart của khoa đó. Phân tán dọc cho phép tạo ra các bảng có câu trúc khác nhau( Nhưng phải có chung khoa) với bảng dữ liệu nguồn. Chẳn hạn, bảng dữ liệu sinh viên trong tổng kho của trường(DATAWH) có rất nhiều trường nhưng mỗi Data Mart của khoa, phòng chỉ cần một số thuộc tính khác nhau cần thiết cho tác nghiệp của đơn vị mình mà không phải cần tất cả các thuộc tính của bảng sinh viên.

Hợp nhất (Merge): Chức năng hợp nhất dữ liệu được thực hiện nếu các bảng được phân tán theo chiều dọc đã được thực hiện trước đó qua chức năng phân tán dữ liệu. Yêu cầu của phân tán theo chiều dọc là tất cảc các bảng tham gia hợp nhất phải có cùng khóa chính. Chức năng này cho phép tổng hợp dữ liệu từ các bảng khác nhau thông qua khóa chính.

Nguyễn Văn Chức (chucnv@ud.edu.vn) -Chúc các bạn thành công

Oracle

Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

Re: Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)

Một số nhiệm vụ cơ bản của quản trị kho dữ liệu (Data Warehouse Administrator)