基于數(shù)據(jù)抽取與訂閱實(shí)現(xiàn)數(shù)據(jù)共享分析及研究論文
1.引言
早期的應(yīng)用系統(tǒng)的建設(shè)，大都存在缺少總體、全面、系統(tǒng)的規(guī)劃，缺乏統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，相互之間資源難以共享的“信息孤島”。從而造成各部門提供的數(shù)據(jù)不夠完整、準(zhǔn)確和權(quán)威。給全校范圍內(nèi)信息的交流和共享帶來了障礙，同時(shí)產(chǎn)生了大量的冗余信息。因此，需要通過對(duì)各部門計(jì)算機(jī)應(yīng)用系統(tǒng)進(jìn)行統(tǒng)一規(guī)劃，利用底層整合的信息資源，為門戶、應(yīng)用和信息資源整合提供數(shù)據(jù)交換、資源管理等基本服務(wù)接口，以實(shí)現(xiàn)各部門決策數(shù)據(jù)在應(yīng)用層面的互聯(lián)互通和信息共享。
為了實(shí)現(xiàn)數(shù)據(jù)共享，需要建設(shè)數(shù)據(jù)中心存儲(chǔ)全校共享的數(shù)據(jù)。建設(shè)數(shù)據(jù)中心時(shí)，盡可能擴(kuò)展數(shù)據(jù)的集成范圍，形成大而全的數(shù)據(jù)中心，作為全校數(shù)據(jù)統(tǒng)計(jì)分析、智能決策支持的權(quán)威數(shù)據(jù)庫(kù)；數(shù)據(jù)庫(kù)能集成到數(shù)據(jù)中心運(yùn)行的應(yīng)用系統(tǒng)盡可能集成到數(shù)據(jù)中心運(yùn)行，數(shù)據(jù)中心可以成為后續(xù)開發(fā)各種應(yīng)用系統(tǒng)的通用數(shù)據(jù)庫(kù)平臺(tái)；對(duì)于需獨(dú)立運(yùn)行的應(yīng)用系統(tǒng)，通過數(shù)據(jù)交換與共享服務(wù)平臺(tái)來實(shí)現(xiàn)數(shù)據(jù)的集成與共享；同時(shí)制定規(guī)范的數(shù)據(jù)變更流程，實(shí)現(xiàn)誰產(chǎn)生、誰維護(hù)、誰負(fù)責(zé)的權(quán)威數(shù)據(jù)源。
本文以我校數(shù)字化校園項(xiàng)目建設(shè)為例，重點(diǎn)介紹如何規(guī)劃好我校數(shù)據(jù)流，以及如何通過數(shù)據(jù)的`抽取與訂閱實(shí)現(xiàn)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)共享。
2.數(shù)據(jù)流規(guī)劃
為了實(shí)現(xiàn)校內(nèi)各業(yè)務(wù)系統(tǒng)間的數(shù)據(jù)共享和保證數(shù)據(jù)的一致性，必須規(guī)劃好數(shù)據(jù)流向。數(shù)據(jù)共享的總體包括了代碼集的共享和數(shù)據(jù)集的共享。在這里，“代碼集”主要是指在各個(gè)應(yīng)用系統(tǒng)需要實(shí)現(xiàn)流轉(zhuǎn)的學(xué)校標(biāo)準(zhǔn)代碼，“數(shù)據(jù)集”主要是指在各個(gè)業(yè)務(wù)系統(tǒng)間需要進(jìn)行數(shù)據(jù)共享的數(shù)據(jù)集。
每一個(gè)共享的代碼集或數(shù)據(jù)集都有唯一的權(quán)威數(shù)據(jù)源，執(zhí)行“誰產(chǎn)生，誰維護(hù)”的原則。在整個(gè)數(shù)據(jù)流轉(zhuǎn)設(shè)計(jì)中，數(shù)據(jù)流都不做交叉設(shè)計(jì)，這樣不會(huì)導(dǎo)致數(shù)據(jù)流混亂，形成誤解。 因些必須對(duì)各業(yè)務(wù)系統(tǒng)進(jìn)行統(tǒng)一編碼，設(shè)置好業(yè)務(wù)系統(tǒng)間數(shù)據(jù)共享流程，并對(duì)共享數(shù)據(jù)信息流細(xì)化。
2.1業(yè)務(wù)系統(tǒng)統(tǒng)一編碼
根據(jù)我校所使用的各業(yè)務(wù)系統(tǒng)，分別采用數(shù)字對(duì)應(yīng)各業(yè)務(wù)系統(tǒng)，“41”代表“人事系統(tǒng)”；“42”代表“學(xué)工系統(tǒng)”；“43”代表“招生系統(tǒng)”；“44”代表“科研系統(tǒng)”；“45”代表“科研系統(tǒng)”；“47”代表“迎新系統(tǒng)”；“48”代表“離校系統(tǒng)”；“50”代表“校友系統(tǒng)”；“52”代表“辦公系統(tǒng)”；“61”代表“財(cái)務(wù)系統(tǒng)”；“62”代表“圖書館系統(tǒng)”；“63”代表“一卡通系統(tǒng)”；
2.2業(yè)務(wù)系統(tǒng)間數(shù)據(jù)共享流程
業(yè)務(wù)系統(tǒng)主要涉及到：招生系統(tǒng)、教務(wù)系統(tǒng)、迎新系統(tǒng)、學(xué)工系統(tǒng)、離校系統(tǒng)、校友系統(tǒng)、人事系統(tǒng)、財(cái)務(wù)系統(tǒng)、科研系統(tǒng)、辦公系統(tǒng)、圖書館系統(tǒng)、一卡通系統(tǒng)；系統(tǒng)間各業(yè)務(wù)數(shù)據(jù)的來源及共享如下圖所示：
每個(gè)帶有“數(shù)字”箭頭的標(biāo)記分別表示數(shù)據(jù)的來源和內(nèi)容及數(shù)據(jù)流向哪個(gè)業(yè)務(wù)系統(tǒng)，詳細(xì)信息如下：
(1) 新生數(shù)據(jù)
(2) 新生數(shù)據(jù)（教務(wù)系統(tǒng)已經(jīng)進(jìn)行分班編學(xué)號(hào)處理）
(3) 迎新結(jié)果數(shù)據(jù)
(4) 學(xué)生基本信息，學(xué)籍基本信息，成績(jī)數(shù)據(jù)
(5) 學(xué)生基本信息，學(xué)生收費(fèi)明細(xì)
(6) 學(xué)生收費(fèi)結(jié)果數(shù)據(jù)
(7) 獎(jiǎng)學(xué)金信息，資助信息，貸款信息，綠色通道信息，困難生補(bǔ)助信息
(8) 學(xué)生獎(jiǎng)學(xué)金發(fā)放結(jié)果，資助金額發(fā)放結(jié)果，補(bǔ)助發(fā)放結(jié)果，貸款處理結(jié)果
(9) 學(xué)生收費(fèi)數(shù)據(jù)，學(xué)生欠費(fèi)數(shù)據(jù)
(10) 需要辦理離校手續(xù)的學(xué)生信息
(11) 離校后的學(xué)生信息
(12) 教職工基本信息，教職工工資明細(xì)
(13) 教職工基本信息
(14) 科研成果數(shù)據(jù)，論文、著作數(shù)據(jù)
(15) 科研項(xiàng)目信息
(16) 項(xiàng)目經(jīng)費(fèi)到賬信息
-教職工信息
(17) -（20）教職工信息
�。�21） 教師課程安排信息，教學(xué)質(zhì)量評(píng)價(jià)信息
�。�22）（23）學(xué)生基本信息
3.數(shù)據(jù)抽取與訂閱
3．1數(shù)據(jù)抽取與訂閱的實(shí)現(xiàn)流程圖
通過觸發(fā)器、系統(tǒng)日志、數(shù)據(jù)變化標(biāo)志位來捕捉業(yè)務(wù)系統(tǒng)需要共享或要交換到數(shù)據(jù)中心的數(shù)據(jù)發(fā)生變化，同步到中介庫(kù)，設(shè)置中介庫(kù)在業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)服務(wù)器，這樣數(shù)據(jù)發(fā)生變化后同步到中介庫(kù)，不需要進(jìn)行數(shù)據(jù)庫(kù)異構(gòu)轉(zhuǎn)換，而且不需要經(jīng)過任何網(wǎng)絡(luò)，這樣能保證數(shù)據(jù)的實(shí)施、高效、安全的數(shù)據(jù)同步。
3．2數(shù)據(jù)抽取與訂閱實(shí)現(xiàn)
數(shù)據(jù)中心從各業(yè)務(wù)系統(tǒng)中抽取需要共享的數(shù)據(jù)來保持?jǐn)?shù)據(jù)同步，如需要從教務(wù)系統(tǒng)中取學(xué)生信息集和教學(xué)場(chǎng)地信息集，需要從人事系統(tǒng)中取教職工信息集。數(shù)據(jù)中心從業(yè)務(wù)系統(tǒng)整合數(shù)據(jù)的關(guān)系圖如下：
先由數(shù)據(jù)中心系統(tǒng)管理員或各業(yè)務(wù)系統(tǒng)管理員進(jìn)行數(shù)據(jù)抽取配置，選擇從哪個(gè)系統(tǒng)抽取數(shù)據(jù)，再設(shè)定業(yè)務(wù)系統(tǒng)信息字段與數(shù)據(jù)中心信息字段的對(duì)應(yīng)關(guān)系如圖3所示：
4.結(jié)語
高校信息化建設(shè)是一個(gè)不斷發(fā)展的過程 ，在這個(gè)過程中，信息資源的有效整合是一個(gè)必然的過程 ，通過整合可以實(shí)現(xiàn)現(xiàn)有業(yè)務(wù)系統(tǒng)之間的數(shù)據(jù)交換與共享。本文通過分析學(xué)校各業(yè)務(wù)系統(tǒng)的數(shù)據(jù)特點(diǎn)，規(guī)劃出各業(yè)務(wù)系統(tǒng)的數(shù)據(jù)流向，并通過數(shù)據(jù)的抽取與訂閱實(shí)現(xiàn)數(shù)據(jù)共享。
參考文獻(xiàn)：
[1]金保華， 和振遠(yuǎn)， 張亮， 李金旭， 趙麗輝 基于 SOA的數(shù)據(jù)共享與交換平臺(tái)分析與設(shè)計(jì) 鄭 州 輕 工 業(yè) 學(xué) 院 學(xué) 報(bào) (自 然 科 學(xué) 版 )2011年2月
[2]李學(xué)儉 數(shù)據(jù)共享環(huán)境下統(tǒng)一信息標(biāo)準(zhǔn)的建設(shè)與應(yīng)用 計(jì) 算 機(jī) 技 術(shù) 與 發(fā) 展2011年5月
【基于數(shù)據(jù)抽取與訂閱實(shí)現(xiàn)數(shù)據(jù)共享分析及研究論文】相關(guān)文章：
大數(shù)據(jù)時(shí)代基于云計(jì)算的數(shù)據(jù)監(jiān)護(hù)研究論文11-01
大數(shù)據(jù)自動(dòng)分析與數(shù)據(jù)挖掘探討的論文04-26
論文：大數(shù)據(jù)分析與應(yīng)用問題研究07-02
基于QAR數(shù)據(jù)的民航發(fā)動(dòng)機(jī)排故方法研究分析論文10-31
大數(shù)據(jù)環(huán)境下的數(shù)據(jù)安全研究論文10-30
基于大數(shù)據(jù)的統(tǒng)計(jì)分析模型設(shè)計(jì)論文11-17
簡(jiǎn)析基于大數(shù)據(jù)平臺(tái)的動(dòng)態(tài)票額智能預(yù)分系統(tǒng)的研究與實(shí)現(xiàn)論文10-30