一.概述
DataSW Web是一款數(shù)據(jù)交換工具,提供簡(jiǎn)單易用的WEB操作界面,降低用戶使用DataSW的學(xué)習(xí)成本,縮短任務(wù)配置時(shí)間,避免配置過程中出錯(cuò)。用戶可通過web頁(yè)面選擇數(shù)據(jù)源即可創(chuàng)建數(shù)據(jù)同步任務(wù),RDBMS數(shù)據(jù)源可批量創(chuàng)建數(shù)據(jù)同步任務(wù),支持實(shí)時(shí)查看數(shù)據(jù)同步進(jìn)度及日志并提供終止同步功能。
隨著學(xué)校信息化不斷發(fā)展,學(xué)校各部門業(yè)務(wù)系統(tǒng)異構(gòu)、數(shù)據(jù)庫(kù)封閉、各自為政,已不能滿足用戶對(duì)一體化校園的需求(如跨系統(tǒng)數(shù)據(jù)訪問的需求)。校園系統(tǒng)由獨(dú)立分散化逐步向集成一體化發(fā)展已十分必要。
舉例: 學(xué)校學(xué)籍管理系統(tǒng)和校園卡系統(tǒng)實(shí)現(xiàn)學(xué)生基本數(shù)據(jù)共享,用本平臺(tái)學(xué)籍管理作為數(shù)據(jù)源頭,校園卡系統(tǒng)作為目錄庫(kù)寫入,解決學(xué)校兩系統(tǒng)重復(fù)錄入學(xué)生數(shù)據(jù)的疼點(diǎn)。
二、技術(shù)特點(diǎn)
1、技術(shù)特點(diǎn)
易用:全部操作提供web界面完成,無須編寫程序代碼,實(shí)現(xiàn)業(yè)務(wù)系統(tǒng)數(shù)據(jù)交換;
全面:支持Mysql、 SqIServer、 Postgres、 Oracle等多種常用數(shù)據(jù)庫(kù);
靈活:支持日志表跟蹤、通過時(shí)間戳或增長(zhǎng)字段掃描跟蹤等多種方式
專業(yè):結(jié)構(gòu)變動(dòng)、數(shù)據(jù)更新、數(shù)據(jù)刪除、日志存儲(chǔ)、數(shù)據(jù)發(fā)布等專業(yè)化功能服務(wù)應(yīng)用體系;
2、技術(shù)優(yōu)勢(shì)
產(chǎn)品采用最新的微服務(wù)架構(gòu),前端采用采用HTML5技術(shù),后端采用 springboot+mybatis+shiro+cas集成框架, thymeleaf前端模板框架, shiro安全框架。
3、數(shù)據(jù)交換邏輯架構(gòu)
邏輯架構(gòu)支持元數(shù)據(jù)定義、數(shù)據(jù)標(biāo)準(zhǔn)化、數(shù)據(jù)清洗、異構(gòu)交換等;
三、部分功能介紹
1.平臺(tái)部分界面
平臺(tái)登錄
平臺(tái)主體框架
2.創(chuàng)建數(shù)據(jù)源
為數(shù)據(jù)交換建立數(shù)據(jù)源,比如:將學(xué)生管理系統(tǒng)同步學(xué)生信息到校園卡系統(tǒng),那么將學(xué)生系統(tǒng)數(shù)據(jù)庫(kù)作為數(shù)據(jù)源建立;
3.字段映射
為數(shù)據(jù)源表字段和寫入目的表字段配置映射關(guān)系;比如:對(duì)學(xué)生系統(tǒng)學(xué)生字端信息與校園卡系統(tǒng)學(xué)生字段信息建立映射關(guān)系;方便記錄寫入;
4.任務(wù)創(chuàng)建
任務(wù)構(gòu)建配置,建立任務(wù)執(zhí)行任務(wù)腳本,如:學(xué)生信息產(chǎn)生新生記錄,自動(dòng)同步到校園卡系統(tǒng),無須重復(fù)習(xí)錄入;
阻塞處理策略:調(diào)度過于密集執(zhí)行器來不及處理時(shí)的處理策略;
單機(jī)串行:調(diào)度請(qǐng)求進(jìn)入單機(jī)執(zhí)行器后,調(diào)度請(qǐng)求進(jìn)入FIFO隊(duì)列并以串行方式運(yùn)行;
丟棄后續(xù)調(diào)度:調(diào)度請(qǐng)求進(jìn)入單機(jī)執(zhí)行器后,發(fā)現(xiàn)執(zhí)行器存在運(yùn)行的調(diào)度任務(wù),本次請(qǐng)求將會(huì)被丟棄并標(biāo)記為失?。?/div>
覆蓋之前調(diào)度:調(diào)度請(qǐng)求進(jìn)入單機(jī)執(zhí)行器后,發(fā)現(xiàn)執(zhí)行器存在運(yùn)行的調(diào)度任務(wù),將會(huì)終止運(yùn)行中的調(diào)度任務(wù)并清空隊(duì)列,然后運(yùn)行本地調(diào)度任務(wù);
5.任務(wù)管理
對(duì)上面映射關(guān)系產(chǎn)生json腳本,方便任務(wù)執(zhí)行器輪循執(zhí)行,實(shí)現(xiàn)實(shí)時(shí)的數(shù)據(jù)交換;
5.任務(wù)管理
對(duì)上面映射關(guān)系產(chǎn)生json腳本,方便任務(wù)執(zhí)行器輪循執(zhí)行,實(shí)現(xiàn)實(shí)時(shí)的數(shù)據(jù)交換;
6. 查看日志
可以點(diǎn)擊查看日志,實(shí)時(shí)獲取日志信息,終止正在執(zhí)行的DataSW進(jìn)程
四、系統(tǒng)運(yùn)行環(huán)境
Language: Java 8(jdk版本建議1.8.201以上)
Environment: Linux Database: Mysql5.7
五、著作權(quán)