本發(fā)明涉及數(shù)據(jù)匹配,具體涉及一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng)及方法。
背景技術(shù):
1、在進(jìn)行數(shù)據(jù)查詢時(shí),需要根據(jù)匹配條件對(duì)加載在內(nèi)存中的數(shù)據(jù)進(jìn)行過濾,以獲得與匹配條件匹配的數(shù)據(jù),在進(jìn)行匹配的時(shí)候需要使用到數(shù)據(jù)匹配系統(tǒng);
2、現(xiàn)有的數(shù)據(jù)匹配系統(tǒng)在使用時(shí)發(fā)現(xiàn)不能對(duì)需要進(jìn)行數(shù)據(jù)匹配的數(shù)據(jù)模型進(jìn)行預(yù)處理的功能,這樣原數(shù)據(jù)模型中存在的重復(fù)數(shù)據(jù)、錯(cuò)誤數(shù)據(jù)以及不完整數(shù)據(jù)都會(huì)影響匹配結(jié)果的準(zhǔn)確性,導(dǎo)致匹配結(jié)果偏差過大,因此需要進(jìn)行改進(jìn);
3、為此,發(fā)明一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng)及方法很有必要。
技術(shù)實(shí)現(xiàn)思路
1、為此,本發(fā)明提供一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng)及方法,以解決背景技術(shù)中的問題。
2、為了實(shí)現(xiàn)上述目的,本發(fā)明提供如下技術(shù)方案:一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),包括:
3、數(shù)據(jù)模型儲(chǔ)存庫,其用于儲(chǔ)存各種數(shù)據(jù)的數(shù)據(jù)模型;
4、數(shù)據(jù)采集模塊,其用于采集需要進(jìn)行數(shù)據(jù)匹配的數(shù)據(jù)模型;
5、數(shù)據(jù)輸入模塊,其用于輸入需要進(jìn)行數(shù)據(jù)匹配的數(shù)據(jù)模型;
6、數(shù)據(jù)預(yù)處理模塊,其用于對(duì)采集的數(shù)據(jù)模型或者輸入的數(shù)據(jù)模型進(jìn)行預(yù)處理,所述數(shù)據(jù)預(yù)處理模塊包括重復(fù)數(shù)據(jù)信息刪除模塊、錯(cuò)誤數(shù)據(jù)信息刪除模塊、不完整數(shù)據(jù)信息刪除模塊以及數(shù)據(jù)格式糾正模塊,所述重復(fù)數(shù)據(jù)信息刪除模塊用于刪除數(shù)據(jù)模型中重復(fù)的數(shù)據(jù)信息,所述錯(cuò)誤數(shù)據(jù)信息刪除模塊用于刪除數(shù)據(jù)模型中錯(cuò)誤的數(shù)據(jù)信息,所述不完整數(shù)據(jù)信息刪除模塊用于刪除數(shù)據(jù)模型中不完整缺失的數(shù)據(jù)信息,所述數(shù)據(jù)格式糾正模塊用于對(duì)數(shù)據(jù)模型的格式進(jìn)行糾正,所述數(shù)據(jù)預(yù)處理模塊連接在數(shù)據(jù)采集模塊和數(shù)據(jù)輸入模塊輸出端。
7、數(shù)據(jù)傳輸模塊,其用于對(duì)預(yù)處理完成的數(shù)據(jù)模型進(jìn)行傳輸,所述數(shù)據(jù)傳輸模塊連接在數(shù)據(jù)預(yù)處理模塊輸出端;
8、數(shù)據(jù)特征提取模塊,其用于對(duì)數(shù)據(jù)模型的特征進(jìn)行提取,所述數(shù)據(jù)特征提取模塊連接在數(shù)據(jù)傳輸模塊輸出端;
9、加密傳輸模塊,其用于對(duì)提取的數(shù)據(jù)模型特征進(jìn)行加密傳輸,所述加密傳輸模塊連接在數(shù)據(jù)特征提取模塊輸出端;
10、智能匹配模塊,其用于根據(jù)提取的數(shù)據(jù)模型特征匹配出與數(shù)據(jù)模型相似的數(shù)據(jù)模型,所述智能匹配模塊連接在加密傳輸模塊和數(shù)據(jù)模型儲(chǔ)存庫輸出端;
11、結(jié)果傳輸模塊,其用于對(duì)匹配出的數(shù)據(jù)模型結(jié)果進(jìn)行傳輸,所述結(jié)果傳輸模塊連接在智能匹配模塊輸出端;
12、匹配結(jié)果呈現(xiàn)模塊,其用于顯示匹配出的數(shù)據(jù)模型結(jié)果,所述匹配結(jié)果呈現(xiàn)模塊連接在結(jié)果傳輸模塊輸出端;
13、定時(shí)轉(zhuǎn)存模塊,其用于在匹配工作結(jié)束后將采集的數(shù)據(jù)模型或者輸入的數(shù)據(jù)模型轉(zhuǎn)存在數(shù)據(jù)模型儲(chǔ)存庫中,所述定時(shí)轉(zhuǎn)存模塊連接在數(shù)據(jù)傳輸模塊輸出端,所述定時(shí)轉(zhuǎn)存模塊連接在數(shù)據(jù)模型儲(chǔ)存庫輸入端;
14、安全審計(jì)模塊,其用于對(duì)數(shù)據(jù)模型儲(chǔ)存庫進(jìn)行安全審計(jì),以避免儲(chǔ)存的數(shù)據(jù)模型泄漏,所述安全審計(jì)模塊連接在數(shù)據(jù)模型儲(chǔ)存庫輸入端;
15、匹配閾值設(shè)定模塊,其用于設(shè)置匹配的閾值,這樣在匹配的時(shí)候可以直接過濾相似度低的數(shù)據(jù)模型,所述匹配閾值設(shè)定模塊連接在智能匹配模塊輸入端;
16、智能儲(chǔ)存模塊,其用于儲(chǔ)存匹配出的數(shù)據(jù)模型結(jié)果,所述智能儲(chǔ)存模塊連接在結(jié)果輸出模塊輸出端。
17、優(yōu)選的,所述數(shù)據(jù)預(yù)處理模塊與數(shù)據(jù)采集模塊和數(shù)據(jù)輸入模塊電性連接,所述數(shù)據(jù)傳輸模塊與數(shù)據(jù)預(yù)處理模塊電性連接,所述數(shù)據(jù)特征提取模塊與數(shù)據(jù)傳輸模塊電性連接。
18、優(yōu)選的,所述加密傳輸模塊與數(shù)據(jù)特征提取模塊電性連接,所述智能匹配模塊與加密傳輸模塊和數(shù)據(jù)模型儲(chǔ)存庫電性連接,所述結(jié)果傳輸模塊與智能匹配模塊電性連接,所述匹配結(jié)果呈現(xiàn)模塊與結(jié)果傳輸模塊電性連接。
19、優(yōu)選的,所述定時(shí)轉(zhuǎn)存模塊與數(shù)據(jù)傳輸模塊電性連接,所述定時(shí)轉(zhuǎn)存模塊與數(shù)據(jù)模型儲(chǔ)存庫電性連接,所述安全審計(jì)模塊與數(shù)據(jù)模型儲(chǔ)存庫電性連接,所述匹配閾值設(shè)定模塊與智能匹配模塊電性連接,所述智能儲(chǔ)存模塊與結(jié)果輸出模塊電性連接。
20、優(yōu)選的,所述匹配結(jié)果呈現(xiàn)模塊包括顯示屏,所述顯示屏后側(cè)固定連接有兩個(gè)移動(dòng)塊,兩個(gè)所述移動(dòng)塊內(nèi)部均滑動(dòng)嵌設(shè)有支撐桿,兩個(gè)所述支撐桿底端固定連接有底板,兩個(gè)所述支撐桿內(nèi)側(cè)均開設(shè)有多個(gè)卡槽且多個(gè)卡槽呈直線狀均勻分布。
21、優(yōu)選的,兩個(gè)所述移動(dòng)塊內(nèi)側(cè)固定連接有t形殼,所述t形殼滑動(dòng)套設(shè)在兩個(gè)支撐桿外部,所述t形殼內(nèi)部固定連接有殼體,所述殼體兩側(cè)均設(shè)置為敞口,所述殼體內(nèi)部設(shè)有兩個(gè)卡塊,兩個(gè)所述卡塊均與殼體滑動(dòng)連接,兩個(gè)所述卡塊嵌設(shè)相對(duì)應(yīng)的卡槽中,所述殼體內(nèi)部固定連接有銜接塊,兩個(gè)所述銜接塊位于兩個(gè)卡塊內(nèi)側(cè),兩個(gè)所述銜接塊外側(cè)均固定連接有彈簧,兩個(gè)所述彈簧外端分別與兩個(gè)卡塊內(nèi)側(cè)固定連接。
22、優(yōu)選的,兩個(gè)所述卡塊內(nèi)側(cè)均固定連接有繩索一,兩個(gè)所述繩索一分別貫穿兩個(gè)彈簧以及兩個(gè)銜接塊,所述繩索一與銜接塊滑動(dòng)連接,所述殼體頂部開設(shè)有通槽,兩個(gè)所述繩索一內(nèi)端固定連接有繩索二,所述繩索二貫穿通槽以及t形殼頂部,所述繩索二與t形殼滑動(dòng)連接,所述t形殼頂部設(shè)有拉環(huán),所述拉環(huán)與繩索二頂部固定連接,所述殼體內(nèi)部固定連接有兩個(gè)連桿,兩個(gè)所述連桿分別與兩個(gè)繩索一相接觸并與其滑動(dòng)連接。
23、本發(fā)明還提供一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配方法,具體步驟如下:
24、s1、進(jìn)行匹配的時(shí)候先通過數(shù)據(jù)采集模塊采集需要進(jìn)行數(shù)據(jù)匹配的數(shù)據(jù)模型或者通過數(shù)據(jù)輸入模塊手動(dòng)輸入需要進(jìn)行數(shù)據(jù)匹配的數(shù)據(jù)模型,接著通過數(shù)據(jù)預(yù)處理模塊對(duì)采集的數(shù)據(jù)模型或者輸入的數(shù)據(jù)模型進(jìn)行預(yù)處理;
25、s2、預(yù)處理完成后數(shù)據(jù)傳輸模塊對(duì)預(yù)處理完成的數(shù)據(jù)模型進(jìn)行傳輸,然后數(shù)據(jù)特征提取模塊對(duì)數(shù)據(jù)模型的特征進(jìn)行提取,提取后加密傳輸模塊將提取的數(shù)據(jù)模型特征進(jìn)行加密傳輸;
26、s3、由于數(shù)據(jù)模型儲(chǔ)存庫中儲(chǔ)存了各種數(shù)據(jù)的數(shù)據(jù)模型,當(dāng)智能匹配模塊接收到加密傳輸?shù)奶卣骱缶涂梢愿鶕?jù)提取的數(shù)據(jù)模型特征匹配出與數(shù)據(jù)模型相似的數(shù)據(jù)模型,接著結(jié)果傳輸模塊將匹配出的數(shù)據(jù)模型結(jié)果傳輸給匹配結(jié)果呈現(xiàn)模塊,這樣就可以顯示匹配出的數(shù)據(jù)模型結(jié)果,從而完成數(shù)據(jù)匹配工作。
27、本發(fā)明的有益效果是:
28、1、本發(fā)明通過設(shè)計(jì)數(shù)據(jù)預(yù)處理模塊可以對(duì)原數(shù)據(jù)模型進(jìn)行預(yù)處理,預(yù)處理的時(shí)候重復(fù)數(shù)據(jù)信息刪除模塊可以刪除數(shù)據(jù)模型中重復(fù)的數(shù)據(jù)信息,錯(cuò)誤數(shù)據(jù)信息刪除模塊可以刪除數(shù)據(jù)模型中錯(cuò)誤的數(shù)據(jù)信息,不完整數(shù)據(jù)信息刪除模塊可以刪除數(shù)據(jù)模型中不完整缺失的數(shù)據(jù)信息,數(shù)據(jù)格式糾正模塊可以對(duì)數(shù)據(jù)模型的格式進(jìn)行糾正,這樣本系統(tǒng)就具備了對(duì)原數(shù)據(jù)模型進(jìn)行預(yù)處理的功能,從而避免原數(shù)據(jù)模型中存在重復(fù)數(shù)據(jù)、錯(cuò)誤數(shù)據(jù)以及不完整數(shù)據(jù),這樣在匹配的時(shí)候可以保證匹配結(jié)果的準(zhǔn)確性,進(jìn)而減小匹配結(jié)果偏差;
29、2、本發(fā)明通過設(shè)計(jì)匹配閾值設(shè)定模塊,在進(jìn)行匹配的時(shí)候可以設(shè)定一個(gè)匹配的閾值,這樣在匹配的時(shí)候只會(huì)匹配出高于閾值的數(shù)據(jù)模型,可以直接過濾相似度低的數(shù)據(jù)模型,進(jìn)而保證匹配出的數(shù)據(jù)模型與原數(shù)據(jù)模型高度相似。
1.一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于,包括:
2.根據(jù)權(quán)利要求1所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于,還包括:
3.根據(jù)權(quán)利要求2所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:所述數(shù)據(jù)預(yù)處理模塊(4)與數(shù)據(jù)采集模塊(2)和數(shù)據(jù)輸入模塊(3)電性連接,所述數(shù)據(jù)傳輸模塊(9)與數(shù)據(jù)預(yù)處理模塊(4)電性連接,所述數(shù)據(jù)特征提取模塊(10)與數(shù)據(jù)傳輸模塊(9)電性連接。
4.根據(jù)權(quán)利要求2所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:所述加密傳輸模塊(11)與數(shù)據(jù)特征提取模塊(10)電性連接,所述智能匹配模塊(12)與加密傳輸模塊(11)和數(shù)據(jù)模型儲(chǔ)存庫(1)電性連接,所述結(jié)果傳輸模塊(13)與智能匹配模塊(12)電性連接,所述匹配結(jié)果呈現(xiàn)模塊(14)與結(jié)果傳輸模塊(13)電性連接。
5.根據(jù)權(quán)利要求2所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:所述定時(shí)轉(zhuǎn)存模塊(15)與數(shù)據(jù)傳輸模塊(9)電性連接,所述定時(shí)轉(zhuǎn)存模塊(15)與數(shù)據(jù)模型儲(chǔ)存庫(1)電性連接,所述安全審計(jì)模塊(16)與數(shù)據(jù)模型儲(chǔ)存庫(1)電性連接,所述匹配閾值設(shè)定模塊(17)與智能匹配模塊(12)電性連接,所述智能儲(chǔ)存模塊(18)與結(jié)果輸出模塊電性連接。
6.根據(jù)權(quán)利要求1所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:所述匹配結(jié)果呈現(xiàn)模塊(14)包括顯示屏(19),所述顯示屏(19)后側(cè)固定連接有兩個(gè)移動(dòng)塊(20),兩個(gè)所述移動(dòng)塊(20)內(nèi)部均滑動(dòng)嵌設(shè)有支撐桿(21),兩個(gè)所述支撐桿(21)底端固定連接有底板(22),兩個(gè)所述支撐桿(21)內(nèi)側(cè)均開設(shè)有多個(gè)卡槽(23)且多個(gè)卡槽(23)呈直線狀均勻分布。
7.根據(jù)權(quán)利要求6所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:兩個(gè)所述移動(dòng)塊(20)內(nèi)側(cè)固定連接有t形殼(24),所述t形殼(24)滑動(dòng)套設(shè)在兩個(gè)支撐桿(21)外部,所述t形殼(24)內(nèi)部固定連接有殼體(25),所述殼體(25)兩側(cè)均設(shè)置為敞口,所述殼體(25)內(nèi)部設(shè)有兩個(gè)卡塊(26),兩個(gè)所述卡塊(26)均與殼體(25)滑動(dòng)連接,兩個(gè)所述卡塊(26)嵌設(shè)相對(duì)應(yīng)的卡槽(23)中,所述殼體(25)內(nèi)部固定連接有銜接塊(27),兩個(gè)所述銜接塊(27)位于兩個(gè)卡塊(26)內(nèi)側(cè),兩個(gè)所述銜接塊(27)外側(cè)均固定連接有彈簧(28),兩個(gè)所述彈簧(28)外端分別與兩個(gè)卡塊(26)內(nèi)側(cè)固定連接。
8.根據(jù)權(quán)利要求7所述的一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配系統(tǒng),其特征在于:兩個(gè)所述卡塊(26)內(nèi)側(cè)均固定連接有繩索一(29),兩個(gè)所述繩索一(29)分別貫穿兩個(gè)彈簧(28)以及兩個(gè)銜接塊(27),所述繩索一(29)與銜接塊(27)滑動(dòng)連接,所述殼體(25)頂部開設(shè)有通槽,兩個(gè)所述繩索一(29)內(nèi)端固定連接有繩索二(30),所述繩索二(30)貫穿通槽以及t形殼(24)頂部,所述繩索二(30)與t形殼(24)滑動(dòng)連接,所述t形殼(24)頂部設(shè)有拉環(huán)(31),所述拉環(huán)(31)與繩索二(30)頂部固定連接,所述殼體(25)內(nèi)部固定連接有兩個(gè)連桿(32),兩個(gè)所述連桿(32)分別與兩個(gè)繩索一(29)相接觸并與其滑動(dòng)連接。
9.一種基于數(shù)據(jù)大模型的數(shù)據(jù)匹配方法,適用于上述權(quán)利要求1-8任意一項(xiàng)所述的數(shù)據(jù)匹配系統(tǒng),其特征在于,具體步驟如下: