網(wǎng)絡(luò)數(shù)據(jù)獲取方法、裝置和系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及移動(dòng)通信技術(shù)領(lǐng)域，更為具體地，涉及網(wǎng)絡(luò)數(shù)據(jù)獲取方法、裝置和系統(tǒng)。
【背景技術(shù)】
[0002]目前網(wǎng)絡(luò)傳輸?shù)闹髁鱾鬏敺绞綖閔ttp。而基于http協(xié)議進(jìn)行網(wǎng)絡(luò)傳輸?shù)倪^(guò)程是是明文傳輸?shù)模髁吭谕局锌呻S心所欲的被控制。傳統(tǒng)程序事先已下至本地，運(yùn)行時(shí)只有通信流量；而在線使用的WebApp，流量里既有通信數(shù)據(jù)，又有程序的界面和代碼，劫持簡(jiǎn)直輕而易舉。所以在互聯(lián)網(wǎng)及移動(dòng)互聯(lián)網(wǎng)不少的流量劫持。
[0003]圖1示出了正常訪問(wèn)目標(biāo)網(wǎng)站的流程圖。如圖1所示，用戶請(qǐng)求訪問(wèn)目標(biāo)網(wǎng)站時(shí)，首先終端設(shè)備與目標(biāo)網(wǎng)站建立基于http協(xié)議的連接，然后經(jīng)由中間層向目標(biāo)網(wǎng)站發(fā)送網(wǎng)絡(luò)請(qǐng)求。目標(biāo)網(wǎng)站根據(jù)接收的網(wǎng)絡(luò)請(qǐng)求將所請(qǐng)求的網(wǎng)絡(luò)數(shù)據(jù)經(jīng)由中間層發(fā)送至終端設(shè)備。
[0004]圖2示出了訪問(wèn)目標(biāo)網(wǎng)站遭劫持的流程圖。如圖2所示，用戶請(qǐng)求訪問(wèn)目標(biāo)網(wǎng)站時(shí)，首先終端設(shè)備與目標(biāo)網(wǎng)站建立基于http協(xié)議的連接，然后經(jīng)由中間層向目標(biāo)網(wǎng)站發(fā)送網(wǎng)絡(luò)請(qǐng)求，網(wǎng)絡(luò)運(yùn)營(yíng)商或黑客在中間層使用流量旁路分析系統(tǒng)或網(wǎng)絡(luò)嗅探系統(tǒng)，截獲用戶請(qǐng)求內(nèi)容，然后跳轉(zhuǎn)到偽造的網(wǎng)站地址中，或者將用戶請(qǐng)求的網(wǎng)絡(luò)數(shù)據(jù)搶先應(yīng)答給終端設(shè)備。訪問(wèn)目標(biāo)網(wǎng)站遭劫持會(huì)導(dǎo)致偽造的網(wǎng)站進(jìn)行釣魚(yú)式攻擊或者植入頻繁的非法廣告彈窗或者向http的緩存投毒和非法惡意嗅探賬號(hào)系統(tǒng)等。如果將用戶請(qǐng)求的網(wǎng)絡(luò)數(shù)據(jù)搶先應(yīng)答給終端設(shè)備會(huì)導(dǎo)致終端設(shè)備獲得的錯(cuò)誤數(shù)據(jù)或者是非正版數(shù)據(jù)。中間層泛指除用戶端及目標(biāo)網(wǎng)站之間經(jīng)過(guò)的所有網(wǎng)絡(luò)節(jié)點(diǎn)，包括但不限于如用戶的家用路由器、各級(jí)網(wǎng)絡(luò)運(yùn)營(yíng)商的服務(wù)器、網(wǎng)絡(luò)設(shè)備等。
[0005]現(xiàn)有技術(shù)使用了 SSL/TLS加密的數(shù)據(jù)進(jìn)行網(wǎng)絡(luò)傳輸很難以破解，更容易被修改。從實(shí)際情況來(lái)看SSL/TLS可以很好的解決流量劫持問(wèn)題。但目前國(guó)內(nèi)部署https的網(wǎng)站數(shù)量還是非常少。所以在訪問(wèn)不支持https協(xié)議的網(wǎng)站存在被運(yùn)營(yíng)商或者黑客劫持的現(xiàn)象。

【發(fā)明內(nèi)容】

[0006]鑒于上述問(wèn)題，本發(fā)明的目的是提供一種網(wǎng)絡(luò)數(shù)據(jù)獲取方法、裝置及系統(tǒng)，能解決訪問(wèn)不支持https協(xié)議的目標(biāo)網(wǎng)站的流量劫持問(wèn)題。
[0007]根據(jù)本發(fā)明的一個(gè)方面，提供一種在終端設(shè)備側(cè)執(zhí)行的網(wǎng)絡(luò)數(shù)據(jù)獲取方法，包括:
[0008]根據(jù)所檢測(cè)到的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求中的目標(biāo)服務(wù)器地址，在本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中獲取對(duì)應(yīng)的SSL/TLS服務(wù)器地址，其中，所述SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中存儲(chǔ)有目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址之間的對(duì)應(yīng)關(guān)系表；
[0009]在獲取到對(duì)應(yīng)的SSL/TLS服務(wù)器地址后，基于SSL/TLS協(xié)議對(duì)所述網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行加密封裝；
[0010]將所述加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求經(jīng)由中間層發(fā)送到與SSL/TLS服務(wù)器地址對(duì)應(yīng)的SSL/TLS服務(wù)器，以供所述SSL/TLS服務(wù)器解密處理后從所述目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0011]依次經(jīng)由所述SSL/TLS服務(wù)器和所述中間層，接收從目標(biāo)服務(wù)器返回的由所述SSL/TLS服務(wù)器基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后的網(wǎng)絡(luò)數(shù)據(jù)。
[0012]其中，所述本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)利用外部數(shù)據(jù)下發(fā)平臺(tái)向所述終端設(shè)備下發(fā)的目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址的對(duì)應(yīng)關(guān)系表進(jìn)行更新。
[0013]其中，所述目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址的對(duì)應(yīng)關(guān)系表由所述外部數(shù)據(jù)下發(fā)平臺(tái)根據(jù)預(yù)先統(tǒng)計(jì)的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求劫持信息確定的。
[0014]其中，所述外部數(shù)據(jù)下發(fā)平臺(tái)采用廣播方式向所述終端設(shè)備下發(fā)所述目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址的對(duì)應(yīng)關(guān)系表。
[0015]其中，SSL/TLS服務(wù)器地址包括SSL/TLS服務(wù)器的IP地址或者SSL/TLS服務(wù)器的域名地址。
[0016]其中，當(dāng)SSL/TLS服務(wù)器地址是SSL/TLS服務(wù)器的域名地址時(shí)，與終端設(shè)備進(jìn)行數(shù)據(jù)傳輸?shù)腟SL/TLS服務(wù)器是根據(jù)終端設(shè)備的當(dāng)前網(wǎng)絡(luò)狀態(tài)確定的。
[0017]另一優(yōu)選的本發(fā)明一種網(wǎng)絡(luò)數(shù)據(jù)獲取方法，包括:
[0018]在終端設(shè)備側(cè)，
[0019]根據(jù)所檢測(cè)到的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求中的目標(biāo)服務(wù)器地址，在本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中獲取對(duì)應(yīng)的SSL/TLS服務(wù)器地址，其中，所述SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中存儲(chǔ)有目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址之間的對(duì)應(yīng)關(guān)系表；
[0020]在獲取到對(duì)應(yīng)的SSL/TLS服務(wù)器地址后，基于SSL/TLS協(xié)議對(duì)所述網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行加密封裝；
[0021]將所述加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求發(fā)送到與SSL/TLS服務(wù)器地址對(duì)應(yīng)的SSL/TLS服務(wù)器，以供所述SSL/TLS服務(wù)器解密處理后從所述目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0022]依次經(jīng)由所述SSL/TLS服務(wù)器和所述中間層，接收從目標(biāo)服務(wù)器返回的由所述SSL/TLS服務(wù)器基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后的網(wǎng)絡(luò)數(shù)據(jù)。
[0023]以及
[0024]在SSL/TLS服務(wù)器側(cè)，
[0025]對(duì)所接收的加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行解密處理；
[0026]基于所述解密后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求，從對(duì)應(yīng)的目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0027]將所獲取的網(wǎng)絡(luò)數(shù)據(jù)進(jìn)行基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后，發(fā)送至終端設(shè)備。
[0028]另一方面，本發(fā)明還提供一種網(wǎng)絡(luò)數(shù)據(jù)獲取裝置，包括:
[0029]SSL/TLS服務(wù)器地址獲取單元，用于根據(jù)所檢測(cè)到的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求中的目標(biāo)服務(wù)器地址，在本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中獲取對(duì)應(yīng)的SSL/TLS服務(wù)器地址，其中，所述SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中存儲(chǔ)有目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址之間的對(duì)應(yīng)關(guān)系表；
[0030]請(qǐng)求加密單元，用于在SSL/TLS服務(wù)器地址獲取單元獲取到對(duì)應(yīng)的SSL/TLS服務(wù)器地址后，基于SSL/TLS協(xié)議對(duì)所述網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行加密封裝；
[0031]請(qǐng)求發(fā)送單元，用于將所述加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求發(fā)送到與SSL/TLS服務(wù)器地址對(duì)應(yīng)的SSL/TLS服務(wù)器，以供所述SSL/TLS服務(wù)器解密處理后從所述目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0032]網(wǎng)絡(luò)數(shù)據(jù)接收單元，用于依次經(jīng)由所述SSL/TLS服務(wù)器和所述中間層，接收從目標(biāo)服務(wù)器返回的由所述SSL/TLS服務(wù)器基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后的網(wǎng)絡(luò)數(shù)據(jù)網(wǎng)絡(luò)數(shù)據(jù)。
[0033]其中，還包括，數(shù)據(jù)更新單元，用于利用外部數(shù)據(jù)下發(fā)平臺(tái)向所述終端設(shè)備下發(fā)的目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址的對(duì)應(yīng)關(guān)系表跟新本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)。
[0034]優(yōu)選的所述網(wǎng)絡(luò)數(shù)據(jù)獲取裝置，所述網(wǎng)絡(luò)數(shù)據(jù)獲取裝置設(shè)置在終端設(shè)備。
[0035]另一方面，本發(fā)明還提供一種網(wǎng)絡(luò)數(shù)據(jù)獲取裝置，包括:設(shè)置于終端設(shè)備的SSL/TLS服務(wù)器地址獲取單元、請(qǐng)求加密單元、請(qǐng)求發(fā)送單元、網(wǎng)絡(luò)數(shù)據(jù)接收單元和設(shè)置于SSL/TLS服務(wù)器的解密單元、網(wǎng)絡(luò)數(shù)據(jù)獲取單元、網(wǎng)絡(luò)數(shù)據(jù)加密單元，
[0036]所述SSL/TLS服務(wù)器地址獲取單元，用于根據(jù)所檢測(cè)到的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求中的目標(biāo)服務(wù)器地址，在本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中獲取對(duì)應(yīng)的SSL/TLS服務(wù)器地址，其中，所述SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)中存儲(chǔ)有目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址之間的對(duì)應(yīng)關(guān)系表；
[0037]所述請(qǐng)求加密單元，用于在SSL/TLS服務(wù)器地址獲取單元獲取到對(duì)應(yīng)的SSL/TLS服務(wù)器地址后，基于SSL/TLS協(xié)議對(duì)所述網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行加密封裝；
[0038]所述請(qǐng)求發(fā)送單元，用于將所述加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求發(fā)送到與SSL/TLS服務(wù)器地址對(duì)應(yīng)的SSL/TLS服務(wù)器，以供所述SSL/TLS服務(wù)器解密處理后從所述目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0039]所述網(wǎng)絡(luò)數(shù)據(jù)接收單元，用于依次經(jīng)由所述SSL/TLS服務(wù)器和所述中間層，接收從目標(biāo)服務(wù)器返回的由所述SSL/TLS服務(wù)器基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后的網(wǎng)絡(luò)數(shù)據(jù)網(wǎng)絡(luò)數(shù)據(jù)。
[0040]所述解密單元，用于對(duì)經(jīng)由所述中間層從所述終端設(shè)備接收的加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行解密處理；
[0041]所述網(wǎng)絡(luò)數(shù)據(jù)獲取單元，用于基于所述解密后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求，從對(duì)應(yīng)的目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0042]所述網(wǎng)絡(luò)數(shù)據(jù)發(fā)送單元，將所獲取的網(wǎng)絡(luò)數(shù)據(jù)進(jìn)行基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后，發(fā)送至終端設(shè)備。
[0043]另一方面，本發(fā)明還提供一種網(wǎng)絡(luò)數(shù)據(jù)獲取系統(tǒng)，包括:終端設(shè)備、中間層和SSL/TLS服務(wù)器，
[0044]所述終端設(shè)備，包括前面所述的SSL/TLS服務(wù)器地址獲取單元、請(qǐng)求加密單元、請(qǐng)求發(fā)送單元、網(wǎng)絡(luò)數(shù)據(jù)接收單元和設(shè)置于SSL/TLS服務(wù)器的解密單元、網(wǎng)絡(luò)數(shù)據(jù)獲取單元、網(wǎng)絡(luò)數(shù)據(jù)加密單元和或數(shù)據(jù)更新單元，用于利用外部數(shù)據(jù)下發(fā)平臺(tái)向所述終端設(shè)備下發(fā)的目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地址的對(duì)應(yīng)關(guān)系表跟新本地存儲(chǔ)的SSL/TLS服務(wù)器數(shù)據(jù)庫(kù)；
[0045]所述SSL/TLS服務(wù)器，包括:
[0046]解密單元，用于對(duì)經(jīng)由所述中間層從所述終端設(shè)備接收的加密封裝后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求進(jìn)行解密處理；
[0047]網(wǎng)絡(luò)數(shù)據(jù)獲取單元，用于基于所述解密后的網(wǎng)絡(luò)數(shù)據(jù)獲取請(qǐng)求，從對(duì)應(yīng)的目標(biāo)服務(wù)器獲取網(wǎng)絡(luò)數(shù)據(jù)；
[0048]網(wǎng)絡(luò)數(shù)據(jù)加密單元，將所獲取的網(wǎng)絡(luò)數(shù)據(jù)進(jìn)行基于SSL/TLS協(xié)議進(jìn)行加密封裝處理后經(jīng)由所述中間層發(fā)送至終端設(shè)備。
[0049]其中，還包括，外部數(shù)據(jù)下發(fā)平臺(tái)；所述外部數(shù)據(jù)下發(fā)平臺(tái)，包括:
[0050]數(shù)據(jù)下發(fā)單元，用于向所述終端設(shè)備下發(fā)的目標(biāo)服務(wù)器地址與SSL/TLS服務(wù)器地