本發(fā)明涉及數(shù)據(jù)處理，尤其涉及一種面向文件層級遷移問題解決方案生成方法。

背景技術(shù)：

1、文件級遷移是指將數(shù)據(jù)以文件為單位從舊系統(tǒng)遷移到新系統(tǒng)的過程。它通常涉及將文件從一個目錄結(jié)構(gòu)或文件系統(tǒng)中移動到另一個目錄結(jié)構(gòu)或文件系統(tǒng)，并且在移動過程中需要保持文件之間的關(guān)聯(lián)性。文件遷移的主要目的在于實現(xiàn)資源的整合與優(yōu)化、滿足業(yè)務(wù)的需求適配以及提升業(yè)務(wù)系統(tǒng)的靈活性與響應(yīng)能力。

2、與其他遷移方式相比，文件遷移的方式能夠根據(jù)實際需求選擇性遷移，并且能夠在系統(tǒng)正常運(yùn)行時進(jìn)行，對業(yè)務(wù)系統(tǒng)的影響較小?？傮w上看，存在遷移靈活性強(qiáng)、安全性高、過程相對透明等優(yōu)勢，在各類場景中應(yīng)用廣泛。

3、文件遷移是一項全流程性的操作，包括前期的遷移調(diào)研與評估、目標(biāo)環(huán)境準(zhǔn)備、數(shù)據(jù)傳輸、前后數(shù)據(jù)一致性校驗等。其中，前期的評估在遷移的整體流程中至關(guān)重要。充分地進(jìn)行調(diào)研評估不僅能夠幫助用戶判斷技術(shù)可行性，還能夠明確遷移成本、遷移時長，識別遷移過程中的潛在風(fēng)險，從而更好地根據(jù)評估結(jié)果制定應(yīng)對措施。這一關(guān)鍵步驟是保證遷移過程順利的基礎(chǔ)前提，對于提升文件遷移的準(zhǔn)確率與效率意義重大。

4、當(dāng)今世界信息技術(shù)快速發(fā)展，伴隨著大數(shù)據(jù)、物聯(lián)網(wǎng)、云計算等高新技術(shù)的興起，個人與企業(yè)組織所產(chǎn)生的數(shù)據(jù)信息也呈現(xiàn)出爆炸式增長。在這樣的信息背景之下，數(shù)據(jù)遷移技術(shù)發(fā)揮出了巨大的作用。當(dāng)前已經(jīng)出現(xiàn)了許多針對于數(shù)據(jù)遷移工作所研發(fā)的工具或軟件，能夠提供系統(tǒng)化的遷移流程，包括遷移評估、資源配置、數(shù)據(jù)自動化遷移等，實現(xiàn)遷移過程的可視化。其中，前期的充分評估能夠為后續(xù)的遷移計劃提供準(zhǔn)確指導(dǎo)，是把控風(fēng)險的關(guān)鍵階段。但絕大多數(shù)的遷移方案更加聚焦遷移流程的穩(wěn)定性與可持續(xù)性，將精力投入到提升遷移自動化水平方面，對于遷移前期的評估階段尚有待完善。遷移時長是動態(tài)變化的，它受網(wǎng)絡(luò)、配置、業(yè)務(wù)數(shù)據(jù)等多方面因素的影響制約，已有的評估方式無法獲取準(zhǔn)確的遷移完成時間。并且在前置評估階段僅獲得預(yù)估時長，對于低效文件的鎖定能力較為欠缺，無法基于評估結(jié)果輔助進(jìn)行遷移決策。

5、在當(dāng)前市場上的文件遷移相關(guān)解決方案中，存在以下幾個方面的問題：1.前置評估階段設(shè)計較為簡單，預(yù)測遷移時長缺少對硬件配置、網(wǎng)絡(luò)異常以及其他遷移效率阻滯因子的充分考慮，導(dǎo)致獲得的預(yù)估時長準(zhǔn)確率較低。2.獲取遷移預(yù)估時長后，缺少應(yīng)對低效項目信息的鎖定機(jī)制，無法快速鎖定低效文件位置，不利于解決方案的制定。3.獲得評估結(jié)果后，無法基于預(yù)測結(jié)果為用戶提供智能化耗時改進(jìn)建議，對提升遷移效率作用甚微。

技術(shù)實現(xiàn)思路

1、本發(fā)明的目的在于提供一種面向文件層級遷移問題解決方案生成方法，不僅能夠提升遷移評估的準(zhǔn)確性，還能夠讓預(yù)測結(jié)果更好地服務(wù)于提升遷移效率，輔助任務(wù)實現(xiàn)低風(fēng)險、高效率的遷移，提升用戶遷移體驗感。

2、本發(fā)明采用的技術(shù)方案是：

3、一種面向文件層級遷移問題解決方案生成方法，包括以下步驟：

4、步驟1，預(yù)設(shè)遷移效率阻滯因子目錄構(gòu)建遷移效率阻滯因子數(shù)據(jù)庫，以歷史遷移任務(wù)作為樣本集合，訓(xùn)練得到遷移效能診斷模型；

5、進(jìn)一步地，步驟1中預(yù)設(shè)遷移效率阻滯因子根據(jù)不同類型因素進(jìn)行阻滯因子目錄設(shè)計以構(gòu)建對應(yīng)的數(shù)據(jù)庫。作為一種可行實施方式，預(yù)設(shè)遷移效率阻滯因子包括網(wǎng)絡(luò)狀態(tài)、系統(tǒng)資源、業(yè)務(wù)系統(tǒng)、存儲系統(tǒng)、應(yīng)用服務(wù)。

6、具體地，預(yù)先篩選可能對遷移效率產(chǎn)生影響作用的因素，包括網(wǎng)絡(luò)狀態(tài)、系統(tǒng)資源、業(yè)務(wù)系統(tǒng)、存儲系統(tǒng)、應(yīng)用服務(wù)等，根據(jù)不同類型因素進(jìn)行阻滯因子目錄設(shè)計，構(gòu)建數(shù)據(jù)庫。

7、預(yù)設(shè)阻滯因子初步設(shè)計如下：1)網(wǎng)絡(luò)狀態(tài)：包括但不限于網(wǎng)絡(luò)帶寬、網(wǎng)絡(luò)臨時中斷次數(shù)、網(wǎng)絡(luò)延遲、網(wǎng)絡(luò)擁堵等；2)系統(tǒng)資源：包括但不限于操作系統(tǒng)類型、操作系統(tǒng)版本、cpu使用率、內(nèi)存占用率、并發(fā)處理個數(shù)等；3)存儲系統(tǒng)：包括但不限于數(shù)據(jù)量大小、數(shù)據(jù)庫類型、數(shù)據(jù)庫連接個數(shù)、磁盤讀寫速度、文件掛載目錄樹等；4)業(yè)務(wù)系統(tǒng)：包括但不限于數(shù)據(jù)傳輸優(yōu)先級等；5)應(yīng)用服務(wù)：包括但不限于應(yīng)用軟件類型、應(yīng)用軟件版本、軟件依賴關(guān)系、端口服務(wù)等。

8、需要說明的是：其中，預(yù)設(shè)阻滯因子目錄的涵蓋內(nèi)容可以根據(jù)實際情況進(jìn)行對應(yīng)修改，效能診斷庫中相關(guān)性分析與重要性分析的具體實現(xiàn)模型的選擇也并不唯一。凡是在本發(fā)明的邏輯框架內(nèi)進(jìn)行的任何具體內(nèi)容修改、方法替換等，均應(yīng)包含在本發(fā)明技術(shù)的權(quán)利保護(hù)范圍之內(nèi)。

9、步驟2，在單次遷移的遷移前置評估階段，通過遷移效率診斷模塊抽取部分待遷移數(shù)據(jù)進(jìn)行遷移評估測試，抽取并存儲源端系統(tǒng)的所有阻滯來源信息；

10、進(jìn)一步地，步驟2中阻滯來源信息包括系統(tǒng)資源信息、網(wǎng)絡(luò)信息、存儲信息、業(yè)務(wù)信息、應(yīng)用服務(wù)信息。

11、步驟3，在單次遷移中通過遷移效率診斷模塊判斷遷移任務(wù)是否會存在阻滯現(xiàn)象；根據(jù)實際情況判斷阻滯因素類別，計算當(dāng)前環(huán)境狀態(tài)下的遷移預(yù)估時長作為第一輸出結(jié)果；同時獲取低效文件的位置及詳細(xì)信息作為第二輸出結(jié)果；

12、進(jìn)一步地，步驟3中通過判斷監(jiān)測到的數(shù)據(jù)傳輸速率是否低于網(wǎng)絡(luò)帶寬以確定在遷移任務(wù)中是否存在效率阻滯現(xiàn)象；當(dāng)監(jiān)測到的數(shù)據(jù)傳輸速率低于網(wǎng)絡(luò)帶寬時，認(rèn)定在遷移任務(wù)中存在效率阻滯現(xiàn)象并對阻滯因素位置進(jìn)行判斷以確定造成阻滯現(xiàn)象的因素類型，根據(jù)不同的因素類別選擇合適的數(shù)據(jù)遍歷方式；當(dāng)監(jiān)測到的數(shù)據(jù)傳輸速率不低于網(wǎng)絡(luò)帶寬時，則結(jié)束阻滯現(xiàn)象判斷流程，直接進(jìn)行后續(xù)遷移時長的計算。

13、步驟3具體包括以下步驟：

14、步驟3-1，判斷監(jiān)測到的數(shù)據(jù)傳輸速率是否低于網(wǎng)絡(luò)帶寬；如果是，則確定在遷移任務(wù)中存在效率阻滯現(xiàn)象，并對阻滯因素位置進(jìn)行判斷以確定造成阻滯現(xiàn)象的因素類型，以根據(jù)不同的因素類別選擇合適的數(shù)據(jù)遍歷方式后執(zhí)行步驟3-2；否則，結(jié)束阻滯現(xiàn)象判斷流程，直接進(jìn)行后續(xù)遷移時長的計算執(zhí)行步驟3-4；

15、步驟3-2，利用選定的數(shù)據(jù)遍歷方式遍歷鎖定低效文件的具體位置信息，寫入效能診斷庫中；

16、步驟3-3，將獲取的阻滯因素與預(yù)設(shè)遷移效率阻滯因子數(shù)據(jù)庫進(jìn)行匹配，判斷是否存在匹配項；如果存在匹配項，則直接調(diào)取效能診斷庫中的對應(yīng)阻滯因子系數(shù)；如果不存在匹配項，則將當(dāng)前阻滯因素作為新增阻滯因子追加寫入到預(yù)設(shè)阻滯因子數(shù)據(jù)庫中，同時本次遷移時長計算時暫不考慮對應(yīng)阻滯因子的阻滯影響；

17、步驟3-4，進(jìn)行遷移時長計算得到遷移預(yù)估時長。

18、進(jìn)一步地，步驟3-1中阻滯現(xiàn)象的因素類型包括系統(tǒng)配置因素、存儲因素或是其他因素類別，根據(jù)不同的因素類別選擇合適的數(shù)據(jù)遍歷方式。

19、進(jìn)一步地，步驟3-4中遷移時長計算公式如下：

20、y＝β0+β1x1+β2x2+…+βnxn

21、

22、其中：y表示最終預(yù)測出的遷移時長；β0表示未監(jiān)測到阻滯現(xiàn)象時的基礎(chǔ)遷移時長，β0主要受數(shù)據(jù)量、帶寬和數(shù)據(jù)傳輸速率的影響；x1、x2…xn分別表示n個遷移效率阻滯因子，β1、β2…βn分別表示各個阻滯因子所對應(yīng)的阻滯系數(shù)大小。

23、具體地，在效能診斷庫中對各個阻滯因子與遷移效率之間的影響程度進(jìn)行量化分析，將計算得到的重要性特征值作為對應(yīng)阻滯因子的阻滯系數(shù)，支撐遷移時長的預(yù)測計算。

24、步驟4，在遷移實施過程中，對遷移阻滯狀態(tài)信息進(jìn)行實時監(jiān)控與記錄；

25、步驟5，根據(jù)監(jiān)控記錄結(jié)果補(bǔ)充歷史樣本數(shù)據(jù)庫，并在每次評估完成后對效能診斷庫迭代更新；

26、進(jìn)一步地，步驟5中根據(jù)監(jiān)控記錄結(jié)果，對于預(yù)設(shè)數(shù)據(jù)庫中已有的阻滯因子，將本次記錄的實際數(shù)據(jù)輸入效能診斷庫中與歷史數(shù)據(jù)進(jìn)行重新運(yùn)算，獲得更新后的阻滯因子系數(shù)，作為后續(xù)調(diào)用的對應(yīng)系數(shù)；對于新增的阻滯因子，將本次實際數(shù)據(jù)直接輸入效能診斷庫，計算得到后續(xù)調(diào)用的對應(yīng)系數(shù)，實現(xiàn)每次評估完成后的診斷庫迭代更新。

27、步驟6，將作為第一輸出結(jié)果的遷移預(yù)估時長和作為第二輸出結(jié)果的低效文件的位置及詳細(xì)信息，結(jié)合知識圖譜技術(shù)生成對應(yīng)文件層級遷移的問題解決方案。

28、進(jìn)一步地，步驟5效能診斷庫更新步驟如下：

29、步驟5-1：將遷移實時監(jiān)控記錄的所有阻滯因子實際數(shù)據(jù)信息作為新增樣本數(shù)據(jù)的自變量信息追加存儲到歷史樣本數(shù)據(jù)庫中，進(jìn)而將更新后的歷史樣本數(shù)據(jù)庫數(shù)據(jù)導(dǎo)入效能診斷庫中；

30、步驟5-2：對樣本數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗工作，剔除異常值對結(jié)果的影響；

31、步驟5-3：對經(jīng)過預(yù)處理的數(shù)據(jù)進(jìn)行相關(guān)性分析，剔除相關(guān)性超過設(shè)定閾值(過強(qiáng))的阻滯因子得到阻滯因子集合，保證輸入因子的獨立性；

32、步驟5-4：將通過相關(guān)性分析診斷的阻滯因子集合導(dǎo)入集成學(xué)習(xí)模型進(jìn)行重要性分析得到各個阻滯因子的重要性特征值；

33、進(jìn)一步地，為提高模型輸出的可靠性，采用3個重要性模型所得出的重要性系數(shù)均值來表示該阻滯因子的最終重要性特征值。

34、步驟5-5：設(shè)置因子保留的系數(shù)閾值大小，對所有自變量阻滯因子進(jìn)行遍歷篩選；對重要性特征值小于預(yù)設(shè)閾值的阻滯因子，判定為對遷移時長的阻滯影響較小，在本次計算中暫不考慮；

35、步驟5-6：將通過閾值篩選的阻滯因子對應(yīng)重要性特征值寫入效能診斷庫，作為該因子在后續(xù)時長計算中直接調(diào)用的阻滯系數(shù)。

36、具體地，歷史樣本數(shù)據(jù)庫負(fù)責(zé)存儲歷史遷移任務(wù)中監(jiān)控記錄的阻滯因子實際監(jiān)測數(shù)據(jù)，效能診斷庫負(fù)責(zé)計算并存儲遷移效率阻滯因子數(shù)據(jù)庫中的因子所對應(yīng)的阻滯系數(shù)。它在所采集的阻滯因素匹配到預(yù)設(shè)阻滯因子數(shù)據(jù)庫時，可以直接調(diào)用診斷庫中對應(yīng)的相對重要性特征系數(shù)作為當(dāng)次遷移時長預(yù)估的阻滯系數(shù)。并且，在遷移實施完成后接收本次評估中所有阻滯因子的實際監(jiān)測數(shù)據(jù)，輸入效能診斷庫，通過指定算法更新權(quán)重系數(shù)，實現(xiàn)模型的迭代優(yōu)化。

37、進(jìn)一步地，步驟6中生成解決方案的具體步驟如下：

38、步驟6-1，確定知識庫中的支撐數(shù)據(jù)來源，以專家經(jīng)驗為基礎(chǔ)數(shù)據(jù)，結(jié)合實際遷移過程中遇到的問題及解決方案，通過ai根據(jù)歷史任務(wù)的訓(xùn)練情況進(jìn)行判斷，從而獲取知識信息；

39、步驟6-2，獲取所有來源信息之后，對信息集合進(jìn)行抽取分別構(gòu)建問題庫與路徑庫；

40、步驟6-3，將抽取分類出的問題庫與路徑庫進(jìn)行整合，建立用于后續(xù)解決方案輸出的知識庫；

41、步驟6-4，將效能診斷庫的輸出結(jié)果作為知識庫的輸入數(shù)據(jù)導(dǎo)入知識模型；

42、步驟6-5，在知識庫中對輸入數(shù)據(jù)匹配相關(guān)的問題信息，再根據(jù)問題匹配相應(yīng)的解決路徑；

43、步驟6-6，根據(jù)匹配結(jié)果輸出針對性的解決方案。

44、本發(fā)明采用以上技術(shù)方案，具有如下技術(shù)優(yōu)點：一、提升遷移時長預(yù)測準(zhǔn)確率：本發(fā)明采集并篩選遷移效率阻滯因子，采用指定算法對遷移時長進(jìn)行高效預(yù)測。并且在每次遷移實施過程中實時監(jiān)控并記錄瓶頸狀態(tài)信息，結(jié)合瓶頸信息更新預(yù)設(shè)阻滯因子數(shù)據(jù)庫與效能診斷庫，實現(xiàn)算法的不斷優(yōu)化迭代，從而顯著提升遷移時長預(yù)測的準(zhǔn)確率。二、提供低效項目鎖定機(jī)制：本發(fā)明在判斷是否存在阻滯現(xiàn)象的基礎(chǔ)上，能夠進(jìn)一步對低效項目的信息進(jìn)行鎖定，包括文件位置、文件大小等，為用戶提供準(zhǔn)確的問題路徑。三、提供智能化解決方案：本發(fā)明根據(jù)獲得的遷移預(yù)測時長與低效文件信息，結(jié)合知識圖譜技術(shù)為用戶提供針對性的智能化解決方案，能更好地將評估階段的成果應(yīng)用于提升遷移效率。

45、本發(fā)明不僅能夠更加高效準(zhǔn)確地預(yù)測遷移時長，還能夠根據(jù)預(yù)測結(jié)果提供智能解決方案，這對于遷移任務(wù)的規(guī)劃設(shè)計和風(fēng)險把控意義重大。