两个人的电影免费视频_国产精品久久久久久久久成人_97视频在线观看播放_久久这里只有精品777_亚洲熟女少妇二三区_4438x8成人网亚洲av_内谢国产内射夫妻免费视频_人妻精品久久久久中国字幕

一種大數(shù)據(jù)協(xié)同分析工具平臺(tái)的制作方法

文檔序號(hào):11155521閱讀:來(lái)源:國(guó)知局

技術(shù)特征:

1.一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,包括:

多數(shù)據(jù)源配置模塊,用于實(shí)現(xiàn)任意數(shù)據(jù)的配置導(dǎo)入和爬取,建立容數(shù)據(jù)源配置XML腳本語(yǔ)言,或者通過(guò)容數(shù)據(jù)源配置XML腳本語(yǔ)言,實(shí)現(xiàn)各種數(shù)據(jù)源的編程配置和映射配置;

數(shù)據(jù)檢索模塊,用于對(duì)導(dǎo)入的數(shù)據(jù)建立全文分詞索引,提供主題檢索和條件檢索,支持海量數(shù)據(jù)的高速搜索引擎;

數(shù)據(jù)加工模塊,用于實(shí)現(xiàn)團(tuán)隊(duì)協(xié)同協(xié)作的協(xié)同數(shù)據(jù)標(biāo)引和協(xié)同分析功能,通過(guò)標(biāo)引樹(shù)技術(shù),實(shí)現(xiàn)標(biāo)引內(nèi)容的統(tǒng)一協(xié)同管理和數(shù)據(jù)定制化標(biāo)引加工;

數(shù)據(jù)分析模塊,用于定制算法模板,分析算法自由選擇,量身定制數(shù)據(jù)建模和算法實(shí)現(xiàn),通過(guò)算法包插件,提供專(zhuān)享專(zhuān)用算法包;

數(shù)據(jù)可視化模塊,用于實(shí)現(xiàn)分析結(jié)果的可視化展示和自動(dòng)報(bào)表,包括動(dòng)態(tài)可視化插件、執(zhí)行結(jié)果展示、執(zhí)行結(jié)果導(dǎo)出和自動(dòng)報(bào)告生成。

2.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述多數(shù)據(jù)源配置模塊包括:

網(wǎng)頁(yè)爬取導(dǎo)入子模塊,用于實(shí)現(xiàn)爬取配置、爬取規(guī)則和爬取導(dǎo)入的一體化處理流程,使用自主研發(fā)網(wǎng)絡(luò)爬蟲(chóng)技術(shù),對(duì)指定網(wǎng)站、網(wǎng)頁(yè)進(jìn)行規(guī)則化數(shù)據(jù)爬取,爬取數(shù)據(jù)根據(jù)爬蟲(chóng)導(dǎo)入配置器自動(dòng)導(dǎo)入數(shù)據(jù)庫(kù);

數(shù)據(jù)源配置器編輯子模塊,用于數(shù)據(jù)源配置器配置規(guī)則項(xiàng)的新建和編輯;

數(shù)據(jù)源配置器管理子模塊,用于各個(gè)數(shù)據(jù)源配置器的查詢(xún)和管理,包括配置器的摘要信息,詳細(xì)編輯入口和刪除功能;

數(shù)據(jù)導(dǎo)入歷史管理子模塊,用于針對(duì)當(dāng)前任務(wù)下的數(shù)據(jù)導(dǎo)入歷史信息列表查詢(xún),包括數(shù)據(jù)的導(dǎo)入名稱(chēng)、大小、時(shí)間、所用配置器和導(dǎo)入狀態(tài);

數(shù)據(jù)導(dǎo)入執(zhí)行子模塊,用于選擇配置器和導(dǎo)入數(shù)據(jù)源執(zhí)行數(shù)據(jù)導(dǎo)入。

3.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)加工模塊包括:

數(shù)據(jù)協(xié)同標(biāo)引子模塊,用于實(shí)現(xiàn)數(shù)據(jù)標(biāo)引、加工和分析的多人團(tuán)隊(duì)協(xié)同同步作業(yè),提供在線(xiàn)、團(tuán)隊(duì)、實(shí)時(shí)、協(xié)作分析加工標(biāo)引功能,各成員標(biāo)引加工內(nèi)容實(shí)時(shí)同步呈現(xiàn),通過(guò)顏色區(qū)分不同成員的加工標(biāo)引內(nèi)容并相互可見(jiàn),實(shí)現(xiàn)團(tuán)隊(duì)標(biāo)引加工作業(yè)的操作實(shí)時(shí)協(xié)同、進(jìn)度清晰可見(jiàn)、內(nèi)容同步共享;

數(shù)據(jù)標(biāo)引樹(shù)管理子模塊,用于提供協(xié)同標(biāo)引加工時(shí)的標(biāo)引數(shù)據(jù)字典功能,實(shí)現(xiàn)標(biāo)引內(nèi)容的統(tǒng)一協(xié)同管理和數(shù)據(jù)定制化標(biāo)引加工;

標(biāo)引加工執(zhí)行子模塊,用于數(shù)據(jù)標(biāo)引、加工和分析的執(zhí)行;

標(biāo)引歷史管理子模塊,用于對(duì)標(biāo)引樹(shù)技術(shù)儲(chǔ)進(jìn)行管理,或者通過(guò)CSV格式文件進(jìn)行導(dǎo)入導(dǎo)出管理,使標(biāo)引樹(shù)字典信息實(shí)現(xiàn)線(xiàn)上線(xiàn)下的映射導(dǎo)出和集中管理。

4.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)分析模塊包括:

動(dòng)態(tài)算法包插件,用于實(shí)現(xiàn)定制化擴(kuò)展算法包的動(dòng)態(tài)替換擴(kuò)展和算法熱插拔;實(shí)現(xiàn)算法包的模板化管理,通過(guò)參數(shù)模板,規(guī)范管理算法輸入輸出標(biāo)準(zhǔn),前端通過(guò)參數(shù)模板解析,識(shí)別所需參數(shù)類(lèi)型;

統(tǒng)計(jì)分析執(zhí)行子模塊,用于參數(shù)采集,通過(guò)人機(jī)交互采集參數(shù)后,將采集到的參數(shù)列表經(jīng)過(guò)格式化統(tǒng)一傳遞給算法包,進(jìn)行算法執(zhí)行;

執(zhí)行結(jié)果管理子模塊,用于數(shù)據(jù)分析結(jié)果的管理。

5.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)可視化模塊包括:

動(dòng)態(tài)可視化插件,用于實(shí)現(xiàn)可視化圖表的組件化、模板化和插件化,提供可視化圖表的動(dòng)態(tài)組件化,通過(guò)后臺(tái)管理可視化模板,并通過(guò)可視化模板的動(dòng)態(tài)插拔實(shí)現(xiàn)前端可視化圖表組件的動(dòng)態(tài)替換和擴(kuò)展;

執(zhí)行結(jié)果展示,用于展示動(dòng)態(tài)可視化的結(jié)果;

執(zhí)行結(jié)果導(dǎo)出,用于導(dǎo)出動(dòng)態(tài)可視化的結(jié)果;

自動(dòng)報(bào)告生成,用于根據(jù)事先定義的報(bào)告模板,結(jié)合分析結(jié)果數(shù)據(jù)和圖表,自動(dòng)生成統(tǒng)計(jì)分析報(bào)告。

6.一種大數(shù)據(jù)協(xié)同分析方法,其特征在于,包括:

S1:建立研究主題:以研究主題為單位、創(chuàng)建研究任務(wù)組、管理研究數(shù)據(jù)和制定研究方向,線(xiàn)下科研團(tuán)隊(duì)直接平移至線(xiàn)上,團(tuán)隊(duì)成員協(xié)同共享研究成果,不同研究任務(wù)之間數(shù)據(jù)保密隔離;

S2:數(shù)據(jù)搜索引擎:導(dǎo)入數(shù)據(jù)建立全文分詞索引,提供主題檢索和條件檢索,支持海量數(shù)據(jù)的高速搜索引擎;

S3:建模統(tǒng)計(jì)分析:定制算法模塊,分析算法自由選擇,量身定制數(shù)據(jù)建模和算法實(shí)現(xiàn),通過(guò)算法包插件,提供專(zhuān)享專(zhuān)用算法包,讓建模統(tǒng)計(jì)分析隨需而用,快速高效;

S4:數(shù)據(jù)配置導(dǎo)入:海量數(shù)據(jù)批量并行導(dǎo)入和爬取,針對(duì)各種數(shù)據(jù)源定制專(zhuān)有數(shù)據(jù)解析配置器,通過(guò)配置器插件服務(wù),實(shí)現(xiàn)所有格式文本文獻(xiàn)的定向字段提取和定制化導(dǎo)入,實(shí)現(xiàn)數(shù)據(jù)源的自定義智能解析、數(shù)據(jù)項(xiàng)智能提取分離、數(shù)據(jù)字段智能映射存儲(chǔ);

S5:協(xié)同分析標(biāo)引:實(shí)現(xiàn)研究團(tuán)隊(duì)內(nèi)數(shù)據(jù)加工云協(xié)作,團(tuán)隊(duì)成員分析加工標(biāo)引結(jié)果實(shí)時(shí)共享可見(jiàn),實(shí)時(shí)在線(xiàn)溝通,支持基于標(biāo)引樹(shù)的統(tǒng)一標(biāo)引數(shù)據(jù)字典,針對(duì)各種標(biāo)引內(nèi)容定制專(zhuān)有標(biāo)引規(guī)則配置器,實(shí)現(xiàn)批量自動(dòng)化標(biāo)引;

S6:結(jié)果可視化:提供分析結(jié)果的可視化展示和自動(dòng)報(bào)表,可視化圖表根據(jù)需求量身定制,通過(guò)可視化插件,提供專(zhuān)享專(zhuān)用可視化模板,提供交互式可視化和自動(dòng)報(bào)告。

當(dāng)前第2頁(yè)1 2 3 
網(wǎng)友詢(xún)問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
桃园市| 桂林市| 东辽县| 来凤县| 肇州县| 汪清县| 山东| 洪洞县| 庆阳市| 腾冲县| 兴隆县| 青田县| 漳浦县| 澄江县| 邯郸市| 阿坝县| 湖南省| 沅江市| 南安市| 福州市| 嫩江县| 汽车| 田东县| 唐山市| 新闻| 沙河市| 永宁县| 新闻| 和林格尔县| 太保市| 武宣县| 安阳县| 竹北市| 兴化市| 乾安县| 治多县| 米易县| 东至县| 光山县| 泾川县| 沂源县|