技術(shù)特征:
技術(shù)總結(jié)
本發(fā)明公開了一種基于分布式存儲的日志分析方法及裝置,包括:日志代理實時收集日志數(shù)據(jù),并將日志數(shù)據(jù)發(fā)送至日志后臺服務(wù);日志后臺服務(wù)接收日志數(shù)據(jù),根據(jù)日志數(shù)據(jù)確定分片參數(shù)及副本參數(shù),并根據(jù)分片參數(shù)和副本參數(shù)對日志數(shù)據(jù)進行分布式存儲,以使日志展現(xiàn)模塊通過日志接口對日志數(shù)據(jù)進行分析及展示??梢姡诒緦嵤├?,日志數(shù)據(jù)的存儲采用分布式存儲方式,在分布式環(huán)境下日志數(shù)據(jù)采用分片和副本策略,實現(xiàn)了高性能、高伸縮和高可用。并且,分片技術(shù)為大規(guī)模并行索引和搜索提供了支持,極大地提高了索引和搜索的性能,極大地提高了水平擴展能力;副本技術(shù)為數(shù)據(jù)提供冗余,部分機器故障不影響系統(tǒng)的正常使用,保證了系統(tǒng)的持續(xù)高可用。
技術(shù)研發(fā)人員:王繼業(yè);高靈超;楊寧;羅華永;葛華利;王宇飛
受保護的技術(shù)使用者:國家電網(wǎng)公司;國網(wǎng)信息通信產(chǎn)業(yè)集團有限公司;北京中電普華信息技術(shù)有限公司
技術(shù)研發(fā)日:2017.04.05
技術(shù)公布日:2017.07.28