91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

這款大電網(wǎng)海量數(shù)據(jù)解決方案,效率提升不止一點點

qm9W_gridthink ? 來源:互聯(lián)網(wǎng) ? 作者:佚名 ? 2017-12-16 08:25 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

中國地大物博,人口眾多,很多民生工程都是至關(guān)重要的,電網(wǎng)就是其中的典型代表。作為全球最大的公用事業(yè)企業(yè),電網(wǎng)經(jīng)營區(qū)域覆蓋全國,供電人口數(shù)量龐大,是關(guān)系國民經(jīng)濟命脈和國家能源安全的國有重點骨干企業(yè),承擔著保障更安全、更經(jīng)濟、更清潔、可持續(xù)的電力供應基本使命。然而作為電網(wǎng)運作的支持基礎(chǔ),電網(wǎng)的信息化建設(shè)一直面臨著來自地域跨度大、異構(gòu)化管理、利舊觀念根深蒂固等問題,企業(yè)信息化建設(shè)在不斷向前發(fā)展。

除了面對傳統(tǒng)信息化建設(shè)轉(zhuǎn)型的挑戰(zhàn),電網(wǎng)還面臨著來自“互聯(lián)網(wǎng)+”的壓力。在“互聯(lián)網(wǎng)+”的大環(huán)境中,其業(yè)務(wù)形式、服務(wù)理念改變,讓電網(wǎng)認識到信息化一定要服務(wù)于用戶 ,用戶體驗才是“互聯(lián)網(wǎng)+”潮流中的主要競爭力。與此同時,電網(wǎng)龐大系統(tǒng)產(chǎn)生的海量歷史實時數(shù)據(jù)的利用也是個難題,如何針對電網(wǎng)各環(huán)節(jié)運行和監(jiān)測中產(chǎn)生的海量歷史實時數(shù)據(jù),做相應的存儲、集中、整合、共享和分析,同時對外提供標準統(tǒng)一的訪問服務(wù),是電網(wǎng)信息化建設(shè)的重要組成部分。

大、多、新、難——日志集中管理來幫忙

在電網(wǎng)的海量數(shù)據(jù)中,比較讓人頭疼的數(shù)據(jù)之一便是日志。我們都知道,電網(wǎng)在多年的發(fā)展中不斷的更新進化,長年累月的積累導致各方面的設(shè)備類型種類較多。與此同時,由于發(fā)展服務(wù)器的數(shù)量規(guī)模也在不斷壯大,更涉及到省、市、縣等多級接入,面臨的復雜情況可想而知。再加上電網(wǎng)進入云化改造階段,運維人員從原來幾百臺小型機,轉(zhuǎn)換到面對上千臺x86服務(wù)器,幾千個虛擬機,日常運維也帶來新的復雜變化。

基礎(chǔ)設(shè)施的龐大也預示著業(yè)務(wù)系統(tǒng)多樣化,生產(chǎn)系統(tǒng)、營銷系統(tǒng)、調(diào)度系統(tǒng)、財務(wù)系統(tǒng)、中間件、數(shù)據(jù)庫等等上百個系統(tǒng)同時運轉(zhuǎn),而且由于時間和業(yè)務(wù)需求不同,這些系統(tǒng)大多是來源于不同時期的不同開發(fā)商,日志非常不規(guī)范,一旦其中某個系統(tǒng)出現(xiàn)問題,想要及時定位故障所在會非常困難,于是日志易就能彰顯價值。

在對業(yè)務(wù)系統(tǒng)、基礎(chǔ)設(shè)施以及網(wǎng)絡(luò)設(shè)備的日志進行集中管理后,提取不同設(shè)備及應用的日志字段用于后續(xù)事件分析,這中間涉及防火墻、中間件、Linux和Windows操作系統(tǒng)等多種類型日志。

采集后我們可以基于角色的權(quán)限管理,對日志進行分組,賦予使用者不同的權(quán)限,如此龐大規(guī)模的日志我們可以按照習慣設(shè)立成數(shù)十個分組,讓整個體系架構(gòu)清晰明了。與此同時還能通過儀表盤分組,靈活查看不同設(shè)備日志的整體運維情況,方便掌握龐大系統(tǒng)下的不同模塊運行情況,做到有的放矢。

集中管理還不夠,用日志來做深度分析

做到了復雜情況下的日志集中管理,其實是遠遠不夠的,這只是第一步,我們還需要把獲取的日志數(shù)據(jù)利用起來,這時候面臨的情況就更加復雜了,例如有的時候業(yè)務(wù)出現(xiàn)問題,而網(wǎng)管監(jiān)控系統(tǒng)的指標卻是正常的,更難以從海量日志中快速定位故障。

面對這種情況,我們可以隨時調(diào)閱定時任務(wù)統(tǒng)計結(jié)果進行分析,同時對每天統(tǒng)計結(jié)果進行二次統(tǒng)計,進而分析出周、月、年的業(yè)務(wù)數(shù)據(jù)運維情況,并定時產(chǎn)生報表,自動發(fā)送用戶郵箱。

在深度分析方面,日志易不僅可以通過歷史基線對比,實時掌握同比數(shù)據(jù)分析情況,還可以更精細的分析不同維度的業(yè)務(wù)運行情況,下面便是一些通過日志進行業(yè)務(wù)分析的典型例子:

上圖的分布圖和柱狀圖直觀的顯示出業(yè)務(wù)系統(tǒng)來源IP的分布,可以看出有一個IP在最近30分鐘內(nèi)的訪問量比其他IP都要多很多。經(jīng)過分析推測出兩種潛在原因:

  • 該IP為堡壘機,所有客戶端的訪問都經(jīng)過堡壘機訪問到業(yè)務(wù)系統(tǒng)。如果是堡壘機,可以看出堡壘機的負載并不均衡,需要運維人員著重觀察下堡壘機的負載情況。

  • 該IP是客戶端IP,如果是客戶端IP的話,那么近30分鐘的訪問量達到6萬次,需要運維人員重點關(guān)注下該IP對應屬于哪個部門的的哪個人員,有沒有在做高危操作。

上圖的業(yè)務(wù)訪問區(qū)間為正態(tài)分布展現(xiàn),對于在藍色區(qū)域面積的訪問量是正常的,超過面積的則為異常點,可以通過鼠標下鉆到詳細日志,可以查看異常的詳細情況,方便及時解決業(yè)務(wù)異常情況。

除此之外,我們還能詳細查看業(yè)務(wù)系統(tǒng)404錯誤排行、業(yè)務(wù)系統(tǒng)訪問排名、主機情況、交換機概述等具體情況,同時還能對多設(shè)備運維數(shù)據(jù)進行實時對比。

最后我們還能通過對不同設(shè)備進行告警設(shè)置,配置交換機常用關(guān)鍵字告警策略,觸發(fā)告警后產(chǎn)生報表并自動發(fā)送至用戶郵箱。

電網(wǎng)的信息化建設(shè)情況復雜,海量日志數(shù)據(jù)的合理利用為電網(wǎng)提供了便利并帶來巨大價值:采集網(wǎng)絡(luò)設(shè)備、服務(wù)器日志并進行日志解析,實時化運維對關(guān)鍵字進行告警,對日志核心指標進行分析;運維自動化、智能化,根據(jù)業(yè)務(wù)邏輯關(guān)聯(lián)分析日志信息,自動分析異常業(yè)務(wù)流轉(zhuǎn)環(huán)節(jié);基于海量日志數(shù)據(jù)挖掘的智慧運維,做到運維的異常自動檢測、容量預測和規(guī)劃等。相信隨著對海量日志數(shù)據(jù)價值的深度挖掘,未來日志易還會為電網(wǎng)提供更有力的后續(xù)支持。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴

原文標題:大電網(wǎng)復雜環(huán)境下的海量數(shù)據(jù)解決方案

文章出處:【微信號:gridthink,微信公眾號:電網(wǎng)智囊團】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    與他們談?wù)揂I后,感覺大家都是溫水里的青蛙

    AI的水溫,好像有一點點發(fā)燙
    的頭像 發(fā)表于 01-21 14:44 ?8189次閱讀
    與他們談?wù)揂I后,感覺大家都是溫水里的青蛙

    安科瑞智慧充電解決方案:直面行業(yè)痛,賦能充電網(wǎng)絡(luò)高效可持續(xù)發(fā)展

    剖析當前充電基礎(chǔ)設(shè)施建設(shè)與運營中的核心痛,并系統(tǒng)闡述安科瑞電氣如何憑借“云-邊-端”協(xié)同的產(chǎn)品生態(tài)與整體解決方案,為充電網(wǎng)絡(luò)的安全、經(jīng)濟、高效運行提供堅實支撐。 更多信息聯(lián)系:Acrel777-
    的頭像 發(fā)表于 01-19 10:03 ?295次閱讀
    安科瑞智慧充電<b class='flag-5'>解決方案</b>:直面行業(yè)痛<b class='flag-5'>點</b>,賦能充<b class='flag-5'>電網(wǎng)</b>絡(luò)高效可持續(xù)發(fā)展

    深視課堂丨激光位移傳感器SD33系列一點示教操作指南(第三課)

    今天,我們將起學習深視智能SD33系列激光位移傳感器的一點示教模式操作方法。一點示教模式是通過設(shè)定個閾值(far),使傳感器在測量值小
    的頭像 發(fā)表于 12-22 08:17 ?371次閱讀
    深視課堂丨<b class='flag-5'>點</b>激光位移傳感器SD33系列<b class='flag-5'>一點</b>示教操作指南(第三課)

    提高系統(tǒng)效率幾個誤解解析

    及跳轉(zhuǎn)范圍,如果個循環(huán)剛好比CACHE大那么一點點,又在反復循環(huán)的話,那就慘了。 誤解三:這么多任務(wù)到底是用中斷還是用查詢呢?還是中斷快些吧 評:中斷的實時性強,但不定快。如
    發(fā)表于 12-15 06:09

    安世正在被一點點吃掉份額?

    行業(yè)資訊
    芯廣場
    發(fā)布于 :2025年12月09日 16:53:49

    軟件與華為打造政務(wù)智能助手聯(lián)合解決方案

    打造站式“行業(yè)+AI”解決方案,讓服務(wù)更精準、決策更高效、治理更智能。本期將重點呈現(xiàn)新軟件與華為共同打造的政務(wù)智能助手聯(lián)合解決方案,讓我們
    的頭像 發(fā)表于 10-24 09:21 ?919次閱讀
    新<b class='flag-5'>點</b>軟件與華為打造政務(wù)智能助手聯(lián)合<b class='flag-5'>解決方案</b>

    有沒有針對特定行業(yè)或場景的裝置數(shù)據(jù)驗證效率提升方案

    )、工業(yè)制造(汽車 / 化工)、數(shù)據(jù)中心、醫(yī)療行業(yè)四大典型場景,提供定制化的驗證效率提升方案,兼顧 “效率” 與 “行業(yè)合規(guī)性”。
    的頭像 發(fā)表于 09-04 17:47 ?606次閱讀
    有沒有針對特定行業(yè)或場景的裝置<b class='flag-5'>數(shù)據(jù)</b>驗證<b class='flag-5'>效率</b><b class='flag-5'>提升</b><b class='flag-5'>方案</b>?

    告別低效!三坐標測量機提高油缸導向套檢測效率

    手段測量困難:1、精度與效率低人工使用量具一點點測量內(nèi)凹槽尺寸,測量結(jié)果波動大、重復性差;逐點測量、手動記錄,耗時費力;2、人工記錄數(shù)據(jù),耗時費力,還容易因人為疏
    的頭像 發(fā)表于 08-29 11:39 ?489次閱讀
    告別低效!三坐標測量機提高油缸導向套檢測<b class='flag-5'>效率</b>

    從 “有線” 到 “無線”:高低壓開關(guān)柜測溫升級,效率提升不止一點點

    電氣接點異常溫升原因 程瑜 187 0211 2087 現(xiàn)場環(huán)境比試驗更復雜,現(xiàn)場長期運行具備溫升累積效應 接頭處不同材質(zhì)金屬膨脹效應存在差異,高溫膨脹時受應力作用的影響和制約緩慢發(fā)生塑性變形,使接頭處產(chǎn)生微小的空隙。 溫度變化造成接頭處氧化腐蝕,接觸電阻增大。 觸頭反復活動,連接部位緊固螺栓壓力不合理,導致接觸面變形,減小接觸面積,增大電阻。 導體原材料純度不夠,造成導體材料電導率不滿足要求。 在加工、連接、安裝母線過程中,
    的頭像 發(fā)表于 08-26 09:42 ?430次閱讀
    從 “有線” 到 “無線”:高低壓開關(guān)柜測溫升級,<b class='flag-5'>效率</b><b class='flag-5'>提升</b><b class='flag-5'>不止</b><b class='flag-5'>一點點</b>

    物聯(lián)網(wǎng)云平臺解決方案:破解行業(yè)痛,賦能場景落地

    物聯(lián)網(wǎng)云平臺作為連接設(shè)備、數(shù)據(jù)與應用的核心樞紐,其解決方案并非“刀切”的標準化產(chǎn)品,而是針對不同行業(yè)的痛需求,融合感知技術(shù)、通信協(xié)議、數(shù)據(jù)
    的頭像 發(fā)表于 08-08 17:43 ?1325次閱讀

    盤古信息新能源行業(yè)解決方案:破解智造痛,引領(lǐng)綠色轉(zhuǎn)型

    領(lǐng)域多年的深耕經(jīng)驗,精準洞察行業(yè)需求,為新能源制造企業(yè)量身定制了全面且高效的解決方案。 、新能源制造崛起背后的痛 在 “雙碳” 戰(zhàn)略驅(qū)動下,我國新能源產(chǎn)業(yè)規(guī)模持續(xù)擴大,但制造環(huán)節(jié)的復雜性與特殊性,讓企業(yè)面臨多
    的頭像 發(fā)表于 07-29 09:27 ?539次閱讀

    快手上線鴻蒙應用高性能解決方案數(shù)據(jù)反序列化性能提升90%

    、通用能力、垂類行業(yè)等場景推出系列開發(fā)者場景化解決方案,不斷提升鴻蒙應用的創(chuàng)新體驗和開發(fā)效率,與廣大開發(fā)者共建繁榮的鴻蒙生態(tài)。 想要深入了解什么是技術(shù)共建,或與我們共同探討技術(shù)創(chuàng)新。歡迎加入我們的技術(shù)共建交流群,我們將與志同道合
    發(fā)表于 05-15 10:01

    使用設(shè)計工具設(shè)計的帶通濾波器與Multisim仿真結(jié)果不致是怎么回事?

    使用設(shè)計工具在300Hz是有一點點增益的,但是使用Multisim 仿真卻沒有放大,反而發(fā)生了衰減,對照了元件沒有發(fā)現(xiàn)有錯誤的。
    發(fā)表于 04-24 07:53

    機器視覺運動控制體機在龍門跟隨膠的解決方案

    正運動龍門跟隨解決方案
    的頭像 發(fā)表于 04-01 10:40 ?776次閱讀
    機器視覺運動控制<b class='flag-5'>一</b>體機在龍門跟隨<b class='flag-5'>點</b>膠的<b class='flag-5'>解決方案</b>

    STM32L431RCT6主芯片 搭配 SD NAND-動態(tài)心電圖設(shè)備存儲解決方案

    與MKDV08GCL-STPA 貼片式SD卡存儲解決方案,我們成功解決了傳統(tǒng)設(shè)備在數(shù)據(jù)存儲、處理效率和功耗管理方面的技術(shù)痛,實現(xiàn)了設(shè)備性能的全面優(yōu)化。
    發(fā)表于 03-27 10:56