在實(shí)際運(yùn)用中，輸電通道監(jiān)拍裝置和隱患辨識(shí)模型可以幫助排查線路設(shè)備隱患，但目前分析輸電通道監(jiān)拍信息、精準(zhǔn)研判是否存在隱患的能力還不足。天津電科院評(píng)價(jià)模型的運(yùn)行效果，優(yōu)化升級(jí)模型，實(shí)現(xiàn)輸電通道隱患辨識(shí)能力進(jìn)一步提升。
國網(wǎng)天津電力人工智能實(shí)驗(yàn)室成員討論模型優(yōu)化方案。 李浩然 攝
11月1日，在國網(wǎng)天津市電力公司人工智能實(shí)驗(yàn)室，國網(wǎng)天津市電力公司電力科學(xué)研究院技術(shù)人員正開展輸電通道隱患辨識(shí)模型迭代測試。他們將根據(jù)測試結(jié)果選擇最終上線的迭代模型版本。
為充分發(fā)揮輸電通道隱患辨識(shí)模型作用，天津電科院建立樣本閉環(huán)管理機(jī)制，優(yōu)化升級(jí)算法模型，驗(yàn)證隱患測距技術(shù)，建立了包含20余萬張高質(zhì)量隱患圖像的樣本庫，通過多輪訓(xùn)練優(yōu)化模型，將隱患辨識(shí)查準(zhǔn)率提高14個(gè)百分點(diǎn)、查全率提高2.6個(gè)百分點(diǎn)，減少了一線人員隱患排查工作量，用數(shù)字技術(shù)推動(dòng)電網(wǎng)生產(chǎn)業(yè)務(wù)轉(zhuǎn)型升級(jí)。
聚焦一線業(yè)務(wù)需求 探索模型升級(jí)方向
近年來，隨著國內(nèi)輸電線路規(guī)模持續(xù)擴(kuò)大，線路運(yùn)維使用的監(jiān)拍裝置數(shù)量和拍攝的巡檢圖像數(shù)量成幾何倍數(shù)增加。目前，國網(wǎng)天津電力累計(jì)安裝監(jiān)拍裝置1.4萬套，基于人工智能“兩庫一平臺(tái)”部署了輸電通道隱患辨識(shí)模型，模型日均調(diào)用量達(dá)120萬次。然而，該模型分析輸電通道監(jiān)拍信息、精準(zhǔn)研判是否存在隱患的能力還需進(jìn)一步提高。
7月，國網(wǎng)天津電力落實(shí)國家電網(wǎng)有限公司人工智能規(guī)?；瘧?yīng)用相關(guān)要求，提出從邊端采集、數(shù)據(jù)傳輸、模型優(yōu)化、系統(tǒng)應(yīng)用等方面入手，開展輸電通道監(jiān)拍規(guī)?；瘧?yīng)用專項(xiàng)攻堅(jiān)。天津電科院依托國網(wǎng)天津電力人工智能實(shí)驗(yàn)室組建攻關(guān)團(tuán)隊(duì)，優(yōu)化輸電通道隱患辨識(shí)模型。
“模型算法是人工智能規(guī)?；瘧?yīng)用的關(guān)鍵。”天津電科院電網(wǎng)技術(shù)中心副主任姚程說，“人工智能應(yīng)用要真正融入生產(chǎn)工作，被一線人員廣泛使用，必須具備較高的準(zhǔn)確性。”
攻關(guān)團(tuán)隊(duì)通過技術(shù)手段準(zhǔn)確評(píng)價(jià)模型的實(shí)際運(yùn)行效果，推動(dòng)模型能力提升和應(yīng)用深化，填補(bǔ)了天津電網(wǎng)人工智能模型質(zhì)量監(jiān)督的空白。天津電科院模型測試人員李浩然說：“要解決一線人員反映的模型誤報(bào)、漏報(bào)問題，就要找到模型到底在識(shí)別哪類隱患方面存在什么樣的問題，這樣才能使算法精準(zhǔn)聚焦業(yè)務(wù)需求，提升模型實(shí)用化水平。”
根據(jù)實(shí)地?cái)?shù)據(jù)優(yōu)化模型 查全率查準(zhǔn)率顯著提升
高質(zhì)量測試數(shù)據(jù)集是精準(zhǔn)評(píng)價(jià)模型的基礎(chǔ)。攻關(guān)團(tuán)隊(duì)聯(lián)合生產(chǎn)運(yùn)行單位開展輸電通道隱患排查需求調(diào)研，結(jié)合天津電網(wǎng)特點(diǎn)，確定了煙、火、導(dǎo)線異物、吊車、打樁機(jī)等10類重點(diǎn)線路通道隱患及具體標(biāo)注規(guī)則。在此基礎(chǔ)上，攻關(guān)團(tuán)隊(duì)通過分析以往易誤報(bào)信息，發(fā)現(xiàn)煙囪、防塵網(wǎng)、風(fēng)力發(fā)電機(jī)等7類物體易造成誤報(bào)情況，便將這些物體作為輔助目標(biāo)物，提升模型對(duì)易混淆目標(biāo)特征的提取能力。
攻關(guān)團(tuán)隊(duì)以監(jiān)拍終端設(shè)備全覆蓋、時(shí)間范圍全覆蓋、樣本類別均衡為原則，差異化制訂樣本抽取策略。他們按照統(tǒng)一標(biāo)注規(guī)則，開展監(jiān)拍圖像隱患數(shù)據(jù)標(biāo)注，建立包括人工標(biāo)注、交叉互審及兩輪抽樣復(fù)審的流程，保證了較高的樣本標(biāo)注質(zhì)量。最終，攻關(guān)團(tuán)隊(duì)建立了包含2.2萬張隱患圖片的測試數(shù)據(jù)集和包含6萬張隱患圖片的訓(xùn)練數(shù)據(jù)集。
攻關(guān)團(tuán)隊(duì)成員武藝博介紹：“如果把測試集比喻為考試試題，那訓(xùn)練集就是提供給模型的練習(xí)題。模型通過在訓(xùn)練集上開展模擬訓(xùn)練，獲得監(jiān)拍圖像隱患特征知識(shí)。如果模型能在測試集上得到理想的分?jǐn)?shù)，就能證明模型的特征知識(shí)是正確的，具備了泛化推理的能力。”
在模型測試工作中，攻關(guān)團(tuán)隊(duì)借鑒國際大型計(jì)算機(jī)視覺競賽規(guī)則制訂測試流程、指標(biāo)，保障測試過程的權(quán)威性。“查準(zhǔn)率、查全率、F1分?jǐn)?shù)是模型評(píng)價(jià)的常用指標(biāo)。此外，我們還引入了國際知名賽事和學(xué)術(shù)研究中常用的評(píng)價(jià)指標(biāo)——平均精度均值，便于后續(xù)對(duì)標(biāo)先進(jìn)算法開展對(duì)比驗(yàn)證。”李浩然說。
攻關(guān)團(tuán)隊(duì)在模型歷次迭代后開展測試，結(jié)果表明，應(yīng)用天津電網(wǎng)實(shí)地?cái)?shù)據(jù)開展微調(diào)，模型總體查全率、查準(zhǔn)率顯著提升，尤其是煙、火、導(dǎo)線異物3類隱患查準(zhǔn)率提升20個(gè)百分點(diǎn)以上。
打磨測試方法和程序腳本 建立穩(wěn)定高效的測試流程
目前，輸電通道監(jiān)拍規(guī)?；瘧?yīng)用專項(xiàng)攻堅(jiān)已進(jìn)入沖刺階段。在國網(wǎng)天津電力人工智能實(shí)驗(yàn)室，負(fù)責(zé)開發(fā)、測試、標(biāo)注等任務(wù)的攻關(guān)團(tuán)隊(duì)成員緊密配合，有序推進(jìn)模型上線準(zhǔn)備工作。
攻關(guān)團(tuán)隊(duì)逐步建立了涵蓋用戶反饋、樣本歸集、樣本篩選、樣本標(biāo)注、樣本審核的數(shù)據(jù)集構(gòu)建和樣本閉環(huán)管理機(jī)制，具備了目標(biāo)檢測類機(jī)器學(xué)習(xí)任務(wù)數(shù)據(jù)標(biāo)注能力，可支撐輸電通道監(jiān)拍等重點(diǎn)場景常態(tài)化樣本收集。同時(shí)，通過多輪測試和結(jié)果反饋，攻關(guān)團(tuán)隊(duì)不斷打磨測試方法和程序腳本，逐漸建立了穩(wěn)定高效的測試流程，具備了目標(biāo)檢測類人工智能模型功能測試能力。
“用科技服務(wù)生產(chǎn)是我們的出發(fā)點(diǎn)，也是落腳點(diǎn)。”姚程說，“我們將依托專項(xiàng)攻堅(jiān)成果，探索驗(yàn)證圖像壓縮、三維點(diǎn)云測距、視覺大模型等新技術(shù)應(yīng)用成效，不斷提升支撐服務(wù)能力，推動(dòng)人工智能技術(shù)在變壓器早期絕緣問題辨識(shí)、油色譜在線監(jiān)測裝置異常分析等場景中應(yīng)用，服務(wù)電網(wǎng)生產(chǎn)一線。”(張揚(yáng))
評(píng)論