《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 人工智能 > 設(shè)計(jì)應(yīng)用 > 基于深度回歸的指針儀表讀數(shù)識(shí)別方法
基于深度回歸的指針儀表讀數(shù)識(shí)別方法
2020年信息技術(shù)與網(wǎng)絡(luò)安全第12期
彭昆福1,王子磊1,王 磊2,顧 楊2
1中國科學(xué)技術(shù)大學(xué) 信息科學(xué)技術(shù)學(xué)院,安徽 合肥230027; 2.國網(wǎng)安徽省電力有限公司檢修分公司,安徽 合肥231131
摘要: 現(xiàn)有儀表讀數(shù)識(shí)別方法通過檢測(cè)指針和刻度獲取讀數(shù),對(duì)輸入的儀表圖像質(zhì)量要求較高,為此提出一種新的基于深度回歸的指針儀表讀數(shù)識(shí)別方法。該方法首先由儀表圖像獲取圖像特征,然后通過方向回歸模塊預(yù)測(cè)指針方向,最后根據(jù)指針角度計(jì)算儀表讀數(shù)。相比于其他方法,該方法采用端到端的回歸方式進(jìn)行直接學(xué)習(xí),具有更強(qiáng)的識(shí)別能力。在較大規(guī)模變電站儀表圖像數(shù)據(jù)集上,該方法取得了97.2%的讀數(shù)精度,相比于基于Mask R-CNN的儀表讀數(shù)識(shí)別方法提高了7.4%。定性分析和定量分析結(jié)果表明,相比于現(xiàn)有的儀表讀數(shù)識(shí)別方法,該方法對(duì)表盤圖像干擾具有更強(qiáng)的魯棒性。
中圖分類號(hào): TP319.4
文獻(xiàn)標(biāo)識(shí)碼: A
DOI: 10.19358/j.issn.2096-5133.2020.12.007
引用格式: 彭昆福,王子磊,王磊,等. 基于深度回歸的指針儀表讀數(shù)識(shí)別方法[J].信息技術(shù)與網(wǎng)絡(luò)安全,2020,39(12):37-43.
Pointer meter reading recognition by deep regression
Peng Kunfu1,Wang Zilei1,Wang Lei2,Gu Yang2
1.School of Information Science and Technology,University of Science and Technology of China,Hefei 230027,China; 2.State Grid Anhui Maintenance Company,Hefei 231131,China
Abstract: Existing pointer meter recognition methods usually predict the results by detecting pointer and scale marks, thus require high-quality meter images, which have weak robustness to interferences such as dial blurring, glistening, stains, and yellowing. To address this issue, we propose an end-to-end pointer meter reading recognition method by deep regression, which firstly extracts rich features from the meter image, then regresses the orientation of the pointer using an orientation regression module, and finally calculates the value of the meter reading from the pointer angle. Benefitted from the end-to-end training and novel regression way, our proposed method can achieve better recognition performance. We conduct experiments on a large scale dataset of pointer meters of substations and our method achieves an average recognition accuracy of 97.2%, which is higher by 7.4% than the Mask R-CNN based method. Qualitative and quantitative analysis results show that our method possesses stronger robustness to various dial interferences than the existing method.
Key words : pointer meter;reading recognition;deep learning;end-to-end;regression

0 引言

    隨著數(shù)字化、智能化的普及,大部分工業(yè)場(chǎng)景都采用數(shù)字儀表,但是對(duì)于電力行業(yè),指針儀表由于其穩(wěn)定性、抗干擾性優(yōu)勢(shì),仍廣泛應(yīng)用于我國的電力實(shí)際監(jiān)控中[1]。但大部分指針儀表的讀取仍依靠人工進(jìn)行,要求工作人員到現(xiàn)場(chǎng)進(jìn)行數(shù)據(jù)記錄,費(fèi)時(shí)費(fèi)力、容易出錯(cuò)。因此,指針儀表讀數(shù)自動(dòng)識(shí)別技術(shù)的研究具有重要意義[2]

    關(guān)于指針儀表自動(dòng)識(shí)別的研究早期已經(jīng)出現(xiàn),這些工作[3-6]主要基于傳統(tǒng)計(jì)算機(jī)視覺技術(shù)。參照人工儀表讀數(shù)的原理,傳統(tǒng)方法大致由儀表檢測(cè)、儀表分類、儀表校正、預(yù)處理、指針檢測(cè)、刻度檢測(cè)、讀數(shù)計(jì)算幾個(gè)步驟組成,但由于采用表征能力比較弱的人工圖像描述方法,同時(shí)又依賴比較強(qiáng)的先驗(yàn)信息,因此對(duì)圖像質(zhì)量要求較高,在復(fù)雜條件下的識(shí)別性能不盡人意。

    當(dāng)前,深度學(xué)習(xí)因其強(qiáng)大的表征能力已經(jīng)開始應(yīng)用于指針儀表自動(dòng)識(shí)別領(lǐng)域。文獻(xiàn)[7]較早采用Faster R-CNN進(jìn)行儀表檢測(cè),然后通過自適應(yīng)閾值分割、連通域分析和中心投影來檢測(cè)指針和刻度,最終根據(jù)指針與刻度之間的角度計(jì)算讀數(shù)。在此基礎(chǔ)上,文獻(xiàn)[8]對(duì)Faster R-CNN結(jié)構(gòu)進(jìn)行針對(duì)性優(yōu)化,并融入表盤鏡面反射消除方法,從而提升模型的魯棒性。與此類似,文獻(xiàn)[9]利用9層卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行儀表檢測(cè),然后利用橢圓變換進(jìn)行儀表校正,接著利用Hough變換檢測(cè)指針;文獻(xiàn)[10]通過全卷積網(wǎng)絡(luò)(Fully Convolutional Network,F(xiàn)CN)檢測(cè)儀表,然后進(jìn)行圖像濾波和校正,最后通過極坐標(biāo)徑向灰度統(tǒng)計(jì)的方法檢測(cè)指針;文獻(xiàn)[11]利用YOLO9000檢測(cè)儀表,然后利用EAST(Efficient and Accurate Scene Text detector)算法識(shí)別儀表刻度數(shù)值,并根據(jù)數(shù)值位置提取指針。相比于傳統(tǒng)方法,這些方法的性能有所提升,但深度神經(jīng)網(wǎng)絡(luò)都只應(yīng)用在儀表檢測(cè)階段,后續(xù)讀數(shù)識(shí)別流程仍基于傳統(tǒng)計(jì)算機(jī)視覺方法,沒有充分發(fā)揮深度學(xué)習(xí)的優(yōu)勢(shì),因此仍然存在傳統(tǒng)方法讀數(shù)不精確的問題。

    近期,一些方法開始在讀數(shù)識(shí)別階段應(yīng)用深度學(xué)習(xí)方法。文獻(xiàn)[12]提出利用基于PrRoIPooling(Precise RoI Pooling,精確感興趣區(qū)域池化)的Mask R-CNN同時(shí)完成儀表檢測(cè)和表盤、指針分割,并對(duì)分割出的表盤進(jìn)行橢圓變換從而得到指針方向,但是該方法只適用于圓形儀表。文獻(xiàn)[13]提出先對(duì)圖像進(jìn)行去霧、補(bǔ)全、超分辨等一系列預(yù)處理,然后用Mask R-CNN進(jìn)行儀表檢測(cè)和指針分割,但是該預(yù)處理過程比較復(fù)雜。文獻(xiàn)[14]提出利用Mask R-CNN對(duì)儀表圖像進(jìn)行指針關(guān)鍵點(diǎn)和刻度關(guān)鍵點(diǎn)檢測(cè),然后從指針和關(guān)鍵點(diǎn)計(jì)算儀表讀數(shù),該方法能夠適應(yīng)不同形狀的儀表,也無需復(fù)雜的預(yù)處理,但關(guān)鍵點(diǎn)檢測(cè)性能容易受到表盤模糊、反光、臟污、泛黃等條件的干擾,因此性能仍有待提升。文獻(xiàn)[15]提出采用Faster R-CNN進(jìn)行儀表和指針區(qū)域檢測(cè),然后利用U-Net對(duì)檢測(cè)出的儀表和指針區(qū)域分別進(jìn)行刻度和指針分割,最后利用仿射變換校正儀表,但是該方法的采用網(wǎng)絡(luò)較大,特征冗余度較高。

    針對(duì)指針儀表讀數(shù)的這些問題,受到場(chǎng)景文本識(shí)別工作TextSnake[16]的啟發(fā),本文提出一種新的基于深度回歸的儀表讀數(shù)識(shí)別方法,該方法不顯式地檢測(cè)指針和關(guān)鍵點(diǎn),而是將指針檢測(cè)、刻度識(shí)別、干擾抑制隱式地結(jié)合起來,通過回歸方法實(shí)現(xiàn)對(duì)儀表圖像的端到端處理。具體地,給定一張儀表圖像,先通過ResNet50[17]獲取圖像特征,然后利用一個(gè)方向回歸模塊從特征回歸儀表指針方向,最后根據(jù)指針角度獲取儀表讀數(shù)。實(shí)驗(yàn)證明,本文方法對(duì)表盤模糊、反光、臟污、泛黃等抗干擾性強(qiáng),讀數(shù)識(shí)別精度相比于基于Mask R-CNN的儀表讀數(shù)識(shí)別方法顯著提高。




本文詳細(xì)內(nèi)容請(qǐng)下載:http://www.jysgc.com/resource/share/2000003224




作者信息:

彭昆福1,王子磊1,王  磊2,顧  楊2

(1中國科學(xué)技術(shù)大學(xué) 信息科學(xué)技術(shù)學(xué)院,安徽 合肥230027;

2.國網(wǎng)安徽省電力有限公司檢修分公司,安徽 合肥231131)

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲精品免费在线| 久久久久国色av免费看影院| 亚洲在线视频观看| 亚洲精品网址在线观看| 伊人成年综合电影网| 国产亚洲精品久久久久动| 国产精品theporn| 欧美日韩小视频| 欧美日韩一级片在线观看| 欧美精品精品一区| 欧美激情综合五月色丁香小说| 六月婷婷一区| 另类专区欧美制服同性| 蜜桃av噜噜一区| 欧美xxxx在线观看| 欧美国产日韩一区| 欧美激情亚洲自拍| 欧美日韩免费在线观看| 欧美色道久久88综合亚洲精品| 欧美三日本三级少妇三2023| 欧美午夜精品一区| 国产精品久久久久久久久搜平片 | 国产日韩精品在线| 国产日韩在线视频| 国模叶桐国产精品一区| 含羞草久久爱69一区| 黑人巨大精品欧美一区二区| 国内精品久久久久久久97牛牛| 国产一区日韩二区欧美三区| 狠狠色狠狠色综合人人| 精品电影在线观看| 亚洲人成人77777线观看| 日韩视频一区二区三区在线播放免费观看 | 免费成人在线视频网站| 欧美aa在线视频| 欧美日韩精品国产| 欧美图区在线视频| 国产欧美日韩亚洲一区二区三区| 国产网站欧美日韩免费精品在线观看 | 亚洲欧美激情诱惑| 久久国产精彩视频| 蜜桃视频一区| 欧美日韩亚洲一区二区| 国产精品视频男人的天堂| 国产色综合久久| 亚洲国产精品久久91精品| 亚洲免费不卡| 先锋影音国产一区| 亚洲精品无人区| 午夜伦理片一区| 美国十次了思思久久精品导航| 欧美日韩大片| 国产日韩视频一区二区三区| 亚洲第一视频| 亚洲天堂av在线免费观看| 久久国产天堂福利天堂| 亚洲国产精品一区二区第四页av| 99在线热播精品免费| 羞羞答答国产精品www一本| 久久综合给合| 欧美午夜在线观看| 韩国精品主播一区二区在线观看| 亚洲精品日韩在线观看| 性欧美办公室18xxxxhd| 日韩午夜在线视频| 久久精品理论片| 欧美巨乳波霸| 国产一区二区三区不卡在线观看| 亚洲精品欧美一区二区三区| 午夜精品亚洲| 一区二区日韩免费看| 久久久久久午夜| 欧美午夜不卡| 亚洲第一天堂av| 午夜精品免费| 中文成人激情娱乐网| 久久亚洲精品一区二区| 欧美小视频在线观看| 影音先锋久久久| 亚洲嫩草精品久久| 日韩午夜电影在线观看| 久久精品道一区二区三区| 欧美乱妇高清无乱码| 韩国一区二区三区在线观看 | 欧美专区福利在线| 亚洲综合色自拍一区| 欧美丰满高潮xxxx喷水动漫| 国产欧美日韩综合一区在线观看 | 在线亚洲高清视频| 亚洲乱码国产乱码精品精可以看| 精品成人久久| 欧美一区亚洲一区| 亚洲欧美日韩网| 在线一区视频| 亚洲黄网站在线观看| 一区二区三区视频在线观看| 欧美视频在线不卡| 性欧美1819sex性高清| 欧美成人69av| 国产麻豆午夜三级精品| 一本色道久久综合亚洲91| 欧美一二三区在线观看| 久久国产欧美精品| 久久大香伊蕉在人线观看热2| 欧美成人视屏| 激情综合激情| 欧美一级欧美一级在线播放| 午夜精品久久久久久久男人的天堂 | 亚洲福利专区| 欧美性久久久| 国产自产在线视频一区| 亚洲欧洲精品一区二区三区不卡| 亚洲视频第一页| 久久精品视频在线| 亚洲欧美日韩区| 美女爽到呻吟久久久久| 国产欧美日韩| 欧美精品国产| 影音欧美亚洲| 亚洲精品免费在线| 99视频精品全部免费在线| 欧美插天视频在线播放| 在线免费观看日本一区| 亚洲高清色综合| 蜜乳av另类精品一区二区| 在线观看视频亚洲| 亚洲精品国产系列| 欧美精品成人| 日韩一区二区精品在线观看| 中文高清一区| 国产精品久久久久久久免费软件 | 亚洲成人在线| 亚洲人成网站777色婷婷| 欧美va天堂va视频va在线| 亚洲高清影视| 一区二区毛片| 国产精品高潮呻吟| 亚洲欧美日韩国产| 久久久免费精品| 伊大人香蕉综合8在线视| 亚洲精品乱码久久久久久黑人 | 国产精品高潮呻吟久久av无限| 亚洲午夜精品久久| 午夜久久99| 国产一区在线看| 欧美日韩国产精品自在自线| 亚洲激情在线播放| 免费在线看成人av| 亚洲精品一区二区三区不| 亚洲尤物在线视频观看| 国产精品亚洲成人| 久久精品观看| 欧美精品一区二区在线播放| 宅男噜噜噜66一区二区66| 新狼窝色av性久久久久久| 国语自产精品视频在线看| 亚洲精品三级| 国产精品hd| 久久av一区二区三区漫画| 欧美成人四级电影| 一区二区成人精品| 久久精品午夜| 亚洲精品美女在线观看| 亚洲欧美综合国产精品一区| 国产中文一区| 一本色道久久综合亚洲精品婷婷| 国产精品日韩欧美综合| 亚洲电影免费在线观看| 欧美日韩免费观看一区| 亚洲欧美激情诱惑| 另类欧美日韩国产在线| 一二三区精品福利视频| 久久久精品日韩欧美| 亚洲日本中文字幕| 欧美在线日韩精品| 亚洲狠狠丁香婷婷综合久久久| 午夜精品亚洲一区二区三区嫩草| 狠狠色狠狠色综合人人| 一区二区三区日韩精品视频| 国产香蕉97碰碰久久人人| 亚洲美女中文字幕| 国产女人水真多18毛片18精品视频| 亚洲片国产一区一级在线观看| 国产精品大片免费观看| 久久精品理论片| 国产精品v欧美精品v日韩| 亚洲高清自拍| 国产精品久久久久久亚洲毛片| 亚洲福利久久| 国产精品系列在线| 一区二区欧美在线| 伊人成人在线视频| 欧美一级二区| 99视频在线精品国自产拍免费观看| 久久精品国产一区二区电影 | 久久精品国产99| 欧美午夜宅男影院| 亚洲国产美女| 午夜精品久久久久久久99黑人| 亚洲国产欧美日韩|