《電子技術應用》
您所在的位置:首頁 > 人工智能 > 設計應用 > 用于主動學習的時序特征融合預測損失網絡
用于主動學習的時序特征融合預測損失網絡
電子技術應用
王繹翔
寧波大學 信息科學與工程學院
摘要: 通過主動學習模型來選取最有價值的數據點進行標注是深度學習減少標注數據量的一種方式。預測損失模型是一類與任務無關的主動學習模型,該類模型在多個任務中都有不錯的表現。但是這類模型均不是端到端的模型,不斷變化的輸入特征會導致損失預測網絡在訓練時出現輸入偏差。提出了時序特征融合預測損失模型用于解決該模型的輸入偏差問題。實驗證明,提出的算法在各個任務中的性能與以往最先進的算法相比,平均提升約1.5%,與原預測損失模型相比,平均提升5%。
中圖分類號:TP391 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.234772
中文引用格式: 王繹翔. 用于主動學習的時序特征融合預測損失網絡[J]. 電子技術應用,2024,50(6):10-17.
英文引用格式: Wang Yixiang. Temporal feature fusion learning loss model for active learning[J]. Application of Electronic Technique,2024,50(6):10-17.
Temporal feature fusion learning loss model for active learning
Wang Yixiang
School of Information Science and Engineering, Ningbo University
Abstract: Using active learning models to select the most valuable data points for annotation is one way that deep learning reduces the amount of labeled data required. Prediction loss models are a type of task-agnostic active learning models that perform well across multiple tasks. However, these models are not end-to-end models, and changing input features can lead to input bias during the training of the loss prediction network. This paper proposes a temporal feature fusion prediction loss model to address the issue of input bias in such models. Experiments demonstrate that the method proposed in this paper achieves an average performance improvement of approximately 1.5% across various tasks compared to previous state-of-the-art methods, and an average improvement of 5% compared to the original prediction loss model.
Key words : active learning;deep learning;learning loss;time series

引言

近年來,深度網絡在多個任務中取得了許多突破性進展[1]。但是,深度網絡的訓練需要大量的標注數據,在很多任務中,標注數據的獲取需要專家進行標注,成本很高。

主動學習是一種可行的用于減少模型對標注數據量依賴的方法。主動學習模型主要由3個部分組成,即目標任務模塊、主動學習模塊和標注模塊。目標任務模塊用于在現有的標注數據集上訓練用于目標任務(分類、分割等)的模型。主動學習模塊通過主動學習的選擇算法來選擇合適的樣本用于標注。注釋模塊主要根據主動學習模塊選擇的樣本為其打上標簽并放入標注數據集中用于下一輪訓練。在一般的任務中,注釋模塊由專家來完成,專家為選擇的樣本標注后加入到標注數據集中。因此,設計主動學習的選擇算法是主動學習的核心任務。

現有的選擇算法主要有三類,即基于樣本的不確定性的算法、基于樣本的多樣性的算法以及不確定性和多樣性結合的算法。其中,早期的選擇算法在文獻[2]中進行描述。基于樣本的不確定性的算法選擇對于任務模型而言預測最不確定的數據交給專家進行標注[3-4]。基于樣本的多樣性的算法則選擇最具有多樣性或代表性的數據交給專家進行標注[5-6]。不確定性和多樣性結合的算法則綜合以上兩點來對樣本進行評估和選擇[7]。

目前的主動學習模型主要有任務依賴的模型和任務不可知的模型兩類。大多數主動學習模型屬于任務依賴型主動學習模型[8]。針對某項特定的目標任務進行選擇算法的設計,這些算法往往只能適用于某項特定任務,可擴展性和任務泛化性較差。近年來,許多與任務無關的主動學習模型被提出并用于各個任務中,這類模型在多類任務中都有很好的效果。


本文詳細內容請下載:

http://www.jysgc.com/resource/share/2000006022


作者信息:

王繹翔

(寧波大學 信息科學與工程學院, 浙江 寧波 355211)


Magazine.Subscription.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: WWW国产成人免费观看视频| 久久精品人妻中文系列| 粗壮挺进人妻水蜜桃成熟漫画| 国产仑乱无码内谢| 亚洲激情视频图片| 国产网站免费观看| WWW四虎最新成人永久网站| 婷婷色香五月综合激激情| 中文字幕在线视频精品| 日本理论在线看片| 乱色熟女综合一区二区三区| 欧美性猛交xxxx乱大交蜜桃| 亚洲视频欧美视频| 精品久久久中文字幕一区| 国产av无码久久精品| 韩国女友的妈妈| 国产成人亚洲欧美激情| 日本在线观看a| 国产精品无码无卡在线播放| 99re热这里有精品首页视频| 女人张开腿给男人桶爽免费| 中文字幕丰满伦子无码| 日韩avwww| 久久精品国产精品青草| 最近中文字幕高清中文字幕无| 亚洲午夜精品国产电影在线观看| 欧美精品黑人粗大| 亚洲精品蜜桃久久久久久| 男人j进女人p免费视频| 免费成人福利视频| 看成年女人免费午夜视频| 农夫山泉有点甜高清2在线观看| 美女免费精品高清毛片在线视 | 久久亚洲av无码精品色午夜| 日韩在线看片免费人成视频播放| 五月激情婷婷网| 最新国产三级在线观看不卡| 五月天婷婷社区| 最新中文字幕在线观看| 亚洲Av高清一区二区三区| 欧美3p大片在线观看完整版|