一種基于在線蒸餾的輕量化噪聲標簽學習方法

摘要： 利用含有有損標簽的噪聲數(shù)據(jù)來訓練深度學習模型是機器學習中的研究熱點.研究表明深度學習模型訓練易受噪聲數(shù)據(jù)的影響而產(chǎn)生過擬合現(xiàn)象.最近，一種將元學習與標簽校正相結合的方法能夠使模型更好地適應噪聲數(shù)據(jù)以減緩過擬合現(xiàn)象，然而這種元標簽校正方法依賴于模型的性能，同時輕量化模型在噪聲數(shù)據(jù)下不具備良好的泛化性能.針對這一問題，本文結合元學習提出一種基于在線蒸餾的輕量化噪聲標簽學習方法 KD... （共13頁）