在目標(biāo)檢測任務(wù)中,若有一類數(shù)據(jù)集中的樣本標(biāo)簽只有該樣本中每一類別數(shù)量,如何利用該標(biāo)簽信息設(shè)計(jì)損失函數(shù)?
- 一幅圖像中的多個物體用什么算法識別出來?
- 分類機(jī)器學(xué)習(xí)中,某一標(biāo)簽占比太大(標(biāo)簽稀疏),如何學(xué)習(xí)?
- 標(biāo)簽是什么意思?
- 標(biāo)簽怎么寫推薦量高?
一幅圖像中的多個物體用什么算法識別出來?
利用卷積網(wǎng)絡(luò)的平移不變性,先對圖像進(jìn)行網(wǎng)格分割,再把每個網(wǎng)格作為單獨(dú)的輸入到網(wǎng)絡(luò)里,當(dāng)然也要看你的網(wǎng)絡(luò)的訓(xùn)練數(shù)據(jù),如果標(biāo)簽是只包含一個目標(biāo)的,那只能這么做了,如果不想分割就需要考慮增大訓(xùn)練樣本了,需要把物體的組合情況考慮進(jìn)去
分類機(jī)器學(xué)習(xí)中,某一標(biāo)簽占比太大(標(biāo)簽稀疏),如何學(xué)習(xí)?
在機(jī)器學(xué)習(xí)任務(wù)中,我們經(jīng)常會遇到這種困擾:數(shù)據(jù)不平衡問題。
數(shù)據(jù)不平衡問題主要存在于有監(jiān)督機(jī)器學(xué)習(xí)任務(wù)中。當(dāng)遇到不平衡數(shù)據(jù)時,以總體分類準(zhǔn)確率為學(xué)習(xí)目標(biāo)的傳統(tǒng)分類算法會過多地關(guān)注多數(shù)類,從而使得少數(shù)類樣本的分類性能下降。絕大多數(shù)常見的機(jī)器學(xué)習(xí)算法對于不平衡數(shù)據(jù)集都不能很好地工作。
本文介紹幾種有效的解決數(shù)據(jù)不平衡情況下有效訓(xùn)練有監(jiān)督算法的思路:
1、重新采樣訓(xùn)練集
可以使用不同的數(shù)據(jù)集。有兩種方法使不平衡的數(shù)據(jù)集來建立一個平衡的數(shù)據(jù)集——欠采樣和過采樣。
1.1. 欠采樣
欠采樣是通過減少豐富類的大小來平衡數(shù)據(jù)集,當(dāng)數(shù)據(jù)量足夠時就該使用此方法。通過保存所有稀有類樣本,并在豐富類別中隨機(jī)選擇與稀有類別樣本相等數(shù)量的樣本,可以檢索平衡的新數(shù)據(jù)集以進(jìn)一步建模。
1.2. 過采樣
相反,當(dāng)數(shù)據(jù)量不足時就應(yīng)該使用過采樣,它嘗試通過增加稀有樣本的數(shù)量來平衡數(shù)據(jù)集,而不是去除豐富類別的樣本的數(shù)量。通過使用重復(fù)、自舉或合成少數(shù)類過采樣等方法(SMOTE)來生成新的稀有樣品。
注意到欠采樣和過采樣這兩種方法相比而言,都沒有絕對的優(yōu)勢。這兩種方法的應(yīng)用取決于它適用的用例和數(shù)據(jù)集本身。另外將過采樣和欠采樣結(jié)合起來使用也是成功的。
2、使用K-fold交叉驗(yàn)證
值得注意的是,使用過采樣方法來解決不平衡問題時應(yīng)適當(dāng)?shù)貞?yīng)用交叉驗(yàn)證。這是因?yàn)檫^采樣會觀察到罕見的樣本,并根據(jù)分布函數(shù)應(yīng)用自舉生成新的隨機(jī)數(shù)據(jù),如果在過采樣之后應(yīng)用交叉驗(yàn)證,那么我們所做的就是將我們的模型過擬合于一個特定的人工引導(dǎo)結(jié)果。這就是為什么在過度采樣數(shù)據(jù)之前應(yīng)該始終進(jìn)行交叉驗(yàn)證,就像實(shí)現(xiàn)特征選擇一樣。只有重復(fù)采樣數(shù)據(jù)可以將隨機(jī)性引入到數(shù)據(jù)集中,以確保不會出現(xiàn)過擬合問題。
K-fold交叉驗(yàn)證就是把原始數(shù)據(jù)隨機(jī)分成K個部分,在這K個部分中選擇一個作為測試數(shù)據(jù),剩余的K-1個作為訓(xùn)練數(shù)據(jù)。交叉驗(yàn)證的過程實(shí)際上是將實(shí)驗(yàn)重復(fù)做K次,每次實(shí)驗(yàn)都從K個部分中選擇一個不同的部分作為測試數(shù)據(jù),剩余的數(shù)據(jù)作為訓(xùn)練數(shù)據(jù)進(jìn)行實(shí)驗(yàn),最后把得到的K個實(shí)驗(yàn)結(jié)果平均。
標(biāo)簽是什么意思?
早在1700年,歐洲印制出了用在藥品和布匹上作為商品識別的第一批標(biāo)簽。所以,現(xiàn)在的標(biāo)簽是用來標(biāo)志您的產(chǎn)品目標(biāo)和分類或內(nèi)容,像是您給您的目標(biāo)確定的關(guān)鍵字詞,便于您自己和他人查找和定位自己目標(biāo)的工具。
印刷業(yè)所稱的標(biāo)簽,大部分是用來標(biāo)識自己產(chǎn)品的相關(guān)說明的印刷品,并且大部分都是以背面自帶膠的。但也有一些印刷時不帶膠的,也可稱為標(biāo)簽。有膠的標(biāo)簽就是通俗稱的“不干膠標(biāo)簽”。儀器校準(zhǔn)后的標(biāo)簽問題,這個是由國家統(tǒng)一規(guī)定的(或自己的省內(nèi)規(guī)定)標(biāo)簽,標(biāo)簽?zāi)軌蛎鞔_的說明儀器被校準(zhǔn)后的詳細(xì)情況。
標(biāo)簽怎么寫推薦量高?
標(biāo)簽推薦量高需要注意以下幾點(diǎn):1. 確定主要關(guān)鍵詞:在標(biāo)簽中加入與主題相關(guān)的主要關(guān)鍵詞可以讓標(biāo)簽更加精準(zhǔn),增加用戶點(diǎn)擊率和發(fā)現(xiàn)率。
2. 細(xì)分關(guān)鍵詞:將關(guān)鍵詞細(xì)分為不同的子類,可以讓標(biāo)簽更加具有針對性,滿足用戶更為精細(xì)化的需求,進(jìn)而增加用戶黏度和復(fù)購率。
3. 運(yùn)用標(biāo)簽分析工具:使用標(biāo)簽分析工具可以了解用戶搜索意圖和行為,進(jìn)而針對性地調(diào)整標(biāo)簽,提高推薦量和點(diǎn)擊率。
轉(zhuǎn)載原創(chuàng)文章請注明,轉(zhuǎn)載自山東天桓計(jì)量檢測有限公司,原文地址:http://www.coderstalk.cn/post/216.html