excel函數(shù)公式大全 請(qǐng)問(wèn)神經(jīng)網(wǎng)絡(luò)有多個(gè)輸出的回歸問(wèn)題,損失函數(shù)如何定義比較合理?
請(qǐng)問(wèn)神經(jīng)網(wǎng)絡(luò)有多個(gè)輸出的回歸問(wèn)題,損失函數(shù)如何定義比較合理?在我看來(lái),多重輸出與損失函數(shù)的類(lèi)型選擇沒(méi)有直接關(guān)系。一般來(lái)說(shuō),使用交叉熵是沒(méi)有問(wèn)題的,即使是最小均方誤差也不會(huì)產(chǎn)生顯著的影響。但是,最好添加
請(qǐng)問(wèn)神經(jīng)網(wǎng)絡(luò)有多個(gè)輸出的回歸問(wèn)題,損失函數(shù)如何定義比較合理?
在我看來(lái),多重輸出與損失函數(shù)的類(lèi)型選擇沒(méi)有直接關(guān)系。一般來(lái)說(shuō),使用交叉熵是沒(méi)有問(wèn)題的,即使是最小均方誤差也不會(huì)產(chǎn)生顯著的影響。但是,最好添加一個(gè)帶有范數(shù)的正則化因子(計(jì)算量較少)。但是,輸出的大小是影響算法收斂性的關(guān)鍵因素,因?yàn)槿绻枰诮y(tǒng)計(jì)學(xué)、統(tǒng)計(jì)決策理論和經(jīng)濟(jì)學(xué)中結(jié)合的話,損失函數(shù)是指將一個(gè)事件(樣本空間中的一個(gè)元素)映射到一個(gè)事件的一種函數(shù),它表示與該事件相關(guān)的經(jīng)濟(jì)成本或機(jī)會(huì)成本。更一般地說(shuō),在統(tǒng)計(jì)學(xué)中,損失函數(shù)是衡量損失和誤差程度的函數(shù)(這種損失與“錯(cuò)誤”的估計(jì)有關(guān),如費(fèi)用或設(shè)備的損失)函數(shù),簡(jiǎn)稱(chēng)C,是指在技術(shù)水平和要素價(jià)格不變的情況下,成本與產(chǎn)出之間的關(guān)系。成本理論主要分析成本函數(shù)。成本函數(shù)不同于成本方程。成本函數(shù)是指成本與產(chǎn)出之間的關(guān)系。成本方程是指成本等于投入要素價(jià)格之和。如果投入是勞動(dòng)L和資本K,價(jià)格是PL和PK,則成本方程為C=L·PLK·PK。成本方程是一個(gè)恒等式,成本函數(shù)是一個(gè)變量為輸出的函數(shù)。在統(tǒng)計(jì)學(xué)中,成本函數(shù)通常稱(chēng)為損失函數(shù)。
簡(jiǎn)述損失函數(shù)和風(fēng)險(xiǎn)函數(shù)的定義?(高等統(tǒng)計(jì)學(xué))?
回歸函數(shù)是條件期望函數(shù)E(Y | x)?;貧w函數(shù)E(Y | x)不同于函數(shù)Y=f(x)。
對(duì)于線性回歸,散點(diǎn)圖擬合成直線作為回歸函數(shù),因?yàn)閿?shù)據(jù)在正態(tài)分布的線性函數(shù)擬合是最好的,不會(huì)有損失。在實(shí)際問(wèn)題中,e(Y | x)不一定是x的線性函數(shù),如果直接用x射線函數(shù)來(lái)預(yù)測(cè)Y,有時(shí)預(yù)測(cè)精度會(huì)下降。在許多情況下,直接繪制(x,y)并通過(guò)擬合直線來(lái)預(yù)測(cè)y的原因是基于數(shù)據(jù)正態(tài)分布的前提。