深蘭科技|計算機(jī)視覺+藝術(shù)處理,現(xiàn)實(shí)場景秒變動漫大片
2.2 損失函數(shù)
卡通圖像具有銳利邊緣,順滑的色彩偏差,紋理也相對簡單,所以作者定義了新的loss來完成這個需求。
作者提出了損失函數(shù)L(G,D),由兩部分組成,第一部分為普通的GAN損失,第二部分為保證原真實(shí)圖像內(nèi)容的內(nèi)容損失,如公式所示:
可以看到公式②中比普通GAN損失多加了一個,也就多了一個數(shù)據(jù)集。那這個數(shù)據(jù)集怎么來的,它是通過對原始卡通圖像進(jìn)行邊緣模糊后得到的(邊緣模糊圖片見圖2-2,左邊為原圖,右邊位邊緣模糊圖),目的是為了讓生成網(wǎng)絡(luò)G生成邊緣清晰的圖片,所以判別為假數(shù)據(jù)。而公式③中的就是Neural Style(風(fēng)格遷移)里面的內(nèi)容損失,只不過把L2損失改為L1損失,在這里我們可以看成是一個正則化。
圖2-2清晰動漫圖(左)、邊緣模糊圖(右)
2.3 初始化技巧
作者引入一個初始化技巧,用公式③中的損失先來單獨(dú)訓(xùn)練G,大概訓(xùn)練10個epoch。這樣做的目的是為了生成的圖片初始后就能保證原真實(shí)場景的內(nèi)容,因?yàn)槠胀ǖ膯蜗騁AN要是沒有加入一些限制很難穩(wěn)定保證原始圖片的內(nèi)容,大多會出現(xiàn)扭曲或更嚴(yán)重的情況。
3.總結(jié)
經(jīng)過上述的技術(shù)細(xì)節(jié)來訓(xùn)練CartoonGAN,就可以將現(xiàn)實(shí)的場景完美的轉(zhuǎn)換成漫畫風(fēng)格。
最后,我們就來欣賞一些漂亮的轉(zhuǎn)換結(jié)果。

發(fā)表評論
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
8月5日立即報名>> 【在線會議】CAE優(yōu)化設(shè)計:醫(yī)療器械設(shè)計的應(yīng)用案例與方案解析
-
8月14日立即報名>> 【在線研討會】解析安森美(onsemi)高精度與超低功耗CGM系統(tǒng)解決方案
-
精彩回顧立即查看>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍(lán)皮書》
-
精彩回顧立即查看>> 7月30日- 8月1日 2025全數(shù)會工業(yè)芯片與傳感儀表展
-
精彩回顧立即查看>> 全數(shù)會2025(第六屆)機(jī)器人及智能工廠展
-
精彩回顧立即查看>> OFweek 2025 具身機(jī)器人動力電池技術(shù)應(yīng)用大會
推薦專題
- 1 AI產(chǎn)業(yè)的新高度!英偉達(dá)成為全球首家市值破4萬億美元的公司
- 2 傳魏建軍與賈躍亭合作,長城汽車出海美國
- 3 一文讀懂:到底什么是 “具身智能” ?
- 4 黃仁勛:與雷軍長期合作,共探AI智駕
- 5 具身智能泡沫爭議下,華映資本尋找「穿越周期者」
- 6 中國平安們欲靠AI守“陣地”
- 7 官宣:智元機(jī)器人借殼上市,A股人形機(jī)器人第一股!
- 8 華為讓渡“三界”銷售主導(dǎo)權(quán),智界高管:終于能全力奔跑了
- 9 借仿生手實(shí)現(xiàn)突圍,國產(chǎn)靈巧手破局“不可能三角”
- 10 DeepSeek R2加持,中國AI與芯片產(chǎn)業(yè)迎來新一輪協(xié)同進(jìn)化