深蘭科技|計(jì)算機(jī)視覺+藝術(shù)處理,現(xiàn)實(shí)場(chǎng)景秒變動(dòng)漫大片
2.2 損失函數(shù)
卡通圖像具有銳利邊緣,順滑的色彩偏差,紋理也相對(duì)簡(jiǎn)單,所以作者定義了新的loss來(lái)完成這個(gè)需求。
作者提出了損失函數(shù)L(G,D),由兩部分組成,第一部分為普通的GAN損失,第二部分為保證原真實(shí)圖像內(nèi)容的內(nèi)容損失,如公式所示:
可以看到公式②中比普通GAN損失多加了一個(gè),也就多了一個(gè)數(shù)據(jù)集。那這個(gè)數(shù)據(jù)集怎么來(lái)的,它是通過對(duì)原始卡通圖像進(jìn)行邊緣模糊后得到的(邊緣模糊圖片見圖2-2,左邊為原圖,右邊位邊緣模糊圖),目的是為了讓生成網(wǎng)絡(luò)G生成邊緣清晰的圖片,所以判別為假數(shù)據(jù)。而公式③中的就是Neural Style(風(fēng)格遷移)里面的內(nèi)容損失,只不過把L2損失改為L(zhǎng)1損失,在這里我們可以看成是一個(gè)正則化。
圖2-2清晰動(dòng)漫圖(左)、邊緣模糊圖(右)
2.3 初始化技巧
作者引入一個(gè)初始化技巧,用公式③中的損失先來(lái)單獨(dú)訓(xùn)練G,大概訓(xùn)練10個(gè)epoch。這樣做的目的是為了生成的圖片初始后就能保證原真實(shí)場(chǎng)景的內(nèi)容,因?yàn)槠胀ǖ膯蜗騁AN要是沒有加入一些限制很難穩(wěn)定保證原始圖片的內(nèi)容,大多會(huì)出現(xiàn)扭曲或更嚴(yán)重的情況。
3.總結(jié)
經(jīng)過上述的技術(shù)細(xì)節(jié)來(lái)訓(xùn)練CartoonGAN,就可以將現(xiàn)實(shí)的場(chǎng)景完美的轉(zhuǎn)換成漫畫風(fēng)格。
最后,我們就來(lái)欣賞一些漂亮的轉(zhuǎn)換結(jié)果。

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
最新活動(dòng)更多
-
6月20日立即下載>> 【白皮書】精準(zhǔn)測(cè)量 安全高效——福祿克光伏行業(yè)解決方案
-
7月3日立即報(bào)名>> 【在線會(huì)議】英飛凌新一代智能照明方案賦能綠色建筑與工業(yè)互聯(lián)
-
7月22-29日立即報(bào)名>> 【線下論壇】第三屆安富利汽車生態(tài)圈峰會(huì)
-
7.30-8.1火熱報(bào)名中>> 全數(shù)會(huì)2025(第六屆)機(jī)器人及智能工廠展
-
7月31日免費(fèi)預(yù)約>> OFweek 2025具身機(jī)器人動(dòng)力電池技術(shù)應(yīng)用大會(huì)
-
免費(fèi)參會(huì)立即報(bào)名>> 7月30日- 8月1日 2025全數(shù)會(huì)工業(yè)芯片與傳感儀表展
推薦專題
- 1 AI 眼鏡讓百萬(wàn) APP「集體失業(yè)」?
- 2 大廠紛紛入局,百度、阿里、字節(jié)搶奪Agent話語(yǔ)權(quán)
- 3 深度報(bào)告|中國(guó)AI產(chǎn)業(yè)正在崛起成全球力量,市場(chǎng)潛力和關(guān)鍵挑戰(zhàn)有哪些?
- 4 一文看懂視覺語(yǔ)言動(dòng)作模型(VLA)及其應(yīng)用
- 5 上海跑出80億超級(jí)獨(dú)角獸:獲上市公司戰(zhàn)投,干人形機(jī)器人
- 6 國(guó)家數(shù)據(jù)局局長(zhǎng)劉烈宏調(diào)研格創(chuàng)東智
- 7 下一代入口之戰(zhàn):大廠為何紛紛押注智能體?
- 8 百億AI芯片訂單,瘋狂傾銷中東?
- 9 Robotaxi新消息密集釋放,量產(chǎn)元年誰(shuí)在領(lǐng)跑?
- 10 格斗大賽出圈!人形機(jī)器人致命短板曝光:頭腦過于簡(jiǎn)單