深蘭科技|計算機視覺+藝術(shù)處理，現(xiàn)實場景秒變動漫大片
2．2 損失函數(shù)
卡通圖像具有銳利邊緣，順滑的色彩偏差，紋理也相對簡單，所以作者定義了新的loss來完成這個需求。
作者提出了損失函數(shù)L（G，D），由兩部分組成，第一部分為普通的GAN損失，第二部分為保證原真實圖像內(nèi)容的內(nèi)容損失，如公式所示：
可以看到公式②中比普通GAN損失多加了一個，也就多了一個數(shù)據(jù)集。那這個數(shù)據(jù)集怎么來的，它是通過對原始卡通圖像進行邊緣模糊后得到的（邊緣模糊圖片見圖2－2，左邊為原圖，右邊位邊緣模糊圖），目的是為了讓生成網(wǎng)絡G生成邊緣清晰的圖片，所以判別為假數(shù)據(jù)。而公式③中的就是Neural Style（風格遷移）里面的內(nèi)容損失，只不過把L2損失改為L1損失，在這里我們可以看成是一個正則化。
圖2－2清晰動漫圖（左）、邊緣模糊圖（右）
2．3 初始化技巧
作者引入一個初始化技巧，用公式③中的損失先來單獨訓練G，大概訓練10個epoch。這樣做的目的是為了生成的圖片初始后就能保證原真實場景的內(nèi)容，因為普通的單向GAN要是沒有加入一些限制很難穩(wěn)定保證原始圖片的內(nèi)容，大多會出現(xiàn)扭曲或更嚴重的情況。
3．總結(jié)
經(jīng)過上述的技術(shù)細節(jié)來訓練CartoonGAN，就可以將現(xiàn)實的場景完美的轉(zhuǎn)換成漫畫風格。
最后，我們就來欣賞一些漂亮的轉(zhuǎn)換結(jié)果。
分享
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
- 1 GPT-6要來了，但AI行業(yè)早不跟 OpenAI玩了
- 2 騰訊「龍蝦」QClaw體驗：AI能連微信干活了，但整體還很粗糙
- 3 龍蝦的鰲收緊了
- 4 產(chǎn)業(yè)丨算電協(xié)同+Token出海，中國電力與算力全球化雙引擎
- 5 火爆的“Token經(jīng)濟學”，關(guān)乎你的錢包、職場和未來消費 | 人人能懂的產(chǎn)業(yè)報告
- 6 漲價！漲價！漲價！一場由AI引發(fā)的全球算力與存儲“地震”
- 7 資本巨頭紛紛抽身，為何中小投資者仍為AI狂熱加碼？
- 8 大廠財報中的AI圖鑒：營收單列、玩杠桿、商業(yè)畫餅
- 9 從百度到Meta，科技巨頭的 AI 組織戰(zhàn)，開打了
- 10 華勤財報發(fā)布：收入規(guī)模破1700億，利潤增長近40%
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)（光器件） 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市
