標簽:
Pix2Pix地址為用戶了一款有趣的圖像繪制工具,其作者收集成千上萬的貓、人臉、鞋子、包、建筑物等圖片素材對Image-to-Image Demo程序進行縝密的訓練,用戶只需提供輪廓草圖,就可以一鍵生成完整的圖像,一兩秒就能夠完成出色的繪畫操作。
Pix2Pix介紹:
整個項目開發了一個用TensorFlow的pix2pix接口,并建立了一些訓練好的模型,搭建了一個互動網頁來測試它們。Pix2pix 模型通過用配對圖片進行訓練,比如建筑物的名稱與其外觀照配對,然后對任何輸入的圖片,輸出對應的圖片。這個想法源自Phillip Isola寫作的非常棒的論文。除了輪廓畫貓之外,還有輪廓畫包包,輪廓畫鞋子,等等。
Pix2Pix功能:
1.立面(facades)
在建筑立面數據庫上訓練有標簽的建筑立面。它似乎不知道如何處理一個大的空白區域,但如果放上足夠的窗口,那么結果往往合理。繪制“墻”顏色矩形來擦除東西。
我沒有建筑立面給定不同部分的名字,所以我只是猜測它們叫什么。
2.邊緣轉換成貓咪(edges2cats)
在約2k 存儲貓照片和從那些照片自動生成的邊緣之上訓練。生成了彩**對象和一些帶有噩夢的臉。我所見過的最好的一個是貓貓。
一些圖片看起來特別蠕動,因為對動物辨識產生誤判,特別是在眼睛周圍。自動檢測的邊緣在很多情況下不是很好,沒有檢測到貓的眼睛,使得訓練圖像翻譯模型效果更差。
3.邊緣轉換成鞋(edges2shoes)
在從Zappos收集的?50k鞋子圖片以及從那些圖片自動生成的邊緣的數據庫上訓練之后。如果你真的擅長繪制鞋子的邊緣,可以嘗試產生一些新的設計。請記住,因為是在真實的對象上進行訓練,所以如果你可以繪制更多的3D物體,所以似乎工作得更好。
Pix2Pix玩法:
pix2pix小程序在推特上很火,你只需要在線手繪出某個草圖或輪廓,它會幫你自動生成一張照片。目前可以轉化的種類包括貓、鞋、包。而這個生成“貓片”的小程序已經被推特網友們玩壞。