只要一張照片就能輸出3D模型，一步步教你怎麼玩PIFuHD把《做工的人》阿祈變3D

之前我們報導，透過神經網路的運算，只要一張照片，就可以產生出3D模型，大大減少了過去需要建模的難度。而方法就是來自於PIFuHD這篇論文，不過，與其看著別人做出來3D模型，不如你也自己來動手跟著做看看！我們就依照網路上的說明，只需要一張人物的全身正面照片，加上幾分鐘的計算時間，真的把細節豐富的3D模型這樣做出來了！所有人都可以一起來玩玩看。

想要花幾分鐘做出自己的3D模型嗎？這篇PIFuHD論文作者很貼心地在 Google Colab（一個免費、線上、無需配置的 Python 開發環境）上提供程式碼，任何人只要可以打開 Google 都能進行測試，並做出自己的3D模型。以下我們提供了簡單的步驟教程，假使你毫無寫程式的基礎，也可以輕鬆產出自己的3D模型！

步驟一:首先連結至論文的展示頁面 https://shunsukesaito.github.io/PIFuHD/，點擊"Demo"，進入 Google Colab

步驟二:進入頁面後，在左上角的下拉選單中點選"Connect to hosted runtime"

步驟三:右上角出現綠色勾勾後，點選"Copy to Drive"，會開啟一個新視窗。

步驟四:在新視窗中，每個程式碼塊的左上角會有一個"[ ]"，這時從由上往下數第一、二、三、四、六塊的"[ ]"都各點擊一下。

 

▲ 點到第六塊（黃色部分）後，左上角資料夾會出現一個"pituhd"資料夾（綠色部分），表示成功。不過請注意，第五塊不須點擊（紅色部分）。

 

步驟五:接著點擊左上角圖示（黃色部分）選擇欲上傳的圖片，並將上傳好的圖檔移至/pifuhd/sample_images資料夾。（這裡以"joker.png"做示範，避免錯誤請盡量選擇.png檔）。

 

步驟六:將剛剛第六塊程式碼的圖片檔名換成剛才上傳的圖片。（這裡以"joker.png"做示範）

步驟七:貼好後，到左上角的選單中點選/Runtime/Run after。

 

▲ 接著下面會出現轉圈圈的畫面，並耐心等待3-5分鐘的時間讓電腦建模。

 

步驟八:完成了。在左上角會多出一個"result"資料夾，接著進到pifuhd/results/pifuhd_final/recon中點選副檔名.obj的檔案，就可以看到你的3D模型了！

▲ 請務必耐心等待3-5分鐘，直到"result"資料夾跑出來哦！

照片需慎選！建模結果簡易分析

經過筆者實測，使用小丑的照片，出來的結果身軀雖然完整但臉部建模失敗，推論有可能畫上小丑妝的五官過於卡通化，導致AI無法辨識，所以這裡建議，除了要選擇人物的正面全身照，五官也必須夠像「人」。

▲ 小丑的頭部建模失敗

 

▲ 小丑女哈莉奎茵則相對完整

 

▲ NBA球星LeBron James的建模也相當成功

接著，試試近期台灣非常火紅的戲劇《做工的人》，演員李銘順所飾演的阿祈。這次採用照片去背的方式幫助AI辨識。AI表示：「事半功倍！」。

▲ 照片去背後，免除了背景的雜亂，讓3D建模成功率大升。

▲ 各種角度都能輕易辨識並建模。

▲ 連照片看不見的背部也能被AI辨識出來。

 

這款AI連照片看不出來的背部都能辨識出並建模，且人物的曲線都非常真實，不會有奇怪扭曲的形狀出現，功能非常強大。

保證失敗案例:

接著有幾些圖片則建議不必多花時間嘗試了。由於這個3D建模AI是針對真人照片所設計，像是使用卡通等非人類圖片作測試的話，會換來絕對失敗的建模結果。

▲ 海綿寶寶的3D建模連形狀都沒出來

 

▲ 換成3D動畫版的擬人化音速小子也無法成功

 

總結:

畢竟這只是免費版本，若要使用這個PIFuHD Demo進行3D建模，限制比較多。建議挑選真人、臉部清晰、全身完整（從頭到腳）的圖片來做測試，可以的話還能為照片去個背，能大幅提升成功機率。不過對於一些沒有程式基礎的使用者來說，能用免費資源做到這種程度的3D模型已相當令人興奮，這一切都要拜原作者的無私分享！