PIXIE मशीन लर्निंग सिस्टीम ही ओपन सोर्स आहे, जे आपल्याला फोटोमधून मानवी शरीराचे 3D मॉडेल आणि अॅनिमेटेड अवतार तयार करण्यास अनुमती देते.
वास्तविक चेहरा आणि कपड्यांचे पोत जे मूळ फोटोमध्ये दर्शविलेल्यांपेक्षा भिन्न आहेत परिणामी मॉडेलशी संलग्न केले जाऊ शकतात. प्रणालीचा वापर केला जाऊ शकतो, उदाहरणार्थ, वेगळ्या दृष्टिकोनातून काढण्यासाठी, अॅनिमेशन तयार करण्यासाठी, चेहऱ्याच्या आकारानुसार शरीराची पुनर्रचना करण्यासाठी आणि बोटांचे 3D मॉडेल तयार करण्यासाठी.
PIXIE बद्दल
असा दावा केला जातो की समान प्रकल्पांच्या तुलनेत, PIXIE आपल्याला शरीराचे रूपरेषा अधिक अचूकपणे पुन्हा तयार करण्यास अनुमती देते, मूलतः छायाचित्रात कपड्यांद्वारे लपवलेले, चेहऱ्याचा आकार आणि हातांच्या सांध्याची स्थिती.
पद्धत न्यूरल नेटवर्कच्या वापरावर आधारित आहे जे पिक्सेल इमेजमधून चेहरा, शरीर आणि हात पॅरामीटर्स काढते. न्यूरल नेटवर्कचे कार्य एका विशेष नियामकाद्वारे समन्वित केले जाते, जे प्रकाशाच्या विश्लेषणावर आधारित, अनैसर्गिक पोझेसचे निर्धारण वगळण्यासाठी शरीराच्या विविध भागांच्या वजन गुणांकांची माहिती जोडते.
PIXIE द्वारे अंदाजित शरीरे सहज अॅनिमेटेड आहेत. व्हिज्युअलायझेशनमध्ये इनपुट प्रतिमा, अंदाजित 3D अभिव्यक्त मुख्य भाग, अॅनिमेशन परिणाम, संदर्भ व्हिडिओ आणि त्याची संबंधित पुनर्रचना समाविष्ट आहे. नंतरच्यासाठी, हात आणि डोक्याचा रंग संबंधित नियंत्रकांचा आत्मविश्वास दर्शवतो. फिकट रंगाचा अर्थ असा आहे की PIXIE भागांपेक्षा शरीराच्या प्रतिमेच्या माहितीवर अधिक अवलंबून असते, जे एखाद्या व्यक्तीच्या कॅमेर्‍याकडे असताना घडू शकते, उदाहरणार्थ.
मॉडेल तयार करताना, पुरुष आणि मादी शरीरांमधील शारीरिक फरक, पवित्रा पॅरामीटर्स, प्रकाश, पृष्ठभागाची परावर्तकता आणि त्रि-आयामी विमानात चेहरा रोटेशन विचारात घेतले जाते.
PIXIE वैशिष्ट्ये:
- पुनर्रचना केलेले 3D बॉडी मॉडेल, तसेच मुद्रा, हाताची स्थिती आणि चेहर्यावरील हावभाव बद्दलची माहिती, SMPL-X पॅरामीटर्सच्या संच म्हणून जतन केली जाते, जी नंतर ब्लेंडर मॉडेलिंग प्रणालीमध्ये पूरक द्वारे वापरली जाऊ शकते.
- चेहऱ्याचा आकार आणि अभिव्यक्ती, तसेच त्याची वैशिष्ट्ये, जसे की सुरकुत्या याविषयी तपशीलवार माहिती छायाचित्रावरून निश्चित केली जाते (त्याच लेखकांनी विकसित केलेली DECA मशीन लर्निंग सिस्टम हेड मॉडेल तयार करण्यासाठी वापरली जाते).
- चेहर्याचा पोत तयार करताना, एखाद्या वस्तूच्या अल्बेडोचा अंदाज लावला जातो.
- बिल्ट बॉडी मॉडेल नंतर अॅनिमेटेड किंवा वेगळ्या पोझमध्ये सादर केले जाऊ शकते.
- सामान्य छायाचित्रांमधून मॉडेलच्या बांधकामासाठी समर्थन ज्यामध्ये एखादी व्यक्ती नैसर्गिक परिस्थितीत चित्रित केली जाते.
- PIXIE विविध पोझेस, प्रकाश परिस्थिती आणि ऑब्जेक्टचे आच्छादित भाग शोधण्याचे चांगले काम करते.
- उच्च कार्यक्षमता, डायनॅमिक कॅमेरा प्रतिमा प्रक्रियेसाठी योग्य.
कोड Pytorch फ्रेमवर्क वापरून Python मध्ये लिहिलेला आहे आणि केवळ गैर-व्यावसायिक कारणांसाठी वापरण्याची परवानगी देणार्‍या परवान्याखाली वितरित केला जातो.
Linux वर Pixie कसे इंस्टॉल करायचे?
ज्यांना ही 3D मॉडेलिंग सिस्टीम त्यांच्या सिस्टीमवर स्थापित करण्यात सक्षम होण्यात स्वारस्य आहे, ते आम्ही खाली शेअर केलेल्या सूचनांचे पालन करून तसे करू शकतात.
पिक्सी स्त्रोत कोड आपल्या संगणकावर संकलित करण्यास सक्षम होण्यासाठी आपण प्रथम गोष्ट करणे आवश्यक आहे आणि त्यासाठी आपण एक टर्मिनल उघडणार आहोत आणि आपण खालील टाइप करणार आहोत:
git clone https://github.com/YadiraF/PIXIE cd PIXIE
एकदा हे पूर्ण झाल्यावर, पायथन पॅकेज मॅनेजरवर अवलंबून राहून आम्ही इंस्टॉलेशन पुढे नेऊ शकतो:
pip install -r requirements.txt
किंवा आम्ही ऑफर केलेले कोणतेही इंस्टॉलर चालवू शकतो:
bash install_conda.sh
O:
bash install_pip.sh
शेवटी आपल्याला त्याबद्दल अधिक जाणून घेण्यात स्वारस्य असल्यास प्रकल्पाविषयी, स्त्रोत कोडचे पुनरावलोकन करण्यास सक्षम होण्यासाठी किंवा आधीच प्रशिक्षित मॉडेल्स मिळविण्यासाठी जेणेकरुन तुम्ही डेमो चालवू शकता आणि ते कसे कार्य करते हे जाणून घेऊ शकता, तुम्ही हे आणि बरेच काही मिळवू शकता खालील दुवा.