ПИКСИЕ, систем машинског учења отвореног кода за 3Д моделе људи

ПИКСИЕ је систем машинског учења отвореног кода, који вам омогућава да са фотографије креирате 3Д моделе и анимиране аватаре људског тела.

Реалистичне текстуре лица и одеће које се разликују од оних приказаних на оригиналној фотографији могу се причврстити на добијени модел. Систем се може користити, на пример, за цртање из другачије тачке гледишта, креирање анимације, реконструкцију тела према облику лица и генерисање 3Д модела прстију.

О ПИКСИЕ

Тврди се да у поређењу са сличним пројектима, ПИКСИЕ омогућава вам да прецизније креирате контуре тела, првобитно сакривен одећом на фотографији, облик лица и положај зглобова шака.

Метода се заснива на употреби неуронске мреже који извлачи параметре лица, тела и шаке из слике пиксела. Рад неуронске мреже координира посебан регулатор, који на основу анализе осветљења додаје информације о тежинским коефицијентима различитих делова тела да би се искључило одређивање неприродних поза.

ПИКСИЕ процењена тела се лако анимирају. Визуелизација садржи улазну слику, предвиђено 3Д експресивно тело, резултат анимације, референтни видео и његову одговарајућу реконструкцију. За последње, боја руку и глава представља поверење одговарајућих модератора. Светлија боја значи да се ПИКСИЕ више ослања на информације о слици тела него на делове, што се може десити када је особа окренута леђима камери, на пример.

Приликом креирања модела узимају се у обзир анатомске разлике између мушког и женског тела, параметри држања, осветљење, рефлексивност површине и ротација лица у тродимензионалној равни.

ПИКСИЕ карактеристике:

  • Реконструисани 3Д модел тела, као и информације о држању, положају руку и изразу лица, чувају се као скуп СМПЛ-Кс параметара, који се затим могу користити у систему за моделирање Блендер преко комплемента.
  • Детаљне информације о облику и изразу лица, као и његовим карактеристикама, као што је присуство бора, утврђују се са фотографије (за израду модела главе користи се ДЕЦА систем машинског учења који су развили исти аутори).
  • Када се генерише текстура лица, процењује се албедо објекта.
  • Изграђени модел тела се затим може анимирати или представити у другој пози.
  • Подршка за конструкцију модела од обичних фотографија на којима је особа снимљена у природним условима.
  • ПИКСИЕ ради добар посао у откривању различитих поза, услова осветљења и делова објекта који се преклапају.
  • Високе перформансе, погодне за динамичку обраду слике камере.

Код је написан у Питхон-у користећи Питорцх фрамеворк и дистрибуира се под лиценцом која дозвољава употребу само у некомерцијалне сврхе.

Како инсталирати Пикие на Линук?

За оне који су заинтересовани да могу да инсталирају овај систем 3Д моделирања на свој систем, то могу учинити пратећи упутства која делимо у наставку.

Прва ствар коју морамо да урадимо је да добијемо изворни код Пикие-а да бисмо могли да га компајлирамо на нашем рачунару и за то ћемо отворити терминал и откуцаћемо следеће:

git clone https://github.com/YadiraF/PIXIE
cd PIXIE

Када се ово уради, можемо наставити са инсталацијом или ослањајући се на Питхон менаџер пакета:

pip install -r requirements.txt

Или можемо покренути било који од понуђених инсталатера:

bash install_conda.sh

O:

bash install_pip.sh

Коначно ако сте заинтересовани да сазнате више о томе о пројекту, да бисте могли да прегледате изворни код или такође да набавите моделе који су већ обучени тако да можете покренути демо и знати како функционише, ово и још много тога можете добити од следећи линк.


Садржај чланка се придржава наших принципа уређивачка етика. Да бисте пријавили грешку, кликните овде.

Будите први који ће коментарисати

Оставите свој коментар

Ваша емаил адреса неће бити објављена. Обавезна поља су означена са *

*

*

  1. За податке одговоран: Мигуел Ангел Гатон
  2. Сврха података: Контрола нежељене поште, управљање коментарима.
  3. Легитимација: Ваш пристанак
  4. Комуникација података: Подаци се неће преносити трећим лицима, осим по законској обавези.
  5. Похрана података: База података коју хостује Оццентус Нетворкс (ЕУ)
  6. Права: У било ком тренутку можете ограничити, опоравити и избрисати своје податке.