Digital World

Сейчас, по сути, задача захвата движения одного субъекта решена. Есть, конечно, и своя специфика. К примеру, у сканируемого субъекта и 3Д модели должны быть скелетные модели одинаковой конструкции и не должны кардинально различаться пропорции.

Привели пример. Сканировали обычного человека, а у модели гипертрофировано увеличена верхняя половина туловища. В некоторых стойках такая модель будет смотреться неестественно. Например, наклонившийся вперед или откинувшийся назад человек с обычными пропорциями сохраняет равновесие, а вот модель зрительно должна падать. Пока это выправляется вручную. Хотя уже предложено решение по программному изменению стойки с целью перемещения центра тяжести.

Есть еще проблемы с захватом движения нескольких субъектов на одной площадке. Сейчас как раз ведется работа по этой теме.

Задал вопрос по приобретению такого комплекса. Оказалось без проблем. Собственно киностудия, отрывки из ролика которой показывали, как раз и купила у них систему. Купили они и комплекс работы с 3Д моделями. Интеграцию обеих систем эти же ребята из Бауманки делали. Цены они не уполномочены сообщать, но дали контакты с бизнес подразделением. Надо будет нашего испанского гнома на них натравить.

Спросил и о системе генерации речи. Тут меня направили к парню, сидевшему в уголке в наушниках и нечто ваявшему на некоем подобии аудиоредактора. Кстати, параллельно он что-то, весьма активно обсуждал с подсевшим к нему МинХек-ом.

Познакомили. Виктор - как звали парня, довольно детально объяснил, что собственно у них реализовано.

Их система могла сгенерировать текст, практически на любом языке. Но естественно требовалось внедрение специфических модулей. К примеру, интонационно вопросительные и утвердительные фразы на разных языках могли строиться пол разному. Поэтому фактически собиралась система для каждого языка отдельно.

Ну и естественно звуковой банк для генератора создавался заказчиком самостоятельно. Кстати, таких банков можно было использовать несколько.

- А вы не пробовали генерировать таким образом пение?

- Был такой опыт. Но исключительно из любопытства. Как вы понимаете, заказчиков пение не интересует. Причем забавно, что эту задачу получилось решить за счет закрытой работы по генерации интонации в обычной речи. Там это решалось за счет заранее записанных с нужной интонацией фрагментов или целых фраз. Они и служили образцом для генерации этих же фраз но уже из звукового банка. Для генерации пения необходимо было записать традиционное исполнение нужной песни и дальше аналогично использовать ее как образец.

- Насколько понимаю, как коммерческий продукт вы генератор пения не реализовали?

- Говорю же. Заказчиков не было. Но если найдется, проблемы не будет. Довести до ума, сделать прикладной интерфейс работы на пару месяцев в лучшем случае.

В общем, мы очень плодотворно поговорили. Мне записали несколько демо-роликов, обменялись контактными телефонами и адресами и договорились, что в вероятнее всего в сентябре встретимся уже в Москве для конкретных переговоров.

Время пролетело быстро. Был уже поздний вечер, поэтому еще раз, уточнив у МинХека, когда мы с ним встречаемся для ознакомления уже с их работой, я отправился домой. В смысле в общежитие.

...

Следующий день повторился почти один к одному. Сначала занятия в университете, затем созвонились с МинХек-ом и встретились на конференции. Доклад их лаборатории был интересным, но в принципе большую часть я уже видел вчера при демонстрации системы захвата движения и генерации речи. Больше меня интересовала система отображения трехмерной картинки. Для этого после доклада мы с МинХек-ом отправились в помещение, где они оборудовали свой демонстрационный зал.

Познакомился с его руководителем - Чхве Му Ин. Симпатичный мужчина, явно увлеченный своей работой. Мне показали реализацию стереокартинки на экране и в очках виртуальной реальности. К сожалению это было не совсем то, что меня бы устроило. А вот отображение мимики и речи на лице 3Д модели понравилось. Для моделирования певца и актера это очень существенная деталь. Оказалось что МуИн и есть тот самый фанат моих сестричек. Попросил показать работу моделей. А вот это было пожалуй именно то, что нам нужно.

MMD Conqueror IA Motion DL

В процессе демонстрации на экране мелькнуло знакомое лицо. Попросил показать. МуИн неожиданно дико засмущался и попытался замять, но тут уже я уперся. Да и МинХек помог.

- Да, ладно, сонбе. Покажи. Хорошо ведь получилось.

После нескольких минут уговоров мне все же показали промелькнувший ролик. Что сказать - неожиданно. Похоже руководитель МинХека фанат не столько моих сестричек, сколько СоЕн. Мало того что он сделал 3Д модель нашей 'ледяной принцессы', модель еще и пела. То есть он использовал наработки Бауманцев. Результат мне реально понравился. Оставалось одно - отображение на сцене, но за этим придется ехать в Японию.

Разработчики из Осаки не приехали на конференцию. МуИн сказал, что, похоже, у них проблема с финансированием. Но дал мне их координаты и контактные телефоны.