Горячее
Лучшее
Свежее
Подписки
Сообщества
Блоги
Эксперты
Войти
Забыли пароль?
или продолжите с
Создать аккаунт
Регистрируясь, я даю согласие на обработку данных и условия почтовых рассылок.
или
Восстановление пароля
Восстановление пароля
Получить код в Telegram
Войти с Яндекс ID Войти через VK ID
ПромокодыРаботаКурсыРекламаИгрыПополнение Steam
Пикабу Игры +1000 бесплатных онлайн игр Разгадывайте увлекательные головоломки «три в ряд» и отправляйтесь в захватывающее приключение! Преодолевайте яркие и насыщенные уровни, чтобы раскрыть новую главу доброй и современной истории о мышонке и его верных друзьях!

Мышонок Шон

Казуальные, Три в ряд, Головоломки

Играть

Топ прошлой недели

  • solenakrivetka solenakrivetka 7 постов
  • Animalrescueed Animalrescueed 53 поста
  • ia.panorama ia.panorama 12 постов
Посмотреть весь топ

Лучшие посты недели

Рассылка Пикабу: отправляем самые рейтинговые материалы за 7 дней 🔥

Нажимая «Подписаться», я даю согласие на обработку данных и условия почтовых рассылок.

Спасибо, что подписались!
Пожалуйста, проверьте почту 😊

Помощь Кодекс Пикабу Команда Пикабу Моб. приложение
Правила соцсети О рекомендациях О компании
Промокоды Биг Гик Промокоды Lamoda Промокоды МВидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Промокоды Яндекс Еда Постила Футбол сегодня
0 просмотренных постов скрыто
10
DigyZem
DigyZem

Как перенести движения человека из ВИДЕО на ПЕРСОНАЖА | Бесплатный MOCAP Rokoko Studio⁠⁠

2 года назад

Rokoko Studio - это мощное и интуитивно понятное программное обеспечение для записи, визуализации и экспорта захвата движения (MOCAP). С его помощью вы можете переносить движения человека или мимику лица на ваших персонажей в 3D приложениях - Cinema 4D, Blender, Maya, 3ds Max, Unreal Engine, Houdini, Unity и продукты Reallusion.

В этом видео на практике покажу как перенести движения человека из видео сначала в Rokoko Studio, рассмотрим настройки приложения и сделаем экспорт анимации в Cinema 4D.

Rokoko - https://www.rokoko.com/

Скачать файлы к видео

Показать полностью
[моё] Mocap Бесплатно Компьютерная графика 3D Персонажи Анимация Видео YouTube
0
15
CUBICK
CUBICK

Забавный Mocap в геймдеве⁠⁠

3 года назад

Секрет за кадром — Motion Capture

Mocap Motion Capture Gamedev Юмор Актеры у которых нет оскара Apex Legends Октейн Анимация Разработка Видео YouTube
3
53
Raysh
Raysh
Лига Разработчиков Видеоигр

Подготовка к мокапу⁠⁠

3 года назад
Перейти к видео

Адово копытоскакалово... но оно заработало.


Это наш доблестный аниматор воевал, в паре с риговиком, с шейпами морды. Сие мокап.

Записывалось без особой постановки света и довольно простенькой камерой - и оно работает вполне себе неплохо.

Я же буду записывать "чистовики" уже ИК-камерами и со всей подготовкой, так что трепыхаться и "крысить" это дело не должно.


Ну и, конечно, с использованием всех мешей (глазки, зубки, язык) и текстур...

Язык, правда, скорее всего придётся подгонять всё одно руками, как и глаза. Но это малая беда...


------------------------------------------------------------------------------------------



PS: учитывая мощь Пикабу.


Нам сейчас позарез нужен левел диз! (UE4)


Все ассеты у нас уже давно есть (минус деревья, с ними отдельно), сценка есть, блокаут есть, всё подогнано, концепты я отрисовал уже чёрт-те когда - надо это собрать.

-  За деньги!

- Под диктовку и буквально "вождение за ручку" от концептщика (меня), никаких "делай как-нибудь, сам разберёшься".

- С сохранением всех копирайтов, само собой.

Если "да, это я!" - то у меня в профиле есть контакты. Прошу стучать, будем дружить. Девять человек нас очень ищут десятого вас.

Показать полностью 2
[моё] Gamedev Mocap Анимация 3D Видео Без звука Длиннопост
12
6
DigyZem
DigyZem

Plask - БЕСПЛАТНЫЙ AI Mocap ЗАХВАТ ДВИЖЕНИЯ из ВИДЕО | Обзор Motion Capture⁠⁠

3 года назад

Захват движения с видео для анимации персонажа в домашних условиях предоставляет сервис Plask. Технология Motion Capture или Mocap является отличным инструментом для создания быстрой и реалистичной анимации персонажа. С Mocap вам не нужно кропотливо создавать ключи в анимированных проектах.

Plask - бесплатная платформа, пока находится в Beta-версии, которая делает захват движения с видео и перенаправляет их на 3D-персонажей. Вы можете записывать видеоматериал с веб-камеры или с телефона. Затем загрузить его в Plask, который автоматически применит Motion Capture и извлечет кадры из видео в отдельный файл. Останется только перенести этот файл захвата движения на модель и анимация персонажа готова.

Бесплатный захват движения - https://plask.ai

Показать полностью
[моё] Mocap Motion capture Захват Движение Программа Браузер Бесплатно Анимация Персонажи 3D 3D анимация Видео
1
21
Lloyd82
Lloyd82
Лига Разработчиков Видеоигр

Как перейти из превизов в геймдев⁠⁠

4 года назад

Разговор с Егором Томским - руководителем Watt Studio, которая создавала превизы для отечественных фильмов ("Вторжение", "Девятаев") в Unreal Engine, занималась захватом движений, а теперь делает мультиплатформенную игру в жанре adventure. О полученном опыте, трудностях перехода и многом другом в интервью.


Тайминг:

00:00 – интро

01:00 – удаленка

02:26 – с чего начинал

03:47 – первый заказ для казино

04:50 - Bazelevs

06:40 – Метро

09:00 – Да студио

11:30 – Вторжение

13:00 – про превизы

16:30 – эволюция превизуализации

21:56 – Девятаев

23:15 – если ничего не вошло

25:00 – опять Вторжение

28:11 – про ФСБ

29:43 – мокап

32:50 – virtual production

33:43 – основной бизнес

36:10 – про игровую индустрию

38:26 – источники финансирования

40:45 – маркетплейсы

42:20 – NFT

43:18 – почему игры

47:00 – размер команды

47:30 – реакция команды

49:20 – идея игры

52:00 – разработка персонажа

56:30 – веришь в успех?

57:50 – про гейм-дизайн

01:01:50 – а если неудача

01:05:00 – бюджет

01:07:20 – вспоминаем Кэмерона и Фавро

01:10:12 – оптимизация и ассеты

01:13:00 – предостережение самого себя

01:15:36 – прогнозируем будущее

01:22:14 – фильмы и игры

01:27:10 - прощание

Показать полностью 1
[моё] Unreal Engine 4 Gamedev Мокап Mocap Видео
1
53
Homo.Digit
Homo.Digit
Наука | Научпоп

E-Learning. Часть 16. Аналоги костюмов захвата движений⁠⁠

7 лет назад

Доброго всем времени суток, продолжаю серию постов про образовательную робототехнику. Здесь я описываю результаты и просто ход выполнения своей научной работы.


Кратко: разрабатываю специальную робо-накидку на одежду, которая сможет оцифровывать часть двигательных навыков мастеров своего дела и передавать это тем, кто только учится.


О чем этот пост: покажу где располагают подобные сенсоры на теле человека коллеги со всего мира. На данный момент у меня на руке их 18. А всего 45. На основные суставы.


Начал с обзора аналогов для выявления существующих областей применения подобной штуки, заодно сохранил несколько реализаций костюмов с расположением сенсоров. Про сами области применения расскажу в один из следующих разов. Поиск осуществлял в Web Of Sciense. Статьи свежие, не более 3-5 лет. Все статьи находятся через Google Академия.

Для сравнения моя предпоследняя схема (сейчас 3 модуля только планируется):

1) Borzikov, V. V., et al. "Human motion video analysis in clinical practice." Современные технологии в медицине 7.4 (eng) (2015).

Тут в отличии от меня на теле используется больше точек захвата. Например на ступне их 4 штуки, в то время как у меня 1. Зачем справа слева от колена расположили - не знаю, может из-за того что не МЭМС захватывают, а камерой.


2) Gabbasov, Bulat, et al. "Toward a human-like biped robot gait: Biomechanical analysis of human locomotion recorded by Kinect-based Motion Capture system." Mechatronics and its Applications (ISMA), 2015 10th International Symposium on. IEEE, 2015.

3) Lädermann A. et al. Kinematics of the shoulder joint in tennis players Journal of science and medicine in sport. – 2016. – Т. 19. – №. 1. – С. 56-63

Хотя конечно, это не сенсоры, а маркеры для захвата камерой.


4) Aung, Min, et al. "The automatic detection of chronic pain-related expression: requirements, challenges and a multimodal dataset." IEEE transactions on affective computing 1 (2016): 1-1.

5) Ayachi, Fouaz S., et al. "Wavelet-based algorithm for auto-detection of daily living activities of older adults captured by multiple inertial measurement units (IMUs)." Physiological measurement 37.3 (2016): 442.

О, похоже на мой любимый Blender 3D. У меня похожий скетч для визуализации.


6) Faber, G. S., et al. "Estimating 3D L5/S1 moments and ground reaction forces during trunk bending using a full-body ambulatory inertial motion capture system." Journal of biomechanics 49.6 (2016): 904-912.

7) McGinnis, Ryan S., et al. "Quantifying the effects of load carriage and fatigue under load on sacral kinematics during countermovement vertical jump with IMU-based method." Sports Engineering 19.1 (2016): 21-34. А это для отработки прыжков сделали.

8) Regazzoni, Daniele, Giordano de Vecchi, and Caterina Rizzi. "RGB cams vs RGB-D sensors: Low cost motion capture technologies performances and limitations." Journal of Manufacturing Systems 33.4 (2014): 719-728.

9) Bolink, S. A. A. N., et al. "Validity of an inertial measurement unit to assess pelvic orientation angles during gait, sit–stand transfers and step-up transfers: Comparison with an optoelectronic motion capture system." Medical engineering & physics 38.3 (2016): 225-231.

К вопросу о применимости МЭМС сенсоров как альтернативы видео захвату.

10) Ivanov, A. V., and A. M. Formal’skii. Mathematical mod of crutch walking. Journal of Computer and Systems Sciences International 54.2 (2015) 315-329

Для реабилитации, анализировали как ходить с тросточкой.

11) Han, Fei, et al. Space-time representation of people based on 3D skeletal data A review. Computer Vision and Image Understanding 158 (2017) 85-105

12) Wang, Jiang, et al. Learning actionlet ensemble for 3D human action recognition. IEEE transactions on pattern analysis and machine intelligence 36.5 (201) Красавчик. Однозначно.

13) Brownjohn, James Mark William, et al. "Footbridge system identification using wireless inertial measurement units for force and response measurements." Journal of Sound and Vibration 384 (2016): 339-355.

14) Zhang, Songyang, Xiaoming Liu, and Jun Xiao. "On geometric features for skeleton-based action recognition using multilayer lstm networks." 2017 IEEE Winter Conference on Applications of Computer Vision (WACV). IEEE, 2017.

Где моя ступня, Джонни?!

15) Kitagawa, Naoki, and Naomichi Ogihara. "Estimation of foot trajectory during human walking by a wearable inertial measurement unit mounted to the foot." Gait & posture 45 (2016): 110-114.

И парочка чисто на ногу.

16) Yandell, Matthew B., et al. "Physical interface dynamics alter how robotic exosuits augment human movement: implications for optimizing wearable assistive devices." Journal of neuroengineering and rehabilitation 14.1 (2017): 40.

О том почему камеры не вытеснили Микроэлектромеханические системы (МЭМС) в другой раз.

Пока посмотрите может стоить подобный костюм в формате жесткого экзоскелета.

Ну и я так много просмотрел статей, что капча решила, что мне нужен допинг.

Резюме:

- Состав оборудования определяет задача (спасибо капитан).

- В самом среднем случае захватывают с 15 +- точек. Если нам нужен каркас без излишеств.

- Топ 18 областей за последние 5 лет по всему миру, где интересуются захватом движения ("motion capture").

- ТОП 20 стран по публикациям.

Мы на 35 месте. с 20 публикациями по данной теме.

Показать полностью 24
[моё] Исследования Обзор Mocap Длиннопост
14
vredua

Как делают мультфильмы.⁠⁠

7 лет назад

Наконец-то к нам пришел Neuron mocap 32 с фейсригом. Вот что можно с ним делать в реал тайме имея готового персонажа.

[моё] Mocap Neuron Анимация Видео
4
32
Homo.Digit
Homo.Digit
Наука | Научпоп

E-Learning. Часть 13. Временные перебои⁠⁠

7 лет назад

Доброго всем времени суток, продолжаю серию постов про образовательную робототехнику. Здесь я описываю результаты и просто ход выполнения своей научной работы.


Кратко: разрабатываю специальную робо-накидку на одежду, которая сможет оцифровывать часть двигательных навыков мастеров своего дела и передавать это тем, кто только учится.


О чем этот пост: о дальнейшем планировании эксперимента по сбору данных с костюма для захвата движения, о выходе из провала по финансированию проекта.


Содержание:

Часть 1: Решение финансовых вопросов.

Часть 2: План будущего эксперимента.


Часть 1. Решение финансовых вопросов.

С момента предыдущего поста прошло 34 дня и за это время был потерян еще один источник финансирования проекта. Иными словами все прямые гранты на проект были прекращены. Осталась аспирантская стипендия и ставка ассистента преподавателя. Первую неделю я немного был в состоянии апатии. Потому как осознал, что если ничего не поменяется то рискую после получения научной степени получить серьезный карьерный рост в виде потери аспирантской стипендии и остаться со своими 5 тысячами в месяц. НАДО СРОЧНО ШЕВЕЛИТЬСЯ подумал я. Так и сделал.

Первый мой порыв - зайти на сайты по поиску работы. (Логично, не правда ли?) Собственно там я искал в первую очередь две позиции: по машинному обучению или преподавание робототехники. Стоит учитывать, что из всего списка мне подошла бы та, на которой я таки смогу получить научную степень (мечта есть такая, да), но и в то же время будет перекрывать просто первостепенны потребности. Варианты нашлись. Около 7 заявок по робототехнике и около 4 по машинному обучению. По робототехнике не стал звонить, что-то совсем детское и далекое от того, чтобы держать мозг в тонусе. А вот рядом с местом где живу строиться большой комплекс большой IT компании СКБ-контур. Составил резюме, пообщался с HR менеджером. Круто, понравилось как у них общаются, как ведут. В общем жду пока тим лиды посмотрят выполненное тестовое задание.


За это время предлагают съездить на базу отдыха, но не совсем отдохнуть, а с одаренными школьниками позаниматься на Таватуе. За небольшую копеечку на 5 дней. Ребята смышленые. Был бы рад сам в свое время так же побывать. Кто-то занимался технологией ай трекинга для автоматического перевода текста (читаешь текст на англ, остановил взгляд на слове, а он его переводит), кто-то с нейронными сетями анализирует медицинские снимки для диагностики здоровья, кто-то занимается автоматизацией составления школьного расписания по сан-пинам, кто-то пилит телеграмм ботов. В общем помогали вместе с коллегами ребятам допиливать проекты для финальной презентации. После чего победителям дали поездку в сочи в другой крутой лагерь для умных детей. Сам я в перерывах занимался своей диссертацией.


Когда приехал, то узнал, что не понравилось мое тестовое задание и мне отказали в СКБ-контуре. При этом приложили рекомендацию над чем стоит поработать и предложили позже возможно снова списаться. Я согласился.


Я поспрашивал у знакомых, может есть какая-то работа. Мне помогали советами. Так мой коллега, кандидат физ. мат наук сказал, что собирается писать докторскую диссертацию и на работе сис. админом ищет замену. За серверами поглядывать. Все показал, рассказал. Хороший вариант. Договорились, что с мая наполовину будем работать, а там посмотрим как карта ляжет.


Так же узнал, что с университетом сотрудничает фирма, которая занимается машинным зрением и обрабатывает спутниковые снимки. Подробностей не знаю, но буду еще с ними встречаться на следующей неделе. Тоже интересный вариант. Плюс сходил на дни карьеры, которые проводил мой университет. Посмотрел на другие фирмы, пообщался с представителями из Кольцово, банков разных, операторов связи, трубных компаний, трансформаторных компаний. Есть интересные места. На мероприятии было куча очков виртуальной реальности, всяких игрух, пуфиков ярмарки, танцевальных номеров и прочей движухи. Все ярко, забавно. Из всех крутых штук мне особенно запал в душу 3D пинг-понг.

Так же я еще являюсь нормоконтролером на кафедре и в начале неделе будем считать часы переработки для грядущей сессии. Групп много, работы много. Ну и вишенка на торте. В прошлом семестре я зарегистрировал три свидетельства на программу ЭВМ и по программе стимулирования мне дали надбавку на год в 570 рублей. Ну и есть еще пара необработанных предложений на середину мая.


Еще я думал про варианты подачи заявки на новые гранты. Может на СТАРТ18. Может краундфайдинг. Но почему-то грантами я наелся, а в краундфайдинг не особо верю. Ибо чтобы заниматься его продвижением, нужно заниматься его продвижением, а не наукой.


В общем я подумал, что это хорошая возможность продолжить полностью независимую разработку. И что варианты есть, если шевелиться активнее.

Часть 2. План будущего эксперимента.


У меня есть один магистр, который выпускается в этом году. Появился один бакалавр, который тоже защищается в этом году.


Один решает вопросы выбора оптимального алгоритма постобработки выходных данных и настройкой алгоритма. Второй решает задачу разработки сетевого моста. Для маршрутизации данных с робототехнической накидки через телефон на удаленный сервер. Посмотрим, что из этого выйдет летом.


Так же была проведена встреча-знакомство с заведующим лабораторией на Радиофаке. Там есть все необходимое оборудование для производства малой партии плат. Причем весь цикл, вплоть до монтажа деталей. Возможно договориться на оплату университетскими квотами для студентов университета (кто не знал - аспиранты тоже студенты. Я в кино беру льготу все еще). Очень понравились и люди и лаборатория. Как подготовлю новую версию - буду с ними работать.


Я же в это время решал ключевые для проекта задачи. В первую очередь это следующие задачи:

1) Настройка бесперебойной работы магнитометра (из-за которого и пошла тотальная перестройка схемы первоначально). Оказалось, что я где-то в схеме накосячил, ибо с подобной проблемой нашел только одного зарубежного коллегу. https://github.com/BoschSensortec/BMM050_driver/issues/7 Магнитометр то включается, то выдает нули постоянно. Это очень не очень. BMM050 входит в состав BMX055.

2) Повышение автономности работы устройства. Это можно сделать тремя путями.

2.1) Понижаем выходное напряжение. Минимум - 2.7В получается, но можно и до 2.4В опустить.

2.2) Повышаем емкость батареи. Мне из китая аккумы на 3400 мач. пришли против 1200, которые были.

2.3) Заменяем сам микроконтроллер. Есть варианты с заменой чипов ESP8285 на Attiny13a (геморройно, но реально и места мало занимает) или микроконтроллер, который стоит в Arduino Pro Mini. У первого энергопотребление около 9ма,  второго 15ма. Напоминаю, что у  ESP8285 самый минимум, которого удалось достичь это 23ма с полным отключением WiFi. Так, что идейно - это просто 32 битный МК. А вероятная замена 8 битная, что может быть проблемой.


И так, что мы имеем:

1) Хотим защитить диссертацию.

2) Открыть технологическую компанию, которая занимается образовательной робототехникой.

3) Хотим хлеба и зрелищ (шучу, хватит просто денег. зрелищ хватает выше головы). И желательно не в светлом будущем, а в суровом настоящем.


Давайте нарисуем как в теории игр граф всех возможных вариантов действий и событий. С учетом того, что я безусловно буду до последнего вздоха работать над тем, чтобы этот проект выстрелил.

Для варианта 1: Надо запустить этот микроконтроллер (это займет около двух недель-месяца, так как МК Cortex, а с ним я не работал). Надо агрегировать данные. Это уже проще.

Для варианта 2: Тут надо реализовывать i2c и UART программно. Готовые в сети решения есть. Но они не проверены. Можно надолго подсесть, но результат может того стоить. Может не получиться из-за маленького объема памяти.

Для варианта 3: С этим я уже работал. Единственная сложность - надо делать миниатюрную минимальную плату самому. Плюс если получится у меня всего 4 таких штуки, а надо 16-18.

Для варианта 4: Подойдет, чтобы показать что принципиальная возможность вычленения паттерна движения есть. Подойдет, чтобы обкатывать программу и немного отдохнуть от железа.


Схемы потока данных:

Первая, красивая.

Вторая. Менее изящная.

Вот такие планы на будущее.

Кстати, кто не знал - для студентов GitHub предоставляет бесплатную подписку. Которая обычно составляет 7$ в месяц и позволяет создавать неограниченное число закрытых репозиториев. Надо только студенческий приложить в виде фотки и краткую анкету заполнить. Вот тут.


Всем спасибо за подписку.

Показать полностью 5
[моё] Исследования Mocap Робототехника Длиннопост
12
Посты не найдены
О нас
О Пикабу Контакты Реклама Сообщить об ошибке Сообщить о нарушении законодательства Отзывы и предложения Новости Пикабу Мобильное приложение RSS
Информация
Помощь Кодекс Пикабу Команда Пикабу Конфиденциальность Правила соцсети О рекомендациях О компании
Наши проекты
Блоги Работа Промокоды Игры Курсы
Партнёры
Промокоды Биг Гик Промокоды Lamoda Промокоды Мвидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Промокоды Яндекс Еда Постила Футбол сегодня
На информационном ресурсе Pikabu.ru применяются рекомендательные технологии