Cascadeur – нейросеть для смартфонов под управлением Android и других устройств, способная анимировать в 3D формате. Веб приложение использует модель ИИ, которая может распознавать визуальные объекты для цифрового оживления и придавать им движения.
Разработка ИИ
Нейросеть обучена на датасете, состоящем из референсов персонажей игры Shadow Fight и их зеркальных копий. В результате база содержит около двух миллионов поз. Для обучения было использовано 95 процентов набора данных, а оставшиеся пять применили при настройке параметров и тестировании.
Модель создана на основе простой полносвязной пятислойной нейронной сети с функцией активации и методом инициализации из Self Normalizing Neural Networks. Полученный вариант ИИ способен предсказывать позы персонажей на основе ограниченного набора ключевых точек.
Возможности
Нейросеть предлагает функции для создания анимации персонажа. С помощью ИИ алгоритмов аниматоры могут управлять скелетной структурой объекта.
Сервис обладает инструментами автоматической симуляции, которые позволяют создавать реалистичные движения персонажей, учитывая их физические свойства и окружение. Есть возможность продумывать и редактировать траекторию. Имеется инструмент копирования, который упрощает генерирование повторяющихся анимаций.
Модель ИИ предлагает графический редактор, позволяющий визуально корректировать позы персонажа по аналогии с программой Monster Mash. Доступна возможность импорта референсов, что облегчает создание анимации на основе реальных видеоматериалов.
Нейросеть работает с файлами FBX и DAE. Сервис совместимым с популярными программами для моделирования и анимации, такими как Unreal, Unity, Daz3d, 3ds Max, Maya, Mixamo, Blender, Houdini и Cinema 4D.
Особенности
- можно создавать 3D анимации;
- встроен редактор поз;
- доступен импорт видеорефенсов;
- применяется англоязычный интерфейс;
- требуется авторизация;
- имеются обучающие материалы;
- нейросеть используется бесплатно;
- совместима с актуальными версиями Android.