VJ SCHOOL
TouchDiffusion — расширение TouchDesigner для интерактивной генерации в реальном времени с использованием StreamDiffusion. Ожидается увеличение FPS до x2 по сравнению с оригинальным репозиторием. https://github.com/olegchomp/TouchDiffusion
Только что поделились результатом с TouchDiffusion на RTX 4090. Генерация на 57-60 FPS.
VJ SCHOOL
Video
TouchDiffusion benchmarks — результаты тестирования на разном железе.
Модель: SD Turbo
Batch size: 1 (количество шагов)
Модель: SD Turbo
Batch size: 1 (количество шагов)
VJ SCHOOL
TouchDiffusion — расширение TouchDesigner для интерактивной генерации в реальном времени с использованием StreamDiffusion. Ожидается увеличение FPS до x2 по сравнению с оригинальным репозиторием. https://github.com/olegchomp/TouchDiffusion
TouchDiffusion-v.0.0.2 — пре-обновление компонента для интерактивной генерации в реальном времени с использованием StreamDiffusion.
- Добавлена поддержка смены разрешения картинки. Выбирается на подготовке Engine и остается фиксированной для него. (Например если выбрали 768x512, то engine будет работать только с этим разрешением)
- Добавлена вкладка "About" с контролем версий
- Добавлен локальный пайплайн. Подключение к интернету необходимо на подготовке Engine.
- Добавлен Alpha параметр. По умолчанию в картинках черный цвет будет прозрачным. (может быть полезно для feedback loop)
- Изменение пайплайна на Safetensors формат. Модели должны лежать в папке models/checkpoints
- Изменен процесс установки и обновления. Теперь он происходит из самого webui.
- Исправлена поддержка sd_turbo модели.
- Исправлен неправильный путь к TouchDiffusion папке. Теперь можно двигать патч в любую другую папку.
- Исправлен параметр промпта, который не менялся если был в виде expression.
Если вы устанавливали компонент до этого момента, то скорее всего придется повторить установку и заново сгенерировать engine для моделей.
https://github.com/olegchomp/TouchDiffusion/releases/tag/v.0.0.2
- Добавлена поддержка смены разрешения картинки. Выбирается на подготовке Engine и остается фиксированной для него. (Например если выбрали 768x512, то engine будет работать только с этим разрешением)
- Добавлена вкладка "About" с контролем версий
- Добавлен локальный пайплайн. Подключение к интернету необходимо на подготовке Engine.
- Добавлен Alpha параметр. По умолчанию в картинках черный цвет будет прозрачным. (может быть полезно для feedback loop)
- Изменение пайплайна на Safetensors формат. Модели должны лежать в папке models/checkpoints
- Изменен процесс установки и обновления. Теперь он происходит из самого webui.
- Исправлена поддержка sd_turbo модели.
- Исправлен неправильный путь к TouchDiffusion папке. Теперь можно двигать патч в любую другую папку.
- Исправлен параметр промпта, который не менялся если был в виде expression.
Если вы устанавливали компонент до этого момента, то скорее всего придется повторить установку и заново сгенерировать engine для моделей.
https://github.com/olegchomp/TouchDiffusion/releases/tag/v.0.0.2
GitHub
Release TouchDiffusion-v.0.0.2 · olegchomp/TouchDiffusion
Added Custom resolution. You can select in on Engine preparation and i will be fixed.
Added About tab with version control.
Added Local pipeline. Internet connection required only on engine prepari...
Added About tab with version control.
Added Local pipeline. Internet connection required only on engine prepari...
TouchDiffusion — видео урок про интерактивную генерацию изображений в реальном времени с использованием StreamDiffusion и TensorRT в TouchDesigner.
https://youtu.be/FbbVZ602Z_k?si=pfOL1CYfkxwdlKw-
https://youtu.be/FbbVZ602Z_k?si=pfOL1CYfkxwdlKw-
YouTube
Интерактивный Stable Diffusion в TouchDesigner
Видеоурок о TouchDiffusion, интерактивной генерации изображений в реальном времени с использованием StreamDiffusion и TensorRT в TouchDesigner.
TouchDiffusion: https://github.com/olegchomp/TouchDiffusion
При желании можете угостить меня кофе: https://bo…
TouchDiffusion: https://github.com/olegchomp/TouchDiffusion
При желании можете угостить меня кофе: https://bo…
VJ SCHOOL
Depth-Anything TensorRT in TouchDesigner — Real-time определение глубины без использования специальных камер. https://github.com/olegchomp/TDDepthAnything/
Depth-Anything & Depth-Anything v2 TensorRT in TouchDesigner — обновление компонента, с поддержкой новой версии. TDDepthAnything — real-time определение глубины без использования специальных камер.
https://github.com/olegchomp/TDDepthAnything/
https://github.com/olegchomp/TDDepthAnything/
GitHub
GitHub - olegchomp/TDDepthAnything: TouchDesigner implementation for Depth Anything and TensorRT monocular depth estimation.
TouchDesigner implementation for Depth Anything and TensorRT monocular depth estimation. - olegchomp/TDDepthAnything
TouchDiffusion Portable — портативная версия, включающая предустановленную и готовую конфигурацию. Проще говоря, скачал и запустил.
1) Качаете и распаковываете архив
2) Запускаете webui.bat
3) Открываете вкладку install & update, нажимаете 'Update dependencies'
4) Готовите модель и настраиваете TouchDesigner по инструкции или по видео-уроку
Скачать: https://boosty.to/vjschool/posts/39931cd6-b9c5-4c27-93ff-d7a09b0918c5?share=post_link
1) Качаете и распаковываете архив
2) Запускаете webui.bat
3) Открываете вкладку install & update, нажимаете 'Update dependencies'
4) Готовите модель и настраиваете TouchDesigner по инструкции или по видео-уроку
Скачать: https://boosty.to/vjschool/posts/39931cd6-b9c5-4c27-93ff-d7a09b0918c5?share=post_link
boosty.to
TouchDiffusion Portable - VJSCHOOL
TouchDesigner implementation for real-time Stable Diffusion interactive generation with StreamDiffusion.
Portable includes preinstalled configurations, ensuring everything is readily available for immediate use.
1) Download and extract archive
2) Run 'webui.bat'…
Portable includes preinstalled configurations, ensuring everything is readily available for immediate use.
1) Download and extract archive
2) Run 'webui.bat'…
Forwarded from Портал 2030–2050
Прием заявок на международный конкурс виджеинга и моушнграфики «ПОРТАЛ.МЕДИА-АРТ» открыт!
Присоединяйтесь к уникальному событию в мире цифрового искусства — конкурсу диджитал-художников со всего мира в рамках специального проекта фестиваля будущего «Портал 2030-2050».
Раскройте ваше видение Москвы будущего, в которой будут гармонично сочетаться передовые технологии, инновации и культурное наследие; продемонстрируйте историю открытого и вдохновляющего города, который процветает за счет технологий, разрабатываемых в Инновационном центре «Сколково».
На фестивале представят лучшие работы цифровых художников, а самые талантливые виджеи смогут лично продемонстрировать навыки перед многотысячной аудиторией.
Конкурс пройдет на площадке Инновационного центра «Сколково», работы победителей будут проецироваться на фасад здания «Гиперкуб».
Сроки приема заявок:
🟣 Для категории моушнграфика: с 15 июля по 25 августа включительно;
🟣 Для категории виджеинг: с 15 июля по 21 августа включительно.
Подробности и сбор заявок на сайте фестиваля.
По вопросам конкурса обращайтесь на почту: art@portalfuture.ru
Присоединяйтесь к уникальному событию в мире цифрового искусства — конкурсу диджитал-художников со всего мира в рамках специального проекта фестиваля будущего «Портал 2030-2050».
Раскройте ваше видение Москвы будущего, в которой будут гармонично сочетаться передовые технологии, инновации и культурное наследие; продемонстрируйте историю открытого и вдохновляющего города, который процветает за счет технологий, разрабатываемых в Инновационном центре «Сколково».
На фестивале представят лучшие работы цифровых художников, а самые талантливые виджеи смогут лично продемонстрировать навыки перед многотысячной аудиторией.
Конкурс пройдет на площадке Инновационного центра «Сколково», работы победителей будут проецироваться на фасад здания «Гиперкуб».
Сроки приема заявок:
Подробности и сбор заявок на сайте фестиваля.
По вопросам конкурса обращайтесь на почту: art@portalfuture.ru
Please open Telegram to view this post
VIEW IN TELEGRAM
Spreadbeats — рекламный ролик Spotify получивший множество наград на фестивале Cannes Lions 2024. Интересен он тем что полностью запрограммирован в Excel и занимает всего 10 мб.
https://youtu.be/Z_lbVlhO9HE?si=dqvQAtcIoiPmylys
https://youtu.be/Z_lbVlhO9HE?si=dqvQAtcIoiPmylys
YouTube
Spotify - Spreadbeats (case study)
Spotify has launched a new B2B campaign, ‘Spreadbeats,’ featuring a music video created and distributed entirely within a media plan spreadsheet. Aiming to make media plans as vibrant and energetic as Spotify’s brand and platform, the campaign follows a single…
Web2Touch — plug&play веб-интерфейс для TouchDesigner. На первый взгляд, может быть как альтернатива TouchOSC. Главное отличие, не требует приложения и открывает интерфейс в веб-браузере на любом устройстве.
https://youtu.be/aOgyKX3EaP8
https://youtu.be/aOgyKX3EaP8
YouTube
Web2Touch 1.0.1 | How to use | Replace your TouchOSC in TouchDesigner!
Hello everyone, I'm Wingto. Controllers are common devices in the digital media industry. Software like TouchOSC and MIDI controllers are quite mature and are typically used in applications such as music creation and real-time stage control. However, for…