〰️ В первой части статьи
Березкина А.А., Ченского А.А., Киричека Р.В., Захарова А.А. «Исследование конфигураций нейросетевых кодеков для адаптивной системы сжатия кадров FPV-видеопотока при управлении беспилотными системами. Часть I. Методика» (№ 9 2024 журнала «Электросвязь») были обобщены результаты исследований сжатия и квантования латентных пространств признаков вариационных автокодировщиков, представлены модификация нейросетевого кодека, наборы данных и методика экспериментов.
🛠 Во второй части статьи
«Исследование конфигураций нейросетевых кодеков для адаптивной системы сжатия кадров FPV-видеопотока при управлении беспилотными системами. Часть II. Эксперимент» авторами исследованы различные конфигурации нейросетевых кодеков, разработанных на основе вариационных автокодировщиков вида VQ и KL (VQ-f4, VQ-f8, VQ-f16, KL-f4, KL-f8, KL-f16, KL-f32) из состава моделей Stable Diffusion на предмет возможности их использования для сжатия кадров видеопотока при FPV-управлении беспилотными системами.
Обобщаются исследования, проведённые для автокодировщика VQ-f16.
Рассматривается адаптация алгоритмов квантования и сжатия для латентного пространства признаков вариационных автокодировщиков видов VQ и KL, проводится оценка соотношений степеней сжатия и метрик качества восстанавливаемого изображения для вариационных автокодировщиков при различных конфигурациях нейросетевого кодека, определяются наилучшие методы обработки латентного пространства для каждого вариационного автокодировщика, а также проводится оценка целесообразности использования каждого из них.
⚡️ Разработаны
предварительные конфигурации нейросетевого кодека для использования в различных условиях.
Как было выявлено авторами статьи, вариационные автокодировщики видов VQ и KL обладают различными параметрами Гауссова распределения латентного пространства признаков, что влияет на эффективность совместного использования различных алгоритмов сжатия и квантования. В статье показано, какие алгоритмы сжатия и квантования эффективнее использовать с различными моделями.
🔖 Полный текст статьи
Березкина А.А., Ченского А.А., Киричека Р.В., Захарова А.А. «Исследование конфигураций нейросетевых кодеков для адаптивной системы сжатия кадров FPV-видеопотока при управлении беспилотными системами. Часть II. Эксперимент» опубликован в №10 2024 журнала «Электросвязь».
