gpu из-за потребления не подойдет для дрона скорее всего.опыт.
PC CPU через FFMPEG(не пакет, а оптимизированые исходники avcodec + итд), 40 мс это лучший результат. Можно искать компромис - качество-скорость. Но лучше пускать аналог и не тратить время на поиски компромиса.
Все AI упираются в скорость передачи данных на/из GPU. Там огромные потери, не говоря уже о скорости обработки. Можно только если напрямую с камеры кидать на PCI-Express. Но опятьже - это только PC, далеко не все камеры.
AI скорей нужен для детекции. Трекинг важней. Грамотный трекинг не нуждается в AI, но там фильтр Калмана (чтобы предсказать), Pixelflow - нужен GPU и жрёт время. KeyPoint pipeline - если найти GPU-реализацию - возможно было бы наиболее перспективным.
Но так, чтобы можно было ожидать рабочий вариант, это должен быть не слабые PC+GPU на борту. С хорошими показателями.
Другими словами все можно найти, оптимизировать разработать) Нужна воля государствабольшинство наработок - opensource. (понятные, но медленные, прожорливые)
Воpможно, если искать среди платных решений, то там уже есть оптимизированные.
разработчики FFMPEG в частном порядке брали (в 10-х годах) 70 уе/час.
без GPU мне кажется это всё бессмысленно.От помех это спасет?
Нужно компактно и с низким энергопотреблением. По хорошему тут нужно ТЗ. А дальше под него уже решение придумыватьбез GPU мне кажется это всё бессмысленно.
Можно постараться скомпоновать всё на GPU, чтобы добиться минимальной задержки.
Если подключить камеру на PCI-Exporess(т.е. напрямую к GPU) где реализовать avcodec(на GPU) чтобы тот восстаналивал изменения изображения по P-фреймам, и тут-же keypoint-pipeline на GPU для трекинга, где за ним сразу и фильтр Калмана(GPU) с PI-контроллером... Возможно тогда бы, теоретически, GPU возвращал бы сразу минимум - кправляющие сигналы на моторы, и была бы реализована минимальная задержка.
Да - целеуказание должно быть вручную. Но трекинг и сопровождение бы удалось свести на алгоритмы.
Тактичний дрон це камікадзе з часом у повітрі біля 20 хвилин і білетом в один кінець.Признаюсь, не совсем понимаю что делают тактические дроны. Если у них есть задача поразить что-то, но отваливается управление с джойстика из-за помех, то почему бы не использовать компьютерное зрение(успели сдетектировать цель или оператор выделил ее, включаем алгоритм трекинга, дальше преобразуем локальные координаты прямоугольника в кадре в сигналы управления и бабах) . Если такой задачи нет…тогда ничего не дает.
От помех это спасет?
У скільки ти оцінюєш життя оператора, який зможе тицьнути в ціль, вимкнути пульт і з'їбати, поки не прилетіло?Засунути у нього АІ з таргет трекінгом - робить його дорожчим, важкішим і... Так, може протистояти завадам.
Це не до мене. Оцінює життя - міноборони.У скільки ти оцінюєш життя оператора, який зможе тицьнути в ціль, вимкнути пульт і з'їбати, поки не прилетіло?
Спасибо за пояснение. Вот уже появилось первое требование:Тактичний дрон це камікадзе з часом у повітрі біля 20 хвилин і білетом в один кінець.
Тяжелее - не факт. Все зависит от решения на чем и как будет реализован дрон, трекинг и т.дЗасунути у нього АІ з таргет трекінгом - робить його дорожчим, важкішим і...
Теоретически, трекинг может помочь решить проблему 5 метров.Так, може протистояти завадам.
Ретрансляція сама по собі їм не протистоїть, але, можна працювати над частотами і протоколом зв'язку.
Проблема камікадзе в тому, що і без завад в 5м від землі втрачається сигнал, це видно по багатьох відео.
Може в п'ятій вони щось з DMA зробили... Бо четвірка дуже дивно поводиться.OpenVINO
⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.
Да, екран засипае "снiгом" ще до ураження танка, це видно на багатьох вiдеоі без завад в 5м від землі втрачається сигнал, це видно по багатьох відео.
Вафля дае затримку навiть в бездротових навушниках до металодетекторiв, що вже казати за дрони?по вафлє - пиздець нахуй. Затримка просто дика нахуй.
Це не проблема, це особливість роботи. Ефективний кодек дивиться одразу на багато кадрів, щоб максимально зменшити кількість і-фреймів. А поки він дивиться, ти їх не побачиш.При великих змінах картинки - взагалі реально 3fps.
Походу, проблема в кодеках, дуже довго пакує.
Тоді не так треба. Треба дубль виходу - аналоговий сигнал окремим виходом, DAC - окремим.Це не проблема, це особливість роботи. Ефективний кодек дивиться одразу на багато кадрів, щоб максимально зменшити кількість і-фреймів. А поки він дивиться, ти їх не побачиш.
І от тому стандартні рішення з цифровим відео мало підходять для дронів. Потрібні спеціалізовані кодеки, а де їх взяти в недорогому залізі.
Можливо, але не хочу прямим текстом описувати можливий варіант захисту як мінімум цивільних вночі.упоротий?