Система интеллектуального кодирования кадров видеопотока при управлении беспилотными системами от первого лица

Березкин Александр Александрович
Ченский Александр Александрович
Паршин Антон Александрович 
Парфенов Дмитрий Дмитриевич 
Киричек Руслан Валентинович 

Изобретение относится к вычислительной технике и может быть использовано для передачи видеопотока при управлении от первого лица между беспилотной авиационной системой (БАС) и станцией внешнего пилота (СВП). Технический результат заключается в значительном увеличении степени сжатия кадров видеопотока для передачи по линии связи с Землёй между БАС и СВП и, как следствие, в уменьшении необходимой полосы пропускания сети связи, использующейся линией связи с Землёй. Достигается технический результат тем, что система интеллектуального кодирования кадров видеопотока при управлении беспилотными системами от первого лица включает сжатие кадров, основанное на кодировании кадров нейронной сетью вида - вариационный автокодировщик, квантование полученного после кодирования ЛПП, перевод ЛПП в бинарную последовательность, маскирование бинарной последовательности и её дальнейшее сжатие, нейросетевое кодирование с помощью нейросетевого кодера, размещаемого на беспилотной воздушной системе и преобразующего кадры видеопотока в маскированную бинарную последовательность для передачи по линии связи с Землёй от беспилотной авиационной системы к станции внешнего пилота, нейросетевое декодирование с помощью нейросетевого декодера, размещаемого на станции внешнего пилота, восстанавливающего кадры видеопотока из бинарной последовательности. Нейросетевое кодирование происходит через нейросетевой кодер. В нейросетевом декодере происходит декомпрессия поступающей на декодер бинарной последовательности. Подавление артефактов производится через общий для кодера и декодера блок подавления артефактов, алгоритмы подавления артефактов автокодировщиков применяются на трех этапах: предобработке, промежуточной обработке и постобработке, предварительная обработка выполняется на стороне нейросетевого кодера до блока кодирования над интерполированным кадром, промежуточная обработка может выполняться как на нейросетевом кодере, так и на нейросетевом декодере над тензором латентного пространства признаков или восстановленным тензором латентного пространства признаков, постобработка выполняется на нейросетевом декодере после блока декодирования на восстановленном интерполированном кадре.