Улучшенный алгоритм целевого отслеживания на основе Swin-Transformer

LIU Shi ,  

ZHU Ming ,  

摘要

На основе метода целевого отслеживания STARK, который использует ResNet в качестве основной сети, обладающей недостаточной способностью извлекать признаки и показывающей плохие результаты отслеживания. Для решения этой проблемы в данной работе предложен усовершенствованный алгоритм целевого отслеживания на основе сети Swin-Transformer. Во-первых, внутри оконного механизма внимания Swin-Transformer выполнено многомасштабное улучшение, спроектирован модуль многомасштабных окон MW-MSA, направленный на извлечение более богатой локальной детальной информации, который вместе с глобальным контекстом формирует многомасштабные дискриминативные признаки. Затем комбинируется структура кодировщика-декодировщика Transformer в качестве сети слияния признаков, применяется оптимизированный многоуровневый перцептрон в качестве сети оценки обновления для формирования модуля осознания состояния. Наконец, для решения проблем исчезновения и повторного появления цели предложен метод слияния нескольких трекеров. Сливая многомасштабно улучшенный алгоритм отслеживания и алгоритм SuperDiMP, разработан модуль определения состояния исчезновения, который комплексно учитывает баллы доверия двух трекеров и вероятность нахождения цели вблизи предсказанного бокса. Экспериментальные результаты показывают, что по сравнению с алгоритмом STARK средний коэффициент перекрытия (AO) на наборе данных GOT-10K повышается на 2.7%, а коэффициент успеха S_R0.5 повышается на 3.3%. На наборе данных L-LaSOT коэффициент успеха (AUC) увеличивается на 0.8%, а в условиях вызова исчезновения и повторного появления цели — на 1%.

关键词

целевое отслеживание;многомасштабное окно;Swin-Transformer;обновление шаблона;слияние нескольких моделей

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website