《電子技術(shù)應用》
您所在的位置:首頁 > 其他 > 設計應用 > 基于Transformer和語義增強的人群計數(shù)算法
基于Transformer和語義增強的人群計數(shù)算法
網(wǎng)絡安全與數(shù)據(jù)治理 2023年第5期
何晴,楊倩倩,彭思凡,殷保群
(中國科學技術(shù)大學信息科學技術(shù)學院,安徽合肥230027)
摘要: 針對人群圖像中的尺度變化問題,提出了基于Transformer和語義增強的人群計數(shù)算法。為了能有效應對尺度變化問題,首先引入Transformer作為主干網(wǎng)對全局上下文進行建模來獲得全局感受野。然后由上至下依次融合主干網(wǎng)相鄰層次的特征圖,在融合過程中強化多個層次特征圖的語義信息。接著對多層次特征圖進行動態(tài)特征選擇,選擇出適合密度圖生成的特征。最后,通過注意力圖來調(diào)整密度圖抵抗背景干擾,以此來生成高質(zhì)量的人群密度估計圖。在ShanghaiTech、UCFQNRF和JHUCROWD++三個數(shù)據(jù)集上進行了大量的實驗來對算法的有效性進行驗證,實驗結(jié)果表明所提算法能有效提高模型的準確性和魯棒性。
中圖分類號:TP391.1
文獻標識碼:A
DOI:10.19358/j.issn.2097-1788.2023.05.009
引用格式:何晴,楊倩倩,彭思凡,等.基于Transformer和語義增強的人群計數(shù)算法[J].網(wǎng)絡安全與數(shù)據(jù)治理,2023,42(5):50-58.
Transformer and semantic enhancement for crowd counting
He Qing,Yang Qianqian,Peng Sifan,Yin Baoqun
(School of Information Science and Technology, University of Science and Technology of China, Hefei 230027, China)
Abstract: Aiming at the problem of scale variation in crowd images, this paper proposes a crowd counting algorithm based on Transformer and semantic enhancement. Firstly, Transformer is introduced as the backbone of the network. Because it can model the global context and obtain the global receptive field, which can effectively deal with the scale variation. Then, the feature maps of adjacent levels of the backbone network are fused from top to bottom in turn, and the semantic information of multiple levels of feature maps is strengthened in the fusion process. Afterwards the dynamic feature selection of multilevel feature maps is carried out, and the features suitable for density map generation are selected. Finally, the density map is adjusted to resist background interference by attention masks, so as to generate highquality crowd density estimation map. In this paper, a large number of experiments are carried out on ShanghaiTech, UCF_QNRF and JHUCROWD++ datasets to verify the effectiveness of the algorithm. The experimental results show that the proposed algorithm can effectively improve the accuracy and robustness of the model.
Key words : crowd counting; Transformer; semantic enhancement; feature selection

0    引言

人群計數(shù)在視頻監(jiān)控、人群分析和公共安全領域發(fā)揮著重要作用,考慮到大規(guī)模的人群聚集事件的頻繁發(fā)生,對擁擠場景的人群分析十分必要。然而現(xiàn)階段人群計數(shù)的應用還受到很大的限制,在諸多限制中,圖像中人頭尺寸不一致的問題尤其受到大多數(shù)研究者的關(guān)注。由于攝像頭高度和角度受到限制,所拍攝的圖像存在透視失真,從而導致了圖像中目標尺度差異較大。如圖1所示,離攝像頭遠處的目標尺度較大,近處的目標尺度較小。為了解決尺度變化問題,本文提出基于Transformer語義增強的人群計數(shù)算法,利用Transformer獲取全局感受野,由上至下依次融合相鄰層次特征并對語義信息進行增強,動態(tài)選擇適合密度圖生成的特征,從而生成高質(zhì)量的人群密度估圖。



本文詳細內(nèi)容請下載:http://www.viuna.cn/resource/share/2000005334




作者信息:

何晴,楊倩倩,彭思凡,殷保群

(中國科學技術(shù)大學信息科學技術(shù)學院,安徽合肥230027)


微信圖片_20210517164139.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
主站蜘蛛池模板: 精品一卡二卡三视频 | 日韩伦理网站 | 欧美精品在线一区二区三区 | 欧美成人免费全网站大片 | 亚洲欧美精品综合中文字幕 | 亚洲免费三级 | 在线观看黄a大片爽爽影院免费 | 日韩一区二区三区免费视频 | 香蕉视频免费网站 | 日本黄色片在线播放 | 黄色网一级片 | 免费国产小视频在线观看 | 波多野结衣在线视频免费观看 | 黄黄的网站在线观看 | 欧美日在线观看 | jizzjizz日本老师 | 色大18成网站www在线观看 | 亚洲永久免费网站 | 久久九九精品视频 | 999精品在线 | 农村黄a三级三级三级 | 婷婷97狠狠的狠狠的爱 | 成人国产在线视频在线观看 | 日韩在线二区 | 欧美同性videos可免费 | 欧美一级色视频 | 狂野欧美性猛交xxxx免费按摩 | 成a人片在线观看 | 日韩中文字幕免费在线观看 | www在线视频观看 | 日本一区深夜影院深a | 精品成人在线 | 狠狠躁日日躁人人爽 | 国产精品欧美一区二区三区不卡 | 天天夜夜爽 | 欧美日在线观看 | 蜜臀91| 九九影院韩国理伦片 | 免费一级欧美片在线观免看 | 最近中文字幕高清字幕 | 久爱午夜精品免费视频 |