国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于注意力機制的多模態(tài)人體行為識別算法
DOI:
CSTR:
作者:
作者單位:

1.西北工業(yè)大學(xué) 電子信息學(xué)院;2.河北師范大學(xué) 計算機與網(wǎng)絡(luò )空間安全學(xué)院

作者簡(jiǎn)介:

通訊作者:

中圖分類(lèi)號:

TP391.41

基金項目:

陜西省重點(diǎn)研發(fā)項目(2021ZDLGY15-01, 2021ZDLGY09-04, 2021GY-004和2020GY-050);深圳市國際合作研究項目(GJHZ20200731095204013);國家自然基金(61772419)


Multi-modal human behavior recognition algorithm based on attention mechanism
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    提出了基于注意力機制的多模態(tài)人體行為識別算法。針對多模態(tài)特征的有效融合問(wèn)題,設計基于注意力機制的雙流特征融合卷積網(wǎng)絡(luò )TAM3DNet(Two-stream Attention Mechanism 3D Network)。主干網(wǎng)絡(luò )采用結合注意力機制的AM3DNet(Attention Mechanism 3D Network),將特征圖與注意力圖進(jìn)行加權后得到加權行為特征,從而使網(wǎng)絡(luò )聚焦于肢體運動(dòng)區域的特征,減弱背景和肢體靜止區域的影響。將RGB-D數據的顏色和深度兩種模態(tài)數據分別作為雙流網(wǎng)絡(luò )的輸入,從兩條分支網(wǎng)絡(luò )得到彩色和深度行為特征,然后將融合特征進(jìn)行分類(lèi)得到人體行為識別結果。

    Abstract:

    A multi-modal human behavior recognition algorithm based on attention mechanism is proposed. Aiming at the problem of effective fusion of multimodal features, a two-stream feature fusion convolutional network TAM3DNet (Two-stream Attention Mechanism 3D Network) based on attention mechanism is designed. The backbone network adopts AM3DNet (Attention Mechanism 3D Network), which combines the attention mechanism, and weights the feature map and the attention map to obtain the weighted behavior characteristics, so that the network focuses on the characteristics of the limb movement area and reduces the influence of the background and the static area of the limb. The color and depth modal data of the RGB-D data are respectively used as the input of the dual-stream network, and the color and depth behavior features are obtained from the two branch networks, and then the fusion features are classified to obtain the human behavior recognition results.

    參考文獻
    相似文獻
    引證文獻
引用本文

宋真東,楊國超,馬玉鵬,馮曉毅.基于注意力機制的多模態(tài)人體行為識別算法計算機測量與控制[J].,2022,30(2):276-283.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2022-01-07
  • 最后修改日期:2022-01-11
  • 錄用日期:2022-01-11
  • 在線(xiàn)發(fā)布日期: 2022-02-22
  • 出版日期:
文章二維碼
黄浦区| 玉屏| 浦县| 济南市| 广汉市| 花莲县| 西畴县| 无为县| 新竹市| 米脂县| 海安县| 新安县| 中卫市| 鸡东县| 瑞昌市| 开化县| 海安县| 蓝山县| 阿拉尔市| 阿坝县| 大冶市| 肥东县| 西乌| 巫溪县| 津南区| 林甸县| 建昌县| 闵行区| 新宁县| 平顶山市| 玉龙| 如皋市| 全南县| 咸丰县| 德格县| 雷州市| 永定县| 保亭| 沁阳市| 咸宁市| 汝阳县|