当前位置：首页 > news >正文

WiFi-CSI人体感知基准库：深度学习模型在无线信号行为识别中的技术实践

news 2026/7/28 7:56:28

WiFi-CSI人体感知基准库：深度学习模型在无线信号行为识别中的技术实践

【免费下载链接】WiFi-CSI-Sensing-Benchmark项目地址: https://gitcode.com/gh_mirrors/wif/WiFi-CSI-Sensing-Benchmark

在智能家居和健康监测领域，我们面临着如何实现无接触、高精度人体行为识别的技术挑战。传统摄像头存在隐私泄露风险，穿戴式设备则面临用户接受度问题。WiFi信道状态信息（CSI）感知技术提供了一种创新的解决方案，它通过分析无线信号在环境中的微妙变化来识别人体活动。

SenseFi基准库正是为解决这一技术难题而生，它为研究人员和开发者提供了一个标准化的深度学习模型评估平台。该项目集成了MLP、CNN、RNN、Transformer等多种神经网络架构，支持在UT-HAR、NTU-Fi、Widar等公开数据集上进行对比实验，帮助开发者快速验证和优化WiFi-CSI感知模型。

🔧 技术挑战：从无线信号噪声中提取行为特征

WiFi-CSI感知的核心挑战在于如何从复杂的信号噪声中提取稳定的人体行为特征。无线信号在室内传播时会受到多径效应、环境干扰和设备差异的影响，导致CSI数据包含大量噪声。我们需要设计能够有效处理时频域特征的深度学习模型，同时保持模型轻量化和实时性。

不同人体动作在WiFi-CSI时频域中的特征表现 - 拳击、画圈、摔倒、行走等动作在子载波-时间维度上形成独特的模式

CSI数据通常表示为三维张量（子载波×时间×天线），每个数据点包含幅度和相位信息。在UT-HAR数据集中，数据维度为1×250×90，表示单天线、250个时间点、90个子载波的振幅信息。这种多维时序数据对模型设计提出了特殊要求：既要捕捉子载波间的空间相关性，又要处理时间序列的动态变化。

🏗️ 解决方案：多架构神经网络模型对比分析

SenseFi基准库提供了10种不同的深度学习模型，覆盖了从传统神经网络到最新Transformer架构的完整技术栈。每个模型都针对CSI数据的特点进行了专门优化，让我们可以系统比较不同架构在无线感知任务中的表现。

MLP模型：全局特征提取的基础方案

多层感知机（MLP）作为最基础的神经网络结构，在NTU_Fi_model.py和UT_HAR_model.py中都有实现。MLP通过三个全连接层处理展平后的CSI数据，适合学习全局统计特征。虽然对时空局部相关性建模能力有限，但在简单分类任务中仍能提供基准性能。

CNN模型：空间局部模式的专家

卷积神经网络（CNN）特别适合处理CSI数据的空间维度特征。LeNet、ResNet等架构通过卷积核在子载波维度上提取局部模式，池化层则实现特征降维。在widar_model.py中，CNN模型被设计为处理Widar数据集的22类手势识别任务，输入维度为22×20×20的BVP数据。

RNN系列：时序动态建模的利器

针对CSI数据的时间序列特性，RNN、LSTM、GRU、BiLSTM等循环神经网络能够捕捉动作的时序依赖关系。这些模型在self_supervised_model.py中被用于自监督学习任务，通过记忆机制学习时间维度的动态模式。

Transformer架构：全局依赖关系建模

Vision Transformer（ViT）模型通过自注意力机制实现了全局信息的高效整合。在SenseFi中，Transformer将CSI数据分割为多个patch，通过多头注意力机制学习不同时间点和子载波之间的长距离依赖关系，特别适合复杂动作的识别。

四种主流神经网络模型处理CSI数据的流程对比 - 从MLP的全局特征提取到Transformer的注意力机制

⚙️ 技术架构：从数据预处理到模型评估的完整流程

SenseFi基准库的技术架构遵循标准的机器学习流程，包含数据加载、预处理、模型训练和评估四个主要模块。dataset.py实现了统一的数据加载接口，支持多种数据格式和预处理方法。

数据加载与预处理

CSI数据的加载需要考虑不同数据集的格式差异。UT-HAR数据集使用CSV格式存储，而NTU-Fi和Widar数据集使用MAT格式。dataset.py中的CSI_Dataset类提供了统一的接口，支持振幅（CSIamp）和相位（CSIphase）两种模态的数据加载。

# 数据加载示例 def UT_HAR_dataset(root_dir): data_list = glob.glob(root_dir+'/UT_HAR/data/*.csv') label_list = glob.glob(root_dir+'/UT_HAR/label/*.csv') # 数据标准化处理 data_norm = (data - np.min(data)) / (np.max(data) - np.min(data))

模型训练与验证

run.py提供了统一的训练和测试框架，支持通过命令行参数选择不同模型和数据集。训练过程采用Adam优化器和交叉熵损失函数，每个epoch输出准确率和损失值。

# 训练ResNet18模型在NTU-Fi_HAR数据集上 python run.py --model ResNet18 --dataset NTU-Fi_HAR # 训练Transformer模型在Widar数据集上 python run.py --model ViT --dataset Widar

自监督学习支持

self_supervised.py实现了基于几何自监督学习的预训练方法，该方法在论文《AutoFi: Towards Automatic WiFi Human Sensing via Geometric Self-Supervised Learning》中提出。自监督学习可以在无标签数据上预训练模型，然后在有标签数据上进行微调，特别适合数据稀缺的场景。

📊 应用场景：从基础动作到复杂手势的识别能力

SenseFi基准库支持的行为识别任务覆盖了从基础日常活动到精细手势的多种应用场景。每个数据集都针对特定应用需求设计，形成了完整的行为识别能力矩阵。

UT-HAR数据集：日常活动监测

包含7类基础活动：躺下、摔倒、行走、捡东西、跑步、坐下、站立。这些活动对老年人健康监测和跌倒检测具有重要意义，数据集包含3977个训练样本和996个测试样本。

NTU-Fi数据集：综合行为分析

NTU-Fi包含两个子数据集：NTU-Fi_HAR用于6类活动识别（拳击、画圈、清洁、摔倒、跑步、行走），NTU-Fi-HumanID用于14个用户的步态识别。数据集采用3×114×500的CSI张量格式，包含时空和天线维度的丰富信息。

Widar数据集：精细手势识别

Widar3.0数据集专注于22类精细手势识别，包括推拉、扫动、拍手、滑动等基础手势，以及绘制字母和数字的复杂手势。这些手势可用于无接触人机交互和智能家居控制。

Widar数据集的22类手势定义 - 从基础动作到复杂图形绘制，覆盖多种人机交互场景

🚀 实践指南：快速构建WiFi-CSI感知系统

环境配置与依赖安装

首先克隆项目仓库并安装依赖：

git clone https://gitcode.com/gh_mirrors/wif/WiFi-CSI-Sensing-Benchmark cd WiFi-CSI-Sensing-Benchmark pip install -r requirements.txt

数据集准备与组织

下载处理后的数据集并按以下结构组织：

Benchmark ├── Data ├── NTU-Fi_HAR │ ├── test_amp │ ├── train_amp ├── NTU-Fi-HumanID │ ├── test_amp │ ├── train_amp ├── UT_HAR │ ├── data │ ├── label ├── Widardata │ ├── test │ ├── train