当前位置: 首页 > news >正文

Qt多进程(七)内存映射

前言

本节我想介绍一种基于文件的内存映射(Memory-Mapped File),它是一种非常实用且跨平台友好的进程间通信(IPC)方式。虽然它在性能上略逊于原生共享内存(QSharedMemory),但在健壮性、可调试性和兼容性方面有显著优势。

一、内存映射

核心思想:
1.将一个磁盘文件的内容映射到进程的虚拟地址空间。
2.对映射区域的读写操作,直接反映到文件中(由操作系统负责同步)。
3.多个进程映射同一个文件,即可实现共享数据——这就是一种 IPC 机制。
你可以把它理解为:
“用文件作为中介的共享内存” —— 数据存在文件里,但访问像内存一样快。

二、Qt中的实现:QFile::map()

Qt 通过 QFile 类提供了跨平台的内存映射支持:
1.file.open(QFile::ReadWrite),打开文件(必须先打开)
2.file.map(offset, size),返回 uchar* 指针,指向映射区域
3.file.unmap(ptr),解除映射
4.file.resize(size),确保文件足够大(映射大小不能超过文件实际大小)

file类调用的接口就是这些,得到的uchar*指针指向的就是文件的虚拟内存区域,直接修改可以复写在文件中。打开的时候需要文件载体,这是一个实际的文件,可以命名后缀为dat文件。针对进程通信,我们也可以有一些数据格式的设计,比方说协议头等。
另外,读取完数据之后,可以按需进行清除,比方说主动清零整个映射区。这个在后续代码中有体现。

三、代码示例

新增界面测试类:

#ifndefMEMORYMAPWINDOW_H#defineMEMORYMAPWINDOW_H#include<QWidget>#include<QTextEdit>#include<QLineEdit>#include<QPushButton>#include<QVBoxLayout>#include<QHBoxLayout>#include<QTimer>#include<QDateTime>#include<QFile>#include<QDir>classMemoryMapWindow:publicQWidget{Q_OBJECTpublic:explicitMemoryMapWindow(constQString&role,QWidget*parent=nullptr);privateslots:voidonSendMessage();voidonReadMessage();voidonTimerTimeout();private:voidappendLog(constQString&msg);voidsetupMemoryMap();QString m_role;QTextEdit*m_logView;QLineEdit*m_inputEdit;QPushButton*m_sendButton;QPushButton*m_readButton;QTimer*m_timer;QString m_mapFilePath;QFile*m_mapFile;};#endif// MEMORYMAPWINDOW_H
#include"memorymapwindow.h"#include<QLabel>MemoryMapWindow::MemoryMapWindow(constQString&role,QWidget*parent):QWidget(parent),m_role(role),m_timer(nullptr),m_mapFile(nullptr),m_mapFilePath(QDir::tempPath()+"/ipc_test_mmap.dat"){setWindowTitle("Memory Map - "+role);resize(600,500);m_logView=newQTextEdit();m_logView->setReadOnly(true);m_inputEdit=newQLineEdit();m_inputEdit->setPlaceholderText("Enter message to write...");m_sendButton=newQPushButton("Write to Memory Map");m_readButton=newQPushButton("Read from Memory Map");QVBoxLayout*mainLayout=newQVBoxLayout();mainLayout->addWidget(m_logView);mainLayout->addWidget(m_inputEdit);mainLayout->addWidget(m_sendButton);mainLayout->addWidget(m_readButton);setLayout(mainLayout);connect(m_sendButton,&QPushButton::clicked,this,&MemoryMapWindow::onSendMessage);connect(m_readButton,&QPushButton::clicked,this,&MemoryMapWindow::onReadMessage);setupMemoryMap();if(m_role=="Server"){// Server periodically checks for messagesm_timer=newQTimer(this);connect(m_timer,&QTimer::timeout,this,&MemoryMapWindow::onTimerTimeout);m_timer->start(1000);// Check every second}appendLog("Memory Map "+m_role+" initialized at: "+m_mapFilePath);}voidMemoryMapWindow::setupMemoryMap(){// Ensure file exists with sufficient sizeQFilefile(m_mapFilePath);if(!file.exists()){if(file.open(QFile::WriteOnly)){file.resize(1024);// Create with 1KB sizefile.close();}}}voidMemoryMapWindow::onSendMessage(){QString msg=m_inputEdit->text();if(msg.isEmpty())return;QFilefile(m_mapFilePath);if(!file.open(QFile::ReadWrite)){appendLog("Failed to open memory map file: "+file.errorString());return;}if(file.size()<1024){file.resize(1024);}uchar*mapped=file.map(0,1024);if(!mapped){appendLog("Failed to map memory");file.close();return;}// Clear the area firstmemset(mapped,0,1024);// Write magic header and messageQByteArray data=msg.toUtf8();if(data.size()>1020)data.truncate(1020);memcpy(mapped,"IPC!",4);// Magic headermemcpy(mapped+4,data.constData(),data.size());file.unmap(mapped);file.close();appendLog("Wrote to memory map: "+msg);m_inputEdit->clear();}voidMemoryMapWindow::onReadMessage(){QFilefile(m_mapFilePath);if(!file.exists()){appendLog("Memory map file does not exist");return;}if(!file.open(QFile::ReadOnly)||file.size()<1024){appendLog("Memory map file is too small or cannot be opened");return;}uchar*mapped=file.map(0,1024);if(!mapped){appendLog("Failed to map memory for reading");file.close();return;}// Check magic headerif(memcmp(mapped,"IPC!",4)!=0){appendLog("No valid data in memory map (magic mismatch)");file.unmap(mapped);file.close();return;}// Read message starting from offset 4QByteArraydata((char*)(mapped+4),1020);intnullPos=data.indexOf('\0');if(nullPos!=-1){data.truncate(nullPos);}file.unmap(mapped);file.close();appendLog("Read from memory map: "+QString::fromUtf8(data));}voidMemoryMapWindow::onTimerTimeout(){QFilefile(m_mapFilePath);if(!file.exists()||file.size()<1024)return;uchar*mapped=file.map(0,1024);if(!mapped)return;// Check magic headerif(memcmp(mapped,"IPC!",4)==0){// Read message starting from offset 4QByteArraydata((char*)(mapped+4),1020);intnullPos=data.indexOf('\0');if(nullPos!=-1){data.truncate(nullPos);}// Only report if there's actual contentif(!data.isEmpty()){appendLog("Server received: "+QString::fromUtf8(data));// Clear the message after readingmemset(mapped,0,1024);}}file.unmap(mapped);file.close();}voidMemoryMapWindow::appendLog(constQString&msg){m_logView->append(QDateTime::currentDateTime().toString("hh:mm:ss")+" | "+msg);}

运行效果:

四、总结

可以看到,本质上这种方式就是通过一个文件作为媒介,得到一个多进程都可以直接操作的内存块指针。使用上其实需要注意,比方说文件是否存在,通信过程中文件是否会被删除。而且涉及到多端使用会产生竟态的问题,可以像上一节一样使用信号量来管理写入读取的时机。
内存映射这种方法,和共享内存还是有点像的,以下进行一些对比总结:

现代操作系统会将频繁访问的映射文件缓存在内存(Page Cache)中,所以实际 I/O 很少,性能接近共享内存,尤其在本地 SSD 上几乎无感。
优点:
简单可靠:无需处理共享内存的“创建/附加”复杂逻辑。
天然持久化:进程崩溃后,数据仍在文件中(可用于恢复)。
易于调试:直接 cat /tmp/ipc_test_mmap.dat 查看内容。
跨语言兼容:任何能读写文件+内存映射的语言(Python/C#/Rust)都能互通。
无内核资源泄漏风险:文件由文件系统管理,重启自动清理。

http://www.cnnetsun.cn/news/416902.html

相关文章:

  • Telegram群组建立:聚集海外用户交流技术问题
  • 超越准确率:以稳定性为锚,深入解析特征选择算法的工程实践
  • 流量转化策略实施:通过技术博客引导至GPU/Token购买页
  • 声道选择立体声or单声道?HeyGem均可正常处理
  • JavaScript插件能否增强?目前不能自定义脚本扩展
  • PyCharm能调试HeyGem吗?开发者若开放代码则可行
  • FastStone Capture注册码不需要:与截图工具无关联
  • Markdown编辑器用途不大:HeyGem输出非文本内容
  • 操作系统期末复习——第一章:引论
  • 抖音短视频切片:提取‘一键打包下载’等功能亮点传播
  • 批量删除选中项:提高HeyGem历史记录管理效率
  • 大模型Token优惠套餐上线:配套HeyGem高性能运行
  • 深度学习框架基于YOLOv8➕pyqt5的汽车表面损伤检测系统,YOLOV8模型如何训练汽车表面损伤检测数据集检测识别车身面板凹陷‘, ‘前挡风玻璃损坏‘, ‘前照灯损坏‘, ‘后挡风玻璃损坏‘, ‘
  • ChromeDriver下载地址无关:自动化测试非本系统重点
  • SGMICRO圣邦微 SGM2268YWQ10/TR TQFN 模拟开关/多路复用器
  • 【python大数据毕设实战】最佳电子游戏排行数据可视化分析系统、Hadoop、计算机毕业设计、包括数据爬取、数据分析、数据可视化、机器学习、实战教学
  • 从入门到精通:C# Lambda多参数编程的6个必知场景与最佳实践
  • 【毕业设计】SpringBoot+Vue+MySQL 在线租房和招聘平台平台源码+数据库+论文+部署文档
  • GESP 认证标准之 Python 编程三级标准(考试大纲与要求含考试真题)
  • 未来是否会推出实时版?社区反馈热烈期待中
  • 激情全运大湾区!艾特网能匠心护航开幕式场馆与国家级赛事核心基建
  • C语言 类型转换易错点(一)
  • 细胞工程用mRNA功能化材料
  • 为什么顶尖开发者都在用C# using别名管理复杂指针类型?
  • 【C#高效编程核心技能】:Lambda多参数传递的4种高级模式
  • 显卡很重要!HeyGem依赖GPU进行视频渲染和推理计算
  • 基于图像分析的QR码钓鱼攻击检测与防御机制研究
  • 科哥二次开发HeyGem数字人系统:实现音频驱动人脸动画全流程
  • LoRA微调模型定制专属HeyGem数字人风格
  • 【C#跨平台性能优化指南】:如何将资源占用降低80%?