Qt界面刷新大量数据时，界面卡死的解决方法以及QTableWidget和QTableView加载速度的比较_pyqt5 qtablewidget 刷新数据,页面卡顿-程序员宅基地
技术标签： Qt
最近用Qt搞一个项目，里面有个功能是要加载XML日志文件的内容（大概1万行左右）然后在界面QTableWidget类型的表格里面显示
由于日志文件的行数比较多，所以刷新到界面上时导致了界面卡死，刷新期间界面无法响应用户操作。而领导给我的要求是：第一：加载的时候界面不能卡死，界面要能够响应用户的操作。第二，在保证第一条的情况下，要尽可能快地加载并显示完日志的内容。第三，由于该项目是客户端，所以加载和显示日志数据的时候仍然要能接收服务器的信息。为了完成这些要求，我查阅了网上的资料，尝试了数种方案，下面就这些方案进行比较。
第一种：单线程，在主线程里面加载XML日志文件后再把数据刷到到界面显示（该方法会造成界面卡死，而且加载XML文件是界面无关的操作，不应该放到GUI线程里面，所以已经弃用）
第二种：创建一条子线程，在子线程里面加载XML文件。在子线程里面每加载一行内容，就通过信号与槽通知主线程把该行数据显示到界面上。（该方法也会造成接界面卡死，所以也弃用）
第三种：优化第二种方案，还是创建一条子线程，在子线程里面加载XML文件，但在子线程里面加载一行内容后，马上调用Sleep函数让子线程睡眠，然后等待1ms后才通过信号与槽通知主线程把该行数据显示到界面上（该方法不会造成界面卡死，大概达到了要求，但加载速度比较慢）
第四种：创建一条子线程，在子线程里面加载完XML文件，把所有内容都放到缓冲区里面，等所有数据都加载完后，才通过信号与槽通知主线程刷新（该方法刷新到界面的时候还是会卡）
第五种：跟第四种方案步骤一样，但把数据刷新到界面上时通过函数QCoreApplication::processEvents()防止界面卡死（该方法不会造成界面卡死，但是数据刷到界面很慢，比第三种方案要慢）
第六种：分页显示，每次只显示用户看到的那部分的页面，当用户按鼠标滚轮时才加载下一条数据。（该方案没试过）
上述的方法效果都不太理想。所以我转而使用了QTableView。尝试了QTableView和QStandardItemModel。在子线程里面解析xml，然后数据放入model中，发现视图会自己刷新显示，但是用这种方法界面还是会卡。对比了下QTableWidget和QTableView，记录了时间后发现对于几万条数据的显示来说两者的速度是差不多的，甚至QTableWidget还要比QTableView快一点。感觉QTableView的优点就是灵活，可以方便地在表格中更改某行某列的数据，但是对于界面的显示速度来讲我记录过时间后发现QTableView没有QTableWidget快，不知道是不是我编写程序方式的原因。
我最后用的方式是：加载表格前先把TableWidget通过hide函数隐藏起来，避免更新界面时候的显示消耗CPU资源，在子线程里面解析xml，然后每解析一行XML数据，就通过信号与槽（connect最后一个参数设置成Qt::BlockingQueuedConnection）通知主线程，让TableWidget更新界面，更新完所有的数据后再把TableWidget通过show函数显示出来。目前用这种方法在保证界面不卡死的情况下是最快的，而且在加载XML和显示的过程中客户端仍然可以接收服务器的数据。测试过大概加载1万3千行（4列）的数据大概要5-7s时间。如果换成TableView要13S时间。故最后还是使用了QTableWidget做表格。、
最后加载效果如图：
加载前：
加载中：
加载后：
---------------------------------------------------------7月12日更新------------------------------------------------------------
几个月后我想起了这个问题，现在使用了一种更好的方法：分页显示，如下图所示。每一页只显示100条记录（每一页显示的记录数量可以由用户设置），超过100条记录则进行多页显示。用户可以通过点击“首页”、“上一页”、“下一页”、末页、“跳转”按钮加载想要显示的记录。
处理方法是：
首先在内存里面创建一个vector，当第一次加载数据的时候把文件里所有的数据（比如总共有3万条记录则把它们）都加载进这个vector里面。然后假如是设置了每页显示100条记录，则把vector[0]到vector[99]的数据显示到界面上（显示首页的内容）。如果此时用户点击“下一页”按钮，则把vector[100]到vector[199]的数据显示到界面上。以此类推。
这种做法优点是第一次加载时虽然会比较慢（因为第一次得把文件里所有数据都加载进内存），但是后面执行“下一页”，“跳转”等操作时因为是从内存直接读取数据到界面显示，所以之后的操作速度会很快，而且由于是分页显示所以用户看得会比较舒服。目前项目使用这种方法。
PS:这里在内存中用vector存贮数据感觉会比用list存贮要好。因为数组是查询速度快，而链表相反，是插入容易，查询要遍历，速度慢。智能推荐
python 卡方检验 特征选择_结合Scikit-learn介绍几种常用的特征选择方法-程序员宅基地
文章浏览阅读437次。特征选择(排序)对于数据科学家、机器学习从业者来说非常重要。好的特征选择能够提升模型的性能，更能帮助我们理解数据的特点、底层结构，这对进一步改善模型、算法都有着重要作用。特征选择主要有两个功能：减少特征数量、降维，使模型泛化能力更强，减少过拟合增强对特征和特征值之间的理解拿到数据集，一个特征选择方法，往往很难同时完成这两个目的。通常情况下，我们经常不管三七二十一，选择一种自己最熟悉或者最方便的特征..._python sklearn卡方检验选择特征
Android 锁屏后无法接收UDP_android接收udp组播熄屏收不到-程序员宅基地
文章浏览阅读4.1k次。今天遇到一个很神奇的问题。 应用中有一个服务，服务中使用线程池 进行UDP的接收和发送。 但是，当锁屏后，数据无论如何都接收不到，当打开锁屏的时候，数据接收又恢复正常了。 并且，使用电源锁也没有任何效果。 PowerManager pm = (PowerManager)getSystemService(Context.POWER_SERVICE); wl = pm.newWakeLoc_android接收udp组播熄屏收不到
Netty的Reactor线程模型_reactor线程组-程序员宅基地
文章浏览阅读450次。上图是一个Reactor线程模型，基于select(),epoll()，Reactor线程将I/O调用请求和I/O操作分离开，理论上一个Reactor线程能处理N个网络I/O操作，但是当并发量很大的时候，一个Reactor线程就会出现响应缓慢，连接超时等问题。============================================================那么一个Reacto_reactor线程组
word中导出高分辨率pdf_word导出到pdf时可以选dpi吗-程序员宅基地
文章浏览阅读8.3k次，点赞8次，收藏24次。1、需安装有软件：Adobe Acrobat DC，可通过下面链接下载：https://pan.baidu.com/s/1oJJyN5TdayajDqmoTamkVw&shfl=sharepset 提取码:ai7u2、图片格式设置：如何使用matlab进行绘图，一定要保存图片格式为.tiff，这样才不会对文件进行压缩，使原有的图片分辨率保持不变。3、word在插入高分辨率图片前需..._word导出到pdf时可以选dpi吗
树莓派vi编辑文件时退格键和方向键无法正常使用的问题_树莓派 方向键-程序员宅基地
文章浏览阅读1.2k次。【问题现象】树莓派在使用vi编辑文件时，发现退格删除键(Backspace键)，无法删除，方向键变成了ABCD还自动换行。【问题解决】此问题根因是树莓派系统预装的是vim-tiny版本，就是简易版，且默认是兼容模式。ubuntu系统也有相同的问题。下面提供的方法通用适用ubuntu。使用vim命令时提示命令不支持，是因为新系统默认装了vi，没有装vim。【方案1】(推荐)卸载重装vim full完整版。参考命令如下：$sudo apt-get remove vim-common$sudo a_树莓派 方向键
java BufferedImage转MultipartFile-程序员宅基地
文章浏览阅读1w次，点赞43次，收藏21次。java生成二维码返回BufferedImage对象，需要转成MultipartFile进行文件上传。转换流程：BufferedImage → InputStream →MultipartFile //得到BufferedImage对象 BufferedImage bufferedImage = JoinTwoImage.testEncode(200, 200, url); //创建一个ByteArrayOutputStream By._bufferedimage转multipartfile
随便推点
PyCharm刷新项目（文件）目录_pycharm运行后,项目目录内的文件夹为啥不及时更新‘-程序员宅基地
文章浏览阅读2.5w次，点赞14次，收藏12次。利用PyCharm做项目，有时会有写文件（保存到项目中）的需求，但是可能是因为电脑比较慢，项目目录不会自动更新，需要自己手动刷新。可以自行设置“显示刷新图标”：view -->toolbar，需要刷新时，点一下就好了。_pycharm运行后,项目目录内的文件夹为啥不及时更新‘
python链表的建立_python创建链表-程序员宅基地
文章浏览阅读2.5k次，点赞2次，收藏8次。python链表的建立。_python创建链表
Jetpack架构组件 — Room入坑详解-程序员宅基地
文章浏览阅读5.7k次，点赞5次，收藏12次。Room是Jetpack组件库一员，属于ORM库，主要是对Sqlite做了一层抽象，从而简化开发者对数据库操作。Room支持编译时的语法检查，并且支持返..._jetpack room kapt
linux下 tar解压 gz解压 bz2等各种解压文件使用方法_hornycraft解锁农场-程序员宅基地
文章浏览阅读1.6k次。linux下 tar解压 gz解压 bz2等各种解压文件使用方法2010-03-23 15:15.tar 解包：tar xvf FileName.tar 打包：tar cvf FileName.tar DirName （注：tar是打包，不是压缩！） ——————————————— .gz 解压1：gunzip FileName.gz 解压2：gzip -_hornycraft解锁农场
知识图谱入门系列_nerrdfs-程序员宅基地
文章浏览阅读571次。很好的入门解说，包括实现方式及意义第一次在知乎上发帖，有不准确的地方欢迎大家指正！！！，后续会持续更新知识图谱相关技术细节。本贴大概介绍一下知识图谱中相关的技术。知识图谱针对于知识图谱基础知识，领域应用和学术前沿趋势进行介绍。知识图谱介绍知识图谱（Knowledge Graph）以结构化的形式描述客观世界中概念、实体及其关系。是融合了认知计算、知识表示与推理、信息检索与抽取、自然语言处理、Web技术、机器学习与大数据挖掘等等方向的交叉学科。人工智能是以传统符号派与目前流行的深度神经._nerrdfs
Thinkphp 模板/内置标签/Foreach标签_{foreach name="typelist" item="vo"}-程序员宅基地
文章浏览阅读4k次。Foreach标签foreach标签类似与volist标签，只是更加简单，没有太多额外的属性，例如：<foreach name="list" item="vo"> {$vo.id}:{$vo.name}</foreach>name表示数据源 item表示循环变量。可以输出索引，如下：<foreach name="list" item..._{foreach name="typelist" item="vo"}