前面在pyqt5多线程(QThread)遇到的坑(一)中提到了先实例化类,再把实例对象传参到线程类,这样的确实可行,但是还是遇到了新坑。
pyqt5多线程(QThread)遇到的坑(一
被实例化的类是做数据处理的,传入和导出的的数据比较大,最少都是几万行的excel表格数据(pandas.DataFrame),而且传入的数据最少两个pandas.DataFrame表,多的时候会传入7个,而且有一些数据是公共数据,每次处理都必须处理的,直接放在数据处理类的初始化__init__中了,而这部分数据处理也是稍微有的耗时,那么坑就来了,先实例化数据处理类,那么这部分稍微耗时的数据处理也会导致UI界面卡死一小会,郁闷!虽然是卡死一小会,但我们是多线程处理,还会又卡死的现象那这个多线程的意义岂不是大打折扣。其实一开始并不知道是这里的先实例化导致的,经过反复实验后才发现,既然确定了这里的问题,那就只能把实例化的过程放到线程内了,但是放到线程内,那给这个数据分析类传参怎么办?
反复实验后,总结爬坑路线如下:
修改数据分析类的参数格式为:字典 → 把多线程类在最后增加一个参数“**kwargs”→在线程内实例化数据分析类 → 直接把多线程类接受数据的参数kwargs扔进去→数据分析类内接受数据的全局变量需要调整下,增加try,因为不是每次都传入所有数据,没有传入的数据会报错。
class main(object):
def analyze_data(self, pick_filename: str):
"""
数据分析,使用多线程启动数据分析
"""
# 之前是先实例化数据分析类再启动线程,数据分析类初始化时也耗时,会导致UI卡死一会,这里把实例化工作放到线程内进行
self.analyze_thread = MoreThreadAnalyze(path_name, data0=self.in_out_data, data1=data) # path_name 分析后文件保存路径,data0和data1是这次要传入的两个几万行的pandas.DataFrame
self.analyze_thread.end_signal.connect(self.alert_win)
self.analyze_thread.start() # 启动线程
def alert_win(self, path): # 接受线程结束信号的槽
print(path)
class MoreThreadAnalyze(QtCore.QThread):
"""
使用多线程进行出入库数据修改,传递数据为pandas.DataFrame 不能用信号传递,直接写入二进制文件pickle
pick_name: 将要保存的文件路径和文件名(pick文件)
**kwargs: 传入要分析的数据
"""
end_signal = QtCore.pyqtSignal(str)
def __init__(self, pick_name: str, **kwargs):
super().__init__()
self.kwargs = kwargs # 这里将得到一个字典,字典的value就是传递的pandas.DataFrame 表格
self.pick_name = pick_name # 分析完成后保存文件的路径
def run(self):
self.instense_name = TMDataAnalyze(self.kwargs) # 线程内实例化数据分析类,直接把
data = self.instense_name.more_prepare_analyze() # 数据分析并获得分析结果,其实这里是应该加判断的,数据分析类内不是只有more_prepare_analyze()这一个分析方法,所有这样里应该按传入的数据是哪个表格,以启动对应的数据分析方法,if判断相信你懂的,这里省略了。
data.to_pickle(self.pick_name) # 把分析后数据保存为 pickle文件
self.end_signal.emit(self.pick_name ) # 发出信号告诉UI本线程结束,顺便把保存文件路径再传递出去
class TMDataAnalyze(object):
"""
导入数据,并进行分析, 参数:
data:需要分析的源数据,字典格式
"""
def __init__(self, data: dict):
"""
这里定义的全局变量前必须加try了,因为不是每次都传入全部参数,没有传入的会报错,导致程序崩溃
"""
try:
self.data0 = data["data0"]
except Exception as er:
print(er)
self.data0 = None
try:
self.data1 = data["data1"]
except Exception as er:
print(er)
self.data1 = None
try:
self.data2 = data["data2"]
except Exception as er:
print(er)
self.data2 = None
try:
self.data3 = data["data3"]
except Exception as er:
print(er)
self.data3 = None
try:
self.data4 = data["data4"]
except Exception as er:
print(er)
self.data4 = None
try:
self.data5 = data["data5"]
except Exception as er:
print(er)
self.data5 = None
......
def more_prepare_analyze(self):
pass # 具体数据分析过程省略
if __name__ == "__main_":
ana = main()
ana.analyze_data()
个人完成后再猜测这样做的优缺点,除了解决了当前UI卡一会的问题之外,还应该有两点:
缺点:线程类被强制耦合了,只能用在数据分析这个模块了。不过也不是大问题,线程类比较简单,十几行代码,再创建一个公用就是了。
优点:原来实例化是在UI主线程全局中的,那么数据分析完成后,数据保存文件,但原来那些赋值为十几万行表格的变量一直在呀!多占资源!放在线程中,运行完就结束了,应该是节省了资源吧!
文章浏览阅读3.8k次。1、将下载好的萤石js插件,添加到SoringBoot项目中。位置可参考下图所示。(容易出错的地方,在将js插件在html页面引入时,发生路径错误的问题)所以如果对页面中引入js的路径不清楚,可参考下图所示存放路径。2、将ezuikit.js引入到demo-live.html中。(可直接将如下代码复制到你创建的html页面中)<!DOCTYPE html><html lan..._ezuikit 测试的url
文章浏览阅读322次。第二步,在弹出的对话框选择,设备驱动—>PLC—>莫迪康—>ModbusRTU—>COM,根据配置软件选择的协议选期期,这里以此为例,然后点击“下一步”。第四步,把使用虚拟串口打勾(GPRS设备),根据需要选择要生成虚拟口,这里以选择KVCOM1为例,然后点击“下一步”设备ID即Modbus地址(1-255) 使用DTU时,为下485接口上的设备地址。第六步,Modbus的从机地址,与配置软件相同,这里以1为例,点击“下一步“第五步,Modbus的从机地址,与配置软件相同,这里以1为例,点击“下一步“_组态王ua
文章浏览阅读9.4k次,点赞22次,收藏19次。安装npm相当于安装node.js,Node.js已自带npm,安装Node.js时会一起安装,npm的作用就是对Node.js依赖的包进行管理,也可以理解为用来安装/卸载Node.js需要装的东西_npm安装配置
文章浏览阅读748次,点赞21次,收藏26次。大家好,小编来为大家解答以下问题,python基础训练100题,python入门100例题,现在让我们一起来看看吧!宝子们还在新手村练级的时候,不单要吸入基础知识,夯实自己的理论基础,还要去实际操作练练手啊!由于文章篇幅限制,不可能将100道题全部呈现在此除了这些,下面还有我整理好的基础入门学习资料,视频和讲解文案都很齐全,用来入门绝对靠谱,需要的自提。保证100%免费这不,贴心的我爆肝给大家整理了这份今天给大家分享100道Python练习题。大家一定要给我三连啊~
文章浏览阅读1k次。 为了在 Linux ( Ubuntu) 上安装sublime,一般大家都会选择常见的教程或是 sublime 官网教程,然而在国内这种方法可能失效。为此,需要用安装包安装。以下就是使用官网安装包安装的教程。打开 sublime 官网后,点击右上角 download, 或是直接访问点击打开链接,即可看到各个平台上的安装包。选择 Linux 64 位版并下载。下载后,打开终端,进入安装..._ubuntu 安装sumlime text打不开
文章浏览阅读563次,点赞13次,收藏6次。CrossOver24是一款类虚拟机软件,专为macOS和Linux用户设计。它的核心技术是Wine,这是一种在Linux和macOS等非Windows操作系统上运行Windows应用程序的开源软件。通过CrossOver24,用户可以在不购买Windows授权或使用传统虚拟机的情况下,直接在Mac或Linux系统上运行Windows软件和游戏。该软件还提供了丰富的功能,如自动配置、无缝集成和实时传输等,以实现高效的跨平台操作体验。
文章浏览阅读1.7k次。一个用聊天的方式让ChatGPT帮我写的线程安全的环形List_为什么gpt一写list就卡
文章浏览阅读336次。我们在前面的文章里曾写过Web应用中乱码产生的原因和处理方式,旧文回顾:深度揭秘乱码问题背后的原因及解决方式其中我们提到可以通过Filter的方式来设置请求和响应的encoding,来解..._filterconfig selectencoding
文章浏览阅读651次。转自:http://www.jb51.net/article/36480.htmencodeURI和decodeURI是成对来使用的,因为浏览器的地址栏有中文字符的话,可以会出现不可预期的错误,所以可以encodeURI把非英文字符转化为英文编码,decodeURI可以用来把字符还原回来_js encodeur decodeurl
文章浏览阅读1.9w次,点赞6次,收藏3次。前言在日常的Android开发当中,我们肯定要打包apk。但是今天我打包的时候遇到一个很奇怪的问题Android The destination folder does not exist or is not writeable,大意是目标文件夹不存在或不可写。出现问题的原因以及解决办法上面有说报错的中文大意是:目标文件夹不存在或不可写。其实问题就在我们的打包界面当中图中标红的Desti..._the destination folder does not exist or is not writeable
文章浏览阅读94次。一、配置代码编辑区的样式 <1>打开Eclipse,Help —> Install NewSoftware,界面如下: <2>点击add...,按下图所示操作: name:随意填写,Location:http://eclipse-color-th..._ecplise高大上设置
文章浏览阅读2.8k次。一,下载mysql:http://dev.mysql.com/downloads/mysql/; 打开页面之后,在Select Platform:下选择linux Generic,如果没有出现Linux的选项,请换一个浏览器试试。我用的谷歌版本不可以,换一个别的浏览器就行了,如果还是不行,需要换一个翻墙的浏览器。 二,下载完后解压缩并放到安装文件夹下: 1、MySQL-client-5.6.2_linux mysql 安装 mysql-5.6.24-1.linux_glibc2.5.x86_64.rpm-bundle