pyqt5 的多线程(QThread)遇到的坑(二)_pyqt5 qtheard 线程阻塞导致程序奔溃-程序员宅基地

技术标签: python  pyqt5的坑  多线程  

前言

前面在pyqt5多线程(QThread)遇到的坑(一)中提到了先实例化类,再把实例对象传参到线程类,这样的确实可行,但是还是遇到了新坑。
pyqt5多线程(QThread)遇到的坑(一

起因

被实例化的类是做数据处理的,传入和导出的的数据比较大,最少都是几万行的excel表格数据(pandas.DataFrame),而且传入的数据最少两个pandas.DataFrame表,多的时候会传入7个,而且有一些数据是公共数据,每次处理都必须处理的,直接放在数据处理类的初始化__init__中了,而这部分数据处理也是稍微有的耗时,那么坑就来了,先实例化数据处理类,那么这部分稍微耗时的数据处理也会导致UI界面卡死一小会,郁闷!虽然是卡死一小会,但我们是多线程处理,还会又卡死的现象那这个多线程的意义岂不是大打折扣。其实一开始并不知道是这里的先实例化导致的,经过反复实验后才发现,既然确定了这里的问题,那就只能把实例化的过程放到线程内了,但是放到线程内,那给这个数据分析类传参怎么办?

处理方法

反复实验后,总结爬坑路线如下:
修改数据分析类的参数格式为:字典 → 把多线程类在最后增加一个参数“**kwargs”→在线程内实例化数据分析类 → 直接把多线程类接受数据的参数kwargs扔进去→数据分析类内接受数据的全局变量需要调整下,增加try,因为不是每次都传入所有数据,没有传入的数据会报错。

整体代码逻辑:
class main(object):
	def analyze_data(self, pick_filename: str):
	    """
	    数据分析,使用多线程启动数据分析
	    """
	   # 之前是先实例化数据分析类再启动线程,数据分析类初始化时也耗时,会导致UI卡死一会,这里把实例化工作放到线程内进行
	  self.analyze_thread = MoreThreadAnalyze(path_name, data0=self.in_out_data, data1=data)  # path_name 分析后文件保存路径,data0和data1是这次要传入的两个几万行的pandas.DataFrame
	  self.analyze_thread.end_signal.connect(self.alert_win)
	  self.analyze_thread.start()  # 启动线程
	
	def alert_win(self, path):  # 接受线程结束信号的槽
		print(path)


  class MoreThreadAnalyze(QtCore.QThread):
	  """
	  使用多线程进行出入库数据修改,传递数据为pandas.DataFrame 不能用信号传递,直接写入二进制文件pickle
	  pick_name: 将要保存的文件路径和文件名(pick文件)
	  **kwargs: 传入要分析的数据
	  """
	  end_signal = QtCore.pyqtSignal(str)
	
	  def __init__(self, pick_name: str, **kwargs):
	      super().__init__()
	      self.kwargs = kwargs  # 这里将得到一个字典,字典的value就是传递的pandas.DataFrame 表格
	      self.pick_name = pick_name  # 分析完成后保存文件的路径
	
	  def run(self):  
	      self.instense_name = TMDataAnalyze(self.kwargs)  # 线程内实例化数据分析类,直接把
	      data = self.instense_name.more_prepare_analyze()  # 数据分析并获得分析结果,其实这里是应该加判断的,数据分析类内不是只有more_prepare_analyze()这一个分析方法,所有这样里应该按传入的数据是哪个表格,以启动对应的数据分析方法,if判断相信你懂的,这里省略了。
	      data.to_pickle(self.pick_name)  # 把分析后数据保存为 pickle文件
	      self.end_signal.emit(self.pick_name ) # 发出信号告诉UI本线程结束,顺便把保存文件路径再传递出去
  
  class TMDataAnalyze(object):
	  """
	  导入数据,并进行分析, 参数:
	  data:需要分析的源数据,字典格式
	  """
	  def __init__(self, data: dict):
	  """
	  这里定义的全局变量前必须加try了,因为不是每次都传入全部参数,没有传入的会报错,导致程序崩溃
	  """
	      try:
	          self.data0 = data["data0"] 
	      except Exception as er:
	          print(er)
	          self.data0 = None
	      try:
	          self.data1 = data["data1"] 
	      except Exception as er:
	          print(er)
	          self.data1 = None
	      try:
	          self.data2 = data["data2"]  
	      except Exception as er:
	          print(er)
	          self.data2 = None
	      try:
	          self.data3 = data["data3"] 
	      except Exception as er:
	          print(er)
	          self.data3 = None
	      try:
	          self.data4 = data["data4"]  
	      except Exception as er:
	          print(er)
	          self.data4 = None
	      try:
	          self.data5 = data["data5"]  
	      except Exception as er:
	          print(er)
	          self.data5 = None
	          ......

     def more_prepare_analyze(self):
     	pass  # 具体数据分析过程省略
        
  if __name__ == "__main_":
  	ana = main()
  	ana.analyze_data()
总结

个人完成后再猜测这样做的优缺点,除了解决了当前UI卡一会的问题之外,还应该有两点:
缺点:线程类被强制耦合了,只能用在数据分析这个模块了。不过也不是大问题,线程类比较简单,十几行代码,再创建一个公用就是了。
优点:原来实例化是在UI主线程全局中的,那么数据分析完成后,数据保存文件,但原来那些赋值为十几万行表格的变量一直在呀!多占资源!放在线程中,运行完就结束了,应该是节省了资源吧!

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/wuwei_201/article/details/104803019

智能推荐

使用JDBC连接数据库出现 The server time zone value ‘�й���׼ʱ��‘ is unrecognized or represents more than one解决方案_jdbc.properties timezone-程序员宅基地

文章浏览阅读553次。在 jdbc.properties 文件中的 url 后面加上 ?serverTimezone=UTC加入之前的jdbc.properties文件:user=rootpassword=12345678url=jdbc:mysql://localhost:3306/testdriverClass=com.mysql.cj.jdbc.Driver加入之后:user=rootpassword=12345678url=jdbc:mysql://localhost:3306/test?serv_jdbc.properties timezone

计算机图形学孔令德基础知识,计算机图形学基础教程孔令德答案-程序员宅基地

文章浏览阅读1.4k次。计算机图形学基础教程孔令德答案【篇一:大学计算机图形学课程设】息科学与工程学院课程设计任务书题目:小组成员:巴春华、焦国栋成员学号:专业班级:计算机科学与技术、2009级本2班课程:计算机图形学指导教师:燕孝飞职称:讲师完成时间: 2011年12 月----2011年 12 月枣庄学院信息科学与工程学院制2011年12 月20日课程设计任务书及成绩评定12【篇二:计算机动画】第一篇《计算机图形学》..._计算机图形学基础教程 孔令德 答案

python xlwings追加数据_大数据分析Python库xlwings提升Excel工作效率教程-程序员宅基地

文章浏览阅读1k次。原标题:大数据分析Python库xlwings提升Excel工作效率教程Excel在当今的企业中非常非常普遍。在AAA教育,我们通常建议出于很多原因使用代码,并且我们的许多数据科学课程旨在教授数据分析和数据科学的有效编码。但是,无论您偏爱使用大数据分析Python的程度如何,最终,有时都需要使用Excel来展示您的发现或共享数据。但这并不意味着仍然无法享受大数据分析Python的某些效率!实际上,..._xlwings通过索引添加数据

java8u211_jre864位u211-程序员宅基地

文章浏览阅读911次。iefans为用户提供的jre8 64位是针对64位windows平台而开发的java运行环境软件,全称为java se runtime environment 8,包括Java虚拟机、Java核心类库和支持文件,不包含开发工具--编译器、调试器和其它工具。jre需要辅助软件--JavaPlug-in--以便在浏览器中运行applet。本次小编带来的是jre8 64位官方版下载,版本小号u211版..._jre8是什么

kasp技术原理_KASP基因分型-程序员宅基地

文章浏览阅读5k次。KASP基因分型介绍KASP(Kompetitive Allele-Specific PCR),即竞争性等位基因特异性PCR,原理上与TaqMan检测法类似,都是基于终端荧光信号的读取判断,每孔反应都是采用双色荧光检测一个SNP位点的两种基因型,不同的SNP对应着不同的荧光信号。KASP技术与TaqMan法类似,它与TaqMan技术不同的是,它不需要每个SNP位点都合成特异的荧光引物,它基于独特的..._kasp是什么

华为p50预装鸿蒙系统,华为p50会不会预装鸿蒙系统_华为p50会预装鸿蒙系统吗-程序员宅基地

文章浏览阅读154次。华为现在比较火的还真就是新开发的鸿蒙系统了,那么在即将上市的华为p50手机上会不会预装鸿蒙系统呢?接下来我们就来一起了解一下华为官方发布的最新消息吧。1.华为p50最新消息相信大家都知道,随着华为鸿蒙OS系统转正日期临近,似乎全网的花粉们都在关注华为鸿蒙OS系统优化、生态建设等等,直接忽略了不断延期发布的华为P50手机,如今华为P50系列手机终于传来了最新的好消息,在经过一系列方案修改以后,终于被..._华为手机p50直接预装鸿蒙系统

随便推点

python用什么软件编程好-初学python编程,有哪些不错的软件值得一用?-程序员宅基地

文章浏览阅读2.1k次。Python编程的软件其实许多,作为一门面向大众的编程言语,许多修正器都有对应的Python插件,当然,也有特地的PythonIDE软件,下面我简单引见几个不错的Python编程软件,既有修正器,也有IDE,感兴味的朋友可以本人下载查验一下:1.VSCode:这是一个轻量级的代码修正器,由微软规划研发,免费、开源、跨途径,轻盈活络,界面精练,支撑常见的自动补全、语法提示、代码高亮、Git等功用,插..._python入门学什么好

pytorch一步一步在VGG16上训练自己的数据集_torch vgg训练自己的数据集-程序员宅基地

文章浏览阅读3.2w次,点赞30次,收藏307次。准备数据集及加载,ImageFolder在很多机器学习或者深度学习的任务中,往往我们要提供自己的图片。也就是说我们的数据集不是预先处理好的,像mnist,cifar10等它已经给你处理好了,更多的是原始的图片。比如我们以猫狗分类为例。在data文件下,有两个分别为train和val的文件夹。然后train下是cat和dog两个文件夹,里面存的是自己的图片数据,val文件夹同train。这样我们的..._torch vgg训练自己的数据集

毕业论文管理系统设计与实现(论文+源码)_kaic_论文系统设计法-程序员宅基地

文章浏览阅读968次。论文+系统+远程调试+重复率低+二次开发+毕业设计_论文系统设计法

在python2与python3中转义字符_Python 炫技操作:五种 Python 转义表示法-程序员宅基地

文章浏览阅读134次。1. 为什么要有转义?ASCII 表中一共有 128 个字符。这里面有我们非常熟悉的字母、数字、标点符号,这些都可以从我们的键盘中输出。除此之外,还有一些非常特殊的字符,这些字符,我通常很难用键盘上的找到,比如制表符、响铃这种。为了能将那些特殊字符都能写入到字符串变量中,就规定了一个用于转义的字符 \ ,有了这个字符,你在字符串中看的字符,print 出来后就不一定你原来看到的了。举个例子>..._pytyhon2、python3对%转义吗

java jar 文件 路径问题_「问答」解决jar包运行时相对路径问题-程序员宅基地

文章浏览阅读1.3k次。我这几天需要做一个Java程序,需要通过jar的形式运行,还要生成文件。最终这个程序是要给被人用的,可能那个用的人还不懂代码。于是我面临一个问题:生成的文件一定不能存绝对路径。刚开始我想得很简单,打绝对路径改成相对路径不就行了吗?于是有了这样的代码:String path = "../test.txt";File file = new File(path);……这个写法本身并没有问题,直接运行代码..._jar启动文件路径中存在!

微信读书vscode插件_曾经我以为 VSCode 是程序员专属的工具,直到发现了这些……...-程序员宅基地

文章浏览阅读598次。如果你知道 VSCode,一说起它,你可能第一个想到的就是把它当做一个代码编辑器,而它的界面应该可能大概率是这样的——如果你恰好又是个程序员,那你可能经常会用到它,不管是 Python、JS 还是 C++ 等各种语言对应的文件,都可以用它来进行简单的编辑和整理,甚至是运行和 debug......但是今天要讲的显然不是这些,经过小美的多方研究,发现了即使是对于大多数并不了解 VSCode,也完全不..._vscode weixin read

推荐文章

热门文章

相关标签