python实现去重合并表格_Python-76 用pandas和openpyxl 实现对2个或多个excel的合并，去重 2020-09-28..._weixin_39980082的博客-程序员秘密

技术标签： python实现去重合并表格

用pandas和openpyxl 实现对2个或多个excel的合并，去重；具体代码与解释如下：

#用pandas实现vlookup类似的功能来实现两个表的合并，注意：要有一个对应的列单才可以，比如两个表里都有学号；

import pandas as pd

import openpyxl # pip install openpyxl

#load datasets from Excel files

df_1 = pd.read_excel('E:/菌株上架测序结果_新老99和潜在新种大整合结果/管子测序结果20200927.xlsx')

print(df_1)

df_2 = pd.read_excel('E:/菌株上架测序结果_新老99和潜在新种大整合结果/1.xlsx')

print(df_2)

#df_3 = pd.read_excel('sheet3.xlsx')

#merge datasets

df_combine = df_1.merge(df_2, left_on='客户编号', right_on = "编号")

#df_combine = df_combine.merge(df_3, on='PolicyID')

print(df_combine)

#output back into Excel

df_combine=df_combine.drop(columns='编号') #drop a column

print(df_combine.drop_duplicates())

df_combine.to_excel('E:/菌株上架测序结果_新老99和潜在新种大整合结果/df_combine1.xlsx',sheet_name='Combined')

这是第一个表：

4da233ee7384

image.png

这是第二个表：

4da233ee7384

image.png

我们的目标是合并，其中方法类似vlookup，

所以先合并，再去除重复的编号与客户编号列中的一个，会得到以下结果：

4da233ee7384

image.png

代码运行结果为：

4da233ee7384

image.png

本文链接：https://blog.csdn.net/weixin_39980082/article/details/110381139

原作者删帖不实内容删帖广告或垃圾文章投诉

智能推荐

Leetcode 387. 字符串中的第一个唯一字符（DAY 139） ---- LeetCode 精选 TOP 面试题_Love 6的博客-程序员秘密

文章目录原题题目代码实现（首刷自解）原题题目代码实现（首刷自解）class Solution {public: int firstUniqChar(string s) { unordered_map<char,int> map; for(const auto& chr:s) ++map[chr]; for(int i=0;i<s.size();++i) if(map[s[i]]

Activiti 工作流引擎_工作流引擎activiti_亨德萨姆的博客-程序员秘密

Activiti 工作流引擎

为什么epoll比select更高效？_epoll为什么比select更快_cong1024的博客-程序员秘密

1.select和epoll有什么不同？ <1>**select可以监听文件描述符是有限的**，由FD_SETSIZE设置，默认是1024，可以通过修改这个宏来增加可监听文件描述符的个数，但资料同时指出这样修改将导致不可预期的效果。**epoll可监听的文件描述符的个数为进程可打开的文件的个数**。<2>select中，当有事件就绪时，内核修改参数以通知用户，用户需要遍历所有的fd判断是哪个fd就绪，**

[APIO2010]巡逻树的直径_looooooogn的博客-程序员秘密

题目描述在一个地区中有 n 个村庄，编号为 1, 2, …, n。有 n – 1 条道路连接着这些村庄，每条道路刚好连接两个村庄，从任何一个村庄，都可以通过这些道路到达其他任一个村庄。每条道路的长度均为 1 个单位。为保证该地区的安全，巡警车每天要到所有的道路上巡逻。警察局设在编号为 1 的村庄里，每天巡警车总是从警察局出发，最终又回到警察局。下图表示一个有 8 个村庄的地区，其中村...

关于2022年MCM/ICM美国大学生数学建模竞赛报名通知_小红薯.的博客-程序员秘密

一、竞赛背景美国大学生数学建模竞赛（MCM/ICM）由美国数学及其应用联合会主办，是唯一的国际性数学建模竞赛，也是世界范围内最具影响力的数学建模竞赛。赛题内容涉及经济、管理、环境、资源、生态、医学、安全、等众多领域。竞赛要求三人（本科生）为一组，在四天时间内，就指定的问题完成从建立模型、求解、验证到论文撰写的全部工作，体现了参赛选手研究问题、解决方案的能力及团队合作精神。为现今各类数学建模竞赛之鼻祖。MCM/ICM是Mathematical Contest In Modeling和Interdisc.

引用变量的强制类型转换_instanceof_hlang8160的博客-程序员秘密

引用变量只能调用它编译时的类型方法，而不能调用它运行时类型的方法。强制类型转换：1.基本类型之间的转换只能在数值类型之间进行。数值类型与布尔类型不能转换。2.引用类型之间的转换只能在具有继承关系的两个类型之间进行，如果试图把一个父类实例转换为一个子类类型，则这个对象必须实际上是子类类型（即编译时时父类类型，而运行时为子类类型），否则会ClassCastException。/