python 实现两个文本文件内容去重

嗨喽,大家好呀~这里是爱看美女的茜茜呐

👇 👇 👇 更多精彩机密、教程,尽在下方,赶紧点击了解吧~

python源码、视频教程、插件安装教程、资料我都准备好了,直接在文末名片自取就可


实现两个文本内容去重,输出两个文本不重复的结果

两个测试文本内容如下

cpp 复制代码
1.txt中内容为 1 2 3 4 5 6 7 8
2.txt中内容为 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 

分别读取两个文本的内容

读取1.txt的内容,具体实现如下:

cpp 复制代码
str1 = []
file_1 = open("1.txt","r",encoding="utf-8")
for line in file_1.readlines():
    str1.append(line.replace("\n",""))

读取2.txt的内容,具体实现如下:

cpp 复制代码
'''
遇到问题没人解答?小编创建了一个Python学习交流QQ群:261823976
寻找有志同道合的小伙伴,互帮互助,群里还有不错的视频学习教程和PDF电子书!
'''
str2 = []
file_2 = open("2.txt", "r", encoding="utf-8")
for line in file_2.readlines():
    str2.append(line.replace("\n", ""))   

取出重复的内容

创建一个空列表,将两个文件中重复的内容取出来,具体实现如下:

cpp 复制代码
str_dump = []
for line in str1:
    if line in str2:
        str_dump.append(line)    #将两个文件重复的内容取出来

去掉重复内容

将两个文本的内容合并,去除重复的内容

cpp 复制代码
'''
遇到问题没人解答?小编创建了一个Python学习交流QQ群:261823976
寻找有志同道合的小伙伴,互帮互助,群里还有不错的视频学习教程和PDF电子书!
'''
str_all = set(str1 + str2)      #将两个文件放到集合里,过滤掉重复内容
for i in str_dump:              
    if i in str_all:
        str_all.remove(i)       #去掉重复的文件

完整代码如下

cpp 复制代码
def file_qc():
    str1 = []
    file_1 = open("1.txt","r",encoding="utf-8")
    for line in file_1.readlines():
        str1.append(line.replace("\n",""))

    str2 = []
    file_2 = open("2.txt", "r", encoding="utf-8")
    for line in file_2.readlines():
        str2.append(line.replace("\n", ""))

    str_dump = []
    for line in str1:
        if line in str2:
            str_dump.append(line)    #将两个文件重复的内容取出来

    str_all = set(str1 + str2)      #将两个文件放到集合里,过滤掉重复内容

    for i in str_dump:              
        if i in str_all:
            str_all.remove(i)		#去掉重复的文件

    for str in str_all:             #去重后的结果写入文件
        print(str)
        with open("qc_V.txt","a+",encoding="utf-8") as f:
            f.write(str + "\n")

if __name__=="__main__":
    file_qc()

输出结果为

尾语

感谢你观看我的文章呐~本次航班到这里就结束啦 🛬

希望本篇文章有对你带来帮助 🎉,有学习到一点知识~

躲起来的星星🍥也在努力发光,你也要努力加油(让我们一起努力叭)。

最后,宣传一下呀~👇👇👇更多源码、资料、素材、解答、交流皆点击下方名片获取呀👇👇

相关推荐
小莞尔3 分钟前
【51单片机】【protues仿真】 基于51单片机八路抢答器系统
c语言·开发语言·单片机·嵌入式硬件·51单片机
绿箭柠檬茶7 分钟前
Ubuntu 服务器配置转发网络访问
服务器·网络·ubuntu
大模型真好玩13 分钟前
深入浅出LangGraph AI Agent智能体开发教程(五)—LangGraph 数据分析助手智能体项目实战
人工智能·python·mcp
测试老哥18 分钟前
Selenium 使用指南
自动化测试·软件测试·python·selenium·测试工具·职场和发展·测试用例
我是菜鸟0713号24 分钟前
Qt 中 OPC UA 通讯实战
开发语言·qt
JCBP_26 分钟前
QT(4)
开发语言·汇编·c++·qt·算法
Brookty30 分钟前
【JavaEE】线程安全-内存可见性、指令全排序
java·开发语言·后端·java-ee·线程安全·内存可见性·指令重排序
獭.獭.40 分钟前
Linux -- 信号【上】
linux·运维·服务器
hashiqimiya43 分钟前
centos配置环境变量jdk
linux·运维·centos
百锦再44 分钟前
[特殊字符] Python在CentOS系统执行深度指南
开发语言·python·plotly·django·centos·virtualenv·pygame