【小工具】1.需要对txt存放的测试数据做去重处理

概述采用集合去重，在新文件里逐行写入，达成目的 old_file = "D:/testdata/memberId.txt" #old result_file = &am 采用集合去重，在新文件里逐行写入，达成目的

old_file = "D:/testdata/memberID.txt"  #oldresult_file = "D:/testdata/memberID_new.txt" #newlines_seen = set()out_file = open(result_file,"w")f = open(old_file,"r")for line in f:  if line not in lines_seen:    out_file.write(line)    lines_seen.add(line)out_file.close()print("distinct_success")

总结

以上是内存溢出为你收集整理的【小工具】1.需要对txt存放的测试数据做去重处理全部内容，希望文章能够帮你解决【小工具】1.需要对txt存放的测试数据做去重处理所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错，欢迎将内存溢出网站推荐给程序员好友。