如何用python排序大文件的csv文件

使用Data.olllo数戚瞎据助手好了，Data.olllo数据助手就是基于Python实现的，超大EXCEL、CSV、清老TXT数据文件排序都很简单高正空、方便。

python一堆文件解压方法如下。

压缩包解压要用的是zipfile这个包。

zip_file = zipfile.ZipFile(r'D:\数据源\XX_%s.zip'%yday)

zip_list = zip_file.namelist() # 压缩文件清单，可以直接看到压缩包内的各个文件的明细

for f in zip_list: # 遍历这些文件，逐个解压出来，

  zip_file.extract(f,r'D:\数据源')

zip_file.close() # 不能少！

print('昨日日志解压完成，请在文件夹中验收！') # 当然我是不需要查收的(*/ω＼*)

这里的解压 *** 作实际就相当于鼠标右键“解压到当前文件夹”的效果。

完成解压链芹后运行.close()是个比较好的习惯，否则可能会导致包括但不限于：

文件会一直被占用着，可能无法重新打开；

在进程结束之前文件都删不掉；

文件内容不能即时 flush 到磁盘直到进程结束；

到此，整个流程在无需打开浏览器和文件夹的情况下便自动完成了。

为了方便日常运行代码，搭竖这里把上面的两个流程包装成一个函数，下载解压

#下载昨日日志

def download_XXlog():

yday = (date.today()+timedelta(days=-1)).strftime('%Y%m%d') # 获取昨日日期

r =  requests.get('http://XXXXXXXX/XX_%s.zip'%yday) # 获取以日期命名的压缩包信息

with open(r'D:\数据源\XX_%s.zip'%yday,'wb') as code: # 将压缩包内容写入到 "D:\数据源\" 下，并按日期命名

code.write(r.content)

print('昨日XX日志下载完成。')

  zip_file = zipfile.ZipFile(r'D:\数据源\XX_%s.zip'%yday)

zip_list = zip_file.namelist() # 压缩文件清单，可以直棚枝毕接看到压缩包内的各个文件的明细

for f in zip_list: # 遍历这些文件，逐个解压出来，

    zip_file.extract(f,r'D:\数据源')

zip_file.close() # 不能少！

print('昨日日志解压完成，请在文件夹中验收！')

download_XXlog()

拓展

作为拓展，这里再加一个可以根据实际情况输入(input)起始和终止日期，来下载一个特定时间段日志的函数，这里就涉及了datetime和time这两个工具包了。

---