linux – 获取递归包含在目录中的文件列表的最快方法是什么?

linux – 获取递归包含在目录中的文件列表的最快方法是什么?,第1张

概述我有一个目录,其中包含分布在文件夹层次结构中的数百万个文件.该目录存储在大型远程NFS文件系统中.我想尽快检索这些文件的列表. 是否有可能比找到更快. > LIST.TXT?哪些因素影响速度?我正在使用python,但只要速度快,任何解决方案都会使用. 在linux上,这对我来说是最快的.像这样使用(bash)globbing和printf: printf "%s\n" directory/**/ 我有一个目录,其中包含分布在文件夹层次结构中的数百万个文件.该目录存储在大型远程NFS文件系统中.我想尽快检索这些文件的列表.

是否有可能比找到更快. > List.TXT?哪些因素影响速度?我正在使用python,但只要速度快,任何解决方案都会使用.

解决方法 在linux上,这对我来说是最快的.像这样使用(bash)globbing和printf:

printf "%s\n" directory/**/fileprintf "%s\x00" directory/**/filename-with-special-characters | xargs -0 command

似乎要快得多

find directory -name file

要么

ls -1R directory | grep file

甚至,令人惊讶的是,

ls directory/**/file

这是一个本地文件系统:x86_64系统,SSD上的ext4文件系统,目录结构超过600,000个目录,其中包含多个文件.

总结

以上是内存溢出为你收集整理的linux – 获取递归包含在目录中的文件列表的最快方法是什么?全部内容,希望文章能够帮你解决linux – 获取递归包含在目录中的文件列表的最快方法是什么?所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/yw/1017804.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-05-23
下一篇 2022-05-23

发表评论

登录后才能评论

评论列表(0条)

保存