加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 综合聚焦 > 服务器 > Linux > 正文

如果Linux中单个目录下的文件太多,会发生什么?

发布时间:2020-12-13 19:44:27 所属栏目:Linux 来源:网络整理
导读:如果单个目录中有1,000,000个单独的文件(大部分大小为10万),那么平面(没有其他目录和文件),在任何其他可能的方式上会有任何妥协的效率或劣势? 解决方法 ARG_MAX将会遇到问题,例如,rm -rf *(在目录中)会说“太多参数”.想要做某种游戏(或一个 shell)的实用程
如果单个目录中有1,000,000个单独的文件(大部分大小为10万),那么平面(没有其他目录和文件),在任何其他可能的方式上会有任何妥协的效率或劣势?

解决方法

ARG_MAX将会遇到问题,例如,rm -rf *(在目录中)会说“太多参数”.想要做某种游戏(或一个 shell)的实用程序将会有一些功能中断.

如果该目录可供公众使用(可以通过ftp或Web服务器进行说明),您可能会遇到其他问题.

对任何给定文件系统的影响完全取决于该文件系统.这些文件访问的频率是多少,什么是文件系统?记住,根据您的设置,Linux(默认情况下)优先将最近访问的文件保留在内存中,同时将进程置于交换中.这个目录是否通过http? Google会看到并抓取它吗?如果是这样,您可能需要调整VFS缓存压力和swappiness.

编辑:

ARG_MAX是一个系统范围的限制,可以向程序的入口点提供多少个参数.所以,让’rm’,并且示例“rm -rf *” – shell将’*’转换成空格分隔的文件列表,这些文件又成为’rm’的参数.

同样的事情将会发生在ls和其他几个工具.例如,如果太多的文件以’foo’开头,ls foo *可能会中断.

我建议(无论使用什么fs)将其分解成更小的目录块,仅仅因为这个原因.

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读