网站目录下静态网页文件过多会影响访问吗? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Ginson
V2EX    问与答

网站目录下静态网页文件过多会影响访问吗?

  •  
  •   Ginson 2019-12-09 17:12:12 +08:00 3108 次点击
    这是一个创建于 2140 天前的主题,其中的信息可能已经有所发展或是发生改变。
    RT,有一批因特殊原因及目的生成的静态页面,数量大约在 6 万个,放在 /news 目录下,通过 www.site.com/news/*.html 的 URL 访问。

    打包给运维发布上线时被 diss 了,他表示目录下文件过多会影响访问,但是具体怎么影响没说。

    想请问下 v2 的大家,是否确实如运维同事所说『网站目录下静态网页文件过多会影响访问』
    25 条回复    2019-12-10 01:06:10 +08:00
    DeWhite
        1
    DeWhite  
       2019-12-09 17:14:48 +08:00
    会。文件太多了有的时候会导致反应迟缓。
    virusdefender
        2
    virusdefender  
       2019-12-09 17:15:35 +08:00
    机械硬盘的文件系统性能会比较差
    virusdefender
        3
    virusdefender  
       2019-12-09 17:15:54 +08:00
    缓存好应该问题也不大,系统也有缓存的
    DeWhite
        4
    DeWhite  
       2019-12-09 17:16:50 +08:00
    因为存在一个阅历的过程,影响极小。
    但是如果连接数量大了,阅历起来会占一定问题。
    如果连接很大,会加载迟缓。
    id7368
        5
    id7368  
    PRO
       2019-12-09 17:17:42 +08:00 via iPhone
    直接 CDN 不就行了,60 万都没问题
    wafm
        6
    wafm  
       2019-12-09 17:21:10 +08:00
    站群 SEO ?
    lxk11153
        7
    lxk11153  
       2019-12-09 17:21:15 +08:00
    会把,把手机里微信图片 217773 个文件删了后,发现手机反应快了
    tabris17
        8
    tabris17  
       2019-12-09 17:24:19 +08:00
    当然会。大多数文件系统,同一目录下文件过多都会影响读性能
    Ginson
        9
    Ginson  
    OP
       2019-12-09 17:24:44 +08:00
    @DeWhite
    我原来的理解,用户通过 URL 访问应该时可以直接定位到具体 html 文件的。
    听您这么说,所以实际上系统还是会有一个遍历 -> 找到具体文件的过程?
    Ginson
        10
    Ginson  
    OP
       2019-12-09 17:26:30 +08:00
    @wafm 老哥太懂了。是 SEO 相关,但不是站群,正规站也可以这么搞的。
    Ginson
        11
    Ginson  
    OP
       2019-12-09 17:32:35 +08:00
    wafm
        12
    wafm  
       2019-12-09 17:37:15 +08:00
    @Ginson 访问的影响性应该不大,查询的影响就大了
    msg7086
        13
    msg7086  
       2019-12-09 18:24:56 +08:00   1
    ext2 用的是线性存储,意味着要在 10 万数据中定位一个文件最差可能要检索 10 万次数据才能找到文件记录。
    ext3 用的是 H 树,所以每次定位可能最多需要两三次即可找到。

    所以如果你们的服务器用的是 ext3 之后的文件系统(又或者是类似的 XFS ),一般不用担心文件定位性能。
    Cbdy
        14
    Cbdy  
       2019-12-09 18:27:03 +08:00 via Android
    看具体实现
    gamexg
        15
    gamexg  
       2019-12-09 19:01:00 +08:00
    听说现在新文件系统问题不大了,
    但是有另一个问题,运维进入这个目录,来个 ls,不知道会不会很烦
    delectate
        16
    delectate  
       2019-12-09 19:15:54 +08:00
    会,这个和存储介质( ssd/hdd/阵列)、文件系统有关。hdd 磁盘寻道会更慢,ssd 写放大。

    可以适当的分目录存储。
    caryqy
        17
    caryqy  
       2019-12-09 19:17:18 +08:00
    最好别全部在一个目录下,单个目录下文件数目是有个限制的.

    添加一个子目录, 比如 a1111.xml a2222.xml b2222.xml 这些目标文件在生成的时候根据第一个字母来决定目录,

    最终类似这样 xxx/a/a1111.xml, xxx/a/a2222.xml, xxx/b/b2222.xml
    crella
        18
    crella  
       2019-12-09 19:21:53 +08:00 via Android
    Ginson
        19
    Ginson  
    OP
       2019-12-09 22:00:17 +08:00
    @msg7086 ext4,所以问题应该不大。毕竟又不是要追求极致性能
    @gamexg 确实,ls 一下挺久的,可能最大影响就是运维的心情
    musi
        20
    musi  
       2019-12-09 22:34:11 +08:00
    运维只是 diss 不骂人?这个运维脾气还挺好
    msg7086
        21
    msg7086  
       2019-12-09 23:24:52 +08:00 via Android
    @caryqy 文件数目有什么样的限制?
    lmmortal
        22
    lmmortal  
       2019-12-09 23:43:52 +08:00 via Android
    @msg7086 fat32 同一目录下限制好像在 65534 个以内
    rogwan
        23
    rogwan  
       2019-12-09 23:47:16 +08:00 via iPhone
    不会。磁盘文件系统可以直接定位到对应文件名。
    akira
        24
    akira  
       2019-12-10 00:33:42 +08:00
    最好还是做个二级目录三级目录
    walpurgis
        25
    walpurgis  
       2019-12-10 01:06:10 +08:00
    看一些老的 PHP 网站程序,对于要服务器本地存储的情况,都在文件路径里加时间或哈希,防止单目录文件数过多,达到文件系统限制
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2505 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 26ms UTC 05:05 PVG 13:05 LAX 22:05 JFK 01:05
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86