V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
alwayshere
V2EX  ›  程序员

Linux 下怎样快速查看一个超大文件夹的文件总大小?

  •  
  •   alwayshere · 2018-12-07 08:48:13 +08:00 · 14084 次点击
    这是一个创建于 1938 天前的主题,其中的信息可能已经有所发展或是发生改变。

    一个超大文件夹"./attachments",内部嵌套 3 级目录,总共的子目录大约有几百万个,总体积大概有几百个 G,怎样以最快的速度查看总文件夹的文件大小?

    35 条回复    2018-12-08 08:05:59 +08:00
    mxi1
        1
    mxi1  
       2018-12-07 08:49:12 +08:00 via iPhone
    du -sh .
    alwayshere
        2
    alwayshere  
    OP
       2018-12-07 08:49:50 +08:00
    @mxi1 这个实在太慢,半天出不来结果,“半天”不是形容词,是真的量词
    whileFalse
        3
    whileFalse  
       2018-12-07 08:51:39 +08:00
    先看看磁盘总大小,再减去其他文件夹的用量。。。
    xfspace
        4
    xfspace  
       2018-12-07 08:58:56 +08:00 via Android   ❤️ 2
    tree
    ncdu
    aaa5838769
        5
    aaa5838769  
       2018-12-07 09:05:00 +08:00
    du 的命令
    daigouspy
        6
    daigouspy  
       2018-12-07 09:06:59 +08:00 via Android
    大小摆在那里,还能快到哪里去。
    VisionTheta
        7
    VisionTheta  
       2018-12-07 09:09:34 +08:00   ❤️ 1
    ncdu 特别快
    Tink
        8
    Tink  
       2018-12-07 09:24:51 +08:00
    du -h --max-depth=1

    --max-depth 为目录深度
    chickplilita
        9
    chickplilita  
       2018-12-07 09:25:53 +08:00   ❤️ 1
    ncdu ,就是为这个事做的。
    likuku
        10
    likuku  
       2018-12-07 09:28:55 +08:00 via iPhone
    简单粗暴: 专门开一个分区 /卷 /磁盘 挂载到这个文件夹 /这个文件夹用独立分区存储

    df 就能瞬间给出结果了
    generalbao
        11
    generalbao  
       2018-12-07 09:34:15 +08:00
    楼上的 Tink 正解 亲测 du -h --max-depth=1
    x97bgt
        12
    x97bgt  
       2018-12-07 09:35:33 +08:00   ❤️ 1
    ncdu 应该很快
    AaronLiang
        13
    AaronLiang  
       2018-12-07 10:36:31 +08:00
    rm -rf *, 文件夹就很小了 :)
    vipdog73
        14
    vipdog73  
       2018-12-07 10:38:58 +08:00
    du -sh PATH
    CivAx
        15
    CivAx  
       2018-12-07 10:51:41 +08:00   ❤️ 1
    du --max-depth=1 -h 在面对 “多层级的零散备份目录” 或者 “多层级图片业务目录(如实名认证业务)” 这种单文件夹内有成百个子文件夹,子文件甲中又有几十个子文件夹的目录结构的时候还基本跟死了无异,strace 能看到卡在某个路径一直在扫描很久没动静……
    所以还是推 ncdu
    dot2017
        16
    dot2017  
       2018-12-07 10:52:34 +08:00
    du -sh 可以看文件夹大小啊
    mattx
        17
    mattx  
       2018-12-07 10:58:19 +08:00
    @generalbao #11 --max-depth 可以简化成 -d
    qqpkat2
        18
    qqpkat2  
       2018-12-07 11:47:59 +08:00
    写脚本呗
    mxi1
        19
    mxi1  
       2018-12-07 11:57:54 +08:00
    @alwayshere ^_^ 明白了
    tumbzzc
        20
    tumbzzc  
       2018-12-07 12:12:36 +08:00 via Android
    du -sh attachments
    GeruzoniAnsasu
        21
    GeruzoniAnsasu  
       2018-12-07 12:15:52 +08:00 via Android
    剑走偏锋……算其它目录的总大小
    jasonyang9
        22
    jasonyang9  
       2018-12-07 12:37:06 +08:00 via Android
    又学到一个新命令,ncdu
    werty
        23
    werty  
       2018-12-07 14:44:49 +08:00
    rm -rf * && du -h -d 1
    速度一定不会慢 :)
    jingrui
        24
    jingrui  
       2018-12-07 14:46:16 +08:00
    du --max-depth=1 -h /usr/
    zhila
        25
    zhila  
       2018-12-07 14:52:12 +08:00
    一直是把这种文件放到独立的分区里然后 df,ncdu 学到了。
    iScout
        26
    iScout  
       2018-12-07 18:06:00 +08:00 via Android
    ncdu 学到了
    gesse
        27
    gesse  
       2018-12-07 18:14:25 +08:00
    机械盘就没办法了
    orm
        28
    orm  
       2018-12-07 18:16:40 +08:00 via iPhone
    ncdu 是的好软件
    snail1988
        29
    snail1988  
       2018-12-07 18:19:19 +08:00
    ncdu 也没快太多,这是因为文件系统的设计导致的。。楼主想找一瞬间就读出大小的方法,常见的文件系统应该是不支持的。。。
    vuuv
        30
    vuuv  
       2018-12-07 21:51:40 +08:00 via Android
    du 的 max-depth 只是控制汇总显示的粒度。
    当然逐行显示会因为有进展而让人觉得会快些,实际上加不加此参数,对整体耗时无影响。
    msg7086
        31
    msg7086  
       2018-12-07 21:57:58 +08:00
    小文件多的话考虑用 Reiser 系。常见的 ext4 之流对几百万文件是怎么都不会快起来的,不用想了……
    codehz
        32
    codehz  
       2018-12-07 22:12:52 +08:00
    @vuuv #30 有,输出到 tty/管道也是阻塞的(
    booxlp
        33
    booxlp  
       2018-12-07 22:44:55 +08:00 via iPhone
    du -h ./attachments — max-depth=1
    luobo
        34
    luobo  
       2018-12-07 22:45:03 +08:00
    mark mark
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5439 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 08:44 · PVG 16:44 · LAX 01:44 · JFK 04:44
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.