V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐工具
RoboMongo
推荐书目
50 Tips and Tricks for MongoDB Developers
Related Blogs
Snail in a Turtleneck
drymonfidelia
V2EX  ›  MongoDB

mongodump 出来的文件为什么比数据库本身大了一倍多?数据库大小只有 100GB, dump 出来的 bson 有 242GB,硬盘放不下了,怎么不占用硬盘空间备份数据到其它机器?

  •  
  •   drymonfidelia · 162 天前 · 1855 次点击
    这是一个创建于 162 天前的主题,其中的信息可能已经有所发展或是发生改变。
    10 条回复    2024-06-22 13:34:21 +08:00
    drymonfidelia
        1
    drymonfidelia  
    OP
       162 天前 via iPhone
    补充:其它机器不在内网,延迟比较高,要比较高效的传输方式不能备份一次要一天那种
    0576coder
        2
    0576coder  
       162 天前
    mount 挂载盘
    drymonfidelia
        3
    drymonfidelia  
    OP
       162 天前
    @0576coder 不在同内网,延迟太高
    GeekGao
        4
    GeekGao  
       162 天前
    mongodump --gzip --db your_database_name --out /path/to/output/directory
    压缩试试
    zuotun
        5
    zuotun  
       162 天前
    不如直接复制数据库文件到其他机器....
    想要不占用本机硬盘, 要么挂载要么用管道符直接输出 (前提是你得保证网络速度和质量), 不清楚这么大的文件可不可以直接上管道符压缩, 但直接输出是没问题的.
    Sum0l
        6
    Sum0l  
       162 天前 via Android
    哈哈 楼上直接复制数据源文件的方法我几年前玩过,所有配置全都没变
    drymonfidelia
        7
    drymonfidelia  
    OP
       162 天前 via iPhone
    @Sum0l 这个系统全天高并发写入,直接复制不会损坏吗?
    @zuotun
    zuotun
        8
    zuotun  
       162 天前
    @drymonfidelia #7 那就先复制再传, 文件系统如果支持相同文件只占一份存储空间. 另外带宽够直接管道符弄就行了, 这种不会占用存储就怕网络断掉, 或者你想办法分割成多个压缩文件传掉一个删掉再导出下一个
    YTMartian
        9
    YTMartian  
       161 天前
    这是什么原理? mongodump 出来的是数据的纯 byte 形式吧,居然还会比原来的数据更大?
    glacer
        10
    glacer  
       161 天前
    在数据库里数据是压缩形式的吧,你 dump 出来肯定要大
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2546 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 05:05 · PVG 13:05 · LAX 21:05 · JFK 00:05
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.