V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
hzw94
V2EX  ›  程序员

自建文件服务器,有什么推荐?主要用于 Tomcat 集群的文件管理问题。

  •  
  •   hzw94 · Jul 4, 2020 · 3885 views
    This topic created in 2133 days ago, the information mentioned may be changed or developed.

    以下这几个如何? HDFS(Google)、FastDFS 、MinIO (自建 oss )

    19 replies    2020-07-05 21:29:48 +08:00
    daimaosix
        1
    daimaosix  
       Jul 4, 2020
    MinIO,非常方便
    hzw94
        2
    hzw94  
    OP
       Jul 4, 2020
    @daimaosix 大佬,听说自建 oss 运维复杂,你们是怎么处理的?
    daimaosix
        3
    daimaosix  
       Jul 4, 2020
    @hzw94 MinIO 用 Go 写的,直接运行就行了,基本不用管。。。这个也基本不用运维的。
    daimaosix
        4
    daimaosix  
       Jul 4, 2020
    @hzw94 而且高度兼容 S3 的接口,还有简单的控制台,做文件管理挺合适的,你前面说的那两个才麻烦的
    hzw94
        5
    hzw94  
    OP
       Jul 4, 2020
    @daimaosix 学到了!!!感谢
    jwenjian
        6
    jwenjian  
       Jul 4, 2020
    FastDFS 运维反正是不简单
    salmon5
        7
    salmon5  
       Jul 4, 2020 via Android
    @daimaosix 你这就有点误导了,100TB 的运行下就行了吗?
    daimaosix
        8
    daimaosix  
       Jul 4, 2020   ❤️ 2
    @salmon5 你说我误导了,那你说呗,你留一句这话想表达什么?只是说我误导了?然而你仍然没有给出 100TB 的解决办法不是,楼主也没说多大的量,你怪得着我吗?
    defunct9
        9
    defunct9  
       Jul 4, 2020 via iPhone
    GFS2 副本 mirror 。服务器多的话就 ceph
    defunct9
        10
    defunct9  
       Jul 4, 2020 via iPhone
    fastdfs 过时了,minio 非常小巧。不知道大数据量会不会崩
    hzw94
        11
    hzw94  
    OP
       Jul 4, 2020
    @jwenjian 多谢
    @defunct9 GFS2 有点强,可以集群。我暂时用不到集群,主要还是简便易用的单机文件管理。
    @salmon5 @daimaosix 体量应该是不会到 100TB 那么高,小项目而已。
    XenoAmess
        12
    XenoAmess  
       Jul 5, 2020
    你有多少台机子啊上 HDFS 。。。
    你那边真的有这么大的需求吗
    总觉得 不太至于吧。。。。
    xabc
        13
    xabc  
       Jul 5, 2020 via iPhone
    filelist.cn git 搜吧
    hzw94
        14
    hzw94  
    OP
       Jul 5, 2020
    @XenoAmess 小项目,最多 3 台 Tomcat 服务器。我也是在了解中。
    @xabc 感谢,我去看看
    dadaoqueyi
        15
    dadaoqueyi  
       Jul 5, 2020
    我这边用的是 MongoDB,大文件用 Mongodb 的 gridfs,一般项目够用。
    XenoAmess
        16
    XenoAmess  
       Jul 5, 2020
    @hzw94 3 台?那 不太建议上 hdfs
    fox0001
        17
    fox0001  
       Jul 5, 2020 via Android
    sftp + rsync ?
    hzw94
        18
    hzw94  
    OP
       Jul 5, 2020
    @dadaoqueyi 我当初也考虑过,但是一想到 mongodb 的内存占用问题,就先放下了
    hzw94
        19
    hzw94  
    OP
       Jul 5, 2020
    @fox0001 这种不适合项目开放吧。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   939 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 65ms · UTC 20:30 · PVG 04:30 · LAX 13:30 · JFK 16:30
    ♥ Do have faith in what you're doing.