V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
sjmcefc2
V2EX  ›  程序员

14 块硬盘,总 40t,有什么办法变成集中的存储

  •  
  •   sjmcefc2 · 2019-04-07 09:57:12 +08:00 · 9174 次点击
    这是一个创建于 2056 天前的主题,其中的信息可能已经有所发展或是发生改变。

    集中的方案哪种比较好呢?

    70 条回复    2019-04-08 15:21:54 +08:00
    sjmcefc2
        1
    sjmcefc2  
    OP
       2019-04-07 09:57:35 +08:00
    主机通过网络访问?
    Kilerd
        2
    Kilerd  
       2019-04-07 09:59:16 +08:00 via iPhone
    用了 raid 组起来?
    StarRED
        3
    StarRED  
       2019-04-07 09:59:33 +08:00 via Android
    这么多。。。
    sjmcefc2
        4
    sjmcefc2  
    OP
       2019-04-07 09:59:47 +08:00
    @Kilerd 到哪里找这么多硬盘位的机箱?
    luozic
        5
    luozic  
       2019-04-07 10:02:17 +08:00 via iPhone
    存储服务器,san
    sjmcefc2
        6
    sjmcefc2  
    OP
       2019-04-07 10:03:43 +08:00
    @luozic 一般有什么型号。
    sjmcefc2
        7
    sjmcefc2  
    OP
       2019-04-07 10:05:04 +08:00
    @sjmcefc2
    @luozic 然后怎么用呢?主机通过网络挂硬盘?可靠不?
    sjmcefc2
        8
    sjmcefc2  
    OP
       2019-04-07 10:05:32 +08:00
    @StarRED 闲置下来的。。。。
    scalaer
        9
    scalaer  
       2019-04-07 10:10:59 +08:00 via Android
    hdfs?
    awebc
        10
    awebc  
       2019-04-07 10:12:17 +08:00 via Android
    @yunsong 为什么会有这种操作
    w2exwh
        11
    w2exwh  
       2019-04-07 10:14:16 +08:00 via iPhone
    我们最近也在弄这种方案
    sjmcefc2
        12
    sjmcefc2  
    OP
       2019-04-07 10:15:44 +08:00
    @w2exwh 有什么比较好的方案吗,分散在各个主机确实有点不好利用,
    sjmcefc2
        13
    sjmcefc2  
    OP
       2019-04-07 10:17:40 +08:00
    都是普通 pc server 本身盘位有限,又分散,不好弄,想着能够 pc server 就弄个系统盘 ssd,其他的都通过网络,不知道行不行。
    w2exwh
        14
    w2exwh  
       2019-04-07 10:18:33 +08:00 via iPhone
    准备先虚化 然后搭建 HDFS
    sjmcefc2
        15
    sjmcefc2  
    OP
       2019-04-07 10:23:33 +08:00
    @w2exwh 有部分也是想着做 hadoop ;有些想着还是物理主机,不知大家有何妙招
    Flasky
        16
    Flasky  
       2019-04-07 10:33:59 +08:00 via Android
    前几天刚看到一款中塔机箱 10 个硬盘位的
    tony601818
        17
    tony601818  
       2019-04-07 10:34:35 +08:00
    有钱 RAID,没钱 HDFS
    hellojinjie
        18
    hellojinjie  
       2019-04-07 10:36:53 +08:00
    淘宝上,dell 2U 的 N 手服务器才 1000 块啊,有 12 个盘位,足够组 raid 了
    sjmcefc2
        19
    sjmcefc2  
    OP
       2019-04-07 10:44:09 +08:00
    @hellojinjie 吵吧
    @Flasky 推荐一把?
    @tony601818 HDFS 可以?硬盘带下不同,3t,4t 都有
    whatever93
        20
    whatever93  
       2019-04-07 10:45:39 +08:00 via Android
    ceph ?
    mchong
        21
    mchong  
       2019-04-07 10:51:31 +08:00
    淘宝有监控服务器机箱,买一个跑 zfs 吧
    ooxxcc
        22
    ooxxcc  
       2019-04-07 10:53:03 +08:00
    最便宜的方案大概是……买四台蜗牛星际矿渣,加一个交换机,组 ceph

    大概成本 1000 左右
    opengps
        23
    opengps  
       2019-04-07 10:54:06 +08:00
    raid0,不过数据太危险了
    yingfengi
        24
    yingfengi  
       2019-04-07 11:07:20 +08:00 via Android
    蜗牛🐌矿渣也才 4 个盘位,你这个有点难啊。可能要找找机架式的服务器了,专门做存储的那种,但是价格嘛。。。emmmm
    Flasky
        25
    Flasky  
       2019-04-07 11:07:26 +08:00 via Android
    @sjmcefc2 tb 搜硬盘机箱,第二个就是
    luozic
        26
    luozic  
       2019-04-07 11:15:36 +08:00 via iPhone
    有没有足够的钱,有钱,上 fcsan,没钱上存储服务器,再没钱上多硬盘支持的服务机框。 再没钱,nas 欢迎你,
    MonoLogueChi
        27
    MonoLogueChi  
       2019-04-07 11:22:16 +08:00 via Android
    买一张 raid 卡,一般一张卡可以拖 10 块硬盘
    tony601818
        28
    tony601818  
       2019-04-07 11:28:14 +08:00
    @sjmcefc2 HDFS 不就是 Hadoop,那个没限制,但是组起来比 RAID 烦
    Tarkky
        29
    Tarkky  
       2019-04-07 11:28:26 +08:00 via Android
    zfs,raid z3
    Tarkky
        30
    Tarkky  
       2019-04-07 11:31:06 +08:00 via Android
    joesonw
        31
    joesonw  
       2019-04-07 11:32:42 +08:00
    一个存储服务器(最大的有 40 盘位的), 用 10Ge 和 pc 连起来就好咯.
    hmmm
        32
    hmmm  
       2019-04-07 11:33:03 +08:00 via iPhone
    群晖了解下?
    sjmcefc2
        33
    sjmcefc2  
    OP
       2019-04-07 11:41:55 +08:00
    主要还是没钱。。。。。所以群晖啥的太贵了。。。就想着用 b85m-f plus 的主板搞一个可行的。

    @tony601818 hdfs 我也觉得麻烦,而且估计也别想着升级了。组件太多了
    @Tarkky zfs 倒是有好感,就是硬件啊怎么拼?还是 dell 二手?
    组完了,怎么挂到各种操作系统下呢?
    sjmcefc2
        34
    sjmcefc2  
    OP
       2019-04-07 11:44:35 +08:00
    @MonoLogueChi 买一张 raid 卡,一般一张卡可以拖 10 块硬盘 盘住哪里?露宿?
    yjd
        35
    yjd  
       2019-04-07 11:44:57 +08:00 via Android
    esxi vsan
    xuhaoyangx
        36
    xuhaoyangx  
       2019-04-07 11:47:09 +08:00
    zfs ceph hdfs
    sjmcefc2
        37
    sjmcefc2  
    OP
       2019-04-07 11:48:40 +08:00
    @Tarkky 这个看起来很棒,不过硬件要什么呢?
    sjmcefc2
        38
    sjmcefc2  
    OP
       2019-04-07 11:51:27 +08:00
    想在想来,一个是硬件好扩展,一个是软件系统如何挂到主机上?
    实在不太懂。
    sjmcefc2
        39
    sjmcefc2  
    OP
       2019-04-07 12:00:39 +08:00
    @joesonw 一个存储服务器(最大的有 40 盘位的), 用 10Ge 和 pc 连起来就好咯.
    是,可是钱哪里找啊
    vtoexshan
        40
    vtoexshan  
       2019-04-07 12:02:19 +08:00
    盘柜 orNAS
    ladypxy
        41
    ladypxy  
       2019-04-07 12:04:07 +08:00 via iPhone
    群晖 SHR,最适合不同容量的硬盘
    ladypxy
        42
    ladypxy  
       2019-04-07 12:04:46 +08:00 via iPhone
    如果是不同主机,那就 VMware vsan,不过容量会损失不少
    0312birdzhang
        43
    0312birdzhang  
       2019-04-07 12:14:08 +08:00
    当然是上 fastDFS 了
    winglight2016
        44
    winglight2016  
       2019-04-07 12:15:14 +08:00
    我之前搜索硬盘盒,发现似乎有 4 盘位还是 8 盘位的,USB 基本上可以全部挂上了
    Cheree
        45
    Cheree  
       2019-04-07 12:18:27 +08:00   ❤️ 4
    14 块盘才 40T 的容量,14 块盘一起用的电费都不少,而且上 14 块盘的设备成本也很高高,我的建议是二手清掉,换 5 块 8TB 上 NAS,有钱白的,没钱黑的
    MonoLogueChi
        46
    MonoLogueChi  
       2019-04-07 12:26:03 +08:00 via Android
    @sjmcefc2 以前我拿亚克力板做过一个硬盘架,画好图纸到淘宝上定制就可以了,十几块硬盘大小的,估计一百多块钱就可以搞定
    fox0001
        47
    fox0001  
       2019-04-07 13:01:35 +08:00 via Android
    @Cheree #45 确实,不要纠结于怎样废物利用
    jadeity
        48
    jadeity  
       2019-04-07 13:06:35 +08:00
    @Cheree 14 块二手盘能卖出一块 8T 的钱吗?按 365x24 小时算一瓦功耗一年差 8.8 度电,一块硬盘按 10 瓦功耗算 9 块 90 瓦一年 792 度电。按 5 年寿命算相差 3960 度,按 1.2 电价 5 年差 4752 块钱。一块 8t 硬盘现在最低也得 1500 块吧,不考虑一次性花几千块和 5 年花 4752 的差距,光是电费和换新的差价考虑也是不合算的。
    chinesestudio
        49
    chinesestudio  
       2019-04-07 13:22:18 +08:00 via Android
    三台普通台式机 装 proxmox 每台五块硬盘组 ceph 存储池。我的五台服务器还有 30 个 2.5 盘位 空着。可以关注一下 hp dl380p 噪音电量都很低 二手价格也比戴尔低。
    LifStge
        50
    LifStge  
       2019-04-07 13:22:26 +08:00
    @fox0001 #47 到最后 很有可能为了废物利用 却花费了接近全新的价格.... 服务器的耗电成本 才是大头. 手头上有的 能 diy 玩玩的 也不错 但是一定不能陷入为了废物利用而过多的大量投入... 到最后得不偿失
    envylee
        51
    envylee  
       2019-04-07 14:01:11 +08:00
    华硕 P7F-C/SAS,1156 针脚,14 个 sata 接口

    envylee
        52
    envylee  
       2019-04-07 14:03:41 +08:00
    我错了,好像你们在纠结怎么放,不是怎么连...
    metalbug
        53
    metalbug  
       2019-04-07 14:07:25 +08:00
    40t 还是放不下全部毛片
    youxiachai
        54
    youxiachai  
       2019-04-07 14:34:06 +08:00
    14 块硬盘。。买个 3U 的机箱了。。。
    lz 是没接触过服务器机箱?
    不过。还是楼上有个大佬说的对。。。如果 7*24 小时。电费是个坑
    msg7086
        55
    msg7086  
       2019-04-07 15:27:40 +08:00
    @jadeity 8T 最低 1500 块?之前我买的 10T 氦气也就 180USD=1210 人民币。

    @sjmcefc2 硬盘多了以后,接口 /平台成本会高于存储成本。如果你不介意单盘存储的,那就保持现状不动。如果要做集中式存储的,参考我以前写的帖子,弄一个 2U 的箱子装上 ZFS 然后把数据全部导进去。现有的硬盘可以出掉也可以当做冷备份。
    baijd
        56
    baijd  
       2019-04-07 16:01:08 +08:00 via Android
    @yingfengi 这矿渣用过?
    Navee
        57
    Navee  
       2019-04-07 16:06:02 +08:00
    https://www.zhihu.com/question/21359049/answer/622344230
    今天刚看到的方案,成本有点高,但是看上去性能不错
    SZP1206
        58
    SZP1206  
       2019-04-07 16:06:53 +08:00
    @Cheree 赞同
    sjmcefc2
        59
    sjmcefc2  
    OP
       2019-04-07 17:31:37 +08:00
    @Cheree 是个好主意。白的黑的你说的是群晖吧。
    @chinesestudio 感谢提醒。这个貌似也不错
    @youxiachai 没有接触过服务器机箱,目前全部泡在 pc server 上
    @msg7086 确实觉得单块大硬盘更加好用。接口、存储空间都是一个头疼的大问题。我去找找 zfs 的方案。可能还是保持现状更好
    电费确实有点。。。。。
    维持现状的问题就是,目前存储空间位置都无法固定了,都放在机箱里面,不知道有没有好的办法固定一下?
    vibbow
        60
    vibbow  
       2019-04-07 17:34:01 +08:00
    https://detail.tmall.com/item.htm?id=561730176491
    这种,多买几个,硬盘都放里面,然后 USB 插在同一台电脑上
    剩下的交给 Windows Stroage Space 就行了
    likuku
        61
    likuku  
       2019-04-07 20:52:57 +08:00
    买台 NetApp 吧,不在意预算的话,稳定可靠( ZFS 的师傅,当年还因此打官司)。
    zzlzhang
        62
    zzlzhang  
       2019-04-07 21:12:16 +08:00
    蜗牛星际垃圾的 C 款啊
    12 个 SATA3 口+ 1 个 SATA2 口
    才 400 多
    再去捡个 ATX 电源 外接上硬盘
    扔个黑裙
    多划算
    Jzer0n
        63
    Jzer0n  
       2019-04-07 21:23:26 +08:00
    @Cheree #45 同赞成这个方案。

    ===================

    不同容量真的不好管理,除了合理利用多余的硬盘这点,14 个盘啊
    yingyue
        64
    yingyue  
       2019-04-07 21:30:48 +08:00 via Android
    淘宝找一下 14 盘位的准系统也就 1000 多
    my3157
        65
    my3157  
       2019-04-08 01:42:55 +08:00
    偏题: 4U36 盘机器, 4T*36 or 10T* 36
    rpman
        66
    rpman  
       2019-04-08 07:19:13 +08:00 via iPhone
    我们实验室用服务器组 raid10,nfs 提供访问
    fonlan
        67
    fonlan  
       2019-04-08 07:54:52 +08:00 via Android
    如果有服务器的话直接装 FreeNAS。软 Raid 性能并不会比硬 Raid 差。
    evilangel
        68
    evilangel  
       2019-04-08 10:03:29 +08:00
    500 元打造 10 盘位 NAS:
    https://post.smzdm.com/p/apze5362/
    花 600 元,获得一个 24 盘位的 NAS 硬盘扩展柜
    https://post.smzdm.com/p/ag89d6m3/

    另外蜗牛星际矿机是有 13 sata 版本的,只是机箱太小放不下那么多没利用起来而已,可以花个三百来块钱买回来拆掉机箱换个电源再买几个 sata 线直接接出来也行。

    蜗牛星际 C 款双 I211 网卡 4G 内穿 13SATA 开箱及网卡测试
    https://post.smzdm.com/p/a4w0d668/
    easonl
        69
    easonl  
       2019-04-08 12:14:50 +08:00
    硬盘柜了解一下~
    vivisidea
        70
    vivisidea  
       2019-04-08 15:21:54 +08:00
    组 ceph 集群,通过多副本的方式来保证数据可靠和容量
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2636 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 15:15 · PVG 23:15 · LAX 07:15 · JFK 10:15
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.