- 主题:[求助]如何建立小型公司的数据仓库
很好的真实案例啊,请问你用的机器是ECC内存,是不是BTRFS/ZFS这种COW的都要上ECC内存呀
另外万兆网卡是网线的还是光纤的?
【 在 lvsoft 的大作中提到: 】
: 这两天我正在搭这样的系统。
: 上一台系统是gen8,4盘位btrfs raid1,期间硬盘没坏过,但我因为扩容更换过硬盘,整个过程比较平滑没啥问题。4块盘目前都接近50000小时了,我准备主动淘汰。顺便这台gen8的机器也用了快7年了,虽然还是总体满意的,但它的内存实在是有点小,准备让它退居二线了。
: 新的机器是ryzen 3700x,64G ecc内存,itx主板,还是准备找个跟gen8差不多小的4盘位机箱,4T ssd作为cache,4张机械盘跑raid1。插万兆卡,其他机器都用它pxeboot。nas跑每日快照,这样我所有的机器都有每日快照保护。
: ...................
--
FROM 113.88.168.*
汗,现在成本问题买的都是家用级别的硬件,上服务器级别成本要翻几倍吧
那么问题来了,普通内存可以用ZFS吗?有必要上ECC吗?
【 在 lvsoft 的大作中提到: 】
: 硬件raid5远不如软件zfs raid5靠谱。
: 这么说吧。如果你要用硬件raid5,你的所有系统都得上服务器级,包括硬盘在内。
:
--
FROM 113.88.168.*
他是系统盘用ZFS
【 在 cppbuilder 的大作中提到: 】
: 几十秒卡顿是挺奇怪的,我是32g内存,100多T的zfs,搭的Roon音乐服务器,
: 另外一台j3455电脑上做的播放器,配置的alsa缓冲5ms,还没遇到过卡顿。
--
FROM 113.88.168.*
天哪,BTRFS能稳定触发卡死.我有台机器系统盘也是BTRFS,有时候负载不重,温度也不高的下午很慢很慢,难道也是这个原因
【 在 lvsoft 的大作中提到: 】
: 我是当主分区,不是存储用了。
: zfs和btrfs都当主分区用过一段时间。
: zfs这个卡顿蛮奇怪的,没有固定的规律。似乎跟文件大小也没啥关系,有时候gcc编译一个很小的c文件都会触发。触发之后要卡20秒上下又正常了。
: ...................
--
FROM 113.88.168.*
tmpfs是内存里的吗?
【 在 cppbuilder 的大作中提到: 】
: 我工作站的主分区倒也是zfs好几年了,不过是nvme,临时文件和编译都放在tmpfs没遇到你这情况
--
FROM 113.88.168.*
Squashfs不是只读的吗?系统要升级或更改配置文件是不是要重新生成一次Squashfs
【 在 DreamDreams 的大作中提到: 】
: 我的ZFS用了十多年了还没出过卡顿,不过我的ZFS不是主分区
: 系统我都跑在只读Squashfs上
:
--
FROM 113.88.168.*
增加cache能提高硬盘读写速率吗?
还有ext4比ZFS快,但ext4+lvm cache/snapshot速度怎么样,能否比ZFS和BTRFS快?
【 在 lvsoft 的大作中提到: 】
: zfs是文件系统的天花板啊,当然比btrfs强。
: 选btrfs唯一的理由是内核原生内置。
: 举个例子,比如我这次要搞ssd cache,zfs原生支持,但其他方案都很折腾。
: ...................
--
FROM 120.229.36.*
查了一下,ECC内存的价格是非ECC内存的4倍以上,只能等ECC降价了。
【 在 lvsoft 的大作中提到: 】
: 要不要上ecc内存现在也有很多说法,正面反面都有。
: gen8是天然支持ecc的。现在ryzen反正也能很便宜的支持ecc,我的观点是能便宜获得的东西不用多考虑,上了肯定比不上好,不用太纠结。
: 万兆卡选sfp+口的,要上光模块还是电口可以随便调整。我是用的光纤。
: ...................
--
FROM 120.229.36.*
那就是说,非企业级的硬件还是用ZFS这种软raid比较合适,如果有要上硬件raid,如raid5,最好是企业级硬件?
同时内存最好也用ECC的,要不然还是有毁硬盘数据的风险。
【 在 lvsoft 的大作中提到: 】
: raid5的问题我很多年前就说过了。
: 家用级别硬件别用raid5。
: 因为raid5只是非常弱鸡的奇偶校验。
: ...................
--
FROM 120.229.36.*
这个有做过测试吗?非ECC内存出错概率多大?我趁着内存便宜,屯了近10根,要是全部换成ECC,又是一大笔开销。如果非ECC内存也能用,我就等到下次装新机器再换ECC内存了,现有的先不动了。
【 在 cppbuilder 的大作中提到: 】
: 其实不是必须的。 不过手册是说需要ecc
--
FROM 120.229.36.*