V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要把任何和邀请码有关的内容发到 NAS 节点。

邀请码相关的内容请使用 /go/in 节点。

如果没有发送到 /go/in,那么会被移动到 /go/pointless 同时账号会被降权。如果持续触发这样的移动,会导致账号被禁用。
paidahai
V2EX  ›  NAS

准备存储 10 年以上的 NAS 硬盘方案?

  •  4
     
  •   paidahai · 163 天前 · 12447 次点击
    这是一个创建于 163 天前的主题,其中的信息可能已经有所发展或是发生改变。

    需求:

    1. 家庭 NAS ,主要存储摄像机的视频(占大头),想把孩子成长记录保存下来。还有就是手机相册、视频的备份等需求(小头)。
    2. 摄像头目前是小米 C700 ,只录制动态画面,平均每天产生 3.5G 视频数据,按照这个算一年 1277.5G ,就按照 1.5-2T 算吧。10 年大概需要 15-20T 的存储空间。
    3. 摄像头视频可以便捷同步到 NAS ,最好方便管理和在线查看。

    做了一些调研,初步想法:

    1. 整体预算不超过 1w 。综合考虑群晖 923+,4 盘位,AMD 的 X86 也可以支持虚拟机和 docker (偶尔用)
    2. 硬盘还没想好,两个方案
    • 方案 1:直接一步到位上 4 个 8T 做 Raid5 (可用空间 21.8T );
    • 方案 2:还是 2 块 16T 做 raid1 或 SHR (可用空间 14.5T ),5 年后硬盘用得差不多,再扩容 32T 或者更大(那时候硬盘价格也下来了吧,但扩容感觉也很麻烦)
    1. 硬盘价格就真看不懂,同样是 16T ,某东和某宝差距好大,差了一倍都不止,有啥猫腻吗……

    大家觉得存储哪个存储方案合适?

    112 条回复    2024-09-26 10:52:16 +08:00
    1  2  
    povsister
        1
    povsister  
       163 天前   ❤️ 3
    你这个要求,百度盘 10 年不倒的概率,比你自己 R1 盘 10 年不坏的概率还大不少。

    百度就算一个会员给 4T 空间,你 2 年一个帐号,文件全部按月打包 RAR5 加恢复记录上密码。会员费应该比 1 万低得多。

    另外,个人长期存储东西,机械硬盘+干燥箱冷备。NAS 作用是 7x24 在线的大容量存储,我看你似乎没这个要求。所以不必强行上 nas
    geligaoli
        2
    geligaoli  
       163 天前
    建议方案 2 ,买企业级硬盘。2 个 16T 的比 4 个 8T 的便宜很多。做重要的实时备份,至少要保证 raid1 ,这是有教训的。如有多余的硬盘,那就再多备份一份。就算是企业级硬盘,单盘的损坏也是不可预测的,我用的有上十多年都不出问题,也有一年多就出现坏道文件损坏的。
    便宜的硬盘肯定是翻新盘。重要的资料一定用全新盘,5 年质保的那种。翻新盘可以用来放视频、电影、网上的资料等,毕竟便宜很多,而且有商家质保通常一般也不容易坏。
    geligaoli
        3
    geligaoli  
       163 天前   ❤️ 3
    @povsister 网盘已经遇到过几次文件损坏了,没有任何异常提示,但下载下来的文件不可用。而本地备份的文件,遇到过 raid1 怀了单盘的情况,但文件都没问题。
    网盘还有个很难以接受的情况,除了 8 秒提示外,pdf ,doc ,txt 都遇到过“根据。。。不可访问”之类的情况,从内容上又完全看不出哪里违规,所以现在重要资料根本不敢相信网盘。
    kkocdko
        4
    kkocdko  
       163 天前
    监控视频可以考虑转码压制, 拿 ffmpeg svt-av1 压一下。
    cpstar
        5
    cpstar  
       163 天前   ❤️ 1
    这是说要把监控视频(半)永久存储? OMG ,有想法。

    我觉得就别折腾四盘位了,基本就是鸡肋,上个 RAID5 ,处于薛定谔的安全状态,上个 RAID10 真是心疼。所以六盘位起,6HDD+2SSD 之类的,SSD 可以弄 NVMe ,HDD 则可以继续看情况往上加。做 RAID6 。至于单盘尺寸,目前大容量基本上都得氦气,过几年基本就需要硬淘汰了,还不如中尺寸空气盘,然后组合盘多的优势,形成大尺寸总空间。

    至于预算,这种对空间的强需求,自己组 NAS 吧,买成品贵到死。上 TrueNAS 或者 iStore 甚至黑一个群威什么的,总体也会便宜很多。

    我现在的情况是 6*4T RAID6 做主备,2*8T 独立运行分别作为下载盘和扩展存储盘,1*2T U.2 SSD 作为主系统运行盘,以及 SATA SSD 作为缓存;另有一台 4*4T 使用 MinIO 作为异地备份机。自攒,8 盘位机箱,MATX 主板,黑威系统。
    bs10081
        6
    bs10081  
       163 天前   ❤️ 2
    我自己的方案

    DS920+ 20GB RAM
    兩顆 WD HC550 16TB 做 SHR (可用空間 14.6TB )
    HyperBackup 整機資料到 Azure Storage 做備份

    日常使用的 home 目錄通過 CloudSync 雙向同步到 Microsoft 365 Developer E5 (避免 E5 帳號失效後檔案不見)

    日常照片就用 Synology Photos 備份,檔案用 OneDrive 開,電腦截圖資料夾用 OneDrive 裡面的 Photos 的 Screenshot 資料夾,這樣也能同步到 Synology Photos 裡面,再設定個 Script ,超過一個月的截圖就自動刪除

    攝像機用 Surveillance Station 來管理和查看,舊手機也能當做攝像頭
    ajyz
        7
    ajyz  
       163 天前
    15 年的西数红盘( 4T 那种,当初的应该是非垂直盘?这么算来用了 8 年半),2 块组的 raid1 ,去年底其中一块报坏道出错,然后我就入了两块 16T 西数 HC550 ,还是 raid1 ,旧盘数据导过来了,这个新盘不知道能用几年。差价大,我估计你看的有些是二手盘(运行 2 万小时那种),正常京东与淘宝我关注的,差价大多时候就差一个开票价
    fairytale
        8
    fairytale  
       162 天前 via Android
    监控这种冷数据,为啥不用磁带?
    AkaGhost
        9
    AkaGhost  
       162 天前 via Android
    @fairytale 正确的,磁带也很好用
    除了磁带机贵一点,磁带价格还是很不错的。只要妥善保存,磁带寿命蛮不错
    starinmars
        10
    starinmars  
       162 天前
    @povsister 不要考虑网络的上传速度吗? 说不定哪天运营商因为上传量太大就给你封。用阿里都不用百度。
    starinmars
        11
    starinmars  
       162 天前
    @fairytale 磁带机多少钱? 这点数据又不是 PB 级还上磁带。
    wpzz
        12
    wpzz  
       162 天前
    我是通过 MAC 用共享文件夹,通过 IOS 快捷命令定期备份 ,CF 的 Tunnel 实现外网访问。

    好处是 0 硬件,扩展直接加硬盘就行,还便宜,用于冷存图片视频。

    还能动态划分大小,目前划了 200g 实现云网盘功能 hhh
    paidahai
        13
    paidahai  
    OP
       162 天前 via iPhone
    @povsister 网盘类不考虑,一方面是隐私问题,经常被和谐,还是存在考虑本地。另外一方面,也有时不时查看视频需求,打包加密上传虽然解决隐私,但基本就没法在线查看了。
    EndlessMemory
        14
    EndlessMemory  
       162 天前
    硬盘老老实实选大容量企业盘并且做好 raid
    paidahai
        15
    paidahai  
    OP
       162 天前 via iPhone
    @geligaoli 看了一些测评,企业盘噪音可能比较大?不过没在家里体验过,nas 盘理论上噪音好些
    Jhma
        16
    Jhma  
       162 天前
    长期用,盘最好采用 SAS ,稳当点的就是 SAS 10T 四块盘做 RAID10 ,但群晖有可能会硬盘型号限制,不过有民间脚本解决
    efsg
        17
    efsg  
       162 天前 via Android
    你本地 RAID6 阵列,有 2 块盘冗余,然后 Backblaze 云端存一份,这样就坚不可摧了
    ilylx2008
        18
    ilylx2008  
       162 天前
    每 3 年换一批硬盘,做好备份。
    ohmyself
        19
    ohmyself  
       162 天前
    又不是每天读写的数据,就单盘裸存,然后拿其中一块双备份比什么 RAID 都稳。
    当然需要更稳要上存储 321 。
    goodryb
        20
    goodryb  
       162 天前
    我是 raid1 加单独的移动硬盘冷备一份,raid5 也麻烦,坏了还得有新盘快速顶上,不如直接冷备


    群晖有 usb copy ,每天定时备份即可
    paidahai
        21
    paidahai  
    OP
       162 天前 via iPhone
    @bs10081 感谢分享。考虑群晖主要也是套件比较丰富。Surveillance Station 还没用过,好像得摄像设备支持 RTSP 协议,ONVFI 协议才行。小米系列目前好像都不支持这两个协议。
    paidahai
        22
    paidahai  
    OP
       162 天前 via iPhone
    @ohmyself 是的,摄像头视频每天同步一次 NAS ,其实对硬盘写频率很低。家庭场景,非工业视频监控。
    Jokesy
        23
    Jokesy  
       162 天前
    作为技术人员,可以考虑一下 阿里云和腾讯云的 oss 和 nas 。非推广,根据自己需求来定。
    1 、归纳各个方案,列出优缺点
    2 、根据实际情况三思而后行 ,选择最适合的方案
    3 、开始实施
    完美收工(能打的一个都没有
    ruohai
        24
    ruohai  
       162 天前
    监控视频存储,没有高频 io 需求,没有必要用 raid ,不管是 raid5/raid6/raid10 ,无非是坏盘数量多少的问题,都存在一定数量的盘坏了以后数据全部 gg 的可能。

    个人建议方案是用 unraid ,或者动手能力强的话自己搓 mergerfs + snapraid ,都是单盘存储据,可以每盘存一年的数据进行分类归档。坏盘数量可控时有校验盘可以恢复数据,坏盘数量不可控时至少好盘的数据还在。

    另外就是老生常谈的 raid 不是备份,做不到 321 ,至少在云盘也做个备份。
    fairytale
        25
    fairytale  
       162 天前 via Android
    @starinmars 不用 pb ,tb 就可以。2.5t 的磁带 40 元
    Rendex
        26
    Rendex  
       162 天前
    @starinmars #11 LTO6 的磁带机是 1600 左右了,不过磁带需要每半年倒带一次,要是没有带库的话会比较麻烦。带库就要万把块了
    valord577
        27
    valord577  
       162 天前   ❤️ 1
    图片使用 heif 或者 avif 编码 视频用 hevc 或者 av1 编码 存储空间立省好几倍 反正是自建 格式兼容的 app 也是可以找得到的
    saranz
        28
    saranz  
       162 天前   ❤️ 1
    如果只是冷存储,那么有一个叫作光盘的东西应该很适合你的。

    别看光盘被淘汰了,但是作为冷存储绝对是最优秀的介质。

    所需要的是现在至少购入两套光盘读写设备(现在淘宝上还有得卖,也不贵。所以应该提前购买一套作为备用。)
    光盘的购买,这个其实也不用购买太多。毕竟光盘这东西现在还是有一些商用的,比如医院的 CT 现在都是给光盘。所以先购入 3~5 盘就好。

    外围设备就是一台电脑,随时将硬盘上的数据转入光盘。

    缺点:需要时间整理以及不方便随时网络查看。
    rainbowtrash2333
        29
    rainbowtrash2333  
       162 天前
    可以考虑一下矿盘,小黄鱼 16T 矿盘 900 元,买 4 个,每两个组 raid1 ,问题也不大
    lulugtxy
        30
    lulugtxy  
       162 天前 via Android
    敢赌一手 115 不倒闭,5800 左右的永 v+5pb 性价比还不错的
    maizero
        31
    maizero  
       162 天前
    刚好玩 NAS 超过 10 年,我的几个建议:
    maizero
        32
    maizero  
       162 天前   ❤️ 8
    习惯性 cmd+回车发送了,抱歉,接#31:
    1. 用发展的眼光看问题,不要按照现在的需求和成本、可选技术路线进行方案定型,方案是会迭代的;
    2. 这点需求,PC+U.2+HDD 过渡性存储+多副本备份,是王道。

    理由:
    1. 13 年玩 NAS ,第一台 DS412+,4 盘位,入的 WD 红盘,4TB*4 ,raid5 ( JD 入手);
    2. 后来 18 年换 DS1817+,年底加了 DX517 做盘位扩充,升级到 8T 红盘。
    发现的问题:
    1. 所谓 WD 红盘,NAS 盘,属于智商税,以上这些 4T 、8T 的红盘,在白群晖+UPS+杭州很少断电的情况下,故障率很高;
    2. 一劳永逸不现实,一开始 4 盘位,后来到 8 盘位,再到盘位扩展,其实需求是会增加的,可扩展性很重要。

    到这时候,我还是 raid5 的忠实粉丝,但是有坑,虽然我没被 WD 红盘的故障+raid5 rebuild 害过,但是每次降级后的 rebuild 过程,我都胆战心惊,原因:

    1. 盘几乎是同一批的,4 盘 raid5 、8 盘 raid5 ,在 rebuild 过程很有可能再挂一个;
    2. 软 raid 的 rebuild 很漫长……因为是重新校验+读+写+软 raid 依赖 CPU 性能。

    后来因为群晖性能一般,可扩展性的性价比不高,而且家里开始用万兆网络,威联通在做 2 个千兆链路聚合也效果不佳,局域网的同步速度非常差,原因:
    1. HDD 本身读写就不快,8 盘 8T raid5 在 DS1817+之下,吃满千兆网络后,做链路聚合也没实现 X2 ;
    2. 缺乏 SSD 做缓存,读写都是 8 个盘在咔咔转,很吵,虽然我那时候有书房。

    我放弃了群晖入了威联通,原因:
    1. QNAP 在功能上更专业,相对性价比更高,虽然软件 ui 很烂,和 dsm 不能比;
    2. 我一步到位的买了当时最贵的 872XT ,价格 2w ,10 盘位( 8 个 3.5 sata ,2 个 m2 ),支持 pcie 、万兆、雷电 3 ,i5 的 u ;
    3. QNAP 扩展很方便,USB-C 的 TL D800C ,或者 pcie+8088 线的 TL D800S ,随便就可以再加 16 个 3.5 sata 盘位。

    这个时候我开始用 10T 及以上的企业盘,放弃 WD 红盘。
    这时候我也知道希捷的酷狼是智商税。
    于是希捷银河 10T 开始,到 16T 。
    西数的 HC 系列,从 14T 、16T 、18T 、20T 、22T 。
    东芝的 MG09 、MG10 系列,从 MG09 的 18T ,到 20T 。

    但是同时为了解决噪音问题、内网万兆后的访问速度问题,我开始考虑 SSD ,一开始 872XT 的 M2 只是用来做读写缓存,后来我开始用 M.2 转 U.2 ,开始上 U.2 ,于是打开新世界大门。

    U.2 是垃圾佬最爱,入坑后就回不了头,于是我入了 QNAP 的 9 盘位,其中 4 个 2.5 盘位分别支持 2 个 U.2 和 SATA 。
    这时候软 raid5 的弊端开始浮现,我终于遇到 8 盘 raid5 出现 2 盘故障的 Case ,就发生在 872XT 上。

    这是一个 16T*8 的 raid5 ,110 多 T 的数据,其中就包含了 OP 提到的:家庭监控小孩的视频数据。

    这些数据的特点:
    1. 持续,且量大;
    2. 需要一个系统持续的写入,我用的是 QNAP 自带的软件+支持通用协议的摄像头。

    这里我犯了个很大的错,就是数据没有做分类分级,并进行分卷管理,而是统一的用一个 8 盘 raid5 保存。
    监控视频、个人照片、电影等全在这个阵列上。
    我比较庆幸的是个人照片因为体积小,也就几个 T ,我做了额外的备份。
    但是家庭视频因为量大,持续写入,我没做备份。

    这一组 8 盘 raid5 出故障后,我请 QNAP 的工程师修复,无果,我只能无奈的把 8 个 18T dd 备份成镜像后,开始自学阵列的数据修复技术……
    maizero
        33
    maizero  
       162 天前   ❤️ 2
    这时候,我就意识到,白群晖、威联通的软 raid5 性能差,如果 7x24 小时,企业级的解决方案才是比较靠谱。
    硬盘存储介质我 HDD 换成企业级的银河、HC 系列了,但是我的方案,还是一个家庭 NAS 方案,修复依赖官方方案,太被动了。
    例如这一组 8 盘 raid5 ,其实有办法修复的,只不过 qnap 工程师只是在工具级别的范围内就放弃了。

    于是我开始放弃群晖、QNAP ,考虑单盘模式+通用系统+多副本备份。

    并且我吸取数据未分类分级的教训,我只有电影等可以接受丢失的数据,才考虑用 raid5 。

    于是我采用了企业的硬盘柜+硬件阵列卡+普通 PC+Windows/Exsi ,作为我的方案。

    这个方案的特点:
    1. 硬件容易找,低功耗或高性能,都方便,属于 DIY 方案;
    2. 对 HDD 、SSD ,以及企业级的 U.2 、硬件阵列卡,都很友好。

    所以我现在就是一个低功耗的 PC+Windows+U.2 单盘模式存储 online +HDD 单盘备份重要数据 + HDD 阵列存储大容量非重要数据。

    如果万一介质出现问题,HDD 的单盘模式+标准 NTFS/exfat/ext4 ,做数据恢复,都相对简单。
    U.2 是数据中心级 SSD ,只要做好散热,是性价比只选,不过最近涨价了,但也比 M.2 好很多,寿命、速度都很牛,用来 online 最好不过,一般搞一个 7.68t 的就可以,很少人 online 超过 8t 吧?
    esee
        34
    esee  
       162 天前
    家用存视频,真心不建议你用 raid5 ,万一坏 2 块等于全盘损毁,你应该没试过,坏了一块盘后重建修复过程四五天整个过程胆战心惊的体验,你可以了解下 unraid 的 冗余阵列,后期加盘扩容也比 raid5 方便,整个阵列风险也比 raid5 低,你是视频文件,就算最坏最坏的情况,损失一小部分视频保证大部分数据的完整,也是可以接受的。
    maizero
        35
    maizero  
       162 天前   ❤️ 2
    关于 HDD ,我不建议买 12 14T ,故障率相对高。
    建议 10T 起步,不要考虑 8T ,因为我入坑企业级 HDD ,就是银河的 10T ,8T 的企业级 HDD 应该没新的了。
    现在新的企业级 HDD ,一般 18T 起步,但是最近涨价了,行情看看 TB 。
    银河、WD ,都差不多,HC550 比较普及。

    我前年已经把 16T 淘汰完毕,去年 18T 淘汰完毕,今年在淘汰 20T ,数据都是持续的在倒腾到新的介质里,就回到我开始说的: 用持续发展的眼光,看你的解决方案。

    如果你不希望折腾,有一个我也在用的方案:磁带机。

    我搞了个别人做好的成品解决方案,LTO6 的淘汰磁带机+自己 3D 打印的盒子+卡+自己开发的支持 Mac 下雷电 3 的方案,好像是 4000 左右。

    如果你爱折腾,LTO6+sas 卡的方案一套下来也就 1000 左右。

    LTO6 2.5T 的磁带,一盘 40 左右。

    磁带做好防高温、防尘防磁、防发霉,比 HDD 做冷备靠谱。——相机用的防尘、防霉的防潮箱就很好。

    说光盘的……那是机压盘,自己刻录的,几年就读不出了,我大学用的最好的日产的光盘,包括三菱、索尼等,刻录的 CD-R ,DVD-R ,有很多都有问题了。
    maizero
        36
    maizero  
       162 天前
    @esee 没错,经过胆战心惊都知道这个过程。
    maizero
        37
    maizero  
       162 天前   ❤️ 1
    以上就是我作为一个玩 NAS 10 年,最后选择了 DAS 的个人玩家的心得啦,作为家里 PB 级数据的,都是血的教训:)
    zzutmebwd
        38
    zzutmebwd  
       162 天前
    nas 的未来是全闪,虽然目前固态硬盘价格在高位,但不出两年,必大跌,建议购买 nas 时提前考虑兼容 pcie 固态硬盘,同时,购买 2.5g 网口甚至全万兆网口,至少 5-10 年不落后。
    至于 raid ,看储存内容的价值,目前我自己的内容是 raid1 ,文件、照片等,迅雷等下载内容是单盘。
    zzutmebwd
        39
    zzutmebwd  
       162 天前
    @zzutmebwd 如购买全闪 nas ,可分期部署,先上 2*4t ,待固态价格降低后再上 2*8t 。
    SOSdanOffical
        40
    SOSdanOffical  
       162 天前 via iPhone   ❤️ 3
    前两个月有个大哥也想干这事,不知道干了没有。

    不说孩子成长记录这种天天拍不剪辑跟流水账一样的东西,哪怕婚礼跟拍,有几个回头还把 dvd 拿出来看的,往柜子里一丢完事

    所以“方便在线观看和管理”大概率是个伪需求,如果你一周或者一个月一剪辑还好,光拍不剪,最后就会沦为弃之可惜的数字垃圾
    PatrickLe
        41
    PatrickLe  
       162 天前
    @maizero 求你这个方案中的 PC 阵列柜。QNAP 有成品,但是太贵了,而且盘位好少
    VirgilChen97
        42
    VirgilChen97  
       162 天前
    可以考虑一下需求本身,真的需要把监控完整的保存下来吗? 80% 的监控记录可能对你都是没有意义的。是不是可以考虑做下自动筛选。例如只保留每天固定 2 个小时,孩子和家人可能在监控中出现的时间的录像?
    另外你的的部分数据,你都是不用实时访问的,确实可以考虑例如 3 年以上的视频,用磁带,光盘,或者是离电硬盘冷备
    fox0001
        43
    fox0001  
       162 天前 via Android   ❤️ 2
    我也做了十多年的家庭影像记录。

    - 现实没那么高要求。我是 Nextcloud + 机械硬盘实现在线服务,另加一个机械硬盘做冷备份(用 rsync 同步)。也见证了 Owncloud 和 Nextcloud 的发展(也被坑过)。
    - 由于经历了智能手机发展,前面的录像和摄影都没那么大。加上孩子随着岁数增加,厌恶被拍的情绪也增加。目前也没超 300GB 。
    - 不建议一下子考虑 10 年。即使不升级服务器,硬盘也要当作“耗材”来考虑。楼上也提到,一般 3 ~ 5 年更换一次硬盘。所以考虑未来 5 年已经足够。
    - 视频格式推荐 h265 (好像也就是 av1 ),清晰度不变的情况下体积更小。
    - 直接保存摄像头监视的视频,后面回味起来会很麻烦和乏味,会导致浪费硬盘空间。最好添加文字说明,好查找。我是主动拍摄视频,文件名有简要文字说明。
    - 有条件的话(钱足够),建议考虑现成的云盘,维护方便。但是国内云盘会扫描文件,孩子没穿衣服的照片、视频,不知道会不会被和谐。
    dilidilid
        44
    dilidilid  
       162 天前
    @povsister 其实算一下 4T 云空间的热存储成本(因为你可以随时从百度网盘取回来所以一定是热存储,而不是 Amazon Glacier 那种需要提前 request 的冷存储)就知道,如果定期加密打包送几个 T 的具备唯一性的玩意儿上去的话,百度收到的钱连成本零头都覆盖不了。再想想你就知道实际大概率会发生什么了
    povsister
        45
    povsister  
       162 天前
    @dilidilid
    网盘的带宽成本比存储成本高太多了,你只看到了百度存储了你唯一的几份加密文件,却没看到有大量人为海量的资源(盗版影视、游戏、软件等等)重复付费。
    kneo
        46
    kneo  
       162 天前 via Android
    十年太远了,考虑五年就行。
    skeleta
        47
    skeleta  
       162 天前
    我的建议是小容量 NAS+lto 磁带。热储存+冷储存并行。

    10 年这种长期储存,基本硬盘通电时间到寿命了,十年后有得费劲拷数据换硬盘。可以考虑 nas 上只挂要用的文件,16TB 以内绝对够用。算上你的电影电视剧游戏音乐软件相册备份也差不多了。一看就不用的数据,比如几个月前的没啥用的录像,凡是用到概率小的,放磁带里冷储存。

    这样不光省了买大空间多盘位 nas 的钱(现在磁带成本很低),还省电费。
    Rendex
        48
    Rendex  
       162 天前
    @maizero #35 3D 打印的磁带机的盒子想了解一下
    shakoon
        49
    shakoon  
       162 天前
    监控存这么长时间干什么?又不是什么有特定意义的视频。而且这玩意儿除了用时间来检索,现有的内容检索技术也几乎可以忽略,不要说十年了,就是三年后你要找个什么都会找不到。
    zhaogaz
        50
    zhaogaz  
       162 天前
    我的劝告是:不如少存点东西,多删一删,没什么东西重要的。

    你回想一下,或者是回看一下,你手里的资料,有多少是 5 年以前的,并且经常反复查看、或者是偶尔查看的。很少的。

    你想想,过去的三年里,你有没有经常出现,需要翻一翻半年以上的摄像头视频?

    想当然的提出一些没啥用的需求。当然了,对于生产厂家来说,是个好事儿。。。

    ----

    我个人的 nas 使用经验是:少折腾,少整硬件,少出问题,少出错。所以我就只有一个 ds218+,组了个 raid1 。 用了 6 年了,也只用了 2t 不到。。核心资料更少。。100g 多,而且还在不断的变少。

    ----

    我对你的建议是:
    1.用群晖 ds923+,整两个 青木开车的大硬盘,raid1 (享受白裙便利、廉价硬盘)
    2.不要想着之后升级硬盘了,暂时来说目前硬盘容量好像是到上限了,看以后有没有新技术,目前暂时没更大的可用。
    3.监控保存半年够了,已经很长了。更久之前的视频你要留着做什么呢?
    4.只能自己说服自己,别人怎么劝都没用。。。加油
    SimonOne
        51
    SimonOne  
       162 天前
    @fairytale #25 他说的是磁带机贵,不是磁带贵,意思是“上磁带存储需要买磁带机,没有 pb 级的,不划算”。
    paidahai
        52
    paidahai  
    OP
       162 天前 via iPhone
    @maizero 感谢分享!很有参考价值。也是第一次听说磁带机这个方案,在个人印象中,磁带这种存储介质已经是 20 多年前的淘汰技术,现在查了一下,格局就打开了。nas unraid 存储+磁带机/光盘多重备份也不失是一种方案,我再研究下
    paidahai
        53
    paidahai  
    OP
       162 天前 via iPhone   ❤️ 1
    @zhaogaz 记录小孩成长的瞬间,过去也就过去了。我们这一代小时候别说视频了,就算是一张照片都是奢望。每个人对时间的感受很不一样,个人觉得记录时间和周围的人的时光是很有意义的事情。孩子成长记录视频,保存 20 年就当送给他成年的礼物吧。
    paidahai
        54
    paidahai  
    OP
       162 天前 via iPhone   ❤️ 1
    @fox0001 感谢分享经验。目前主要用小米摄像头,最重要的一个原因就是他有“每日故事”功能,从当天视频中自动剪辑半分钟的短视频。基本上就主要回看这半分钟视频为主,其他视频先储存起来,以便可以随时翻看。
    paidahai
        55
    paidahai  
    OP
       162 天前 via iPhone
    @SOSdanOffical 小米摄像头( AI 版)可以自动剪辑当天的视频,生成半分钟的每日故事。不然,还真是很难搞,这么多视频素材要自己剪辑。
    liuzhaowei55
        56
    liuzhaowei55  
       162 天前 via Android
    组 raid 的方案不咋地,看论坛的日常基本三四年左右必定是要有硬盘损坏的。
    其实这些视频存下来后也不会整日翻看,直接就单硬盘存储下来,直接冷存储,做好防潮,比 raid 方案保险多了,真出了问题可能也就单硬盘出问题,损失小,恢复方案也多。
    实在不放心就在网盘中再多存一份。
    janus77
        57
    janus77  
       162 天前
    存 10 年以上你就想一次性搞定吗?正经的商业项目都是要一直持续迭代的啊。你这就只想花 1w ,然后管 10 年,真没必要吧,多花点很难吗?
    要不然,你就少花点但是前期先以稳定为主,后期慢慢再花钱迭代。说不定 3 年以后有更好的方案了呢?
    maizero
        58
    maizero  
       162 天前
    @Rendex 闲鱼搜 lto6 可以找到,只有一家
    maizero
        59
    maizero  
       162 天前
    @paidahai hdd 噪音都无解,这就是为什么我上 ssd 的原因,hdd 沦为冷备。
    maizero
        60
    maizero  
       162 天前
    @Jhma 一般 sas 盘的话,我就建议直接上硬件阵列卡+PC 了,但其实说实话,风险也很大的,一般人折腾不来。
    群晖+sas 盘,风险比以上还大。

    再者 sas 盘很多都不是零售的,买到的都是企业淘汰盘,风险更大。
    maizero
        61
    maizero  
       162 天前
    @ilylx2008 非常认同#18 的建议,这就是所谓迭代的方案。
    maizero
        62
    maizero  
       162 天前
    @Jokesy #23 的建议是靠谱的。

    如果用白 nas ,不管群晖的 DSM 还是 QNAP 的 QTS/hero 系统,都是支持挂载 S3 、OSS 的。
    企业级存储,默认分布式系统 3 副本,n 个 9 的可靠性……

    但是成本么,也不便宜。
    maizero
        63
    maizero  
       162 天前   ❤️ 2
    我给 OP 一个数据参考吧,我是一个收集癖的人,所以我会囤积手机拍的照片、视频,而且每年买的手机基本都是 N 台旗舰的拍照手机,苹果肯定是每年更新,安卓同期基本都是 2 台及以上,而且还会玩运动相机之类……

    从 iPhone4 时期算起,到现在,我所有手机的照片、视频,大概在 8~9 个 T 左右,而且我强迫症,手机、相机,都是用最高规格的视频格式,RAW 也不删。

    所以你看看,十几年才 10T 不到,一个现在主流的 18T HDD 就可以存下,其实你要存的东西真的没那么多。

    如果我 raid5 没挂,估计里面的家庭监控视频也就差不多录个孩子成长期,2~3 年了不起了。

    对了,我俩儿子,老大 8 岁,弟弟 3 岁,我经常带他们玩,包括游泳啊、骑车啥的,也都会录视频,狂拍大量照片,包括用索尼的最新款相机拍……

    所以最佳的解决方案就是:

    1. SSD 存储,保持高速的导入、导出、查看、分类、编辑、分享,包括 online 的和移动存储;
    2. 3 个以上的副本,及时备份,必须做到当天,我会 SSD 也备份一份,方便快速恢复,HDD 单盘模式也备份一份;
    3. 其实云存储没那么可怕,我会用厂商( iCloud 、华米 OV 家的云、to c 的百度云、阿里云盘)的云存储,只要你鉴权做好了,自己个人信息安全做好,里面没有什么艳照门之类,也不怕,这个主要是方便。

    反正见仁见智吧,国内很多人,特别是 fq 出来上 v2 的人都不信任国内厂商。

    怎么说呢,作为一个数据安全、合规从业者,我觉得很多都是自身没做好,除非真的无良厂商,正经企业还是相对靠谱的……
    bs10081
        64
    bs10081  
       161 天前
    @paidahai #21 其實不太推薦用小米等網路攝像頭,台灣之前 0403 大地震的時候就有發生,網友家裡的攝像頭畫面被發到 Douyin 上,但網友明明沒有公開這些影片,攝像頭要經由中轉我覺得不太安全,最好是可以自己內網連線就好

    群暉確實就是買軟體送硬體🤣
    msg7086
        65
    msg7086  
       161 天前   ❤️ 1
    你的要求首先要分成两块。
    一个是热存储,也就是新拍摄的数据,以及经常要看的数据;
    另一个是冷存储,也就是需要长期保存的数据,只需要每隔一段时间验证一下数据可靠性。

    热存储直接用你喜欢的 NAS 设备就行了。
    冷存储的话,可以考虑弄一台 DIY 设备,上面就插系统盘和两块硬盘,这两块硬盘做一个 zfs mirror 。硬盘的话可以考虑用那种跑了一两年的企业级矿盘,比家用级新盘还要可靠点。最好是一块 WD 配一块 ST (比如一块 HC540 配一块 Exos X16 ),弄个 16T 什么的,性价比比较好。
    然后你每个月或者每几个月把新录下来的视频转存到这两块硬盘上去。这两块硬盘就几个月通一次电。数据转移完以后做一次 scrub 看看有没有数据损坏的。检查完就可以关机了。
    硬盘不用的时候可以拆下来丢防火防水保险箱里,要转移数据了再拿出来。
    等硬盘满了,真空封装好(氦气盘密封的可以抽真空),一块放本地,另一块放在亲戚家里或者银行开个最便宜的保险柜放着。
    然后再买两片新的硬盘开始存新的。
    老硬盘也可以每年取回来做一次 scrub 检查。只要发现硬盘不稳定了就再买新的回来同步数据。
    这应该算是非常低成本又可靠的冷存储了。
    msg7086
        66
    msg7086  
       161 天前   ❤️ 2
    @povsister #1
    百度盘 10 年不倒 != 你的数据 10 年不丢。服务商有随时终止你账号的权利,也可以更改容量限额,而你能得到的最高的补偿就是少量的退款。
    之前谷歌企业盘无限容量,很多人一个月 20 刀付着企业级订阅,谷歌 10 年也没倒,但人家改了条款,全部改成了 5T 容量,用量已经超过的全部清退,封号并删除订阅。
    dilidilid
        67
    dilidilid  
       161 天前
    @povsister 你都知道海量重复盗版才会省存储成本,这种唯一性的加密档案怎么省?一个两个这么玩就算了,这么搞的多起来你猜这些网盘商会咋做?现实就是不止一个(包括我)遇到过加密档案传上去下载回来校验码就对不上的情况,更极端的情况是云服务厂家直接把你的空间砍了或者文件丢了,按照协议你最多只能收到一点不痛不痒的赔偿。
    dilidilid
        68
    dilidilid  
       161 天前   ❤️ 1
    @povsister 说白了,这么搞就是纯薅百度羊毛,按照国产厂商一贯尿性薅到后面会不会狗急跳墙直接把你的数据咔擦可以自己权衡
    RexKang
        69
    RexKang  
       161 天前
    做 RAID1 ,之前两块希捷 4T 的陆续挂了,后来不做 RAID ,用软件同步,目前跑了 5 年硬盘啥事没有。
    spiffing
        70
    spiffing  
       161 天前
    NAS+光盘(只刻录比较重要的部分,太费时间了)

    给楼主泼一盆冷水,录的这些视频/照片再次拿出来看的机会很少;以及孩子大一些之后就懒得弄了。
    skuuhui
        71
    skuuhui  
       161 天前
    别想了,10 年的数据你根本不可能这么大范围的数据真真需要在线看的。
    监控视频,多买点机械硬盘存了丢一边得了。
    买个相机多拍拍照录录视频存起来,记录记录有意义的时刻,比如说出去野营,过生日,一起玩游戏。以后你大概率看也就是看这些意义的时刻。
    leconio
        72
    leconio  
       161 天前 via iPhone
    小米摄像头不支持 webcam 吧,支持吗?没法统一管理,只能用米家。NAS 只能用 smb 同步存储
    songyoucai
        73
    songyoucai  
       161 天前   ❤️ 1
    初为奶爸,我也是这么想的, 并且用了 tplink 的摄像头,直接接入群晖。
    从小时候的对着他的小床记录她的生活,到大了,对着客厅记录他的玩耍,录制到三岁,我就停止了,大概 2T 数据。
    为何停止:
    1.废旧的录像大于有用的录像, 如果没有很好的归纳收集剪辑,基本上全天的视频中 想要找到她出境的时候视频,特别难,当然我相信日后的 AI 计算可以解决并自动剪辑。
    2.录制到几次小孩受伤的场景,特别心疼,不想再看。
    3.录制到奶奶在家带小孩,奶奶做家务,小孩无人陪伴无聊睡地板,一个人独自玩耍的场景,特别多。作为奶爸,看了会心痛,且不如不录制。

    后来就转为了拍照,拍摄视频。 自购了一台富士 XT4 ,并且经常给她拍摄照片和视频, 比如举办生日会,幼儿园活动,周末出游,假期旅行等等。 由摄像头录像转为高质量陪伴记录。
    用群晖来 321 冷备。 两台黑裙,加网盘同步。 盘无组任何 raid 。 而是用功能来区分,一块专门 PT 下载,可以丢失。
    一块专门存储照片,同步到当前机器的备份磁盘和另外一台备份群晖。 同时同步到网盘。

    所以老哥,我的建议是无需一步到位,可以先几百买个黑群晖, 两块硬盘备份,就能满足你的需求,大概 2000 不到。
    等你录制到 3 岁,你会发现想法也是会变得。 如果还需要录制,再上盘问,升级 8 盘 12 盘位的都可以。
    当然土豪随意。祝愿老哥奶爸路上,一路顺畅。
    dode
        74
    dode  
       161 天前
    还有手机疯狂拍照呢,刻录光盘?
    zzxCNCZ
        75
    zzxCNCZ  
       161 天前
    不管是 raid 几,都是单地备份,都有挂的可能,我目前是非重要数据单盘存储,视频照片 2T icloud ,2T google drive ,再定期刻录 bd-r 光盘(目前光盘存储稳定性,理论上已经可能很久了,不是以前的 cd&dvd 可比了),光盘家里放一份,老家放一份,这种备份模型,理论上应该是无敌了😂。
    THESDZ
        76
    THESDZ  
       161 天前
    1.存算分离,保证硬盘基本只读不写
    2.raid1 方案,硬盘损坏后替换方便
    3.巡检和报警都配置好
    4.关键数据一式三份备份到三个远端.
    ihipop
        77
    ihipop  
       161 天前
    监控建议用磁带。反正你很难会经常看。
    wsbqdyhm
        78
    wsbqdyhm  
       161 天前
    @skuuhui 监控视频我家里也有一个,当天发生有意义的会单独下载保存好,大部分都是废弃。。。多带娃出去做一些有意思的活动记录才是重点。我 5 年多 4t 左右数据
    CLOUDU
        79
    CLOUDU  
       161 天前
    我的建议是 RAID1 存重要数据+Basic 放监控视频+冷备 Basic 。
    我感觉数据管理等级:照片视频 > 个人工作文件 > 设备备份文件(时间机器) > 监控视频文件 > 影音库
    所以,重要已经归档的文件做 RAID1 存储,安全性上问题不大。
    然后这种大容量不归类的文件,就放在一个 Basic 盘里,然后再做一个 Basic 定时冷备。
    另外别在硬盘上省钱,推荐淘宝店梵多存储,记得跟客服说不要同一生产批次的。
    paidahai
        80
    paidahai  
    OP
       161 天前
    @leconio 目前不支持,用米家
    magicfield
        81
    magicfield  
       161 天前
    十年的话太久了,我的确会考虑网盘。
    别说 10 年了,5 年也够存储设备来一轮大的更新了,到时候看着旧设备不换又难受。
    服务器会不会跑路见仁见智,至少我个人认为几家大型网盘服务商跑路的可能性比我硬盘哪天宕机了、被小孩搞事重置了等等情况可能性低
    Richared
        82
    Richared  
       161 天前
    自己想要的视频剪下来存网盘,剩下的全部数据买个磁带机,山南海北的亲戚家都放一放。
    jameskongawork
        83
    jameskongawork  
       161 天前
    直接上磁带机,淘宝 LTO6 磁带机 1200-2000 块, 一块磁带 150-200 块,2.5T 一块。避光保存可以放 15-30 年。

    硬盘无论是机械硬盘还是固态硬盘,必须间隔一段时间上电,否则都有消磁或者电容丧失导致的数据损毁风险。
    然后任何的光媒体( CD DVD 蓝光)就算避光,保存时间也极其有限。
    bbdsym
        84
    bbdsym  
       161 天前
    @povsister 百度最大的问题是,不是你想存什么就能存的。10 年大概率你存了什么他不让存的东东,然后把你的账号给你封掉。。
    ABCDE911119
        85
    ABCDE911119  
       161 天前
    磁带
    ddczl
        86
    ddczl  
       161 天前
    我现在是单盘模式,还有一个 16T 的拼多多氦气二手盘做备份(每个月手动备份一次),5 年了,稳如老狗;
    NoKey
        87
    NoKey  
       161 天前
    买个啥云服务的存储,归档那种,很便宜,多搞几个备份,这种稳不稳?只是无法在线浏览吧
    ulyssesg
        88
    ulyssesg  
       161 天前
    我爸从 91 年开始玩 vhs 摄影机,刚开始的时候所有人面对镜头都超级兴奋,可以说留下了一些经典的回忆。但好景不长 95 年之后我就不愿意搭理镜头了,00 年之后身边亲戚彻底失去配合的兴致。当然我爸是能享受自娱自乐的人,家里的 vhs 录像带,dv 录像带,cd 盘,胶卷,影集这些东西最终被我爸堆成无人问津的小山。抓住时光是人的心里本能,但从外界看这件事的烦恼曲线和快乐曲线的交汇点比当局者想的要快。
    从他人角度看,你当下没必要把影音备份升级到在线存储,一个机械硬盘座加两三块企业矿盘形成多份备份就差不多了。如果发现自己有志于垃圾佬方向那就开始关注闲鱼 u.2 行情吧,我们对世界一切想象的终点都是自娱自乐。
    Jhma
        89
    Jhma  
       161 天前
    @maizero 群晖 DSM7.2 对于非认证的 sata/sas 盘不友好,所以风险都一样大
    libook
        90
    libook  
       161 天前
    从 2019 年开始玩 NAS 。

    RAID 是用来保障故障的时候不停机的,不是用来保障数据不丢失的,超过故障盘额度后数据会全部丢失。看你的摄像头方案是否需要高可用性,比如本身无存储,必须 NAS7x24 小时连续运行才能存下视频。

    对速度和可用性没有要求的话,就一份存储( JBOD )加至少一份备份就行了,为了故障处理简单可以用一些奇偶校验方案;备份可以额外买大容量硬盘,或者考虑网盘,或者一些云厂商提供的冷归档服务。

    硬盘价格官方店是官方零售价,通常价格最高;经销商通常会比官方零售便宜一些有的确实能便宜一半;全新的 OEM 盘,一般保修不走官方,而是走 OEM 厂商,或店铺;拆机盘上机跑过但有的写入量不高,一般是店铺保修,且保修期短;矿盘写入量没保障但会巨便宜;其他的就是可能存在一些翻新的贴标签伪装成新盘的假冒硬盘。

    买硬盘需要识货,找信誉好、售后靠谱的店,买回来要做测试,用的过程中要监测健康情况,保修期内有问题即时找店家解决。

    平时确保至少一块盘的空闲空间,一旦有盘故障了,可以将数据移到空闲空间里继续使用,直到补充新盘。

    企业级硬盘是为数据中心设计的,通常不会着重解决发热和噪音问题,看放 NAS 的地方是否考虑这些。

    每块硬盘的功耗在 7-10W ,所以小容量硬盘用多了功耗会多。机械硬盘读写速度都差不多,所以大容量硬盘做数据恢复和迁移时间会很长。自己平衡取舍。
    lujiang1028
        91
    lujiang1028  
       161 天前 via iPhone
    不要搞那么多数据,每天拍很多视频又没有重点跟没拍一样,根本不会再去看,还是少一点备份到 Google 相册,不定期帮你回忆吧。
    sicifus
        92
    sicifus  
       161 天前
    看我的 NAS 理念贴,
    要点:不做 raid5 保平安,用 Mergerfs 平滑扩展容量、分阶段扩容硬盘容量,用足 NAS 盘位潜力

    NAS 存储的安全+便捷+成本的最优平衡思路探讨,及单盘位最高容量疑问 - V2EX
    https://www.v2ex.com/t/1007796#reply63
    Reficul
        93
    Reficul  
       161 天前
    加密存 Glacier Deep Archive 类型的对象存储里。

    目前我用的是阿里云 OSS ,200GB 每月成本不到 1 毛钱,多的时候只有 8 分钱。如果按 20TB 算,一个月也才 8 块钱。
    > https://reficul.io/2023/07/18/backup-truenas-to-oss/
    shakeyo
        94
    shakeyo  
       161 天前
    同为新手奶爸,目前也是用的米家摄像头,但我那款不支持 ai 剪辑只支持人在的时候录像,市面上好想也找不到类似的产品,目前我的方案就是不定期人肉整理,有意义的日子比如生日、或者当天在家较长时间的我都会单独拷出来,其他就放着,也不备份。目前 16t 的硬盘如果不挂近几年应该是够用的,毕竟一天的监控视频也就几 G 不到。
    另外就是对其他文件做了下分级,手动剪辑过的视频+手机 icloud 同步下来的照片+相机拍摄的照片才会备份,用群晖的备份工具备份到本地的 hdd 、本地的 ssd ,另外加密文件上传到百度网盘一份,偶尔不定时插一个 usb 的 ssd ,手动备份一次。这个方案倒是也稳定跑了 2 年,只不过还是不够好,手动挑选监控视频就是个苦差事,我一般几个月可能都不一定愿意或者记得去处理。
    另外听说苹果的 vision pro 可以记录 3d 视频,有没有人体验过,对于拍娃来说是不是降维打击,另外这个录像是否可以导出,设备太贵,想薅个东哥的羊毛,下个订录一下视频导出来然后退了,毕竟这玩意实在太贵了
    WuSiYu
        95
    WuSiYu  
       161 天前
    raid 不是备份,所以最稳妥的方案是加钱按照 3-2-1 原则来备份,再搞一个冷备份或者一台从机做定期备份
    如果不需要这么极致的话,那就还是用 raid ,然后不要等硬盘坏掉才换,而是过 3 年或者过保就换,别管坏没坏,最大降低同时挂的概率,这样买硬盘反而是方案 2 更合适
    bigtan
        96
    bigtan  
       161 天前
    买个百度云 + 阿里云 双备份即可。还有类似于 bypy + aligo 这样的接口包,做增量更新也挺方便。
    yulgang
        97
    yulgang  
       161 天前
    家里就别扯 raid 了,ceph 三副本一把梭,随时加机器扩容,坏机器都不用担心
    yulgang
        98
    yulgang  
       161 天前
    @yulgang 看看云厂商的对象存储把,当 FTP 用也不错,甚至可以挂在到系统中,当本地盘用。
    maizero
        99
    maizero  
       161 天前
    @PatrickLe 8 盘位的柜子,全新的 8088 口的,PDD 600
    但手感很差
    我宁可买益恒的二手,外观看起来很糟糕,但是手感贼好,做工也贼好,你需要的话,我可以卖你 闲鱼 id 同本站
    maizero
        100
    maizero  
       161 天前

    1. raid 不是备份,只是为了不宕机,正常来说有盘挂了,不应该 rebuild 而是 copy 数据出来,但是如果一旦你盘大、盘多,例如 4 盘 16t ,8 盘 18t 之类的 raid ,很少人有第二套方案承载 copy 出来的数据,所以没什么必要别搞什么 raid ;
    多备份是王道;

    我现在所有的 raid ,目标很清晰,速度&单卷容量,所以我是 raid0 ;

    2. 备份 321 321
    1  2  
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1531 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 16:54 · PVG 00:54 · LAX 08:54 · JFK 11:54
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.