I'm using btrfs on leftover hard disks as backup.<div id="yMail_cursorElementTracker_1565220291022">--William<br id="yMail_cursorElementTracker_1565220177983"><br><div id="ymail_android_signature"><a id="ymail_android_signature_link" href="https://go.onelink.me/107872968?pid=InProduct&c=Global_Internal_YGrowth_AndroidEmailSig__AndroidUsers&af_wl=ym&af_sub1=Internal&af_sub2=Global_YGrowth&af_sub3=EmailSignature">Sent from Yahoo Mail on Android</a></div> <br> <blockquote style="margin: 0 0 20px 0;"> <div style="font-family:Roboto, sans-serif; color:#6D00F6;"> <div>On Wed, Aug 7, 2019 at 5:49 PM, Paul Nijjar via kwlug-disc</div><div><kwlug-disc@kwlug.org> wrote:</div> </div> <div style="padding: 10px 0 0 20px; margin: 10px 0 0 0; border-left: 1px solid #6D00F6;"> I have a bunch of drives (mostly 1TB and 3TB) and one of those 24-bay<br>disk array shelves I was writing about before. I want to have a big<br>contiguous pool of storage onto which I can store backups. Currently I<br>need something like 15-20TB of storage to feel comfortable, but this<br>may grow over time. I will be backing up using gigabit ethernet (which<br>might make restores interesting in an emergency, but oh well).<br><br><br>Here is my dream setup: <br>- One big storage pool<br>- Able to serve up SMB shares for inferior operating systems to use as<br>  backup targets<br>- Able to add new drives as I need them without worrying about drive<br>  sizes too much<br>- Able to replace small drives in the array with bigger ones and use<br>  the additional capacity easily<br>- Able to use a lot of the space on the drives (so full redundancy is<br>  not critical)<br>- If a drive dies I don't lose everything (but can afford to lose what<br>  was on that one drive)<br>- Well supported, preferably on Ubuntu<br>- (Relatively) easy for others to maintain and use<br>- Good power usage?<br><br>I do not think I can achieve the dream. Here is what I have thought<br>of/looked into so far: <br><br><br>ZFS with FreeNAS or Ubuntu (using ZFS on Linux), raidz<br>------------------------------------------------------<br><br>- Allows a fair amount of storage without full redundancy?<br>- Does NOT allow me to add new drives easily. I can only add entire<br>  sets that match the existing raidz array, turning RAID5 into RAID50?<br>- If a drive dies I can rebuild (with the usual RAID5 caveats)<br>- ZFS on FreeNAS might be preferable to Ubuntu, but I might still go<br>  with Ubuntu<br>- Good protection against corruption<br>- Maybe difficult for others to administer? <br><br><br>ZFS with FreeNAS/Ubuntu, raid10 (or mdadm)<br>------------------------------------------<br><br>- Easier to add new drives as long as they are in pairs<br>  (Do the pairs have to be matched to previous pairs?)<br>- Full redundancy which wastes space<br>- If a drive dies I can rebuild it<br>- Maybe it is hard/impossible to remove a pair of drives from the set<br><br><br>ZFS with FreeNAS/Ubuntu, raid0 (or mdadm)<br>-----------------------------------------<br><br>- Maximize storage<br>- But if one drive dies I lose everything<br>- Maybe I can easily add to the array?<br>- I don't think I can take anything out ever<br><br><br>Plain LVM on Ubuntu<br>-------------------<br><br>- Maximize storage<br>- Have one contiguous pool<br>- What happens if one drive dies? Do I lose everything?<br><br><br>Individual drives<br>------------------<br><br>- I lose having a big contiguous pool for backups, which sucks. <br>- Easy to add and remove drives, though<br><br><br><br>In all cases I think I can serve up SMB 2/3 shares for inferior<br>operating systems. Maybe I can do iSCSI something, but I do not know<br>whether I should care about this. <br><br>Are there other options I am missing or should consider?<br><br>I presume (from talking to Lori) that ZFS is the thing I should lean<br>towards for data integrity reasons, but I am open to people telling me<br>that is overkill and I should use something else instead. It feels as<br>if ZFS has the momentum in the storage filesystem wars, anyways (as<br>compared to btrfs/xfs, or ReFS on Windows).<br><br>A bunch of you are computer/storage geniuses. What do you do? What<br>should I do?<br><br>- Paul<br><br>-- <br><a href="http://pnijjar.freeshell.org" target="_blank">http://pnijjar.freeshell.org</a><br><a href="https://off-topic.kwlug.org/watcamp" target="_blank">https://off-topic.kwlug.org/watcamp</a><br><br>_______________________________________________<br>kwlug-disc mailing list<br><a ymailto="mailto:kwlug-disc@kwlug.org" href="mailto:kwlug-disc@kwlug.org">kwlug-disc@kwlug.org</a><br><a href="http://kwlug.org/mailman/listinfo/kwlug-disc_kwlug.org" target="_blank">http://kwlug.org/mailman/listinfo/kwlug-disc_kwlug.org</a><br> </div> </blockquote></div>