Backup av NAS hos bekant? + Några andra freeNAS frågor

Trädvy Permalänk
Medlem
Plats
Lund
Registrerad
Nov 2008

Backup av NAS hos bekant? + Några andra freeNAS frågor

Tja alla!

Jag planerar nu att bygga mig en NAS/sever, och då göra det ordentligt. Den skall klara följande:

1. Backup av mina viktiga filer (tänkte använda timeline genie http://www.genie9.com/free_products/free_timeline.aspx)

2. Lagring av sådant jag vill att alla mina enheter skall kunna komma åt (Detta är då filer som även skall finnas säkerhetskopierade)

3. Strömma media till HTPC samt dator

4. Komma åt (alltså lägga till, läsa och radera) filer

5. Ta hand om torrents

6. Tanken är att köra diskarna i RAID5

Sen har jag en liten lista med saker som är "eventuellt i framtiden because fun"

Server för att ha hand om mejl/mumble eller liknande

Sätta upp egen hemsida

Jag planerar att bygga den av dessa komponenter, vad tror Sweclockers experterna om det?:

http://www.inet.se/kundvagn/visa/7000006/2014-08-03

Dessutom har jag en fråga som mitt googlande inte kan hjälpa mig med. För att försäkra mig mot andra katastrofer såsom brand, inbrott etc så vill jag lagra min viktiga backup på ett annat ställe med. Jag har för mig att jag läst om program som tillåter en att lagra backup-filer på en NAS placerad hos en vän, och din vän gör samma sak på din. Detta baserat på bittorrent teknik, håller de uppdaterade automatiskt och gjort så att jag inte har åtkomst till min väns filer och vise verca. Finns detta eller är jag helt ute och cyklar?

Dessutom undrar jag, hur jobbigt är det för NASen att kryptera de viktiga filern med den CPUn? Det skulle vara mest dokument, men även bilder av bättre kvalitet

Tacksam för alla svar!

Trädvy Permalänk
Medlem
Plats
Borås
Registrerad
Okt 2002

Låter som BTSync det där programmet baserat på bittorrentteknik. Men jag skulle kalla detta mer ett synkningsprogram (ungefär som dropbox) och inte backup. Själv kör jag crashplan och använder deras molnbaserade lagringstjänst mot en årskostnad men det är även möjligt att köra backupen på en väns dator utan kostnad. Jag kör även synkning av min svärfars NAS mot min filserver men där använder jag rsync via ssh. Jag kan i alla fall rekommendera Crashplan, det är enkelt och fungerar bra och hyfsat billigt också (jag betalar 60$ per år för obegränsad backup i molnet).

Själv har jag inte kört kryptering eftersom jag vill att det ska vara så enkelt som möjligt att återställa filer (med min otur så glömmer jag väl kryptonyckeln eller något sådant). Men har för mig det finns inbyggda krypteringsfunktioner i vissa CPU-modeller som borde kunna utnyttjas. I så fall drar det inte mycket kraft. Men när jag googlar på G3220 verkar den sakna AES-NI men jag har dålig koll på hur pass mycket det behövs för att snabba på kryptering. Kanhända den fixar det ändå?

Trädvy Permalänk
Medlem
Plats
Lund
Registrerad
Nov 2008

Ok, det är kanske helt enkelt rsync som jag vill använda? Hur det fungerar är inte så viktigt (samt att jag kan ha rört ihop flera saker i huvudet) utan mest bara så att jag vill ha synkning mot en annan plats också för att säkra data mot allt förutom en EMP strike över skåne.

Trädvy Permalänk
Medlem
Plats
Malmö
Registrerad
Maj 2014
Skrivet av cheben:

Tja alla!

Jag planerar nu att bygga mig en NAS/sever, och då göra det ordentligt. Den skall klara följande:

1. Backup av mina viktiga filer (tänkte använda timeline genie http://www.genie9.com/free_products/free_timeline.aspx)

2. Lagring av sådant jag vill att alla mina enheter skall kunna komma åt (Detta är då filer som även skall finnas säkerhetskopierade)

3. Strömma media till HTPC samt dator

4. Komma åt (alltså lägga till, läsa och radera) filer

5. Ta hand om torrents

6. Tanken är att köra diskarna i RAID5

Sen har jag en liten lista med saker som är "eventuellt i framtiden because fun"

Server för att ha hand om mejl/mumble eller liknande

Sätta upp egen hemsida

Tacksam för alla svar!

Jag hade inte lagt backup och torrenter på samma diskar. Detta då torrent-nerladdning sliter hårt på diskarna, typ dygnet runt.
Sen hade jag inte använd RAID 5. De 2 gånger jag har använt det, har det havererat med dataförlust som följd.
Det som sker är att en disk havererar, och när du sätter i en ny disk, så bränner en disk sönder av jobbet att återställa den nya, eller så har en av de återstående fel på en eller flera sektorer, och filer är kapputt.

Själv håller jag på att ordna en FreeNas server med 6 st diskar, i RAIDZ-2 (typ som RAID6), men jag är också "nybörjaren" på just FreeNas. Så tyvärr vågar jag inte ge tips där. När det gäller torrent dock, lägg in en eller 2 diskar till fritt från din backup, så kan de hantera torrenterna och om de dör, är det bara att byta och ladda ner igen.

Fördelen med just ZFS filsystemet och FreeNas är just att den verkligen kollar så att din backup som ligger lagrad är RÄTT lagrad, dvs den kan felkorrigera och rätta till fel innan du får fel-meddelande att det inte går att läsa.

Det backup programmet som kan synka mellan 2 servrar låter intressant dock. Hoppas det finns och fungerar, för jag själv kan vara intresserad av det.

Skrivet av cheben:

Jag planerar att bygga den av dessa komponenter, vad tror Sweclockers experterna om det?:

http://www.inet.se/kundvagn/visa/7000006/2014-08-03

Jag själv tittade på ett AMD system, eftersom de har 8 SATA portar inbyggda, och är billiga. Och satsa på så mycket RAM du kan, 16GB är bättre spenderade pengar än Intel CPU.
Typ något som denna: (Min är visserligen ett gigabyte, men typ samma)
http://www.inet.se/produkt/1902576/asus-a88xm-plus

Trädvy Permalänk
Medlem
Plats
Lund
Registrerad
Nov 2008
Skrivet av Paddanx:

Jag hade inte lagt backup och torrenter på samma diskar. Detta då torrent-nerladdning sliter hårt på diskarna, typ dygnet runt.
Sen hade jag inte använd RAID 5. De 2 gånger jag har använt det, har det havererat med dataförlust som följd.
Det som sker är att en disk havererar, och när du sätter i en ny disk, så bränner en disk sönder av jobbet att återställa den nya, eller så har en av de återstående fel på en eller flera sektorer, och filer är kapputt.

Jag själv tittade på ett AMD system, eftersom de har 8 SATA portar inbyggda, och är billiga. Och satsa på så mycket RAM du kan, 16GB är bättre spenderade pengar än Intel CPU.
Typ något som denna: (Min är visserligen ett gigabyte, men typ samma)
http://www.inet.se/produkt/1902576/asus-a88xm-plus

Är det verkligen så viktigt med RAM i NAS/enklare server? Och hmm, ja då får jag något att tänka på med RAID. Fördelen med RAID 5 som jag såg var att det är effektivare med avseende på plats, vilket är väldigt viktigt då jag studerar och därmed lever på en relativt tajt budget. Har du någon AMD processor att rekommendera? Tänkte ta en intel på grund av den låga energiförbrukningen, och då jag gått till ganska extrema längder att få min mainburk tyst vill jag helst att NASen skall vara i princip ljudlös med (bor i studentrum, så finns inte riktigt någonstans att stoppa undan den). Från början hade jag tittat på passivt kylda SoC moderkort, men de är antingen svindyra eller hade inte nog med SATA platser :/

Trädvy Permalänk
Medlem
Plats
Borås
Registrerad
Okt 2002

Ett alternativ för att komma undan billigare är att kolla begagnade prylar. Vi har ju sweclockers marknad. Behövs inte så himla kraftfull hårdvara egentligen så man kan komma undan billigt även med nya prylar. Det där AMD-moderkortet ser väl bra ut, många SATA-portar uppskattas när man skaffar fler hårddiskar.

Ska du köra ZFS rekommenderar jag minst 8 GB RAM (det funkar även med mindre men då kan prestanda bli lidande och man kan behöva tweaka för att få det stabilt). Själv kör jag ZFS på Linux. Crashplan funkar bra på Linux men jag tror inte det finns till FreeNAS (eller andra varianter av FreeBSD).

Har du backup så tycker inte jag att det är så viktigt med massor av extra redundans i din raid. En ZFS raidz1 på 3 hårddiskar är en OK konfiguration tycker jag om man ser till att sköta backuper till något annat ställe. Det går ju att återställa filerna från backupen. Har du inte backup så är det viktigare att fixa backup än något annat. Och för min del har jag kommit på att enda sättet för mig att ha uppdaterade backuper är att köra något som fixar detta automatiskt. Min svärfars NAS (som är en liten raspberry pi med en USB-hårddisk ansluten) speglar sitt innehåll till min filserver med rsync som körs via krypterad ssh-anslutning över internet. Rsync skickar bara filer som har ändrats sedan förra körningen och eftersom det körs varje natt (med hjälp av cron) så blir det ändå inte mycket som överförs varje gång. Filservern kör ZFS med automatiska regelbundna snapshots av backup-biblioteket. På så vis har vi historiken på gamla versioner av filerna i snapshots. Det är främst sådant jag uppskattar med ZFS (förutom feltoleransen). Men det är rätt mycket pill med att ställa in rsync, ssh, schemaläggning, zfs och så vidare.

Däremot crashplan är jättenkelt även om man kör det på Linux. Jag kör crashplan på min backupmapp på filservern så filerna hamnar i "molnet". Om allting havererar kan jag logga in med en webbläsare och återställa filer från backupen. Visst det tar tid men allting finns där. Även crashplan har inbyggd historik så man kan (till någon viss gräns som jag inte kommer ihåg nu) gå bakåt i tiden i backupen och återställa gamla versioner av filerna. När väl crashplan har synkat backupen (första backupen kan ta veckor eller månader beroende på hur mycket det är) så blir det sedan endast ändringarna som överförs vid efterkommande backupkörningar.

Jag kan verkligen rekommendera crashplan. Orkade inte krångla med NAS och sådant hemma hos mina föräldrar (de är pensionärer och bor 50 mil från mig) så jag lade bara in crashplan på deras windowsdator senast när jag var på besök. Trots att de sitter på klen ADSL med 1 Mbit/s i upload så nu efter 5 veckor är allt innehåll på deras hårddisk (ca 150 GB) backupat till molnet trots att de stängar av datorn emellanåt. Händer något med deras dator kan jag hjälpa dem återställa deras filer hemma hos mig och sedan skicka dem en USB-hårddisk med posten.

Men även det där bittorrent sync (BTsync) ser trevligt ut. Som jag fattat det är det ett alternativ till dropbox men som inte är beroende av någon server. Det kan vara rätt smart att ha det på sin NAS för då kan man exempelvis automatiskt synka sin bärbara dator via internet mot sin NAS om man är ute på resa. Man kan även synka sin stationära dator mot samma mapp på sin NAS. På så sätt håller man alla sina datorer synkade så att man hela tiden har aktuella dokument uppdaterade. Man slipper också beroendet av dropbox och deras begränsningar på diskutrymme. Om dessutom NASen sköter backuper av den där synkade mappen mot crashplan då har man ett ganska säkert system tycker jag. Det lär även vara möjligt att lägga in filhistorik i BTSync till viss del (tror det som standard ligger på 30 dagar men det kan ändras i inställningarna).

Tidigare körde jag något som heter rsnapshot. Det är rsync och snapshots kombinerat men det är inte beroende av ZFS. synkade min egen NAS och svärfars NAS mot varandra på det viset. Båda körde vanlig simpel USB-hårddisk med vanligt ext3 Linux-filsystem. Funkade bra men var pilligt att konfigurera. Dessutom hade jag dålig koll på om det fungerade eller inte, hände att systemet kunde vara nere i flera veckor innan jag upptäckte det (visst kan man fixa automatiska e-postpåminnelser med statusuppdateringar också med eget pill men jag orkade inte riktigt). Så min slutsats är att även om man kan fixa egna lösningar med diverse scriptande och pillande så kanske trots allt en färdig lösning såsom crashplan är det bästa.

Trädvy Permalänk
Medlem
Plats
Malmö
Registrerad
Maj 2014
Skrivet av cheben:

Är det verkligen så viktigt med RAM i NAS/enklare server? Och hmm, ja då får jag något att tänka på med RAID. Fördelen med RAID 5 som jag såg var att det är effektivare med avseende på plats, vilket är väldigt viktigt då jag studerar och därmed lever på en relativt tajt budget. Har du någon AMD processor att rekommendera? Tänkte ta en intel på grund av den låga energiförbrukningen, och då jag gått till ganska extrema längder att få min mainburk tyst vill jag helst att NASen skall vara i princip ljudlös med (bor i studentrum, så finns inte riktigt någonstans att stoppa undan den). Från början hade jag tittat på passivt kylda SoC moderkort, men de är antingen svindyra eller hade inte nog med SATA platser :/

Var enda sida jag tittar på skriver, MER RAM, MER RAM. Destu mer RAM destu mer kan den cacha, och destu mindre behöver dina diska jobba. Om du ska ha kryptering så snabbar det upp det mycket då den har mer plats att jobba också. (Enligt FreeNAS sidor). De tycker även ECC minne är en viktig sak, men då måste du satsa mer pengar på 990X moderkort och dyrare ECC minne.
När det gäller AMD processor, jag tänkte ta en billig processor och undervolta (klocka ner den) så att den drar väldigt lite ström. Om du väljer en som har Turbo funktion så kan du få den ännu mer effektiv, då den bara klockar upp när den jobbar. Med AMD processorn kommer en nackdel, kylaren. Den som Intel levererar är tyst, medan den som AMD levererar är sämre. Men en prisvärd 100kr 3:e parts kylare brukar lösa detta.
Dock vet jag inte om inte din lösning är billigare rakt av, men det är svårt att hitta low end intel moderkort med 8 sata platser, och med 6 diskar för RAID-Z, en för SSD Cache så har jag inte mycket val.

Skrivet av ronnylov:

Har du backup så tycker inte jag att det är så viktigt med massor av extra redundans i din raid. En ZFS raidz1 på 3 hårddiskar är en OK konfiguration tycker jag om man ser till att sköta backuper till något annat ställe.

Som jag tolkade det skulle han använda DENNA enhet som backup, varpå jag insisterar på mer än 1 disk i paritet, så att inte allt rasar när det byggs upp igen.

Trädvy Permalänk
Medlem
Registrerad
Jan 2014
Skrivet av Paddanx:

Var enda sida jag tittar på skriver, MER RAM, MER RAM. Destu mer RAM destu mer kan den cacha, och destu mindre behöver dina diska jobba.

Mycket minne är främst en fördel om man vill använda ZFS. I fall där man kör ett standard-OS (t ex någon Linux) hade jag i stället rekommenderat en SSD som cache. Detta snabbar upp NASen och låter de mekaniska diskarna sova en stor del av tiden, framför allt om NASen skrivs till ofta (central loggserver, torrentnedladdning etc).

Skrivet av Paddanx:

Sen hade jag inte använd RAID 5. De 2 gånger jag har använt det, har det havererat med dataförlust som följd.
Det som sker är att en disk havererar, och när du sätter i en ny disk, så bränner en disk sönder av jobbet att återställa den nya, eller så har en av de återstående fel på en eller flera sektorer, och filer är kapputt.

Bra poäng. Dock kan det vara så att TS accepterar nedtiden som en rasad raidfemma innebär, men inte vill betala för mer redundans än RAID5. Dataskyddet åstadkoms, om jag fattade det rätt, av offsite-lagringen hos kompis.

Skrivet av cheben:

Ok, det är kanske helt enkelt rsync som jag vill använda? Hur det fungerar är inte så viktigt (samt att jag kan ha rört ihop flera saker i huvudet) utan mest bara så att jag vill ha synkning mot en annan plats också för att säkra data mot allt förutom en EMP strike över skåne.

Jag hade rekommenderat någon grej som använder rsync men som erbjuder ett lite mer polerat och specialiserat gränssnitt, till exempel Duplicity. Med Duplicity får du möjlighet till krypterad backup, flera inkrementella backupgenerationer och möjlighet att lagra backuper i en drös med molntjänster.

Trädvy Permalänk
Medlem
Plats
Lund
Registrerad
Nov 2008
Skrivet av Paddanx:

Sen hade jag inte använd RAID 5. De 2 gånger jag har använt det, har det havererat med dataförlust som följd.
Det som sker är att en disk havererar, och när du sätter i en ny disk, så bränner en disk sönder av jobbet att återställa den nya, eller så har en av de återstående fel på en eller flera sektorer, och filer är kapputt.

Fördelen med just ZFS filsystemet och FreeNas är just att den verkligen kollar så att din backup som ligger lagrad är RÄTT lagrad, dvs den kan felkorrigera och rätta till fel innan du får fel-meddelande att det inte går att läsa.

Det backup programmet som kan synka mellan 2 servrar låter intressant dock. Hoppas det finns och fungerar, för jag själv kan vara intresserad av det.

http://www.inet.se/produkt/1902576/asus-a88xm-plus

Nu kommer det säkert en idioisk fråga, men ZFS filsystem, har det något med RAID nivå att göra eller är det mostsvarande NTFS på windows? Hur stor är risken för ras vid återuppbyggande av RAID egentligen? Känns som att du måste ha haft extrem otur!

Skrivet av Hieronymus Bosch:

Bra poäng. Dock kan det vara så att TS accepterar nedtiden som en rasad raidfemma innebär, men inte vill betala för mer redundans än RAID5. Dataskyddet åstadkoms, om jag fattade det rätt, av offsite-lagringen hos kompis.

Jag hade rekommenderat någon grej som använder rsync men som erbjuder ett lite mer polerat och specialiserat gränssnitt, till exempel Duplicity. Med Duplicity får du möjlighet till krypterad backup, flera inkrementella backupgenerationer och möjlighet att lagra backuper i en drös med molntjänster.

Du har rätt i det du skriver, jag tror jag accepterar risken med att RAIDen blir korrupt då all viktig data ändå skall ligga duplicerat på en annan server i ett annat hus. Datasäkringen kommer då vara 3 lager, min stationära, backup på NASen och NASen backupad på min kompis server. Jag tycker det borde räcka. Bättre säkring får komma när man börjar få en lön istället ^^

Tack för tips om duplicity! Skall kolla upp det nogrannare sen

Trädvy Permalänk
Medlem
Registrerad
Sep 2012

Orkar inte läsa igenom tråden men ser att någon redan har tipsat om Crashplan. Kör det själv och kan starkt rekommendera det!

Trädvy Permalänk
Medlem
Registrerad
Apr 2013
Skrivet av cheben:

Nu kommer det säkert en idioisk fråga, men ZFS filsystem, har det något med RAID nivå att göra eller är det mostsvarande NTFS på windows? Hur stor är risken för ras vid återuppbyggande av RAID egentligen? Känns som att du måste ha haft extrem otur!

Du har rätt i det du skriver, jag tror jag accepterar risken med att RAIDen blir korrupt då all viktig data ändå skall ligga duplicerat på en annan server i ett annat hus. Datasäkringen kommer då vara 3 lager, min stationära, backup på NASen och NASen backupad på min kompis server. Jag tycker det borde räcka. Bättre säkring får komma när man börjar få en lön istället ^^

Tack för tips om duplicity! Skall kolla upp det nogrannare sen

Zfs kan förenklat ses som en kombination av raid, filsystem och volymhanteringsfunktioner (snapshots, packning m.m). Närmaste windows konkurrent är väl snarare sprillans nya ReFS än NTFS som bara är ett filsystem.

Din korg fungerar för övrigt inte då man inte kan stoppa ett mATX i ett mini-ITX

Trädvy Permalänk
Medlem
Plats
Lund
Registrerad
Nov 2008
Skrivet av aluser:

Zfs kan förenklat ses som en kombination av raid, filsystem och volymhanteringsfunktioner (snapshots, packning m.m). Närmaste windows konkurrent är väl snarare sprillans nya ReFS än NTFS som bara är ett filsystem.

Din korg fungerar för övrigt inte då man inte kan stoppa ett mATX i ett mini-ITX

Då förstår jag, tack så mycket för förklaringen Oj då, ja det gick lite fort, det var mest för att få en uppfattning om ungefärlig kostnad för projektet, men tack ändå

Skickades från m.sweclockers.com

Trädvy Permalänk
Medlem
Plats
Malmö
Registrerad
Maj 2014
Skrivet av cheben:

Nu kommer det säkert en idioisk fråga, men ZFS filsystem, har det något med RAID nivå att göra eller är det mostsvarande NTFS på windows? Hur stor är risken för ras vid återuppbyggande av RAID egentligen? Känns som att du måste ha haft extrem otur!

Fördelen med ZFS som fick mig fast är dennas enorma fördel i lagring, och garanti att det som ligger där är exakt det du lagrade, och inte defekt ½år senare. Den har extra checksummor och läser igenom all data med jämna mellanrum (som du själv kan justera) och verifierar att allt är korrekt lagrat, annars lagar det informationen och återskriver det.
Du slipper mao sk. silent corruptions.
Eftersom jag ska ha min ena till bla backup och annat, både åt mig själv, och åt andra så vill jag veta att den bilden eller filmen som lagrades där för länge sedan fortfarande går att läsa, och är felfri.