Mrežni hardver

Kućni NAS? Iskustva? Preporuke?

display name ivo pon 16.9.2019 07:50
Jura iz druge galaksije kaže...
display name ivo kaže...

Ja sam na kraju uzeo DS218+ sa 2 WD Red 4TB HDD-a. Za backupe super. Plex odlično radi u lokalnoj mreži, udaljeno baš i ne. Krene vjerojatno raditi transcoding, zakuca procesor na 100% i čekaš i čekaš i kada i krene kvaliteta videa je puno lošija.

 Ukratko, koliko para toliko muzike. A lijepo sam ti predložio daleko kvalitetnije rješenje. 'ko kupuje jeftino, taj dva puta kupuje. Pa sad računaj koliko si ušparo.

Jura hvala još jednom na savjetu, poslušao bih te ali morao sam se uokviriti u budžet, nije štednja, postoje razlozi. Ovo za transcoding sam napisao kao jedinu lošu stvar za DS218+ kojim sam inače prezadovoljan, a ispravio bih nepravdu jer sam u međuvremenu neke stvari skužio. Naime, ja sam testirao na način da sam na mobitelu sa 4G mreže pokretao video sa NAS-a pri čemu mi je Plex rušio kvalitetu (valjda zbog štednje internet prometa?) a kao opcije reprodukcije postojale su smo reproduciraj originalnu kvalitetu i pretvori automatski (kod obje opcije je kvaliteta bila lošija). Međutim otkrio sam da mogu i sam postaviti ručno kvalitetu i onda bude isto kao u lokalnoj mreži. Otkad imam NAS bilo je već nekoliko nadogradnji Plex servera za Synology i vrijeme učitavanja se isto drastično skratilo. Tako da zamjerki više nemam. Da, DS718+ je bolji i jači i uzeo bih ga da sam mogao, iako mi je DS218+ i više nego dovoljan za moje potrebe.

hrka11 pon 16.9.2019 07:57
display name ivo kaže...

Jura hvala još jednom na savjetu, poslušao bih te ali morao sam se uokviriti u budžet, nije štednja, postoje razlozi. Ovo za transcoding sam napisao kao jedinu lošu stvar za DS218+ kojim sam inače prezadovoljan, a ispravio bih nepravdu jer sam u međuvremenu neke stvari skužio. Naime, ja sam testirao na način da sam na mobitelu sa 4G mreže pokretao video sa NAS-a pri čemu mi je Plex rušio kvalitetu (valjda zbog štednje internet prometa?) a kao opcije reprodukcije postojale su smo reproduciraj originalnu kvalitetu i pretvori automatski (kod obje opcije je kvaliteta bila lošija). Međutim otkrio sam da mogu i sam postaviti ručno kvalitetu i onda bude isto kao u lokalnoj mreži. Otkad imam NAS bilo je već nekoliko nadogradnji Plex servera za Synology i vrijeme učitavanja se isto drastično skratilo. Tako da zamjerki više nemam. Da, DS718+ je bolji i jači i uzeo bih ga da sam mogao, iako mi je DS218+ i više nego dovoljan za moje potrebe.

 Ako ga koristis kao nas server i spremas filmove na njemu tada na mobitel instaliraj Kodi i povezi ga sa nas-om,bolje ti je to nego plex puno.

Kvaliteta slike ce ti bit puno bolja,tada synology nece morati radit transcoding kao za plex,a taj synology nije uopce dovoljno jak za to,sad koji ti je tv nezz,ali nek ti kodi bude opcija br.1 bas radi kvalitete slike,transcodinga itd...

display name ivo uto 17.9.2019 14:47

Probao sam, nije me oduševilo. Kao prvo, u lokalnoj mreži mi Plex super radi, nemam zamjerke, ne vidim zašto bih Kodi koristio? Koristim Plex jer ga jedino i mogu koristiti na svom LG TV-u sa Web OS-om. Osobno mi se aplikacija za Kodi na androidu ne sviđa. Izgleda mi kao da sam se mobitelom spojio preko teamviewera na neko računalo i klikam po aplikaciji čije je sučelje takvo da je sve sitno i djeluje ne prilagođeno za mobitel. Uz to su mi iskustva takva da se Kodi nekad samo sruši ili smrzne. A za udaljena spajanja Kodi ni nema mogućnost, ili ja nisam našao, dok Plex ima. Nebitno, ne koristim ga udaljeno ali mi se čini da su Kodi i Plex toliko različiti da ih nije ispravno uspoređivati u smislu koji je bolji već koji kome više odgovara svojim mogućnostima.

meboro1 ned 22.9.2019 12:34

Nemam baš nekakvih iskustava sa kućnim mrežama pa molim pomoć. Trebao bi kupiti nekakav NAS za streamanje medije. Na koji način se povezuju pc, laptop, smart tv, tablet, mobitel sa tim serverom? Koristim one powerline adaptere za internet preko struje na kompu i tvu a ostalo bežično na ruter huawei b315. I što je nekakav best buy NAS server?

hvala

pr0n_addict čet 2.7.2020 23:54

Pozdrav,

 

postavio sam pitanje u temi za nadogradnju PC-a no nisam dobio nikakav odgovor pa onda pitam tu jer je povezano iako vidim da je tema prilično zamrla.

Možda ću tu dobiti konkretan savjet od nekoga tko je bio u istoj ili sličnoj situaciji.

Quantum pon 29.11.2021 16:04
pr0n_addict kaže...

Pozdrav,

 

postavio sam pitanje u temi za nadogradnju PC-a no nisam dobio nikakav odgovor pa onda pitam tu jer je povezano iako vidim da je tema prilično zamrla.

Možda ću tu dobiti konkretan savjet od nekoga tko je bio u istoj ili sličnoj situaciji.

 

Proslo je vec dosta vremena, pa ipak - jesi li dobio odgovor u medjuvremenu? Sto si na kraju odlucio?

Vec duzi niz godina sam bacio QNAP i vozim vlastiti NAS, mozda mogu pomoci.

pr0n_addict pon 29.11.2021 16:56
Quantum kaže...
...

 

Proslo je vec dosta vremena, pa ipak - jesi li dobio odgovor u medjuvremenu? Sto si na kraju odlucio?

Vec duzi niz godina sam bacio QNAP i vozim vlastiti NAS, mozda mogu pomoci.

Heh, nedugo nakon tog posta sam na kanti iz potpisa digao ESXi 6.5 (ne ide novija verzija), tri Debian VM-a od koji je jedan OpenMediaVault (baziran na Debianu, točnije) i to evo sve šljaka već preko godinu dana.

Imam složen interni DNS (dnsmasq), NFS, SMB, music streaming (Airsonic), Let's Encrypt za certove, Nextcloud, Duck DNS (za pristup izvana, nemam statički javni IP - skup sport). Dobar dio toga je na Dockeru (podosta olakšava stvari). Backup ide na eksterni HDD (BorgBackup) - doduše samo media (ne backupiram OS-ove).

Nije idealno jer nije off-site, naravno, ali bolje i to nego ništa.

 

Sve što sam kupio je SATA SSD za ESXi i VM-ove dok su mi HDD-ovi zasad dovoljni jer nisam neki data hoarder. Lako se upikne još ako bude trebalo.

Uglavnom, ima tu dosta stvari za iskonfigurirati, pogotovo meni koji nisam baš u tome odnosno nisam ni sistemaš ni mrežaš već dev. Trebalo mi je jedno desetak dana za postavljanje svega navedenog.

 

Sve u svemu zasad nemam neku potrebu za nadogradnjom pa dok izdrži. Naravno da je ZFS NAS bolja opcija, ali mislim da mi je overkill.

Mladen pon 29.11.2021 16:57

@Quantum

 

Koji Qnap si imao i gdje si ga bacio ? :)

Od čega si sklopio taj vlastiti ? DYI je uvijek zanimljiva opcija, bar za učenje i eksperimentiranje.

Hardverski je jeftiniji, posebno ako već imaš većinu komponenti ali sad su neki Qnap ili Synology NAS tako nakrcani softverom  da je teško sve to postići sa DYI varijantom.

 

Quantum pon 29.11.2021 17:35
pr0n_addict kaže...

Heh, nedugo nakon tog posta sam na kanti iz potpisa digao ESXi 6.5 (ne ide novija verzija), tri Debian VM-a od koji je jedan OpenMediaVault (baziran na Debianu, točnije) i to evo sve šljaka već preko godinu dana.

Imam složen interni DNS (dnsmasq), NFS, SMB, music streaming (Airsonic), Let's Encrypt za certove, Nextcloud, Duck DNS (za pristup izvana, nemam statički javni IP - skup sport). Dobar dio toga je na Dockeru (podosta olakšava stvari). Backup ide na eksterni HDD (BorgBackup) - doduše samo media (ne backupiram OS-ove).

Nije idealno jer nije off-site, naravno, ali bolje i to nego ništa.

 

Sve što sam kupio je SATA SSD za ESXi i VM-ove dok su mi HDD-ovi zasad dovoljni jer nisam neki data hoarder. Lako se upikne još ako bude trebalo.

Uglavnom, ima tu dosta stvari za iskonfigurirati, pogotovo meni koji nisam baš u tome odnosno nisam ni sistemaš ni mrežaš već dev. Trebalo mi je jedno desetak dana za postavljanje svega navedenog.

 

Sve u svemu zasad nemam neku potrebu za nadogradnjom pa dok izdrži. Naravno da je ZFS NAS bolja opcija, ali mislim da mi je overkill.

 

Mislim da si dobro odlucio - ZFS je izvanredan file system, ali i gladan resursa.

 

Ne znam da li ti je to racunalo upaljeno 24/7, ali bez ECC-a ili (bar jednog) UPS-a, ne bih se kockao sa dugotrajnijim radom. Naravno, sve ovisi o tome koliko su ti vazni podaci i sto se moze desiti ako ih izgubis.

Filmovi/serije se mogu nanovo skinuti (ali je gnjavaza).

Osobne slike i dokumenti su subjektivna vrijednost (ali vjerojatno nece covjek biti gladan kruha ako ih izgubi).

Produkcija ili nesto sto ti donosi osobni dohodak - to je vec nesto drugo i to vrtjeti na non-enterprise hardveru......pa, nadam se da je bar plan za backup-restore dobar :)

 

Mladen kaže...

@Quantum

 

Koji Qnap si imao i gdje si ga bacio ? :)

Od čega si sklopio taj vlastiti ? DYI je uvijek zanimljiva opcija, bar za učenje i eksperimentiranje.

Hardverski je jeftiniji, posebno ako već imaš većinu komponenti ali sad su neki Qnap ili Synology NAS tako nakrcani softverom  da je teško sve to postići sa DYI varijantom.

 

 

Bio je to prastari TS-469L - zapravo ga nisam doslovce bacio, vec prodao prije jedno dvije ili tri godine. Radio je dobro kao filer i bio sposoban zasititi 1G vezu, ali kada je otisao izvan garancije i supporta, i kad sam vidio koliko je ZFS (za mene i moj use-case) superiorniji od vjerojatno bilo cega drugog sto postoji, krenio sam sklapati vlastiti.

Imao sam vec (stariji) hardver sa strane i ECC RAM, tako da dvojbe nije bilo - FreeNAS (tj. danas TrueNAS). Nasao sam (takodjer jednako stari) LSI SAS2008 HBA, flashao ga u IT mode i otada vise ne gledam unazad....osobito ne kad vidim cijene.

 

DIY je sjajan, naravno, ali, ako pricamo o data storage, mislim da je kljucno pitanje je koliko ti podaci vrijede i sto se desi ako se izgube (djelomicno ili potpuno)? Ako se radi sa rabljenim ili starijim hardverom, koliko je dostupan zamjenski hardver, po kojoj cijeni i kada?

Mislim da je za vecinu ljudi (pa cak i entuzijasta) ipak bolje uzeti kljuc-u-ruke rjesenje i kupiti gotov NAS - pa makar i hardverski osjetno slabijih karakteristika. To je sasvim dovoljno za pristojan storage i to bi bila moja preporuka :) Garancija je tu, minimum posla, nema gubitka vremena - i to je ukljuceno u cijenu QNAP-a ili Synology-a.

 

Sto se tice softvera - QNAP/Synology imaju jedinu prednost tu da imaju vlastiti app-store pa je mozda to jednostavnije za kliknuti i skinuti. Ali, FreeNAS/TrueNAS CORE ima FreeBSD jailove (sto su zapravo lightweight containeri), a TrueNAS SCALE ide korak dalje sa Dockerom i Kubernetesom, tako da osim argumenta jednostavnosti, sve ostalo je na strani takvog "NAS" rjesenja.

Najzad, pitaj se sto zapravo zelis vrtjeti direktno na NAS-u, a sto bi bilo bolje vrtjeti pod nekim dediciranim hypervisorom (Proxmox/ESXi/Hyper-V/Xen)? Mozda je Plex ili OpenMediaVault ok, ali bilo sto drugo? Ja bih to prebacio na hypervisor.

Mladen pon 29.11.2021 18:27
Quantum kaže...

Mladen kaže...

@Quantum

 

Koji Qnap si imao i gdje si ga bacio ? :)

Od čega si sklopio taj vlastiti ? DYI je uvijek zanimljiva opcija, bar za učenje i eksperimentiranje.

Hardverski je jeftiniji, posebno ako već imaš većinu komponenti ali sad su neki Qnap ili Synology NAS tako nakrcani softverom  da je teško sve to postići sa DYI varijantom.

 

 

Bio je to prastari TS-469L - zapravo ga nisam doslovce bacio, vec prodao prije jedno dvije ili tri godine. Radio je dobro kao filer i bio sposoban zasititi 1G vezu, ali kada je otisao izvan garancije i supporta, i kad sam vidio koliko je ZFS (za mene i moj use-case) superiorniji od vjerojatno bilo cega drugog sto postoji, krenio sam sklapati vlastiti.

Imao sam vec (stariji) hardver sa strane i ECC RAM, tako da dvojbe nije bilo - FreeNAS (tj. danas TrueNAS). Nasao sam (takodjer jednako stari) LSI SAS2008 HBA, flashao ga u IT mode i otada vise ne gledam unazad....osobito ne kad vidim cijene.

 

DIY je sjajan, naravno, ali, ako pricamo o data storage, mislim da je kljucno pitanje je koliko ti podaci vrijede i sto se desi ako se izgube (djelomicno ili potpuno)? Ako se radi sa rabljenim ili starijim hardverom, koliko je dostupan zamjenski hardver, po kojoj cijeni i kada?

Mislim da je za vecinu ljudi (pa cak i entuzijasta) ipak bolje uzeti kljuc-u-ruke rjesenje i kupiti gotov NAS - pa makar i hardverski osjetno slabijih karakteristika. To je sasvim dovoljno za pristojan storage i to bi bila moja preporuka :) Garancija je tu, minimum posla, nema gubitka vremena - i to je ukljuceno u cijenu QNAP-a ili Synology-a.

 

Sto se tice softvera - QNAP/Synology imaju jedinu prednost tu da imaju vlastiti app-store pa je mozda to jednostavnije za kliknuti i skinuti. Ali, FreeNAS/TrueNAS CORE ima FreeBSD jailove (sto su zapravo lightweight containeri), a TrueNAS SCALE ide korak dalje sa Dockerom i Kubernetesom, tako da osim argumenta jednostavnosti, sve ostalo je na strani takvog "NAS" rjesenja.

Najzad, pitaj se sto zapravo zelis vrtjeti direktno na NAS-u, a sto bi bilo bolje vrtjeti pod nekim dediciranim hypervisorom (Proxmox/ESXi/Hyper-V/Xen)? Mozda je Plex ili OpenMediaVault ok, ali bilo sto drugo? Ja bih to prebacio na hypervisor.

Nije to toliko prastaro, ja još čuvam njegovog slabijeg rođaka 419P kao backup backupa (jako slični izvana, dual-LAN, e-SATA itd.) to mi se činilo korisnije nego ga prodati za neke male novce.

Trenutno sam na TS-531X i Syno 1515+ offsite.

 

Nisam još krenuo u ZFS vode, pa se oslanjam na količinu :) (broj primjeraka). Uz NASeve su tu još lokalni dodatni diskovi u kompovima, ext. diskovi i BR M-Disc mediji za najvažnije arhive.

Privlači me ideja sa Hyper-V, vidio sam u praksi kako to otprilike izgleda i zgodno je imati nekoliko virtualki za svaku ulogu. Sačuvao sam si jednu X99 s2011 ploču od prije par godina, koja bi teoretski umjesto i7-5820k koji je bio gore i običnog DDR4 mogla raditi i sa odgovarajućim Xeonom i ECC RAMom. Koliko je bitan posebni kontroler ? (ovaj LSI koji imaš). Ploča ima M.2 slot i 10 SATA portova, da li se može osloniti na njih ili je ipak bolje staviti ozbiljniji kontroler ?

 

Quantum pon 29.11.2021 18:58

To je odlicna namjena za taj QNAP :) Ljudi zaboravljaju da RAID nije backup - a postoji i sjajno pravilo kojeg nikad ne treba smetnuti s uma.

 

Izvrsno je sto imas (dio?) backupa na optickim medijima, no cini mi se da kod vecih arhiva to ne skalira dobro, a i sam medij je (bio?) podlozan spontanoj (i tesko predvidivoj) degradaciji. Traka je vjerojatno (naj?)bolje rjesenje, ali isto tako ima svojih problema. Uvijek se sve svodi na pitanje - sto je dovoljno dobro, tj. sto je dovoljno lose? Sve ovisi o namjeni i vaznosti tih podataka.

Ja sam odlucio to sve pojednostavniti - uzeo sam veci disk za backup kljucnih stvari, a ostalo preselio u polje 2-way mirrora (ZFS to zove striped mirror vdev konfiguracija, analogno je RAID10). Najbitnije stvari drzim na osobnom backupu na Backblazeu (off-site) i to mi je ok. Imam frenda koji rotira par diskova kroz godinu i onaj drugi deponira u bankovni sef - tamo su mu slike obitelji, djece od prije 20, 30 godina, to je za njega naravno neprocjenjivo, a covjek ne vjeruje cloudu i to je sasvim ok.

 

Ako te zanima bolje rjesenje od tri separirana NAS-a, mozda je ZFS bas ono sto trazis - mene je najvise privukla prema njemu ekstremna predanost integritetu podataka i mogucnost popravke pogresaka uslijed bit rota. Sve to, naravno, kosta hardverskih resursa.

Prvo, niti u ludilu ne bih ZFS vrtio na non-ECC RAM-u - otprilike jedina stvar kojoj ZFS vjeruje je RAM - tako da je to prvo i osnovno. Sto vise RAM-a, to bolje.

Drugo je kontroler - ZFS ne tolerira hardverski RAID (to je recept za katastrofu broj 2) i bez dediciranog HBA nema smisla. LSI SAS2/3xxx je zicer jer imaju doslovce milijarde sati rada tijekom godina i driveri su toliko battle-hardened da je bilo sto drugo (pomalo opasna) ezoterija.

Trece je bare-metal - ZFS moze raditi virtualizirano, ali samo ako je HBA u passthrough modu. Tu je pitanje kako (i koliko dobro) hypervisor taj passthrough radi, hoces li pogoditi kakav edge ili corner case i koliko si voljan vremena potrositi na gnjavazu s tim.

 

Mladen pon 29.11.2021 19:55

Da, RAID je samo redundancija dok zamijeniš crknuti disk, ali za viruse ili greškom obrisani file ne pomaže.

Za optičke medije se ljudima uglavnom digne kosa na glavi ali meni se sviđaju jer su potpuno različita tehnologija od HDD/SSDa a posebno M-Disc koji bi trebao ispraviti slabosti običnih optičkih medija - mineralni, suhi sloj, bez emulzija osjetljivih na UV, vlagu ili temperaturu. I da, to je najmanji dio arhive, najvažniji, jer inače vjerojatno ni sa 5 pržilica paralelno ne bi stigao sve to zapeći :).

Koristim princip kao što si gore odgovorio pr0nu ... nekakvi filmovi, serije, mjuza, sve se to (relativno) lako opet nabavi ali vlastite fileove ne, tako da nije loše imati nekih 2, 3, 4 nivoa važnosti, od prvog (paranoid-mode :)) do zadnjeg tipa "nek stoji na disku dok mi ne zatreba prostora" :).

Super, drago mi da ima još ljudi koji to malo ozbiljnije shvaćaju jer većina samo odmahne rukom raćunajući na cloud ili pozdanost ext. diska a neki ni toliko.

Trenutno se ne stignem poigrati s tim a nemam ni fizičkog prostora za još jedan PC. U trenucima naleta entuzijazma sam nabavio Fractalovo Node 804 kućište, ali u njega ne stane ova ATX ploča :).

 

 

 

Quantum pon 29.11.2021 23:03
Mladen kaže...

Privlači me ideja sa Hyper-V, vidio sam u praksi kako to otprilike izgleda i zgodno je imati nekoliko virtualki za svaku ulogu. Sačuvao sam si jednu X99 s2011 ploču od prije par godina, koja bi teoretski umjesto i7-5820k koji je bio gore i običnog DDR4 mogla raditi i sa odgovarajućim Xeonom i ECC RAMom. Koliko je bitan posebni kontroler ? (ovaj LSI koji imaš). Ploča ima M.2 slot i 10 SATA portova, da li se može osloniti na njih ili je ipak bolje staviti ozbiljniji kontroler ?

 

 

Preporucio bih Proxmox kao idealnu platformu za eksperimentiranje sa VM-ovima - Hyper-V je izvrstan hypervisor, slicno kao i ESXi, ali licence i ogranicenost razlicitih edicija softvera bi mogao biti neocekivan problem prije ili kasnije. Proxmox je naboostani Debian, pa tih ogranicenja nema.

 

Ovo sa X99 plocom mi je bila nepoznanica - pa Wellsburg cipset ne ogranicuje ECC, tako da ako stavis nekakav E5-16xx ili E5-26xx, ECC bi trebao biti prepoznat i ukljucen jer ga CPU prepoznaje?

To bi bilo izvrsno, jer upravo pisem na racunalu sa Sabertooth X99 i i7-5820k - i mozda cu taj workstation uskoro mijenjati. Ako ECC radi na X99 sa Haswell-EP/Broadwell-EP procesorima, pa to bi bilo sjajno za jedan pristojan filer - uz LSI HBA, i dobar TrueNAS host.

 

Si isprobao da ti ECC radi na ploci sa nekim Xeonom?

 

Mladen kaže...

Da, RAID je samo redundancija dok zamijeniš crknuti disk, ali za viruse ili greškom obrisani file ne pomaže.

Za optičke medije se ljudima uglavnom digne kosa na glavi ali meni se sviđaju jer su potpuno različita tehnologija od HDD/SSDa a posebno M-Disc koji bi trebao ispraviti slabosti običnih optičkih medija - mineralni, suhi sloj, bez emulzija osjetljivih na UV, vlagu ili temperaturu. I da, to je najmanji dio arhive, najvažniji, jer inače vjerojatno ni sa 5 pržilica paralelno ne bi stigao sve to zapeći :).

Koristim princip kao što si gore odgovorio pr0nu ... nekakvi filmovi, serije, mjuza, sve se to (relativno) lako opet nabavi ali vlastite fileove ne, tako da nije loše imati nekih 2, 3, 4 nivoa važnosti, od prvog (paranoid-mode :)) do zadnjeg tipa "nek stoji na disku dok mi ne zatreba prostora" :).

Super, drago mi da ima još ljudi koji to malo ozbiljnije shvaćaju jer većina samo odmahne rukom raćunajući na cloud ili pozdanost ext. diska a neki ni toliko.

Trenutno se ne stignem poigrati s tim a nemam ni fizičkog prostora za još jedan PC. U trenucima naleta entuzijazma sam nabavio Fractalovo Node 804 kućište, ali u njega ne stane ova ATX ploča :).

 

Protiv ransomwarea (na Windowsima), samo cu spomenuti - ZFS snapshots i iSCSI drive. Ako i nesto poberes, trebat ce ti mozda par sekundi za recovery sticenih podataka - plus mozda reinstall Windowsa.

 

M-Disc mi je nepoznanica - znaci, promijenili su kemizam supstrata tako da je otporniji? Koliko ti je najstariji M-Disc star, kakvi su ti dojmovi? Vidim kako bi to moglo biti zgodno za zaista ultra-bitne stvari, ali osobno mislim da je sve iznad mozda pet takvih diskova jednostavno previse.

 

Paranoja je zapravo drugi naziv za "iskustvo" :) RAID5 (ili RAID-Z1) vise nitko ne koristi u produkciji barem 10 godina, jer je postao pre riskantan - samo je pitanje koliki si hazarder i, po stoti put, koliko ti vrijede podaci. RAID6 (RAID-Z2) je neki razuman minimum plus backupi - to nije paranoja, vec empirija.

 

Za Fractal Node 804, preporucam Supermicro X10SLM+-F - to je micro-ATX ploca koju vec 7.5 godina peglam 24/7 bez prestanka i koja mi je i sada osnova za TrueNAS filer. Takva jedna ploca, uz Haswell/Broadwell-EP i, recimo 16-32 GB DDR ECC RAM-a (za pocetak) ce ti dati bazu za TrueNAS/ZFS koji ce poderati veliki broj QNAP rjesenja sa visestruko vecim cijenama uz file system koji je stvarno tesko skrsiti.

Mladen uto 30.11.2021 00:09

Tnx, pogledat ću i to, Hyper-V mi je nekako najbliži i u free verziji, a kako je to sve za osobnu upotrebu i eksperimente nisam se baš ograničavao licencama :).

 

Za X99, nisam probao u živo. Konkretno, za tu Asrock X99 Extreme 4, negdje 2016.-17. sam to malo istraživao nadajući se dokopati nekog E5-2699v3 (tada najjači, 18-core Xeon) ali su još bili preskupi.

Na dosta mjesta sam našao konkretne primjere da su to uspjeli napraviti, možda je bilo nešto malo kemijanja oko BIOSa za podršku 128GB (službeno 64GB, ploča ima 8 DIMMova).

Međutim baš tad je i AMD krenuo sa Ryzenima, poslije sa Threadripperima, pa mi više nije bilo zanimljivo.

 

Da, snapshoti su zgodni, srećom još nisam morao koristiti restore ali npr. Qnap FileManager ima to integrirano pa se po snapshotima browsa kao po živom file sistemu.

 

Za M-Disc, prve sam kupio prije nekih 5-6 godina (BR 25GB), spržio par komada i još su živi i zdravi (Pržilica, DVD ili BR, mora imati M-Disc support, mislim da danas svi i imaju).

Nisam ih baš maltretirao, oslonio sam se na pisane i par video recenzija gdje su to već napravili, ostavljali ih vani na zimi, smrzavali u vodi, ostavljali na suncu itd. Na koncu, ako je dobar američkoj vojsci, valjda onda ima nešto u tome a i ne treba mi baš cijelo tisućljeće :).

 

Supermicro bi sigurno bio izbor da mi stvarno treba, ali ovako za igranje gledam i ove obične, čak i mainstream AM4 za Ryzen u nekim kombinacijama imaju ECC support pa uz neki Pro CPU sa int. grafikom (4650G ili 5750G) to je i dalje dovoljno procesorske snage uz dobar power-managament.

 

Do dodam, fora je i ova Asrockova, mainstream socket a ima IPMI, čak ne mora biti ni "G" Ryzen jer ima grafičku na ploči, old-school :)

https://www.asrockrack.com/general/productdetail.asp?Model=X470D4U#Specifications

 

Quantum uto 30.11.2021 05:57

Hyper-V je izvrstan, kao i vecina drugih mainstream hypervisora - za homelabbing je doslovce tesko pogrijesiti s odabirom.

 

Po svemu sto sam vidio, izgleda da bi ECC trebao funkcionirati na X99. Da nisi spomenuo to, ne bih nikada isao provjeravati, ali po onome sto sam procitao do sada, chipset uopce ne zanima ECC; CPU je taj koji zna ili ne zna baratati s ECC memorijom. Jedini limit je da mora biti unregistered ECC i to je to.

Ne znam treba li ti ta mrcina od CPU-a jos uvijek, ali sad vidim da kosta oko 60-ak dolara - za te karakteristike, pa to je badave.

 

Svakako cu pogledati ovaj M-Disc - nisam vec godinama gledao bilo kakve opticke pekace, ali....za arhivsku pohranu, cini se izvrsno. Hvala ti!

 

Bez IPMI-a (ili njihovih derivata, a'la iDRAC ili iLO) uopce nemoj niti gledati ploce. To je jednostavno obvezno imati za bilo kakav server.

 

Te kombinacije s Ryzenom, gledas li to uzeti za buduci self-built NAS ili imas nesto drugo u planu?

Mladen uto 30.11.2021 10:53

Eh, da su tada bile ove cijene za 2699v3 :). Jaki kompovi mi trebaju za 3D (vizualizacije), a sad je već i jedan pokućni 3900X jači od tog Xeona tako da su sve ove kombinacije više za zabavu.

Možda ako naleti neki projektić za neku od firmi gdje sam kao IT-support, ovaj X99 baš vuče za neki Hyper-V multi-praktik uredski serverić :)

Teško je nekoga tko ne vidi potrebu uvjeriti u tako nešto, jedva pristanu i na backup NAS iako, sviđa im se kad nešto zabrljalju pa se to vrati iz noćašnjeg backupa.

Isto i za ovaj AM4 ECC combo, meni realno ne treba, sadašnja konfiguracija sa NASevima mi je ok, bitno da su arhive sa .adf "disketama" sa Amige sigurne :)

 

 

Bosenoge uto 30.11.2021 17:26

Pozdrav,

 

registrirah se samo zbog ove teme jer ste mi ispali na nekom searchu, pa reko da podijelim svoja iskustva. Prvi lockdown sam proveo upoznajući Linux, što me je vrlo brzo dovelo do NAS-ova i selfhostinga, a Reddit community u tome je vrlo brojan pa sam štošta naučio.

Anyway, mislim da su ovi dupli XEON-i i ECC RAM mali overkill za nekog prosječnog korisnika. QNAP i Sinology, osim što su skuplji od home-made varijante, podliježu i hakiranju, jer ih koristi veći broj ljudi - QNAP je nedavno imao velike probleme s time.

Trenutno(oko godinu i pol) vrtim NAS na staroj i5 4700... sa 24G DDR3 RAM-a sa 4x3 i 4x10 TB u RAID5 i slijedećim sistemom:

Openmediavault kao osnova(grafički je ružan ali radi na gotovo svemu)

-Plex i Emby za medije

-Bitwarden za šifre(to mi se čini najvažnijim)

-Nextcloud za općenito deGoogliranje

-Airsonic za glazbu

-Piwigo za fotke

- sve u Docker containerima na domeni kupljenoj za 2,99$

 

I sve to za nekolicinu usera radi bez greške i zastajkivanja. Neki i više usluga vrte samo na Raspberry PI-jevima, tako da ne kužim potrebu za nekim jačim sustavom osim ako još ne vrtiš Minecraft server za 20-30 ljudi?

OMV ima super community i dobre YT tutoriale, tako da se sve dade brzo naučiti. ZFS je super, ali se ne da upgradeati disk po disk već cijeli poolovi. Ja vadim WD Elementse iz kućišta(shuckiranje je najbolji termin koji sam naučio -  https://www.youtube.com/watch?v=7mAne71RRBQ )

za skoro duplo manju cijenu nego stolne diskove(oko 180e sa dostavom sa amazon.de za 10TB), a još trebam doživiti da mi crkne disk-najstariji mi je neki zeleni WD 2TB sa 3.949 radnih sati :)

Za cold storage mi služi još starija kutija sa Dual Core-om i 8G DDR2 na kojoj je isto OMV sa 5x1TB RAID5 - njega upalim jednom tjedno za backup najvažnijih stvari. Znam da mi fali još i off-site backup, ali sada sam puno sigurniji nego prije dok nisam imao NAS i nisam ništa znao o tome, a fajlove hoardam čitav život :(

Data hoarderi većinom koriste taj tape za neki backup koji nije na diskovima, ali i to mi je overkill jer je skupo a i nemam toliko esencijalnih podataka da bi opravdalo trošak.

 

Anyway, NAS je super i self-hosting je super- ako nekom trebaju linkovi, tu sam!

Mladen uto 30.11.2021 18:26

Naravno da bi i jači single Xeoni bili overkill a još više dual, ali to je više, kako bi Đ.Gavrilović rekao, pašteta je da se baci :)

 

Cijene gotovih ext. diskova su odavno manje od samog diska, ne znam zašto ali dok je takve politike bit će i shuckinga. To sam prvi put namjerno napravio 2011. kad je bila ona poplava u jednoj od WD-ovih tvornica pa su cijene na kratko otišle 2-3 puta gore kao danas grafićke. Inače bi to napravio kad bi se pokidao kabel ili utičnice na kućištu pa zato uvijek tražim koji modeli imaju unutra normalni SATA disk a koji onaj okljaštreni sa USB->SATA slemljenim direktno na elektroniku diska.

Da li si uspio naći neku pouzdanu listu "schuking-friendly" modela ? Proizvođači skrivaju te podatke a moguće da i bez najave promjene neki model.

Neki sretnici su i u ovim jeftinim WD MyBook i Elements znali naći Red ili čak Gold diskove, valjda ovisi čega su u tom trenutku imali viška u tvornici.

 

Quantum uto 30.11.2021 21:28
Bosenoge kaže...

Pozdrav,

 

registrirah se samo zbog ove teme jer ste mi ispali na nekom searchu, pa reko da podijelim svoja iskustva. Prvi lockdown sam proveo upoznajući Linux, što me je vrlo brzo dovelo do NAS-ova i selfhostinga, a Reddit community u tome je vrlo brojan pa sam štošta naučio.

Anyway, mislim da su ovi dupli XEON-i i ECC RAM mali overkill za nekog prosječnog korisnika. QNAP i Sinology, osim što su skuplji od home-made varijante, podliježu i hakiranju, jer ih koristi veći broj ljudi - QNAP je nedavno imao velike probleme s time.

Trenutno(oko godinu i pol) vrtim NAS na staroj i5 4700... sa 24G DDR3 RAM-a sa 4x3 i 4x10 TB u RAID5 i slijedećim sistemom:

Openmediavault kao osnova(grafički je ružan ali radi na gotovo svemu)

-Plex i Emby za medije

-Bitwarden za šifre(to mi se čini najvažnijim)

-Nextcloud za općenito deGoogliranje

-Airsonic za glazbu

-Piwigo za fotke

- sve u Docker containerima na domeni kupljenoj za 2,99$

 

I sve to za nekolicinu usera radi bez greške i zastajkivanja. Neki i više usluga vrte samo na Raspberry PI-jevima, tako da ne kužim potrebu za nekim jačim sustavom osim ako još ne vrtiš Minecraft server za 20-30 ljudi?

OMV ima super community i dobre YT tutoriale, tako da se sve dade brzo naučiti.

 

Probat cu objasniti zbog cega su pozeljne extra jezgre, ECC RAM i malo bolja oprema.

 

Kao sto sam napisao iznad - sve to ovisi koliko vaznosti polazes svojim podacima i kako/koliko si ih voljan stititi. Zapravo uopce nismo niti pricali pretjerano o performansama (vecinom niti nisu toliko bitne, sve dok nisu grozne).

Nisam evangelist na krizarskom pohodu za usvajanje ZFS-a i mislim da nema nista lose u tome koristiti non-ZFS sustave kao filere, kao niti non-enterprise hardver. Pa cak i obican RAID6, uz dobar backup, to moze biti sasvim solidno i zadovoljavajuce rjesenje. Uz to, ako NAS nije 24/7, mozda se moze provuci i sa non-ECC RAM-om (ako si ok sa tihom korupcijom podataka). Kako smo i rekli prije, sve je to ok sa zamjenjivim podacima.

 

Problemi nastaju kad nastradaju nezamjenjivi podaci - obiteljske slike, uspomene, porezne prijave, dokumenti, bitni racuni, projekti, ugovori i slicno. Dovoljan je samo jedan silent bit-flip da se slika ruinira, PDF se ne moze otvoriti, i slicno. Ako nemas (ECC) mehanizme za detekciju i korekciju tih situacija, ta korupcija ce se (vjerojatno) propagirati na backupe (osim ako ne kontroliras rucno sve stalno, sto je besmislica). To sto ti ili ja (ili vecina ljudi) smo dovoljno sretne ruke da nismo na to naisli, ne znaci nista ako otkrijes da si bas ti taj sretnik kojem se digitalizirana slika rodjenja djeteta sama od sebe korumpira, ode na backup, a originali su izgubljeni, npr. u nekoj od selidbi ili si imao poplavu ili sto vec. Stvar je osobne procjene hoce li netko aktivno ili pasivno se stititi od takvih mogucnosti.

 

ZFS je sve popularniji jer jak naglasak stavlja na integritet podataka (poznat je trokut "integritet - performanse - kapacitet" gdje mozes uvijek odabrati najvise dva istodobno).

To nije samo file system vec end-to-end rjesenje za state-of-the-art zastitu podataka: od visestrukih mehanizam checksummiranja (koji se medjusobno provjeravaju), aktivni scrubbing (prolazi po podacima koji rekalkuliraju sve checksume i validiraju ih), visestrukih kopija istih podataka i jos niz drugih koje sam zaboravio. Svi ti mehanizmi traze racunalne performanse propocionalno ocekivanjima - osobito RAM. Onda shvatis da je ZFS bez ECC RAM-a je kao vrhunski pilot sa -20 pepeljarama na ocima - uzalud par najboljih motora, vrhunska takticka sprema, brzina reakcija, upravljanje energijom zrakoplova i tjelesna izdrzljivost kad slabo vidis.

 

Sto se tice containera - TrueNAS Core nativno podrzava jailove (koji su u biti containeri), a TrueNAS Scale (trenutno u RC verziji) koliko vidim podrzava Docker/Kubernetes containere, tako da to postaje vrlo ozbiljna (a osnovi besplatna) platforma za pouzdan deployment svega ovog sto si naveo gore, pa i puno vise (recimo, OMV odlicno radi kao jail na TrueNAS-u i isprobavao sam ga mjesecima -- zamisli OMV sa sigurnosnim garancijama ZFS-a).

To, naravno, opet trazi resurse, a i pitanje je vremena kad ces mozda otkriti iSCSI, pa probati sloziti Storage Area Network sa nekim hypervisorom i onda skuziti da su RAID-Z1(5)/-Z2(6)/-Z3(7) polja teska pusiona (u smislu IOPS-a) za block storage ili da bi htio all-flash polje SSD-ova..... tako da prilicno brzo covjek dodje do 32+ GB RAM-a, i minimum 4 ili 8 jezgri (sa hyperthreadingom), da ne pricamo o npr. Plex transkodiranju. A kad si vec tu, onda naletis na kakvu opskurnu specificnost koja te kosta vremena i zivaca i shvatis da su driveri u osnovi pisani za enterprise opremu i feature koji mogu biti traljavo izvedeni pa naletis na kernel panic-e na koje je netko drugi sa commodity hardverom takodjer naletio, ali na to slucajno nabasas nakon tri mjeseca psovanja ZFS-a, NAS-a i svih bogova storagea. Najzad shvatis da imas samo jedne zivce i da ces radije iskesirati za posten hardver jednom i onda ga voziti desetljece, nego skrtariti na osnovama i gubiti vrijeme.

 

Bosenoge kaže...
ZFS je super, ali se ne da upgradeati disk po disk već cijeli poolovi.

 

To je samo djelomicno tocno i vrijedi samo privremeno za paritetna polja (znaci, RAIDz). zpool sa striped-mirror vdevovima se uredno prosiruje i suzava sa svakim novim vdevom - nakon sto sam to otkrio, vise se nisam vracao na paritetna polja (btw, striped mirrori su zakon i iz drugih razloga).

 

Takodjer, u OpenZFS 3.0 bi trebala biti implementirana prosirenja RAID-a i distribuirani RAID (koji ce bitno skratiti vrijeme potrebno za rebuild polja u slucaju ispada diska).

 

Bosenoge kaže...

Ja vadim WD Elementse iz kućišta(shuckiranje je najbolji termin koji sam naučio -  https://www.youtube.com/watch?v=7mAne71RRBQ )

za skoro duplo manju cijenu nego stolne diskove(oko 180e sa dostavom sa amazon.de za 10TB), a još trebam doživiti da mi crkne disk-najstariji mi je neki zeleni WD 2TB sa 3.949 radnih sati :)

 

Shucking je popularan - ali poznajem ljude koji su se itekako opekli na tome, pa ga osobno ne bih bas preporucio. Obicno postoji razlog zasto je garancija na te diskove godinu ili dvije, a bas i nema puno ljudi koji to rade na obujmu Backblazea pa da se mogu stititi brojnoscu od nekoliko tisuca diskova u custom paritetnim poljima :) Caveat emptor.

Bosenoge uto 30.11.2021 22:10

Prije su stavljali i RED-ove, a u posljednjih dvije godine dobiješ white-label, samo drugačijeg serijskog broja. Ne mogu naći točan post, ali radi se uglavnom o diskovima većeg kapaciteta, koji nisu prošli quality control za veći kapacitet pa ga smanje i ovako prodaju. Znači, imaš recimo 12TB kojima su izolirali neispravne blokove i tebi ga prodaju pod 10. Neki su na 5.400 a neki na 7.200 RPM-a(koliko kužim, za NAS je manje bolje), neki punjeni zrakom, a danas većina helijem, koji je i trajniji. To saznaš po serijskom broju ali tek nakon što ga otvoriš. WD ima sve sa SATA adapterom, vadio sam i MYBook i Elements. Moraš maknuti jednu žicu sa SATA priključka ili ga spojiti na SATA-MOLEX adapter koji nema tu dodatnu voltažu. Razlika je u garanciji(2 naspram 5 godina za stolne diskove), ali samim time što si ih maknuo iz kućišta i stavio u PC si im produžio život značajno. NAS nikada ne gasim, a za mehaničke stvari je najbolje da su stalno uključene. Backblaze primjerice koristi samo diskove za "kućnu" uporabu - ako se njima isplati, tko sam ja da tvrdim drugačije? https://www.backblaze.com/blog/backblaze-hard-drive-stats-for-2020/ - doduše, oni više koriste Seagate, ali sve je to isto.

RAID ne voli SMR, pa je samo bitno da nisi uzeo SMR umjesto CMR drivea. Za to ima lista, ali sve preko 8TB je sigurno CMR :) https://www.truenas.com/community/resources/list-of-known-smr-drives.141/

Super site za homelab stvari je https://forums.serverbuilds.net . Imaju grupne kupnje, čak i za EU, ali to je više za vas XEON-aše i one koje vole malo više profi-setupe :).

 

Bosenoge uto 30.11.2021 22:31

@Quantumm - I hear you, čitao sam o bit rotu i posebnoj vrsti paranoje koju imaju data-hoarderi (zato ZFS, BTFRS i RAM na kile), no od 40TB RAW prostora možda je samo 1TB doista esencijalnih podataka, pa mogu živjeti sa tim rizikom. Koji peh moraš biti da ti rikne jedan disk pa odmah zatim drugi kada radiš reslivering? Mislim, ne bih volio izgubiti niti ostalo, ali već sada sam na dve razine više nego prije, pa se tješim s time :)

Apropos Plex transcodinga, kažu da noviji Inteli imaju taj Quicksync koji može podnijeti tipa desetak streamova bez grafičke. Ostali nek si kupe Odroid pa nek streamaju direktno kao ja :)

Quantum sri 1.12.2021 00:30
Bosenoge kaže...

Prije su stavljali i RED-ove, a u posljednjih dvije godine dobiješ white-label, samo drugačijeg serijskog broja. Ne mogu naći točan post, ali radi se uglavnom o diskovima većeg kapaciteta, koji nisu prošli quality control za veći kapacitet pa ga smanje i ovako prodaju. Znači, imaš recimo 12TB kojima su izolirali neispravne blokove i tebi ga prodaju pod 10. Neki su na 5.400 a neki na 7.200 RPM-a(koliko kužim, za NAS je manje bolje), neki punjeni zrakom, a danas većina helijem, koji je i trajniji. To saznaš po serijskom broju ali tek nakon što ga otvoriš. WD ima sve sa SATA adapterom, vadio sam i MYBook i Elements. Moraš maknuti jednu žicu sa SATA priključka ili ga spojiti na SATA-MOLEX adapter koji nema tu dodatnu voltažu. Razlika je u garanciji(2 naspram 5 godina za stolne diskove), ali samim time što si ih maknuo iz kućišta i stavio u PC si im produžio život značajno. NAS nikada ne gasim, a za mehaničke stvari je najbolje da su stalno uključene. Backblaze primjerice koristi samo diskove za "kućnu" uporabu - ako se njima isplati, tko sam ja da tvrdim drugačije? https://www.backblaze.com/blog/backblaze-hard-drive-stats-for-2020/ - doduše, oni više koriste Seagate, ali sve je to isto.

RAID ne voli SMR, pa je samo bitno da nisi uzeo SMR umjesto CMR drivea. Za to ima lista, ali sve preko 8TB je sigurno CMR :) https://www.truenas.com/community/resources/list-of-known-smr-drives.141/

Super site za homelab stvari je https://forums.serverbuilds.net . Imaju grupne kupnje, čak i za EU, ali to je više za vas XEON-aše i one koje vole malo više profi-setupe :).

 

 

Svaka cast za hrabrost - disk sa otkrivenim bad blockom u pravilu najhitnije zamijenim i/ili probusim busilicom na par mjesta (ako je izvan garancije), a kamoli da bih se usudio imati podatke na diskovima koji su tvornicki dosli sa bad blockovima ili da bih isao prebrikavati zice :)

S druge strane - uz dobar backup i ako covjeku zadovoljava potrebe, zasto ne.

 

WD-a mi je postala puna kapa nakon kravala sa Red diskovima prije jedno sedam-osam godina, a pogotovo nakon nedavnih podlosti i svinjarija sa CMR-om ili SN550 solid-state diskovima.

Iz principa ih vise ne kupujem i moram reci da sam u zadnjih 7 godina izuzetno zadovoljan sa Seagatom.

 

Bosenoge kaže...

@Quantumm - I hear you, čitao sam o bit rotu i posebnoj vrsti paranoje koju imaju data-hoarderi (zato ZFS, BTFRS i RAM na kile), no od 40TB RAW prostora možda je samo 1TB doista esencijalnih podataka, pa mogu živjeti sa tim rizikom. Koji peh moraš biti da ti rikne jedan disk pa odmah zatim drugi kada radiš reslivering? Mislim, ne bih volio izgubiti niti ostalo, ali već sada sam na dve razine više nego prije, pa se tješim s time :)

 

Peh? Ovisi sto mislis pod "rikne".

Ako pod tim mislis da ce ti se disk spontano samozapaliti tijekom resilveringa - da, za to se ne bih brinuo.

Ako pod tim podrazumijevas mehanicku pouzdanost (MTBF) - vjerojatno si i tu ok.

Ako pod tim podrazumijevas unrecoverable read error (URE) tijekom rebuilda RAID5 polja....kad si zadnji put testirao svoje restore procedure? :)

 

Vjerojatnost pada raid polja tijekom rebuilda nije bas banalan izracun. Ona ovisi o velicini svakog diska u polju, broju diskova u polju, brzini citanja s tih diskova i pouzdanosti tih diskova. To se da procjeniti s nekim kalkulatorom (ima ih hrpa, ovaj mi se cini generalno prihvacen i ok) - no u tvom slucaju (okrugli brojevi), cak i (vrlo) naivna racunica pokazuje da to bas i nije mudra odluka.

 

Recimo da si uzeo WD Red 10 TB diskove WD101EFBX - iz njihovog datasheeta citam da se za taj disk desi jedan URE u prosjeku desi svakih 10^14 procitanih bitova. Resilver mora procitati svaki bit na disku, a velicina tvog diska je ~8*10^13 bitova :) Vjerojatno sam pogrijesio u izracunu, ali cini se da imas u prosjeku 1-u-5 (20%) sanse da ti ce ti resilver proci bez ijednog URE-a. Ne znam za tebe, ali to bas i nije nesto s cim bih se kladio. Ali - zapravo je deset puta gore - kalkulator (koji uzima daleko realisticnije pretpostavke iz realnog svijeta) daje izracun od 2% vjerojatnosti za ce RAID5 rebuild polja od 4 x 10 TB diskovi sa deklariranim URE "<1 bit na 10^14 procitanih bitova" proci bez ijednog URE-a.

Slobodno sve ovo provjeri sam.

 

Naravno, tu stvari tek postaju interesantne - ako vozis hardverski RAID, veliko je pitanje sto ce kontroler napraviti kad naidje na URE. Neki ce odmah vrisnuti i prekinuti rebuild, sto u pravilu znaci odmah gubitak cijelog polja. Drugi ce te pitati kako dalje, treci samo potiho logirati gresku i nastaviti dalje (s tim da zapravo ne znas gdje se desila), a neki samo nastaviti bez da pisnu.

Softverski RAID - isto pitanje, samo sto je odgovor vjerojatnlo lakse doznati. Ako je mdadm, vjerojatno ce stati i pitati, a nesto drugo.....tko zna.

ZFS ce tocno prijaviti koji file i njega ce markirati - sve ostalo nece biti ugrozeno.

 

Poanta je da ne zelis doznati (ako bas ne moras).... i da postoji razlog zasto je zadnjih skoro 15 godina RAID6 prakticki minimum, a pogotovo na masivnim consumer diskovima od 10+ TB, gdje ti je (bar) 1 URE vrlo izgledan tijekom resilvera.

Mladen sri 1.12.2021 03:22

Pih, znači ništa od shuckinga kod WDa, taj White labeling mi izgleda lošija opcija od tvornički obnovljenih, tamo bar dobiješ jasno deklariran disk i manju cijenu.

Htio sam probati i to, pa sam uzeo par komada "refurbished" Hitachi Ultrastar (enterprise) jer je cijena bila manja i od "običnih" modela (njihovog Deskstara i pandana ostalih proizvođača) pa je računica bila ako ih pola ne doživi neki normalni radni vijek, na kraju ću završiti kao da sam ih platio po redovnoj cijeni a 75% preživjelih bi već bio nekakav uspjeh. Nakon 2 godine, još uvijek su na 100% (svi živi i zdravi) što opet ne govori ništa, ali je bar zgodna anegdota i ilustracija kolika su diskovi kocka, makar one statistike na Backblazeu izgledaju umirujuće.

 

Moram i ja malo pohvaliti WD, ne kužim što im je trebala ta CMR/SMR muljaža, tu uštedu (veću zaradu) koju su htjeli postići sad vjerojatno gube jer su bili prisiljeni vratiti CMR kao Red Plus a i biti jeftiniji od IronWolfa, a koliko se sjećam, prije je bilo obrnuto.

Ukupno, mislim da sam imao najviše Seagatea i naravno, nema 100% pouzdanog, ni proizvođača ni modela. Zanimljivo koliko se neke stvari vremenom i "pokvarenim telefonom" pretvore u predrasude, pa tako i danas čujem od raznih "stručnjaka" kako je WD najbolji, Seagate nikad u njihov komp i slične još dramatičnije izjave :) - a sve se to vjerojatno vuče od one Seagateove blamaže sa firmwareom na Barracudama 2009. Naravno da ih treba kritizirati, kao i sada WD, ali ne baš zauvijek, kao "AMD se grije" i "Intel je stabilniji" ekipa, ne znam koji su mi bolji :).

 

Što radite sa malim diskovima, manjim od TB ? Neki su skupili i preko 50k radnih sati ali su i dalje bez i jednog bad blocka. Žao mi je baciti ali kako su SSD-ovi sve jeftiniji stvarno više nemaju smisla.

 

Quantum sri 1.12.2021 05:35
Mladen kaže...

Pih, znači ništa od shuckinga kod WDa, taj White labeling mi izgleda lošija opcija od tvornički obnovljenih, tamo bar dobiješ jasno deklariran disk i manju cijenu.

Htio sam probati i to, pa sam uzeo par komada "refurbished" Hitachi Ultrastar (enterprise) jer je cijena bila manja i od "običnih" modela (njihovog Deskstara i pandana ostalih proizvođača) pa je računica bila ako ih pola ne doživi neki normalni radni vijek, na kraju ću završiti kao da sam ih platio po redovnoj cijeni a 75% preživjelih bi već bio nekakav uspjeh. Nakon 2 godine, još uvijek su na 100% (svi živi i zdravi) što opet ne govori ništa, ali je bar zgodna anegdota i ilustracija kolika su diskovi kocka, makar one statistike na Backblazeu izgledaju umirujuće.

 

Ja isto tako mislim - na papiru to izgleda solidno, ali diskovi sa bad blockovima su u pravilu tempirana bomba i to stavljati u racunala ima smisla samo uz debelu redundanciju i kontrolu gresaka.

 

Ekipa to obicna pokupuje na raznim rasprodajama ili ako se procuje da je recimo neka serija He Ultrastara zavrsila u tim ladicama, to plane za cas i onda zavrsi u kakvim polovnim mrcinama poput Norco RPC-4224 ili Supermicra 836. To onda agregiraju u vece zpoolove od 3x8 RAID-Z3 (RAID 7), pa ih ne brine toliko hoce li umrijeti dva ili sedam diskova, jer znaju da im je statistika na njihovoj strani i nije im izgledno da ce im od 8 diskova u vdevu, crknuti ikad vise od dva simultano (a moze do 3, po stripeu). Ne brine ih previse niti to sto gube dosta diskova na paritetu, jer su ih kupili za djelic cijene originalnog diska.

 

To tu funkcionira, ali samo zbog visoke redundancije i kontrole gresaka, sto ovi mali kucni NAS-ovi sto ih imamo/slazemo jednostavno nemaju. Zato sam i napisao gore da pravila koja vrijede za Backblaze i zakljucci koje oni izvode ne treba slijepo skalirati dole na nase mikro-razine.

 

Mladen kaže...
Moram i ja malo pohvaliti WD, ne kužim što im je trebala ta CMR/SMR muljaža, tu uštedu (veću zaradu) koju su htjeli postići sad vjerojatno gube jer su bili prisiljeni vratiti CMR kao Red Plus a i biti jeftiniji od IronWolfa, a koliko se sjećam, prije je bilo obrnuto.

Ukupno, mislim da sam imao najviše Seagatea i naravno, nema 100% pouzdanog, ni proizvođača ni modela. Zanimljivo koliko se neke stvari vremenom i "pokvarenim telefonom" pretvore u predrasude, pa tako i danas čujem od raznih "stručnjaka" kako je WD najbolji, Seagate nikad u njihov komp i slične još dramatičnije izjave :) - a sve se to vjerojatno vuče od one Seagateove blamaže sa firmwareom na Barracudama 2009. Naravno da ih treba kritizirati, kao i sada WD, ali ne baš zauvijek, kao "AMD se grije" i "Intel je stabilniji" ekipa, ne znam koji su mi bolji :).

 

Mislim da se tu jos jednom pokazalo staro pravilo da ne treba pripisivati zloci ono sto se moze objasniti gluposcu. I arogancijom. Kladio bih se da je to 100x vidjen scenarij - dodje kratkovidan i nadobudan menadjer koji bi brzinski htio ostaviti utisak na ove gore i maknuti se iz nizih esalona pa sto ce prvo, nego gledati kako da povisi profit rezanjem troskova. Onda je smuljao taj vec vidjen scenarij, naboostao brojke za jedan ili dva kvartala, pa ako prodje, prodje. Ocito WD misli da ima beskonacan kredit kod korisnika i da im se ugled ne moze istopiti, ali zato je tu konkurencija da stvari stavi na mjesto.

 

Sve je uvijek kompromis i nista nije 100%, naravno, a uvijek je lakse okupit se u klan istomisljenika i zaboraviti da tvoje osobno iskustvo ima zanemariv statisticki znacaj.

 

Mladen kaže...
Što radite sa malim diskovima, manjim od TB ? Neki su skupili i preko 50k radnih sati ali su i dalje bez i jednog bad blocka. Žao mi je baciti ali kako su SSD-ovi sve jeftiniji stvarno više nemaju smisla.

 

Koliko ih je i kojeg kapaciteta? Proxmox zna nativno raditi sa ZFS-om, pa bi mogli biti ok izbor za lokalni VM store......

Bosenoge sri 1.12.2021 08:40

Krivo sam shvaćen - diskovi per se nemaju bad blockova, to su otkrili Redditovci koji su ih išli vagat, mjerit vibracije itd. Znači dobijem disk kojeg SMART pročita kao 10-u, bez bad blockova i sa manjom garancijom, ovo su iskopali freakovi. Znam da je  osobno iskustvo anegdota, ali je to raširena praksa na Redditu i puno više viđam apokalipsa postove sa bit-rotom nego one u kojima ljudi kažu da im je shuckani disk crkao(samoopravdanje pošto su riknuli puno novca na RAM i XEONE?). Volio bih imati para za kupiti 4 Ironwolfa odjednom,ali prihvaćam malo veći rizik uz toliko niže cijene. Osobno, moje 4 10-ke rade savršeno, sve kupljeno u posljednjih godinu i pol dana(zadnji prije dva tjedna). Tri su punjena helijem a jedan zrakom. Odlučio sam držati se 10-ki jer su sigurno CMR, a resliver ovisi o kapacitetu, zar ne? Redditovci već uredno shuckaju 14-ice pa i18-ice, to mi je malo previše.Ja vrtim softverski RAID jer koliko vidim svi to preporučuju pa se nisam zezao sa karticama.Opet anegdota - jedini disk sa prijavljenim bad-blockovima mi je WD RED 30EFRX - eno ga u RAID-u sa još dva refurbished Seagetea - svi SMART podaci kažu da je još na 100 posto pa riskiram :) Jedino što bih mogao probati je malo miješati firme, pa shuckati i koji Seagate da raspršim rizik.

Ja se oslanjam na Backblaze i njihovu opsežnu statistiku - brojke drže i za nekoliko diskova isto kao i za njihovih milijun ili koliko već imaju. Esencijalne fajlove ne kreiram toliko brzo pa mi je to lako imati nekoliko kopija a ostatak većinom mogu skinuti ponovno ako baš dođe do katastrofe.

Ja isto ne znam što bi sa manjim diskovima - imam dva Docka(probavao sam i RAID preko USB-a sa MERGER FS-om-nemojte to raditi) pa razmišljam da ih dijelim ljudima sa dockom  umjesto da se zezam sa USB stickovima. Problem je što svi više-manje troše isto struje pa je bolje imati veće kapacitete ako ti stvari rade 24/7. 

hrka11 sri 1.12.2021 11:05

Pozz ljudi,

kad je vec zivnula malo tema da mi pomognete vidim da znate sta pricate :)

Koja vi vasa preporuka bila za porsjecnog korisnika koji znaci koristi NAS da spremi slike i na njem jos drzim filmove pa preko kodija na tvu gledam sve.

 

Trenutno imam synology onaj najslabiji ds115j s 1 diskom (wd red 2tb) i meni osobno je ovo jednostavno bilo za podesit i nemam stvarno nikakvih problema...sad za pokrenit plex ili nesto na njem ne mogu jer je slab,ali padalo mi je vec par puta na pamet da nesto napravim bolje i neku vrstu jos backupa.Imam i na cloudu sve bitno tako da ako i ovo ode nije toliko strasno.

Kombinacija Kodi + ovaj NAS za filmove i serije je odlicna,mada neki film od 25-40-50gb ne mogu pokrenit,ali to je vise do mreze u stanu ne do nasa.

 

Da se drzim ovog istog ili mogu napravit nesto bolje za ok lovu?

Lewis sri 1.12.2021 13:30
hrka11 kaže...

Da se drzim ovog istog ili mogu napravit nesto bolje za ok lovu?

 Sve zavisi sta je tebi "OK lova" :).

Recimo ja bi ti za tovj slucaj preporucio 2bay NAS (nesto poput Synology DS-220+) il ako se mozes rastegnuti na 4-bay, bitno da je plus serija pa da ima 64bit CPU i onda mozes instalirati plex i a i imas opciju BRTFS systema za Snypshote/Active Backup (zastitu od ransomwarea i svakakvih skucajnih brisanja podataka) a i kakvu takvu redundanciju sa RAID 1 ili RAID 5 (SHR-1).

hrka11 sri 1.12.2021 14:35
Lewis kaže...
hrka11 kaže...

Da se drzim ovog istog ili mogu napravit nesto bolje za ok lovu?

 Sve zavisi sta je tebi "OK lova" :).

Recimo ja bi ti za tovj slucaj preporucio 2bay NAS (nesto poput Synology DS-220+) il ako se mozes rastegnuti na 4-bay, bitno da je plus serija pa da ima 64bit CPU i onda mozes instalirati plex i a i imas opciju BRTFS systema za Snypshote/Active Backup (zastitu od ransomwarea i svakakvih skucajnih brisanja podataka) a i kakvu takvu redundanciju sa RAID 1 ili RAID 5 (SHR-1).

 A plex mi i nije toliko bitan jer ovo s kodijem funkcionira odlicno vec 2-3g nemam problema nikakvih...vise me zivcira kad se spojim na njeg i pregledavam nesto vrlo je spor ucita on,ali bas je slab.Tako da ne mogu nista sa slikam odradit da ih slozim i pregled preko neke aplikacije jer je slab...

Quantum sri 1.12.2021 17:22
Bosenoge kaže...

Odlučio sam držati se 10-ki jer su sigurno CMR, a resliver ovisi o kapacitetu, zar ne?

 

Mali nitpick - koliko znam, "resilver" operacija najcesce se veze uz ZFS (i povijesno uz mirror, tj. RAID1 - jer ogledalo [mirror] se ulasti [re-silver]). RAIDx su najcesce "rebuild" operacije, ne "resilver".

Razlika moze biti bitna jer ljudi to cesto pomijesaju i zbune se (ja prvi) pa postane nejasno o cemu tko prica i sto.

 

Znaci, klasican raid => RAIDx (x = {5, 6, 7}) 

ZFS RAID => RAIDz (z = {Z1, Z2, Z3})

 

Po sjecanju, rebuild RAIDx polja zaista ovisi (uz ostalo) o kapacitetu diskova (tj. mora se procitati cijeli disk - zato ona racunica iznad stoji).

RAIDz resilver ovisi (uz ostalo) o zauzecu diska - uz pool od 30% zauzeca, resilver ce zavrsiti cim se procita zadnji zauzet bit, a ne zadnji sektor na disku.

 

Bosenoge kaže...

Ja se oslanjam na Backblaze i njihovu opsežnu statistiku - brojke drže i za nekoliko diskova isto kao i za njihovih milijun ili koliko već imaju. Esencijalne fajlove ne kreiram toliko brzo pa mi je to lako imati nekoliko kopija a ostatak većinom mogu skinuti ponovno ako baš dođe do katastrofe.

 

To je sasvim ok i to je apsolutno vrijedna statistika - samo imaj na umu da je njihova redundacija visestruko veca nego nasa. 1% je uvijek 1%, ali tebe i mene 1-u-100 event lako moze kostati cijelog polja, dok je kod njih taj 1-u-100 event dodatno "razrijedjen" sa ogromnim brojem diskova toliko da oni (statisticki) jedino mogu izgubiti podatke u nekim posve marginalnim okolnostima.

 

hrka11 kaže...

 A plex mi i nije toliko bitan jer ovo s kodijem funkcionira odlicno vec 2-3g nemam problema nikakvih...vise me zivcira kad se spojim na njeg i pregledavam nesto vrlo je spor ucita on,ali bas je slab.Tako da ne mogu nista sa slikam odradit da ih slozim i pregled preko neke aplikacije jer je slab...

 

Slazem se s Lewisom - 2-bay NAS i RAID1 (mirror) bih preporucio za pocetak, a uz to, ako je ikako moguce barem backup na vanjski disk fileova koji su nezamjenjivi.