NAS 80TB

Cred ca ne pierdem in detalii.
Storage Spaces ofera redundanta 1 sau 2 harduri (Parity).
Adica cam acelasi lucru cu RAID 5 (sau 6?).
Da, Storage Spaces este ceva mai flexibil.
Pe de alta parte, totusi, care sint sansele sa se strice un hard disk, cind tu spui ca vor fi folosite doar citeva ore/zi.
Si mai si, de ce sa pornesti toate cele 10 harduri in acelasi timp, daca tu ai nevoie doar de un singur video la un moment dat ?
Sau, ma rog, hai sa zicem 2-3 video.... nu stiu exact cum lucrezi tu cu aceste video ?

O diferenta majora este ca la RAID poti sa folosesti hardware dedicat, pe cind Storage Spaces este 100% software.
Ia uite ce zice aici, ultimul raspuns: https://serverfault....-spaces-or-raid
Miserable performance if parity redundancy is used
All storage-related operations are offloaded to CPU

Hai sa incercam altfel: avantajele NAS si, de fapt, la ce folosesti tu:
- stocare fisiere = OK
- accesare prin retea = NU (copiezi film pe USB)
- accesare de pe alte dispozitive = NU
- mai multi utilizatori = NU
- backup automat = nu e cazul, oricum adaugi manual fisierele/tag-uri....

Quote

La scriere nu si la citire.

Oricum ce alta optiune am ? dupa cum am zis, nu gasesc nimic daca nu am toate fisierele intr-un singur loc. Stii ce mult timp ia sa cauti un film pe 20 de harduri cu un dock extern ?

Quote

cu riscul de a pierde 10TB, n-asi risca nici o sansa de 1 la 1milion (desi e mult mai mare sa crape un drive)

Quote

asta e interesant, deci am nevoie de un CPU puternic ? momentan in PC am un i5, l-asi fi pus pe acesta si sa fac un upgrade la PC, ma mai gandesc...

Quote

inca nu dar cine stie...

Biodomes, on 03 octombrie 2017 - 10:23, said:

Cum adica iti ia mult timp sa gasesti un film ?
Adica.... DE CE ?!?!?!?!
Deja ai o baza de date, o lista, un catalog, categorii, tag-uri....
UNDE este problema ???
Hardurile nu sint numerotate / etichetate / denumite ?

Si eu am 729 de DVD-uri, dureaza citeva secunde o cautare in WhereIsIt si gata.
CARE este problema ??

La inceput era relativ simplu, fiecare HDD era o categorie diferita, 1TB de Astronomie, 1TB de Arhitectura etc. Dar s-au umplut si acum numai Astronomia e pe 3 drive-uri diferite.
E complicat...
si intre 729 si +100.000, e o diferenta mica.

NAS-ul in sine fara HDD o sa coste ~ 3000 lei - deci cost mic comparativ cu costul hardurilor ce vor urma.

Edited by Biodomes, 03 October 2017 - 12:15.

buyonevideo ai dreptate, este si o alta alternativa, in loc de NAS asi putea face un locally attached storage, unde n-ai nevoie de placa de baza, cpu, ram etc doar de HDD-uri si o carcasa tip :

https://www.amazon.c...000388b0b53e0e6

Biodomes, on 03 octombrie 2017 - 12:13, said:

Da, este o diferenta MICA, inteleg, am dat doar un exemplu.
Eu am inceput cu CD-uri, apoi reorganizat si trecut la DVD, acum opresc pe DVD doar chestii care chiar nu prea le gasesc prin alte parti.
Dar sistemul de organizare, poate fi acelasi, indiferent de mediul si locul de stocare al fisierelor.
Tot nu m-ai lamurit acum care este problema in mod practic.
Adica, de gasit, poti sa le gasesti, ai lista completa si detaliata a fisierelor de pe fiecare hard.
Dar, sa zicem, ai nevoie de 5 filme despre astronomie si sint puse pe 3 harduri diferite ?
Da, asta ar fi o problema.

Dar, din nou, ajungem doar la o chestie de stocare.
Folosesti NAS doar pentru stocare si atit.
Cautarea nu are absolut nici o legatura cu NAS-ul in sine.
Baza de date si cautarea poti sa o ai si sa o faci pe un calculator, nu neaparat in NAS.
Iar pentru asta, cum ziceai si tu mai sus, ai nevoie de ceva doar de stocare si atit.
$90, 8 porturi SATA: http://www.ebay.com/...d-/281409936741
Iei cel putin 2 bucati din astea, o placa de baza mai rasarita care sa aiba cel putin 2 sloturi PCIe 2.0
Pui o sursa bengoasa, iei niste harduri de 16 Tb doar 12 Tb 10 Tb (hmmm, eu nu gasesc nimic mai mare in zona consumer, poate SSD de 16 Tb la $3-5000 si un hard de 30 Tb alcatuit din 3x10 Tb) il ancorezi bine de podea sa nu decoleze....
Montezi totul intr-o camera separata, lungesti cablurile de la tastatur, mouse si monitor si cam aia e.

Eu as analiza din sens invers. Ai zis 100.000 filme. Cat de des vor fi accesate? De cate persoane? Daca vorbim de o persoana, mai mult de 3-4 filme nu cred ca cauti intr-o zi. In cazul asta, conteaza daca il gasesti intr-o secunda sau intr-un minut?

in linkul de mai sus scrie ca e RAID controler, inteleg ca ofera inca 4 porturi SATA dar nu stiu daca Storage spaces va functiona daca conectez HDD-urile prin RAID controler

In loc de camera separata cred ca o sa le iau doar o carcasa

Placa de baza trebuie sa aiba cel putin 10 porturi sata, ceva de genul AsRock X99 https://www.pcgarage...k/x99-extreme4/

Acum sa gasesc un procesor ieftin sa mearga la ea...

dani.user, on 03 octombrie 2017 - 19:44, said:

Acum ca fac baza de date, accesez cateva sute pe zi.

Oricum intrebarea Topicului nu e De ce vreau sa-mi fac ..., ci CUM sa-mi fac ...

Edited by Biodomes, 03 October 2017 - 19:58.

Hai că îți ofer eu o soluție simplă, testată, aproximativ ieftină și eficace.

unRAID OS (vezi https://lime-technology.com/)

Eu am fost în căutarea unei soluții similare cu ce vrei tu să faci. Un NAS Synology sau QNAP costă foarte mult plus că au și multe dezavantaje. Dacă faci un RAID-5 sau RAID-6 cu mai multe harduri riscul ce mai mare e să pierzi 2 harduri (la RAID-5) sau 3 harduri (la RAID-6) , moment în care ai pierdut tot !!. Se poate întâmpla la un Rebuild de array sau pur și simplu să îți pice controllerul RAID și pierzi TOT.

Ei, unRAID lucrează diferit. Folosește 1 singur disc pentru a stoca doar paritatea iar celelalte discuri conțin doar datele. Practic poți să iei oricare din celelalte discuri și să le legi la un alt calculator și ai acces la conținutul de pe acel disc. Deci presupunem că ai 10 discuri și cad 4, pierzi doar ce era pe cele 4 (sau pe 3 dacă 1 din ele era cel de paritate). Pe restul de 6 le poți accesa.

Alt avantaj e că poți folosi harduri de mărimi diferite, modele diferite și/sau brand-uri diferite. Important e doar ca discul de paritate să fie de capacitatea celui mai mare dintre celelalte discuri.

Deci cum ziceam, mi-am făcut un sistem pentru așa ceva acum aprox 1 an. Am căutat la pcgarage o placă de bază ieftină cu 8 porturi SATA-3, procesor nu foarte scump, carcasă fără hot-swap (dacă chiar schimb un disc nu e o problemă să opresc sistemul).

Am instalat unRAID trial de la ei de pe site (Sistemul se tine pe un stick USB - eu am luat unul din lista celor suportate de ei, unul de 16 GB).
Porneste foarte rapid de pe stick.
Costul software-ului nu e foarte mult avand in vedere ce stie sa faca. Eu am luat versiunea cu max 12 device-uri (Plus) la $89.

Buun...revin

Atașez un screeshot cu configurația actuală

 2017-10-03 23_07_36-.png   321.41K   39 downloads

Vei vedea că am 8 harduri, 7 de date și 1 de paritate. Capacitatea totală e aprox 28 TB

Am și de la WD și de la Hitachi și de la Seagate. Nu e nicio problemă

Partea mișto e că am acces la toți cei 25+ TB într-un singur namespace. Adică nu trebuie să stau să caut eu pe ce hard am anumite fișiere. Le împarte el, ai vreo 2-3 opțiuni pentru a face acest lucru.

 2017-10-03 23_09_53-This PC.png   23.04K   38 downloads

 2017-10-03 23_11_13-data (__192.168.100.120) (Z_).png   47.82K   36 downloads

Pentru mine e soluția perfectă!
Dacă pică un hard nu pierd nimic, pun altul și își face rebuild la paritate (ca RAID-5).
Dacă pică 2 harduri pierd doar ce era pe ele
Nu îți trebuie nimic special. Uite configurația mea (fără harduri)

 2017-10-03 23_15_19-Contul meu - PC Garage.png   29.98K   34 downloads

Hawkie mersi de raspuns !
Fix asta vreau sa fac si eu ! chestia cu RAID si cu faptul ca pierzi tot daca iti crapa controlerul RAID n-am stiut ! sa pierd zeci de TB ar fi catastrofal, imposibil sa mai fac rost de fișiere atunci.

Dar din ce am citit, storage spaces e fix ca si unraid, doar ca e pentru Windows si nu Linux. Cred ca toate avantajele enumerate mai sus le are si Storage Spaces, plus nu costa 89$

BTW Hawkie tu folosesti RAM ECC ?
Deja cativa mi-au recomandat dar atunci am nevoie de un  procesor Xeon compatibil cu ASRock X99 Extreme4

Cred că e mai user-friendly unRAID. E foarte ușor să schimbi un disc , să refaci paritatea, să extinzi spațiul etc. La Storage Spaces am impresia că multe se fac din linia de comandă? S-ar putea să mă înșel totuși.

Citește și aici :

https://www.reddit.c...hich_one_would/

Pentru Storage-Spaces trebuie să iei și în considerare că e un Windows OS pentru care îți trebuie un HDD/SSD  separat pe care să pui OS-ul.
unRAID rulează de pe un stick USB.
Nu știu dacă Windows poți să îl ți pe termen lung pe un stick USB, face multe scrieri pe disc și îți va distruge repede stickul

Mai ia în considerare că Windows-ul e expus la vulnerabilități și nu știi când într-o zi găsești că ai fost infectat cu un crypto virus care ți-a criptat toate fișierele...

Cel mai bine e să faci niște teste cu amândouă și vezi care-ți place mai mult.
unRAID poți să îl folosești gratuit pentru maxim 30 zile
pt. Windows Server găsești trial sau alte variante...

Edited by Hawkie, 04 October 2017 - 09:51.

Fix pe Reddit citeam si eu thread-ul asta

Imi place ca ai zis si "alte variante "

Chestia cu virusurile, sper sa ajute mult ca sistemul nu va fi conectat la net, va fi doar local storage pentru media.

Is tare obisnuit cu Windows, desi am mai lucrat si pe Linux.

Ai vazut video-ul asta despre Storage Spaces ? :
[ https://www.youtube-nocookie.com/embed/15XP2WqyFIw?feature=oembed - Pentru incarcare in pagina (embed) Click aici ]

Biodomes, on 04 octombrie 2017 - 09:41, said:

Wow, adica o sa cheltui mii de dolari pe echipamente si nu ai $90 pentru soft ?!

Biodomes, on 03 octombrie 2017 - 19:55, said:

Da, are si functia de RAID, dar nu e nevoie sa o folosesti, daca nu vrei.
Nu, nu ai NEAPARAT nevoie de o placa de baza cu 10 SATA.
Ai nevoie sa gandesti in perspectiva, sa gasesti cea mai buna solutie pe termen lung.
Din nou, nu cred ca intelegi complexitatea si dificultatea la ce ceri tu.
Cele 10 porturi SATA se vor ocupa, dupa cum spui tu, in aproximativ 2 ani.
Placa de baza mai are un singur slot PCI Express 2.0, deci mai poti sa pui o singura placuta de extensie, cu 8 portusi SATA, adica inca aprox. 2 ani.
Poate mai mult, poate vor aparea harduri mai mari de 10 Tb. Dar vor fi foarte scumpe la inceput, deci.....
Si apoi, ce faci ???
In aproximativ 4 ani vei fi cam obligat sa schimbi ceva, destul de major si de scump.
Placa aia de baza este pentru alte scopuri, are 3 sloturi PCI Express 3.0, adica folosite in special pentru placi video (nVidia Quad SLI, 3-Way SLI and SLI AMD Quad CrossFireX, 3-Way CrossFireX and CrossFireX).
Avantajul e ca nu e deloc scumpa, un procesor compatibil incepe de la 1900 de lei, din nou, relativ ieftin.

Mai departe, cu alta cerinta pe care insisti acum: siguranta datelor.
Aici ai avantaje si dezavantaje:

- avantaj pastrare harduri in forma actuala, in dulap: sanse mici/foarte mici sa se strice
In cel mai prost scenariu, pierzi toate datele datorita unui accident/dezastru: inundatie, cutremur etc.
In cel mai bun scenariu, pierzi un singur hard disk, care se strica.
- dezavantaj: nu sint accesibile imediat, se poate remedia cu hotswap.


- avantaje NAS/calculator/orice altceva care pornesc toate hardurile simultan: acces rapid la fisiere.
Dar, teoretic, nu ai nevoie de asa ceva, deoarece spui ca NU vei face vizionarea direct din NAS, ci vei copia fisierele pe USB, apoi vizionare pe alt dispozitiv.
- dezavantaj: in cel mai prost scenariu, pierzi absolut toate fisierele, toate hardurile.
Asta se poate intimpla daca depasesti limita de toleranta a solutiei folosite de tine (adica se strica mai mult de 1, 2... harduri) sau dezastru natural sau dezastru electric sau caderea altei piese care afecteaza hardurile (deja aici ai mai multe scenarii "cel mai rau caz").
In cel mai bun caz, nu pierzi nimic

Trebuie sa analizezi cu atentie care ai fi sansele de producere a fiecarui scenariu si care ai fi masurile de protectie care sa le previna (UPS, alte protectii electrice.... etc. etc.).

Hawkie, on 04 octombrie 2017 - 09:50, said:

Poate sa instaleze WIndows pe orice SSD mic si ieftin, pe un calculator separat.
Daca nu ai urmarit cu atentie de la inceput, deja a specificat FOARTE CLAR ca NU vizioneaza fisierele video direct din NAS (asta era planul original, NAS) ci le copiaza pe stick USB si le vizioneaza pe alt dispozitiv.
Deci.... pe linga solutia de stocare, extrem de scumpa, poate sa mai aiba inca un calculator foarte ieftin care sa-l foloseasca pentru control/acces fisiere, chiar si calculatorul actual poate sa faca asta.

Macar carcasa e future-proof, poti sa bagi 21 de harduri in ea :
https://youtu.be/lUi8L1XMNGM?t=3m23s

buyonevideo, si daca placuta de extensie crapa, pierzi toate datele la fel ca si in RAID daca crapa controlerul ?

un procesor compatibil ar fi Xeon E5-2603, ~1200 lei, nu stiu daca merita sa iau unul second hand/refurbished mai ieftin.

Nu, daca iti crapa placuta de extensie nu pierzi nimic, daca nu sint afectate si hardurile.
In functie de modalitatea de accesare (adica harduri individuale, raid, storage spaces), refaci toata chestia (adica o alta placuta identica) si datele sint la locul lor.
Repet, trebuie sa consulti un specialist profesionist in stocare date.
Si sa nu te axezi pe detalii acum, adica carcasa, procesor, controllere....... astea sint absolut insignifiante in acest moment.

am sperat ca pe forum o sa gasesc profesionisti in stocare, ca n-am 89$ si pentru soft si pentru consultanta

Muhahahah, crede-ma, pentru cererea ta nu cred ca exista profesionisti specialisti pe aici.
Daca era ceva la nivel amator / home made / hobby.... poate ca te incumetai sa incepi lucrul cu sfaturi de aici.
Dar, eu iti recomand cu tarie sa nu faci asa ceva
Macar tu trebuie sa pui pe hartie exact unele chestiuni: buget / cerinte / echipamente / fluxl de lucru....
Si sa le analizezi cu mare mare atentie, ca sa distingi exact ce ai nevoie si ce nu.

De exemplu, eu tot insist pe faptul sa explici de ce nu te multumeste solutia actuala.
Ai hardurilepe raft, ai lista/baza de date, faci o cautare, bagi hard, copiezi pe USB, vizionezi pe alt dispozitiv.
Iar diferentele cu un NAS ar fi asa:
Ai deja hardurile pornite toate simultan, ai lista/baza de date, faci o cautare, copiezi pe USB, opresti NAS, vizionezi pe alt dispozitiv.
Am inteles si rezumat bine ?!

Edited by buyonevideo, 04 October 2017 - 11:26.