Is NAS voor ons de beste oplossing?
24 januari 2013 - 11:35    reactie #50
geplaatst door: flicks

Jaco, je hebt er in ieder geval meer ervaring mee dan ik. Ik zal aangeven met welke specs wij willen werken, dan kun je daar wellicht advies op geven:

- NAS 3 TB raid 0 als scratch disk (met videomateriaal waarvan we direct werken), toegankelijk voor 2 personen gelijktijdig, hooguit 5 streams per persoon van 100 Mbit/s.
Van het videomateriaal wordt vlak na een shoot al een back-up gemaakt, dus vandaar de raid 0 voor de scratch disk.
Mijn gevoel zegt dat niet de aansluiting (ethernet of thunderbolt) de bottleneck zal zijn, maar de NAS zelf, omdat deze steeds moet regelen wat waar naartoe moet en dat in de rendertijd beïnvloed, en wellicht ook dropped frames?

(Bewerkt door flicks om 15:56, 24-01-2013)

Is NAS voor ons de beste oplossing?
24 januari 2013 - 14:14    reactie #51
geplaatst door: boni
@flicks: gelieve niet steeds de post boven jou in zijn geheel te citeren. Bevordert de leesbaarheid van dit topic niet.
Klik gewoon op 'geef reactie' in plaats van 'telkens op 'citeer'.
MacBook Air M1-chip / 8 GB geh. / 512 GB SSD - Mac mini M1-chip / 8 GB geh. / 512 GB SSD - MacBook Pro 16-inch M1 PRO-chip / 16 GB geh. / 2TB SSD. Mijn Mac en Synology NAS setup.
Is NAS voor ons de beste oplossing?
24 januari 2013 - 14:39    reactie #52
geplaatst door: Vlamings
Het hangt er ook van af met welke Codec je werkt. Als het Proress 422 is moet het denk ik wel kunnen.
Wat een ander probleem is als je er een NAS aanhangt is dat FCPX die niet ziet. Het zie ook niet een externe HD van een andere computer.
Je kan dit probleem echter wel oplossen door op de NAS een sparsbundle aan te maken. Deze kan je dan als HD zichtbaar maken in FCPX. Je kan dit doen met een gratis programmaatje van Spherico http://www.spherico.de/filmtools/ CreateDiskimage.

Je moet hier dan een zo groot mogelijke hoeveelheid HD ruimte aan toekennen.

Verder is dit bij Creative Cow ook een aardige tutorial over datamanagement met FCPX
http://magazine.creativecow.net/article/fcpx-on-air-coming-soon

onderaan het artikel staan videotutorials

Is NAS voor ons de beste oplossing?
24 januari 2013 - 15:57    reactie #53
geplaatst door: flicks
Wij werken met Final Cut Pro 7, maar wellicht werkt dat hetzelfde.
Is NAS voor ons de beste oplossing?
24 januari 2013 - 22:01    reactie #54
geplaatst door: jaco123

Citaat
flicks om 11:35, 24-01-2013

- NAS 3 TB raid 0 als scratch disk (met videomateriaal waarvan we direct werken), toegankelijk voor 2 personen gelijktijdig, hooguit 5 streams per persoon van 100 Mbit/s.
Van het videomateriaal wordt vlak na een shoot al een back-up gemaakt, dus vandaar de raid 0 voor de scratch disk.
Mijn gevoel zegt dat niet de aansluiting (ethernet of thunderbolt) de bottleneck zal zijn, maar de NAS zelf, omdat deze steeds moet regelen wat waar naartoe moet en dat in de rendertijd beïnvloed, en wellicht ook dropped frames?

In jouw geval zou ik dan denken aan (beetje afhankelijk van budget):
- een ZFS pool met 3 of 4 schijven van 1TB (in standaard "stripe"-mode wat ongeveer RAID0 is)
- voeg aan die ZFS pool een SSD-schijf van 128GB cache device toe
- Hardware zelf zou een "gewone" pc kunnen zijn, zorg wel voor ECC geheugen, minimaal 8GB, meer is beter
- Hardware zou een dual-core kunnen zijn of een quad-core.
- 2 personen met 5 streams van 100Mbit zit wel heel dicht tegen de 1Gbit aan, dus zou ik aan de NAS/server kant voor een dubbele netwerk-aansluiting gaan (dus 2 x 1 Gbit, middels een trunk, heb je wel een switch nodig die dat ook snapt).

Overigens heeft ZFS de aardige eigenschap dat als je in plaats van ge-stripete (RAID0) enkele schijven, ge-mirrorde (RAID1) drives neemt, dat lezen dan sneller gaat (en schrijven niet echt langzamer). Als je budget het toelaat, zou je dus ook een pool kunnen maken van 3x2 1TB schijven, die 3 mirrors worden dan gelijkmatig gebruikt voor maximale snelheid.
Ik gok dat -zeker gezien de grote videobestanden- de netwerkpoort de bottleneck zal zijn. Bij veel kleine bestandjes wordt het allemaal een stuk moeilijker.

PC-hardware (moederborden, disk-controllers, behuizingen etc) ben ik niet helemaal in thuis, maar ik denk dat je voor <1000 euro een compleet apparaat in elkaar kunt zetten waar je probleemloos mee aan de slag kan. Zoals ik al zei, ik heb zelf een HP Microstation, wellicht is dat al genoeg, als je op safe wil spelen zou ik een iets zwaardere machine nemen.

Is NAS voor ons de beste oplossing?
24 januari 2013 - 22:11    reactie #55
geplaatst door: jaco123

Citaat
Vlamings om 14:39, 24-01-2013

Wat een ander probleem is als je er een NAS aanhangt is dat FCPX die niet ziet. Het zie ook niet een externe HD van een andere computer.
Je kan dit probleem echter wel oplossen door op de NAS een sparsbundle aan te maken.

Dat begrijp ik niet? Ik kan bij FCP (7) gewoon een netwerk-schijf kiezen als scratch disk?

Een sparse-bundle zou ik afraden. Dat is onder water een enorme collectie van bestanden van 8MB die allemaal in 1 mapje staan.
Grotere bestanden zijn veel makkelijker te handlen dan veel kleinere. Nou valt 8MB niet helemaal in de categorie heel klein, maar je krijgt dan bij 1TB aan data een map met 100-duizenden bestandjes van 8MB. Dat is veel meer administratie dan wanneer je video-bestanden van enkele GB's per stuk hebt.

Is NAS voor ons de beste oplossing?
28 januari 2013 - 12:53    reactie #56
geplaatst door: flicks

Citaat
jaco123 om 22:01, 24-01-2013

In jouw geval zou ik dan denken aan (beetje afhankelijk van budget):
- een ZFS pool met 3 of 4 schijven van 1TB (in standaard "stripe"-mode wat ongeveer RAID0 is)
- voeg aan die ZFS pool een SSD-schijf van 128GB cache device toe
- Hardware zelf zou een "gewone" pc kunnen zijn, zorg wel voor ECC geheugen, minimaal 8GB, meer is beter
- Hardware zou een dual-core kunnen zijn of een quad-core.
- 2 personen met 5 streams van 100Mbit zit wel heel dicht tegen de 1Gbit aan, dus zou ik aan de NAS/server kant voor een dubbele netwerk-aansluiting gaan (dus 2 x 1 Gbit, middels een trunk, heb je wel een switch nodig die dat ook snapt).

Ik denk dat bovengenoemde oplossing wat te ingewikkeld en te foutgevoelig is als je er (zoals ik) weinig verstand van hebt. En als het systeem eenmaal zou staan, heb ik de tijd en kennis niet om eventuele problemen op te lossen. Ik zeg zeker niet dat jouw oplossing niet goed is, maar voor ons is dit helaas al te ver gezocht.

Ik zat zelf meer te denken aan een makkelijk te implementeren oplossing zoals een goede switch en een NAS. Zoiets als dit:
http://www.lacie.com/nl/products/product.htm?id=10584
of
http://www.synology.nl/products/product.php?product_name=DS112&lang=nld

Ik beroep me op dit verhaal:
http://forums.creativecow.net/thread/8/1135063

En deze test:
http://nl.hardware.info/reviews/2731/3/lacie-2big-nas-review-een-stevige-nas-prestaties-nas-performance-tester

Bij nader inzien zullen wij hooguit 5 streams tegelijk aanroepen van 100 Mbit, dus het klinkt alsof dat wel kan?

(Bewerkt door flicks om 15:03, 28-01-2013)

Is NAS voor ons de beste oplossing?
29 januari 2013 - 17:13    reactie #57
geplaatst door: jaco123

Citaat
flicks om 12:53, 28-01-2013

Ik denk dat bovengenoemde oplossing wat te ingewikkeld en te foutgevoelig is als je er (zoals ik) weinig verstand van hebt. En als het systeem eenmaal zou staan, heb ik de tijd en kennis niet om eventuele problemen op te lossen. Ik zeg zeker niet dat jouw oplossing niet goed is, maar voor ons is dit helaas al te ver gezocht.


Lijkt me een prima conclusie. Dit soort zelfbouw-oplossingen moet je alleen aan beginnen als je er enigszins vertrouwd mee bent of iemand in je buurt hebt die je kan helpen als er iets vast loopt.


Citaat
flicks om 12:53, 28-01-2013

Ik beroep me op dit verhaal:
http://forums.creativecow.net/thread/8/1135063


Let wel even op dat dat verhaal een workflow beschrijft waarin vrijwel al het werk gebeurt op basis van ProRes-Proxy. Die bestanden zijn veel kleiner en hebben dus veel minder bandbreedte-eisen (max 36Mbps), dus dan duurt het langer voor je tegen grenzen aanloopt.


Citaat
flicks om 12:53, 28-01-2013
En deze test:
http://nl.hardware.info/reviews/2731/3/lacie-2big-nas-review-een-stevige-nas-prestaties-nas-performance-tester

Bij nader inzien zullen wij hooguit 5 streams tegelijk aanroepen van 100 Mbit, dus het klinkt alsof dat wel kan?

Ik lees in die test een schrijfsnelheid van zo'n 40-60 MB/s. (Lezen gaat sneller). Hoe die benchmarks zich tot jouw workflow verhouden weet ik niet. (hoeveel streams jij tegelijk leest en hoeveel je er schrijft)

5 streams van 100Mbit is 62,5 MB/s.
Kortom: Misschien dat het net lukt, maar het is wel op het randje.....


Is NAS voor ons de beste oplossing?
29 januari 2013 - 17:48    reactie #58
geplaatst door: flicks
Citaat

Ik lees in die test een schrijfsnelheid van zo'n 40-60 MB/s. (Lezen gaat sneller). Hoe die benchmarks zich tot jouw workflow verhouden weet ik niet. (hoeveel streams jij tegelijk leest en hoeveel je er schrijft)

De Synology DS212j komt heel goed uit te tests.
Het gaat vooral om de leessnelheid, en die zit bij de Synology DS212j tussen de 80 en 90 MB/sec. 5 streams tegelijk lezen zou dus moeten kunnen. Schrijven zal altijd hooguit slechts 2 stream tegelijk zijn (bijv 2 renders).
Ik denk dat ik hem samen met 2x seagate barracuda 2TB en een gigabit switch morgen ga halen.

(Bewerkt door flicks om 17:48, 29-01-2013)

Is NAS voor ons de beste oplossing?
29 januari 2013 - 19:35    reactie #59
geplaatst door: Pieterr
Ik snap niet goed waarom je voor het DS212j-model kiest als je de NAS (semi-)professioneel gaat inzetten. Geef dan een paar tientjes meer uit voor de DS213+.
"One experiment is worth a thousand expert opinions."
Is NAS voor ons de beste oplossing?
29 januari 2013 - 19:48    reactie #60
geplaatst door: flicks
Bij Mycom is de DS212j €180. De DS213+ is daar €350.
Een NAS ga ik niet bij een webshop kopen, Mycom heeft namelijk goede service, bij webshops moet je dat maar afwachten en kun je niet makkelijk langs. En zelfs daar is de DS213+ nog €320,-
Dat zijn geen paar tientjes.

(Bewerkt door flicks om 19:49, 29-01-2013)

Is NAS voor ons de beste oplossing?
29 januari 2013 - 20:13    reactie #61
geplaatst door: boni
klopt, geen paar tientjes, wel slechts 170€ verschil voor een apparaat dat je de eerste 3 jaar niet van de hand doet veronderstel ik.
Voor semi professioneel niveau, waar ik al niet veel meer van versta, de conversatie tussen jou en jaco 123 gevolgd hebbend, toch maar een habbekrats zou ik zeggen.
MacBook Air M1-chip / 8 GB geh. / 512 GB SSD - Mac mini M1-chip / 8 GB geh. / 512 GB SSD - MacBook Pro 16-inch M1 PRO-chip / 16 GB geh. / 2TB SSD. Mijn Mac en Synology NAS setup.
Is NAS voor ons de beste oplossing?
12 februari 2013 - 14:32    reactie #62
geplaatst door: flicks
Toch voor de DS212j gegaan. Duurdere opties waren in mijn ogen overkill.
Hierbij de set-up en mijn ervaringen:

2 MacBook Pro's verbonden met ethernet
1 Gigabit switch ethernet
1 Synology DS212j met 2 x 2TB Seagate Barracuda schijven
1 LaCie Rugged portable 1TB bus-powered voor projectbestanden backup
1 WD 2TB USB schijf voor videomateriaal backup (thuis)

We werken nu met 2 personen tegelijk aan verschillende projecten in FCP7, met de DS212j waar het video bronmateriaal opstaat (ProRes LT). Tot dusverre nog geen problemen ondervonden met de leessnelheid tijdens de edit, noch de schrijfsnelheid met de renders.

Dit is onze werkwijze:
's Avonds na een shoot zet ik het videomateriaal direct om naar ProRes LT, dit sla ik thuis 2 keer op: op een aparte externe harde schijf (WD 2TB), en op de portable LaCie Rugged. De volgende dag neem ik de LaCie Rugged mee naar kantoor en zet het videomateriaal op de DS212j. Dit gaat heel vlot met 50 MB/sec. En ik heb dus ook altijd nog een backup van het videomateriaal thuis liggen. De projectbestanden waarmee we werken staan ook op de DS212j, maar op een andere schijf dan het video bronmateriaal. Van de projectbestanden wordt met "Time Backup" van Synology elk uur automatisch een backup gemaakt op de Lacie Rugged (direct via USB op de DS212j aangesloten). Deze Lacie Rugged gaat elke avond mee naar huis, zodat bij een eventuele inbraak of brand het videomateriaal +  projectbestanden direct op een andere locatie (thuis) toegankelijk zijn.

In de laatste 2 weken hebben we 0 downtime van de DS212j gehad en zijn we geen lags in netwerkconnecties of editing tegen gekomen. Tot dusverre loopt het dus als een trein en voor iets meer dan € 400,- was ik klaar. De MacBooks, LaCie Rugged en WD 2TB schijf hadden we al.

Bedankt voor alle wijsheden hier op het forum!