Pagina 1 van 1

m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 03 feb 2016 22:55
door gjschipper
Is dit een record? St.Annes laden binnen 4 sec:

  Code:
[Mem. usage stats. MB: Approx. est. of tot. usable phys. mem. remaining: 56864, Approx. est. Hauptwerk sample/obj. mem. (excl. other data): 4553 (0 pageable). Approx. pct. phys. mem. used: 7, OS tot. 'available' phys.: 56864, OS commit tot.: 1, OS tot. page file: 9216, OS tot. virtual: 72808, OS mem. load pct: 10, OS sys. cache: 2, OS process commit: 4652, OS process page faults: 6, OS process work. set: 4649, OS process min. work. set: 12473.]
Organ ID: 000010.
Organ ver.: 4.50.
Organ min. Hauptwerk ver.: 4.1.1.012.
Mem.: total raw audio/trem. sample data mem. (excl. pre-proc. audio, images, or other data): 4431.44 MB.
Mem.: overall compression ratio for compressed ranks: 0.00 pct.
Total time: overall: 3.954 sec.
Total time: sample data: 3.195 sec.
Total time: all except sample data: 0.759 sec.
Time: prep.: 0.114 sec.
Time: organ def. loading/parsing: 0.156 sec.
Time: organ def. object/key validation: 0.032 sec.
Time: organ def. prep.: 0.010 sec.
Time: prep. for loading settings: 0.089 sec.
Time: settings loading/parsing: 0.009 sec.
Time: settings object/key validation: 0.003 sec.
Time: settings prep.: 0.000 sec.
Time: data cache validation/prep.: 0.001 sec.
Time: audio data: 3.182 sec.
Time: trem. data: 0.013 sec.
Time: images: 0.093 sec.
Time: comb. and temper. files: 0.252 sec.
Sample loader: loaded from data cache: Y.
Sample loader: data cache total disk size: 2553.16 MB.
Sample loader: buffers: 9.
Sample loader: approx. loader peak mem. usage during audio loading: 141.02 MB.
Sample loader: loader def. mem. usage during audio loading: 135.07 MB.
Sample loader: approx. loader mem. usage during trem. loading: 22.57 MB.
Sample loader: approx. avg. overall data read rate: 799.11 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 1458.73 MB/s.
Sample loader: pct. data loading time each stage busy: disk I/O: 54.78.
Sample loader: pct. sample loading time stage busy: 1st proc.: 61.83.
Sample loader: pct. sample loading time stage busy: 2nd proc.: 61.09.
Sample loader: pct. sample loading time stage busy: 3rd proc.: 63.96.
Sample loader: pct. sample loading time stage busy: 4th proc.: 35.45.
Sample loader: pct. sample loading time stage busy: 5th proc.: 88.94.
Sample loader: pct. thread activity due to stage: disk I/O: 14.97.
Sample loader: pct. thread activity due to stage: 1st proc.: 16.89.
Sample loader: pct. thread activity due to stage: 2nd proc.: 16.69.
Sample loader: pct. thread activity due to stage: 3rd proc.: 17.47.
Sample loader: pct. thread activity due to stage: 4th proc.: 9.68.
Sample loader: pct. thread activity due to stage: 5th proc.: 24.30.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 00:03
door Evert-Jan
Jan Wim

Het lijkt mij wel een laden na koude start van de PC maar wie weet zit ik er naast.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 00:21
door gjschipper
Evert-Jan schreef:Jan Wim

Het lijkt mij wel een laden na koude start van de PC maar wie weet zit ik er naast.


Hoi Evert-Jan,

Dat klopt, ik laad St.Annes nadat de PC is geboot.

GJ

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 00:36
door Evert-Jan
Gert Jan

toch wel een vooruitgang vergeleken met je cijfers op http://forum.hauptwerk.com/viewtopic.php?f=4&t=14624&p=108760

Sample loader: approx. avg. overall data read rate: 696.49 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 1832.53 MB/s.

en nu:
Sample loader: approx. avg. overall data read rate: 799.11 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 1458.73 MB/s.

Processor opgevoerd (overgeklokt)?

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 08:57
door MrNhanduc
Of een verschil compressed/umcompressed? Misschien is St Annes ook wat makkelijker te laden omdat het minder bewerking vereist vanuit Hauptwerk?

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 09:17
door gjschipper
Ik heb inderdaad de CPU overgeklokt. Dat scheelt net een paar procenten. Je bent namelijk afhankelijk van de singlethread passmark van de cpu. Utrecht 24-bit, front en rear met alle opties aan kan ik nu met 40 sec laden. Voordat dit 10sec gaat worden moet er nog wel wat gesleuteld worden in hauptwerk.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 10:25
door MrNhanduc
Aan Hauptwerk valt idd nog wel een en ander te optimaliseren. Hoe sneller de SSD wordt (of de RAID opstelling), hoe groter het relatieve verlies door de overhead van Hauptwerk.

Blijft natuurlijk dat er ten opzichte van een enkele harde schijf al heel wat vooruitgang is geboekt.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 04 feb 2016 12:53
door djvmeeuwen
Dat zijn nog eens tijden! :-) Kom ik bij lange na niet aan. Als ik Utrecht wil spelen (24 bit, stereo en uncompressed) moet ik 1:58 wachten vanaf moment dat ik de PC aanzet. Maar ik heb dan ook 1 SSD met Windows erop en 1 gewone schijf waar de samples op staan.
Kan ik dus heel wat winst halen nog :shock:

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 11:40
door geert01
Ha, ik zie dat er al een topic over M2 bestaat. Alleen, vreemd genoeg, wordt er verder met geen woord over gerept..

Aangezien ik een nieuw systeem wil samenstellen, was ik benieuwd naar ervaringen met een M2-SSD vergeleken met een standaard SSD interface.

Want men belooft toch leestijden van 2500 Mb/s, zoals bv de Samsung 950 Pro, 512 GB SSD.

Dus graag ervaringen...

HG

Geert

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 11:49
door MrNhanduc
Dag Geert,

houd er maar rekening mee dat het verwerken van een cache bestand een zwaar CPU belastende taak is. Die gaat bottlenecken, zodat je die 2500 MB/s wel kan vergeten. Mijn ervaring: hoe sneller je SSD (of RAID) wordt, hoe meer van die snelheid (relatief) verloren gaat door de bewerking die Hauptwerk vraagt van het opgeslagen cache bestand.

Het maakt natuurlijk ook uit of je compressed of uncompressed hebt gecached.

Groeten
Pim

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 12:46
door E1000
Dit is mijn log. Config 1x M2 SSD en 1x SSD in Raid0

Organ ID: 000010.
Organ ver.: 4.50.
Organ min. Hauptwerk ver.: 4.1.1.012.
Mem.: total raw audio/trem. sample data mem. (excl. pre-proc. audio, images, or other data): 3615.86 MB.
Mem.: overall compression ratio for compressed ranks: 0.00 pct.
Total time: overall: 5.742 sec.
Total time: sample data: 4.293 sec.
Total time: all except sample data: 1.449 sec.
Time: prep.: 0.188 sec.
Time: organ def. loading/parsing: 0.471 sec.
Time: organ def. object/key validation: 0.049 sec.
Time: organ def. prep.: 0.017 sec.
Time: prep. for loading settings: 0.003 sec.
Time: settings loading/parsing: 0.015 sec.
Time: settings object/key validation: 0.005 sec.
Time: settings prep.: 0.001 sec.
Time: data cache validation/prep.: 0.000 sec.
Time: audio data: 4.275 sec.
Time: trem. data: 0.018 sec.
Time: images: 0.164 sec.
Time: comb. and temper. files: 0.536 sec.
Sample loader: loaded from data cache: Y.
Sample loader: data cache total disk size: 2060.49 MB.
Sample loader: buffers: 9.
Sample loader: approx. loader peak mem. usage during audio loading: 137.92 MB.
Sample loader: loader def. mem. usage during audio loading: 135.07 MB.
Sample loader: approx. loader mem. usage during trem. loading: 22.57 MB.
Sample loader: approx. avg. overall data read rate: 479.96 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 2698.69 MB/s.
Sample loader: pct. data loading time each stage busy: disk I/O: 17.79.
Sample loader: pct. sample loading time stage busy: 1st proc.: 78.40.
Sample loader: pct. sample loading time stage busy: 2nd proc.: 71.13.
Sample loader: pct. sample loading time stage busy: 3rd proc.: 57.49.
Sample loader: pct. sample loading time stage busy: 4th proc.: 9.53.
Sample loader: pct. sample loading time stage busy: 5th proc.: 91.55.
Sample loader: pct. thread activity due to stage: disk I/O: 5.46.
Sample loader: pct. thread activity due to stage: 1st proc.: 24.06.
Sample loader: pct. thread activity due to stage: 2nd proc.: 21.83.
Sample loader: pct. thread activity due to stage: 3rd proc.: 17.64.
Sample loader: pct. thread activity due to stage: 4th proc.: 2.92.
Sample loader: pct. thread activity due to stage: 5th proc.: 28.09.

2016-04-12-12-43-10: INF:5095 Preparing to start audio.

2016-04-12-12-43-10: INF:5120 Starting audio output device 'ASIO: Komplete Audio 6'.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 12:57
door Evert-Jan
  Code:
Sample loader: approx. avg. overall data read rate: 479.96 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 2698.69 MB/s.
Sample loader: pct. data loading time each stage busy: disk I/O: 17.79.
Sample loader: pct. sample loading time stage busy: 1st proc.: 78.40.
Sample loader: pct. sample loading time stage busy: 2nd proc.: 71.13.
Sample loader: pct. sample loading time stage busy: 3rd proc.: 57.49.
Sample loader: pct. sample loading time stage busy: 4th proc.: 9.53.
Sample loader: pct. sample loading time stage busy: 5th proc.: 91.55.


Hier kun je precies zien waarom het laden vanaf de M2 SSD vertraagd wordt. Eén core zit aan zijn maximum verwerkingscapaciteit terwijl een ander (4th proc.) niet veel doet.
Dat moet in Hauptwerk veel beter in de software uitgebalanceerd worden. Martin Dyde weet dit.
Van de mooie inleessnelheid van 2698.69 MB/s blijft effectief 479.96 MB/s over.
Een zware processor (i7) die op verhoogde kloksnelheid loopt laat e.e.a. sneller verlopen maar komt niet aan de M2 inleessnelheid. Zie de log van Gert Jan hierboven.

Als je een sampleset ongecomprimeerd laadt, dan gaat het laden wel sneller omdat de processoren dan minder moeten rekenen bij het laden.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 13:07
door geert01
Kijk, daar heb ik nou eens iets aan...een goed afgewogen eindoordeel!

Hartelijk dank, heren, voor deze adequate reakties. Ik ga dus zeker NIET het onderste uit de kan halen kwa laadtijden; dat is het mij allemaal niet waard. Dus M2 of PCIe hoeft voor mij nog even niet.

HG

Geert

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 13:25
door MrNhanduc
E1000, je hebt toch een quadcore processor? dan zou het uitschakelen van hyperthreading eens geprobeerd moeten worden. Anders gaat Hauptwerk dus een van de threads als vijfde core zien. Volgens mij heeft Gert-Jan Schipper al eens aangetoond dat dan het uitschakelen van hyperthreading tot een snellere laadtijd leidt (maar wellicht wordt je polyfonie er lager van).

Hauptwerk heeft de eigenaardigheid dat er vijf cores gebruikt kunnen worden voor het laden van sets. Nou, de eerste pentacore moet Intel nog uitbrengen...Met een quadcore leidt hyperthreading dus mogelijk tot een achteruitgang van prestaties, terwijl je met een sixcore (of meer) niet je maximale rekenkracht kan inzetten bij het laden. Dat wordt hopelijk verbeterd in Hauptwerk, zodat ook de ultrasnelle SSD's of RAID opstellingen ook meer snelheidswinst gaan opleveren.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 13:39
door E1000
Ik heb een NUC 6i5. Die heeft twee cores en 4 threads met hyperthreading. Draai Hauptwerk wel op 2900 GHz dus "Hoge Prestatie energie profiel". Ik ga wel eens experimenteren met hyperthreading on/off.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 12 apr 2016 15:15
door MrNhanduc
Interessant, vandaar denk ik dat 1 van de 5 zo'n lage score heeft, want eigenlijk bestaat die thread niet...vraag me wel of hoe Hauptwerk dan deze logfile kan genereren.

Eigenlijk valt me de laadsnelheid bij jou dan nog enorm mee!

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 13 apr 2016 10:32
door geert01
Hier stond het idd ook al.....(Hauptwerk forum)

The Samsung 850 Evo reaches 540MB/s read throughput, but the mobile i7-5500U CPU causes a bottleneck of 280MB/s with compressed samples and ~380MB/s uncompressed. So, people who are considering purchasing RAID0 M2 Ultrafast SSD solutions, which reach 2GB/s or more, should also consider a dual overclocked 6+ core CPU that would keep up with all that storage performance.

HG

Geert

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 26 apr 2016 22:47
door gjschipper
Hyperthreading uitzetten levert inderdaad wat winst op voor het laden van een sampleset, maar ook weer een kleine beperking m.b.t. de polyphonie.
Ik heb nu een systeem waarbij de SSD's in RAID0 de bottleneck zijn. Daar zou een m.2 ssd nog wat winst kunnen opleveren, al zal het niet veel meer zijn i.v.m. de 5th proc die al op 90% staat.

  Code:
Sample loader: approx. avg. overall data read rate: 968.70 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 1125.69 MB/s.
Sample loader: pct. data loading time each stage busy: disk I/O: 86.05.
Sample loader: pct. sample loading time stage busy: 1st proc.: 80.51.
Sample loader: pct. sample loading time stage busy: 2nd proc.: 70.08.
Sample loader: pct. sample loading time stage busy: 3rd proc.: 65.91.
Sample loader: pct. sample loading time stage busy: 4th proc.: 24.42.
Sample loader: pct. sample loading time stage busy: 5th proc.: 90.13.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 26 apr 2016 22:57
door gjschipper
Een screenshot tijdens het laden van Utrecht, 1.0 GB/sec:

load.jpg

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 27 apr 2016 08:51
door MrNhanduc
Dit komt aardig overeen wat ik in vergelijkbare situaties heb gezien (ik kan wel raden wat er verder in die pc zit :D )

Ik neem aan dat dit uncompressed is? Dan is dit inderdaad goed mogelijk. Maar ik kan je ook wel verklappen dat een 950 Pro de snelheid gek genoeg niet heel veel meer laat toenemen. Helaas.

Re: m.2 ssd - Load St.Annes < 4 sec

BerichtGeplaatst: 27 apr 2016 11:59
door gjschipper
En nu met m.2 SSD. Nu is de CPU weer de bottleneck.

  Code:
Sample loader: approx. avg. overall data read rate: 1101.87 MB/s.
Sample loader: approx. avg. data read rate during disk reader activity: 1619.51 MB/s.
Sample loader: pct. data loading time each stage busy: disk I/O: 68.04.
Sample loader: pct. sample loading time stage busy: 1st proc.: 76.67.
Sample loader: pct. sample loading time stage busy: 2nd proc.: 75.62.
Sample loader: pct. sample loading time stage busy: 3rd proc.: 69.07.
Sample loader: pct. sample loading time stage busy: 4th proc.: 29.29.
Sample loader: pct. sample loading time stage busy: 5th proc.: 97.81.


Utrecht laden in 28.3 sec, is dan wel weer netjes.

  Code:
[Mem. usage stats. MB: Approx. est. of tot. usable phys. mem. remaining: 69899, Approx. est. Hauptwerk sample/obj. mem. (excl. other data): 57983 (0 pageable). Approx. pct. phys. mem. used: 45, OS tot. 'available' phys.: 69899, OS commit tot.: 14, OS tot. page file: 19456, OS tot. virtual: 150428, OS mem. load pct: 46, OS sys. cache: 7, OS process commit: 58388, OS process page faults: 14, OS process work. set: 58287, OS process min. work. set: 74632.]
Organ ID: 000884.
Organ ver.: 2.51.
Organ min. Hauptwerk ver.: 4.0.0.000.
Mem.: total raw audio/trem. sample data mem. (excl. pre-proc. audio, images, or other data): 57183.31 MB.
Mem.: overall compression ratio for compressed ranks: 0.00 pct.
Total time: overall: 28.308 sec.
Total time: sample data: 26.593 sec.
Total time: all except sample data: 1.715 sec.