Schlagwörter: Delay, Verzögerung
- Dieses Thema hat 15 Antworten und 3 Teilnehmer, und wurde zuletzt aktualisiert vor 3 Jahren, 7 Monaten von dukecrom.
- AutorBeiträge
- 20. Mai 2021 um 16:17 Uhr #2305HossaTeilnehmer
Hallo,
ich habe wie jeder neue wahrscheinlich am Anfang richtig ins Klo gegriffen um es mal frei zu formulieren. Ich kenne das Thema mit Plottzeiten schon und habe dort auch schon geschrieben wie meine Zeiten sind. Ich hoffe die Diskussion hier geht etwas mehr in die Tiefe.
Angefangen habe ich mit einem Gaming Laptop mit ca. 8 Plots am Tag. System Intel I7 und 16 Gb Ram sowie einer normalen Sata Samsung 1TB 860 EVO.
Der Gedanke „das muss doch schneller gehen“ wird wahrscheinlich jedem einzelnen hier im Forum durch den Kopf gegangen sein zu Anfang.
Also nimmt man Geld in die Hand und packt in den Laptop eine 870 EVo 2Tb und 32 GB Ram. Doch naja was soll man sagen, „fliegen kann die Sau immer noch net“
Jetzt kommt ein Intel Nuc11TNKv7000 mit 32 GB Ram und einer 2TB 980 Pro auf PCIe4.0. Naja was soll ich sagen, augenscheinlich will auch die Sau nicht fliegen.
Der Taskmanager mit dem Resourcenmonitor ist stetig offen. Meine Beobachtungen:
1. 4 oder 6 threats macht keinen Unterschied. Wenn ich einen Plott alleine laufen lasse liegt die CPU-Auslastung bei ca. 40% somit kann ich auch gleich 2 Plotts mit einem Abstand von 10 minuten fahren um die Resourcen zu nutzen.
2. Es gibt wohl keinen oder einen nur sehr geringen Unterschied ob es eine Sata SSD oder eine PCIe4.0 Nvme ist. Das System läuft gerade noch mit dem anderen um die Wette werde die werte dann mal hier einstellen. Laut Resourcenmonitor wird die Platte bei 2 Plotts mit ca.max 250 Mb/s belastet und das mit Berg und Talfahrt nicht durchgehend. Sprich es ist wohl logisch das die Sata SSD da mithalten kann. Habe dann dort eine 40% Auslastung wobei ich bei der PciE eine 10% Auslastung habe.
Ich werde jetzt 6 oder 8 Plotts gleichzeitig anfahren mit einem zeitlichen Versatz von 45 Minuten und mal schauen wie die Auslastung Festplatte und CPU dann ist. Gleichzeitig werde ich mich mal einlesen wie der Plottmanager eingestellt wird und werde den dann Installieren.
Als Lösung könnte ich mir vorstellen das ein System mit vielen nicht ganz so schnellen Platten auf denen jeweils ein Plott gemacht wird sogar schneller ist.
Für eure Meinungen oder Anregungen bin ich dankbar. Vielleicht haben ja einige den selben steinigen Weg hinter sich.
20. Mai 2021 um 17:24 Uhr #2308GandulfGastAlso bei mir ist schon ein deutlischer Unterschied zwischen einer SSD und einer Nvme.
Die Nvme ist nach 20000s (5,5h) die SSD nach 26000s (7,22h) fertig.ich habe auf der Nvme 3 gleichzeitige Plots laufen, auf der SSD 2 (ist kleiner). Jeweils aber nur maximal 1 Plot in Phase 1.
Das plotten ist auch nicht mehr das Problem. Den Nachschub an Plattenplatz bereit zu stellen schon ehern.
21. Mai 2021 um 15:43 Uhr #2375NicoGastDas heißt ich könnte mit 3 NVMEs (je 1TB) 9 Plots gleichzeitig plotten?
Brauche nur für jeden Plot 2 Threads und 3400 MB RAM oder verstehe ich da etwas falsch?21. Mai 2021 um 17:29 Uhr #2388PeleeGastJup, genau so mache ich es auch. 9 Parallel, kein Problem.
21. Mai 2021 um 17:35 Uhr #2389PeleeTeilnehmerMisst, war nicht eingeloggt und kann nun nicht bearbeiten ^^
Nur wenn du das alles auf einer Farm-platte enden lässt mußt die Plots halt zeitlich versetzen, sonst kopierst du am Ende 9 Plots gleichzeitig auf deine HDD und das würde dann wohl dein Flaschenhals werden.
22. Mai 2021 um 22:39 Uhr #2500PatrickGastPrimär ist die Disk entscheidend, danach die single thread performance.
Die Disks werden umso wichtiger je mehr parallele Plots man macht. Mit Datacenter NMVE wie z.b. eine Samsung PM1735 schafft man 10 Plots parallel (3.2TB Version). Größere NVME werden nicht schneller, die Controller sind die gleichen auf den Platten. Also lieber mehrere -> aber immer auf die PCIe Anschlüsse achten.Ich hab derzeit 6x WD Black AN1500 drin und die kacken bei 5 parallel schon ein, bei 6 ist der sweet spot noch was effizienz angeht und drüber fangen sie an derbst zu bremsen. Werden nun ausgetauscht gegen 6x Samsung PM1735 um auf 60 parallele Plots zu kommen statt 36.
22. Mai 2021 um 23:56 Uhr #2507ArchimedesGast60 Plots? Was für eine CPU hast du? 60 Plots parallel bedeuten 120 Threads.
23. Mai 2021 um 00:09 Uhr #2508PatrickGastMilan 7713 steckt drin, aber single socket
23. Mai 2021 um 01:04 Uhr #2510ArchimedesGast60 Plots habe ich auch!….leider nur pro Tag^^
23. Mai 2021 um 08:26 Uhr #2513haxtibleGast1 Problem die Plots dauern 5,5h egal ob einer oder 4 ,bei mir merke ich das bis 4 plots parallel 5,5 h reichen aber ab 5 Plots sind es dann schon mehr h.
Plotte auf einer Crosair Pcie4 (7000lesen\bis 6850\schreiben) und einer Pcie3 (ca.3000lesen\1800\schreiben) ,obwohl man laut Taskmanager kein speed unterschied merken sollte merkt man trotzdem das die Pcie4 mit laufender zeit schneller wird wie die Pcie3 .Beide platten bewegen sich im gleichen Rahmen doch die Pcie4 ist deutlich vorne obwohl beide mit gleichen mb\s rumtümpeln.
2 Problem das kopieren auf langsamme hdd.Ich habe 4x8tb wd red nas\wd red nas pro + 1x5tb toschiba wo die plots verschoben werden durch eine 2 tb barracuda.Wenn denn Plots parallel laufen werden die auch paralle mal kopieren und das dauert manchmal ehwig wenn 2 oder 3 plots mal kopieren.Meine lösung ist das ich 3 verschiedene übertragungsfestplatten habe so lege ich 3 verschiedene endplatten fest.So leuft es gut da ich nicht 2 oder 3 stunden warten muss biss das kopieren fertig ist.23. Mai 2021 um 08:35 Uhr #2514haxtibleGastJa wem das zu lahm ist 16 plots am tag der kann die plots sich ja kaufen einer 4 euro hab ich gesehen und 100 \400 euro.
PS: mache 200 plots am tag 🙂23. Mai 2021 um 09:28 Uhr #2517haxtibleGast60 x 3390mb = 203400mb RAM 🙂 klar
23. Mai 2021 um 23:18 Uhr #2544PatrickGastLogisch, normaler Server, da sind 256GB pro Sockel weniger als Standard.
24. Mai 2021 um 08:35 Uhr #2547haxtibleGastJo jeden das seine nur das man den server 60 parallel plots am Tag (parallel ) macht ist eher unwahrscheinlich in meinen augen ,da wird die Gurke durchschmoren bei 60 parallel Plots 🙂
24. Mai 2021 um 08:36 Uhr #2548haxtibleGastAber da kann sich ja jeder seine eigenen gedanken machen 🙂 was er für wahrscheinlich hält.-)
- AutorBeiträge
- Du musst angemeldet sein, um auf dieses Thema antworten zu können.