Troubleshooting - Defekte Aufnahmen NAS - High Load

    Diese Seite verwendet Cookies. Durch die Nutzung unserer Seite erklären Sie sich damit einverstanden, dass wir Cookies setzen. Weitere Informationen

    • also alle drei separate sender
      ich machs noch mal,
      aber fehler gab es jezt nach 5 MINUTEN NICHT bei abspielen
      bis gleich

      ergebniss auf der VU Ultimo

      Quellcode

      1. total used free shared buffers
      2. Mem: 1021700 870572 151128 0 47324
      3. Mem: 270600K used, 4420K free, 0K shrd, 0K buff, 153068K cached
      4. CPU: 2.1% usr 19.8% sys 0.0% nic 52.4% idle 13.5% io 0.0% irq 11.9% sirq
      5. Load average: 0.62 0.84 0.70 2/109 28401
      6. PID PPID USER STAT VSZ %MEM CPU %CPU COMMAND
      7. 26502 2 root SW 0 0.0 1 6.9 [kworker/1:2]
      8. 12634 12630 root S 169m 63.0 0 3.6 /usr/bin/enigma2
      9. 12635 12630 root S 169m 63.0 0 3.4 /usr/bin/enigma2


      noch mal

      Quellcode

      1. total used free shared buffers
      2. Mem: 1021700 870572 151128 0 47324
      3. Mem: 270600K used, 4420K free, 0K shrd, 0K buff, 153068K cached
      4. CPU: 2.1% usr 19.8% sys 0.0% nic 52.4% idle 13.5% io 0.0% irq 11.9% sirq
      5. Mem: 270092K used, 4928K free, 0K shrd, 0K buff, 152736K cached
      6. CPU: 3.4% usr 25.9% sys 0.0% nic 47.3% idle 13.1% io 0.0% irq 10.1% sirq
      7. Load average: 2.07 1.23 0.86 1/109 28406
      8. PID PPID USER STAT VSZ %MEM CPU %CPU COMMAND
      :D keine kohle mehr :D

      Dieser Beitrag wurde bereits 3 mal editiert, zuletzt von tonskidutch ()

    • Original von hoschi78

      Ob Neuling oder nicht, vollkommen Wurscht, wer was sagen kann sagst, wer was fragen will, der fragt. Sinn und Zweck der Geschichte hier :)
      Willkommen und Danke fürs Feedback.

      Danke - Neuling nur in Bezug auf die VU (langjährige DBOX und Dream-Erfahrungen sind durchaus vorhanden. Und ich mache Aufnahme und Wiedergabe seit 2002 ausschließlich übers Netz :D.

      Ich kenn das nfs testscript nicht nein..

      Um nicht textlastig zu werden, hier ist das Teil (ist übrigens nix anderes als der ursprüngliche essu-Test für die Dbox (das kam es letztlich auf jedes Bit an :D :( i-have-a-dreambox.com/wbb2/thread.php?threadid=78543

      und mit heiligem dreamboxkrieg hab ich auch nix am hut :D

      Ich auch nicht.

      Anschauen kann man sich das aber sicher mal.

      Macht deutlich mehr Sinn, als das rumgerate. Warum Probleme auf dem Server suchen, wenn das Grundproblem (und dieses liegt in 8 von 10 Fällen an den Mounteinstellungen oder der Verwendung von WLAN/DLAN) mit dem Teil zumindest Ansätze zum richtigen Suchen bietet.


      Wo siehst du welche v4 Optionen ?

      Na in Deiner geposteten Mountausgabe. Da sind Parameter drin, die v3 nicht kennt.
      [i][b]Kein Backup - kein Mitleid[/b][/i]

    • Originally posted by rolano
      Wo siehst du welche v4 Optionen ?

      Na in Deiner geposteten Mountausgabe. Da sind Parameter drin, die v3 nicht kennt.


      ach so...
      hab ich nicht gesehen aber stimmt
      aber dan ist der server vielleicht ja noch zu updaten
      denn der sollte dan NFSversion 4 anbieten
      oder??? (frage) er nimmt sicher für unsicher/weniger stabil

      ciao
      :D keine kohle mehr :D

    • @tonski

      Load average: 2.07 1.23 0.86 1/109 28406

      Hier sehen wir schon, dass bei dir das selbe Verhalten auftaucht.
      Ich bin mal gespannt, ob alle 3 Aufnahmen wirklich keine Ruckler enthalten. Das Live Programm lief bei mir auch immer sauber weiter.

      @rolando
      Ich glaub Links zum (dsch)ihad sind hier nich erlaubt (warum auch immer), aber ich hab den Link. Danke.
      Ich werds nachher daheim mal manuell mounten und mit dem Script checken.. oder.. grad ma VPN nach hause...

      Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von hoschi78 ()

    • ...darum hatte ich den Link auch nicht gleich gepostet (nehme da aber gerne eine Verwarnung in Kauf) :444: --- hatte gehofft, dass Tonski den Part übernimmt :P
      (edit: hatte ich schon als NFSpeedtest damals beschrieben, doppeltposten ist nicht mein dings)

      Und weil Du es auch angesprochen hattest: In meinem Nick gibt es kein "d"...

      Du musst nicht manuell mounten (lediglich einen Mountpunkt mitgeben) - das übernimmt das Script :444:.
      [i][b]Kein Backup - kein Mitleid[/b][/i]

      Dieser Beitrag wurde bereits 2 mal editiert, zuletzt von tonskidutch ()

    • uh,
      ja aber ich hatte noch nie ruckler mit der NAS aufnahmen und VU + DUO oder Ultimo
      also
      wenn du dann damit vorschlägst eine dauer aufnahme zu machen... (x stunden)

      um das mal zu testen wie du vermutest, dan muss ich kommenden tage mein Fernsehen eng einplanen.

      ich glaube deine 3 fetsplatten NAS mit RAID5 (softwareraid) ist dein stolperstein
      möchte dan erst noch mal einige ergebnisse sehen von anderen vor ich mein Fernsehabend weg gebe an tests
      ;)

      ciao
      :D keine kohle mehr :D

    • Nein tonksi, maximal 10 Minuten 3 gleichzeitig würden reichen :) Wegen mir msust du jetzt nicht deinen ganzen Plan über den Haufen werfen.
      Ich kann den Fehler schon bei 5 Minuten reproduzieren, da er sehr eindeutig auftritt bei mehr als 1 HD Aufnahme.

      Ich lasse grad das NFS Testscript mit 256MB durchlaufen.. bin mal auf die ergebnisse gespannt. Natürlich auch auf die load average in der Zeit.

      @rolaOHNEDo :) is gemerkt ;)


      Interessant das script :D


      Results for write throughput:

      -65075262 with tcp,async,wsize=8192
      -67108864 with udp,async,wsize=4096
      -67108864 with tcp,async,wsize=16384
      -71582788 with udp,async,wsize=16384
      -71582788 with tcp,async,wsize=32768
      -74051160 with udp,async,wsize=8192
      -74051160 with tcp,async,wsize=4096
      -82595524 with udp,async,wsize=32768
      Results for read throughput:

      -89478485 with tcp,async,rsize=4096
      -89478485 with tcp,async,rsize=16384
      -93368854 with udp,async,rsize=8192
      -93368854 with udp,async,rsize=4096
      -93368854 with udp,async,rsize=16384
      -93368854 with tcp,async,rsize=8192
      -93368854 with tcp,async,rsize=32768
      -97612893 with udp,async,rsize=32768

      Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von hoschi78 ()

    • OSCAM only, aber CPU schafft sich ja nicht tot, die idled ein bissi vor sich hin und das laufende Programm hakt auch nicht, aber die Aufnahme von dem schon, alsi was ich aufnehme ist NICHT das, was ich sehe.


      128MB Test läuft...

      Results for write throughput:
      76.695 Mbit/s with udp,async,wsize=32768
      76.695 Mbit/s with udp,async,wsize=16384
      76.695 Mbit/s with tcp,async,wsize=32768
      76.695 Mbit/s with tcp,async,wsize=16384
      71.582 Mbit/s with udp,async,wsize=8192
      71.582 Mbit/s with tcp,async,wsize=8192
      71.582 Mbit/s with tcp,async,wsize=4096
      56.512 Mbit/s with udp,async,wsize=4096

      Results for read throughput:
      97.612 Mbit/s with udp,async,rsize=8192
      97.612 Mbit/s with udp,async,rsize=32768
      97.612 Mbit/s with udp,async,rsize=16384
      97.612 Mbit/s with tcp,async,rsize=32768
      89.478 Mbit/s with udp,async,rsize=4096
      89.478 Mbit/s with tcp,async,rsize=8192
      89.478 Mbit/s with tcp,async,rsize=4096
      89.478 Mbit/s with tcp,async,rsize=16384

      Load average: 0.98 0.97 0.71


      *koppkratz*

      Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von hoschi78 ()

    • zum script

      das läuft nicht wenn die mounts per fstab gemacht wurden

      ciao
      nebenbei

      Quellcode

      1. Mem: 270816K used, 4204K free, 0K shrd, 0K buff, 152524K cached
      2. CPU: 2.5% usr 21.2% sys 0.2% nic 50.3% idle 17.1% io 0.0% irq 8.4% sirq
      3. Load average: 0.94 0.92 0.63 2/109 28544
      4. PID PPID USER STAT VSZ %MEM CPU %CPU COMMAND
      5. 28393 2 root SW 0 0.0 1 6.7 [kworker/1:0]
      6. 12634 12630 root S 169m 63.0 0 4.3 /usr/bin/enigma2
      7. 12635 12630 root S 169m 63.0 0 4.3 /usr/bin/enigma2
      8. 67 2 root SW 0 0.0 0 3.3 [sched_high]
      9. 28528 12630 root S 169m 63.0 0 1.6 /usr/bin/enigma2
      10. 28520 12630 root S 169m 63.0 1 1.5 /usr/bin/enigma2
      11. 28525 12630 root S 169m 63.0 0 1.4 /usr/bin/enigma2
      12. 19 2 root SW 0 0.0 0 1.1 [kswapd0]
      13. 10 2 root SW 0 0.0 0 0.8 [kworker/0:1]
      14. 3 2 root SW 0 0.0 0 0.7 [ksoftirqd/0]
      15. 12649 12630 root S N 169m 63.0 1 0.5 /usr/bin/enigma2
      16. 28542 28538 root R 2892 1.0 1 0.3 top
      17. 28541 2 root SW 0 0.0 1 0.1 [kworker/1:1]
      18. 12643 12630 root S 169m 63.0 0 0.0 /usr/bin/enigma2
      19. 726 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      20. 4518 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      21. 504 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      22. 509 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      23. 749 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      24. 707 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      25. 705 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      26. 510 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      27. 564 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      28. 706 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      29. 708 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      30. 4727 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      31. 28360 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      32. 511 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      33. 512 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      34. 513 1 root S 152m 56.6 1 0.0 /usr/bin/CCcam2_1_4
      35. 514 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      36. 515 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      37. 516 1 root S 152m 56.6 0 0.0 /usr/bin/CCcam2_1_4
      38. 447 1 root S 6892 2.5 1 0.0 smbd -D
      Alles anzeigen


      Quellcode

      1. Mem: 224640K used, 50380K free, 0K shrd, 0K buff, 109220K cached
      2. CPU: 1.3% usr 10.2% sys 0.0% nic 79.0% idle 3.2% io 0.0% irq 6.0% sirq
      3. Load average: 0.73 1.01 0.90 2/106 28580
      4. PID PPID USER STAT VSZ %MEM CPU %CPU COMMAND
      :D keine kohle mehr :D

      Dieser Beitrag wurde bereits 2 mal editiert, zuletzt von tonskidutch ()

    • RE: zum script

      Hallo,
      hab mal meine Werte bei 3 HD Aufnahmen ausgelesen:
      (wie zu ersehen ist Softcam oscam/cccam)

      Mem: 136016K used, 2072K free, 0K shrd, 192K buff, 64096K cached
      CPU: 2.8% usr 11.2% sys 0.0% nic 59.4% idle 21.2% io 0.0% irq 5.2% sirq
      Load average: 0.90 1.18 1.09 3/98 779
      PID PPID USER STAT VSZ %MEM CPU %CPU COMMAND
      10 2 root SW 0 0.0 0 6.6 [kworker/0:1]
      707 704 root S 119m 88.5 1 2.0 /usr/bin/enigma2
      65 2 root SW 0 0.0 0 1.6 [sched_high]
      763 704 root S 119m 88.5 0 1.5 /usr/bin/enigma2
      774 2 root SW 0 0.0 1 0.7 [kworker/1:1]
      762 704 root S 119m 88.5 0 0.6 /usr/bin/enigma2
      753 1 root S 118m 88.0 0 0.6 /usr/bin/cccam2_0_11
      19 2 root DW 0 0.0 1 0.6 [kswapd0]
      757 704 root S 119m 88.5 0 0.5 /usr/bin/enigma2
      719 528 root S < 3652 2.6 1 0.3 /usr/bin/oscam_0.99.4-1881.1
      779 776 root R 2888 2.0 1 0.3 top
      708 704 root S 119m 88.5 1 0.2 /usr/bin/enigma2
      540 1 root S 118m 88.0 0 0.2 /usr/bin/cccam2_0_11
      541 1 root S 118m 88.0 0 0.2 /usr/bin/cccam2_0_11
      533 528 root S < 3652 2.6 0 0.1 /usr/bin/oscam_0.99.4-1881.1
      775 575 root S 2892 2.0 1 0.1 telnetd
      3 2 root SW 0 0.0 0 0.1 [ksoftirqd/0]
      749 2 root SW 0 0.0 0 0.1 [kdvb-ad-0-fe-0]
      748 704 root S N 119m 88.5 1 0.0 /usr/bin/enigma2
      743 704 root S 119m 88.5 1 0.0 /usr/bin/enigma2
      538 1 root S 118m 88.0 1 0.0 /usr/bin/cccam2_0_11

      cu
      eltinax
      Vu+ Ultimo4k (2 x DVB S2Twin-FBC) Vu+ Duo² (2 x DVB-S2 Twintuner) VU+ Ultimo (2 x DVB-S2, 1 x DVB-C), VU+ Solo², VU+ Duo
      LED TV 37" + 46" 3D, Onkyo TX-SR 607 7.1

    • hmm - die Testwerte sind ok. Wie sieht denn Dein tatsächlicher Mountbefehl aus (ist explizit 'async' angegeben - nicht jeder Server nimmt das als default) und wie sieht die exports auf dem Server (am besten die Ausgabe von 'exportfs -v') aus?
      [i][b]Kein Backup - kein Mitleid[/b][/i]

    • Mhh.. ich kann bei euch beiden keine extrem hohe load average sehen... wie lang liefen die 3 gleichzeitigen HD-Aufnahmen ?
      Beide nutzen OSCAM/CCcam und ich OSCAM mit DVBAPI... das wäre vielleicht noch n Versuch wert später mal zu prüfen, wies in der Konstellation läuft.

      Aber am end erklärt das immer noch nicht meine hohe load average beim Datentransfer Ultimo <--> NAS

      In der exports steht nur
      /mnt/balu/ultimo 192.168.71.23(rw,wdelay,root_squash,no_subtree_check)

      Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von hoschi78 ()

    • Die Aufnahmen laufen bei mir seit ca 45 Minuten.

      der Mountbefehl in der fstab lautet bei mir:
      192.168.x.xx:/mnt/NAS/Filme /media/net/NAS nfs rw,nolock,tcp 0 0

      zu exportfs kann ich leider keine Auskunft geben: Command not found :evil:

      (Nur zum Hinweis, ich habe eine Duo, aber das sollte imho keine Rolle spielen)

      Ich beende jetzt mal die Aufnahmen und schau sie mir mal mit dem TransportStreamPacketEditor an

      cu

      eltinax
      Vu+ Ultimo4k (2 x DVB S2Twin-FBC) Vu+ Duo² (2 x DVB-S2 Twintuner) VU+ Ultimo (2 x DVB-S2, 1 x DVB-C), VU+ Solo², VU+ Duo
      LED TV 37" + 46" 3D, Onkyo TX-SR 607 7.1

    • Danke fürs austesten, schlauer bin ich jetzt aber leider auch noch nicht.

      Ich werde zum einen versuchen die Performance vom NFS Share ein wenig zu optimieren dank dem nfs Testscript und Aufnahmen laufen lassen.
      Alternativ die dvbapi weglassen und lokal per CCcam connecten.

      sync vs. async (8MByte File)

      Results for write throughput:
      67.108 Mbit/s with udp,async,wsize=8192
      67.108 Mbit/s with udp,async,wsize=4096
      67.108 Mbit/s with udp,async,wsize=16384
      67.108 Mbit/s with tcp,async,wsize=4096
      67.108 Mbit/s with tcp,async,wsize=16384
      33.554 Mbit/s with udp,async,wsize=32768
      33.554 Mbit/s with tcp,async,wsize=8192
      33.554 Mbit/s with tcp,async,wsize=32768
      1.001 Mbit/s with udp,sync,wsize=8192
      .986 Mbit/s with udp,sync,wsize=32768
      .986 Mbit/s with tcp,sync,wsize=32768
      .972 Mbit/s with udp,sync,wsize=4096
      .972 Mbit/s with udp,sync,wsize=16384
      .972 Mbit/s with tcp,sync,wsize=4096
      .932 Mbit/s with tcp,sync,wsize=8192
      .932 Mbit/s with tcp,sync,wsize=16384

      Dieser Beitrag wurde bereits 3 mal editiert, zuletzt von hoschi78 ()

    • Mem: 135292K used, 2796K free, 0K shrd, 68K buff, 52848K cached
      CPU: 2.9% usr 18.6% sys 0.1% nic 45.0% idle 23.3% io 0.0% irq 9.8% sirq
      Load average: 1.60 1.25 1.29 1/92 30468


      Hier mal 3x HD-Aufnahme mit der Duo direkt auf´s NAS. Es kommen die alten Dbox-Zeiten wieder hoch ;)

      Hier noch 3x Aufnahmen und eine ansehen
      Mem: 133984K used, 4104K free, 0K shrd, 68K buff, 51504K cached
      CPU: 3.6% usr 22.1% sys 0.0% nic 35.6% idle 24.7% io 0.0% irq 13.8% sirq
      Load average: 2.33 1.59 1.40 2/93 30566
      2x Solo2 aktuell mit VTI 11.x, MQB, EPGRefresh, Fritzcall
      intern 2,5" hdd, streamen auf Qnap TS-451

      Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von sandmann ()

    • So,
      ich habe die Aufnahmen jetzt mal getestet und so wie es aussieht, sind sie fehlerfrei.
      Den "Berichten" meines NAS zufolge war die Netzwerkauslastung bei ca. 50MBit/s. Die Belastung des RAM des Rechners stieg in den ersten 20 Minuten von 0 auf 4GB (von 6GB) und pendelte sich dort ein.

      cu
      eltinax
      Vu+ Ultimo4k (2 x DVB S2Twin-FBC) Vu+ Duo² (2 x DVB-S2 Twintuner) VU+ Ultimo (2 x DVB-S2, 1 x DVB-C), VU+ Solo², VU+ Duo
      LED TV 37" + 46" 3D, Onkyo TX-SR 607 7.1

    • @sandmann
      Du sagst es :D. Ich komme gerade nicht drauf woher ich Deinen Nick kenne - kommt mir sehr bekannt vor.

      @hoschi
      exports ist unauffällig (exportfs -v wäre etwas aussagekräftiger ;) - wird aber keine wesentlichen Erkenntnisse mehr bringen). Fehlt noch dein konkreter Mountbefehl mit allen Optionen. Dass ein "sync" kontraproduktiv ist, ist ja bekannt. Auffällig ist bei der aktuellen Ausgabe, dass nur noch mit 67Mbit (vorher 77 - richtig normal wäre Werte > 80) geschrieben wird.

      Langsam kommt mir der Verdacht, dass Dein Server in Richtung RAM vielleicht zu schmalbrüstig ist....
      [i][b]Kein Backup - kein Mitleid[/b][/i]