Linux 14.981 Themen, 106.343 Beiträge

Linux' Swap-Verhalten - im Detail ähnlich dem von Windows ?

Andy 386 am 11.01.2009, 01:17 / 28 Antworten / Flachansicht

Hallo,
ich habe ab und an mit reht grossen Daten in Matlab (unter Linux) zu tun. Das Auslagern klappt soweit. Nur würde ich es gerne mit einem ("Highspeed-")USB-Stick beschleunigen. Ich habe etwas ähnliches schon mal mit einem normalen Stick und einem alten Laptop gemacht, hat wunderbar funktioniert. Um jedoch eine bessere Performance zu erzielen (bzw um überhaupt einen Gewinn zu sehen;) würde ich gerne wissen, wie genau Linux auslagert. Also, abhängig vom swappiness usw, das hab ich schon rausgefunden. Nur wie ganz genau ? Lagert es immer kleine 5kB Blöcke aus, so wie Windows, oder fängt es bei Linux erst bei 1MB an ?

Ich würde es gerne wissen, da viele USB-Sticks zwar gute Datenübertragungen erreichen, aber bei kleinen Teilen versagen.

      Hi Andy_386: hier eine kleine Anleitung wie du einfach herrausfinden kannst ... uscos 11.01.2009, 10:16
    
      Lagert es immer kleine 5kB Blöcke aus, so wie Windows, oder fängt es bei ... KarstenW 11.01.2009, 10:49
    
      Erstmal muß man wissen das der Linuxkernel versucht die Anzahl der ... neanderix 11.01.2009, 11:44
    
      Das ist ein widerspruch in sich, denn RAM, das für Caching verwendet wird, ... KarstenW 11.01.2009, 11:59
    
      Diese Art der Speicherverwaltung ist vielleicht bei Windows üblich, aber ... neanderix 11.01.2009, 12:50
    
      Da ich kein Systemprogrammierer bin und auch den Linuxkernel nicht so gut ... KarstenW 11.01.2009, 12:56
    
      Da ich kein Systemprogrammierer bin Bin ich auch nicht und auch den ... neanderix 11.01.2009, 13:19
    
      hierzu fällt mir Dieter Nuhr ein, der ja 2008 den deutschen IQ Preis ... uscos 11.01.2009, 13:44
    
      Das Problem mit der Auslagerung von Speicher kannst du mit viel RAM umgehen. ... KarstenW 11.01.2009, 11:20
    
      Ich hab leider nur einen 3500 64Bit, mit DDR-RAM, der immernoch ... Andy 386 11.01.2009, 15:38
    
      Ich habe einen AMD 64 bit Rechner mit nur 1 GByte RAM. Wenn ich normale ... KarstenW 11.01.2009, 16:39
    
      Dir ist schon klar, was man so mit MatLab macht? Wir setzten das jedenfalls ... uscos 11.01.2009, 16:59
    
      ja, uscos, du hast schon recht. Da fehlt mir dann aber eindeutig das Geld ... Andy 386 11.01.2009, 17:29
    
      ja, also wenn man das regelmässig privat betreibt würde ich vermutlich das ... uscos 11.01.2009, 18:11
    
      Ich kenne nicht Matlab, aber einen USB Stick als Auslagerungspartition zu ... KarstenW 11.01.2009, 18:12
    
      Es geht hier um eine Diplomarbeit, und an meinem FB gibts keine Cluster heul ... Andy 386 11.01.2009, 18:17
    
      Wenn du die 32 bit Version von Linux nutzt und sehr viel Speicher ... KarstenW 11.01.2009, 18:21
    
      @uscos Wenn Matlab unter Windows XP 32 bit läuft und Windows 32 bit nur ... KarstenW 11.01.2009, 19:06
    
      KarstenW, auf welchem Consumersystem kann man denn heutzutage mehr als 16GB ... Andy 386 11.01.2009, 19:16
    
      Müssen denn diese Daten unbedingt gleichzeitig im RAM sein ? Unter Windows ... KarstenW 11.01.2009, 19:26
    
      ich glaub, du sieht mein Problem grad nicht. Mein Programmspeicher auch ... Andy 386 11.01.2009, 19:44
    
        KarstenW Andy 386 „ich glaub, du sieht mein Problem grad nicht. Mein Programmspeicher auch wenns...“
      
        11.01.2009, 20:04 Optionen
      
          Mit einer Auslagerungspartition, egal ob auf USB Stick oder Festplatte, löst du dieses Problem nicht.

          So wie ich es verstanden habe, werden beim Swapping die kompletten Daten eines Prozesses ausgelagert und nicht einzelne Speicherseiten.

          Vielleicht ließ du mal in der Wikipedia:

          http://de.wikipedia.org/wiki/Swapping

          Also wenn du eine 10 GByte große Datei mit Matlab erstellt, dann müssen auch mindestens 10 oder 12 GByte RAM vorhanden sein, weil beim swapping nur komplette Daten von Matlab ausgelagert werden können und nicht ein Teil von dieser 10 Gbyte großen Datei (also keine einzelnen Speicherseiten wie beim Paging). Oder verwendet Linux Paging für die Auslagerung von RAM Speicher ?

          Das mußt du aber noch ausprobieren, weil ich keine Erfahrung mit solch großen Dateien habe.

         Debian GNU/Linux https://www.debian.org/index.de.html
      
             bei Antwort benachrichtigen
        
      OK EEG micht 500Hz ist unwahrscheinlich - zumindest wenn du mit Menschen ... uscos 11.01.2009, 20:10
    
      LOL, du machst nicht zufällig Berechnungen mit EEG Daten? Das kommt mir ... uscos 11.01.2009, 20:08
    
      also so wie ich das sehe nutzt andy linux. Der Zusammenhang Matlab - Windows ... uscos 11.01.2009, 20:02
    
      Linux verwendet soweit ich weiß ! swapping für das Auslagern von RAM ... KarstenW 11.01.2009, 20:19
    
      windows benutzt paging. Dies kann man aber ausschalten in ... uscos 11.01.2009, 20:27
    
      BTW: Das heisst nicht, dass Linux nicht auch paging macht. Hier mal eine ... uscos 11.01.2009, 20:34