Was ist Swapiness unter Linux? (und wie man es ändert)

Der Linux-Auslagerungswert hat nichts damit zu tun, wie viel RAM verwendet wird, bevor die Auslagerung beginnt. Das ist ein weit verbreiteter und weithin geglaubter Fehler. Wir erklären, was es wirklich ist.

Mit Mythen über Swapiness aufräumen

Swapping ist eine Technik, bei der Daten im RAM (Random Access Memory) an einen speziellen Ort auf Ihrer Festplatte geschrieben werden – entweder eine Swap-Partition oder eine Swap-Datei –, um RAM freizugeben.

Linux hat eine Einstellung namens Swappiness-Wert. Es herrscht große Verwirrung darüber, was diese Einstellung steuert. Die häufigste falsche Beschreibung von Swappiness ist, dass es einen Schwellenwert für die RAM-Nutzung festlegt, und wenn die Menge des verwendeten RAM diesen Schwellenwert erreicht, beginnt das Swappen.

Dies ist ein Missverständnis, das so oft wiederholt wurde, dass es jetzt als Weisheit gilt. Wenn (fast) alle anderen Ihnen sagen, dass Swappiness genau so funktioniert, warum sollten Sie uns glauben, wenn wir sagen, dass es nicht so ist?

Einfach. Wir werden es beweisen.

Ihr RAM ist in Zonen aufgeteilt

Linux betrachtet Ihren Arbeitsspeicher nicht als einen großen, homogenen Speicherpool. Es betrachtet es als in eine Reihe verschiedener Regionen unterteilt, die als Zonen bezeichnet werden. Welche Zonen auf Ihrem Computer vorhanden sind, hängt davon ab, ob es sich um 32-Bit oder 64-Bit handelt. Hier ist eine vereinfachte Beschreibung der möglichen Zonen auf einem Computer mit x86-Architektur.

• Direct Memory Access (DMA) : Dies sind die niedrigen 16 MB Speicher. Die Zone hat ihren Namen, weil es vor langer Zeit Computer gab, die nur direkten Speicherzugriff auf diesen Bereich des physischen Speichers leisten konnten.
• Direct Memory Access 32 : Trotz seines Namens ist Direct Memory Access 32 (DMA32) eine Zone, die nur in 64-Bit-Linux zu finden ist. Es sind die knappen 4 GB Speicher. Linux, das auf 32-Bit-Computern ausgeführt wird, kann nur DMA mit dieser Menge an RAM ausführen (es sei denn, sie verwenden den PAE-Kernel (Physical Address Extension), weshalb die Zone ihren Namen erhielt. Auf 32-Bit-Computern heißt es jedoch HighMem.
• Normal : Auf 64-Bit-Computern ist der normale Speicher der gesamte RAM über 4 GB (ungefähr). Auf 32-Bit-Rechnern ist es RAM zwischen 16 MB und 896 MB.
• HighMem : Dies existiert nur auf 32-Bit-Linux-Computern. Es ist alles RAM über 896 MB, einschließlich RAM über 4 GB auf ausreichend großen Maschinen.

Der PAGESIZE-Wert

RAM wird in Seiten zugewiesen, die eine feste Größe haben. Diese Größe wird vom Kernel beim Booten bestimmt, indem er die Architektur des Computers erkennt. Normalerweise beträgt die Seitengröße auf einem Linux-Computer 4 KB.

Sie können Ihre Seitengröße mit dem Befehl getconf :

 getconf SEITENGRÖSSE 

Zonen sind Knoten zugeordnet

Zonen sind Knoten zugeordnet. Knoten sind einer zentralen Verarbeitungseinheit (CPU) zugeordnet. Der Kernel versucht, Speicher für einen Prozess zuzuweisen, der auf einer CPU von dem Knoten aus läuft, der dieser CPU zugeordnet ist.

Das Konzept, dass Knoten an CPUs gebunden sind, ermöglicht die Installation gemischter Speichertypen in speziellen Multi-CPU-Computern unter Verwendung der Non-Uniform Memory Access-Architektur.

Das ist alles sehr High-End. Der durchschnittliche Linux-Computer hat einen einzigen Knoten, der als Knoten Null bezeichnet wird. Alle Zonen gehören zu diesem Knoten. Um die Knoten und Zonen auf Ihrem Computer anzuzeigen, schauen Sie in die Datei /proc/buddyinfo . Wir werden less verwenden, um dies zu tun:

 weniger /proc/buddyinfo 

Dies ist die Ausgabe des 64-Bit-Computers, auf dem dieser Artikel recherchiert wurde:

 Knoten 0, Zone DMA 1 1 1 0 2 1 1 0 1 1 3
Knoten 0, Zone DMA32 2 67 58 19 8 3 3 1 1 1 17

Es gibt einen einzigen Knoten, Knoten Null. Dieser Computer hat nur 2 GB RAM, daher gibt es keine „normale“ Zone. Es gibt nur zwei Zonen, DMA und DMA32.

Jede Spalte repräsentiert die Anzahl verfügbarer Seiten einer bestimmten Größe. Zum Beispiel für die DMA32-Zone, von links gelesen:

• 2 : Es gibt 2 von 2^( 0 *PAGESIZE) Speicherblöcken.
• 67 : Es gibt 67 von 2^( 1 *PAGE_SIZE) Speicherblöcken.
• 58 : Es sind 58 von 2^( 2 *PAGESIZE) Speicherblöcken verfügbar.
• Und so weiter, bis hin zu …
• 17 : Es gibt 17 von 2^( 512 *PAGESIZE) Chunks.

Aber wirklich, der einzige Grund, warum wir uns diese Informationen ansehen, ist, die Beziehung zwischen Knoten und Zonen zu sehen.

Dateiseiten und anonyme Seiten

Die Speicherzuordnung verwendet Sätze von Seitentabelleneinträgen, um aufzuzeichnen, welche Speicherseiten verwendet werden und wofür.

Speicherzuordnungen können sein:

• Dateigesichert : Dateigesicherte Mappings enthalten Daten, die aus einer Datei gelesen wurden. Es kann jede Art von Datei sein. Es ist wichtig zu beachten, dass, wenn das System diesen Speicher freigegeben hat und diese Daten erneut abrufen muss, sie erneut aus der Datei gelesen werden können. Wenn die Daten jedoch im Speicher geändert wurden, müssen diese Änderungen in die Datei auf der Festplatte geschrieben werden, bevor der Speicher freigegeben werden kann. Geschieht dies nicht, gehen die Änderungen verloren.
• Anonym : Anonymer Speicher ist eine Speicherzuordnung ohne Datei oder Gerät, die ihn unterstützt. Diese Seiten können Speicher enthalten, der on-the-fly von Programmen angefordert wird, um Daten zu speichern, oder für Dinge wie den Stack und den Heap. Da sich hinter dieser Art von Daten keine Datei befindet, muss ein besonderer Ort für die Speicherung anonymer Daten reserviert werden. Dieser Ort ist die Auslagerungspartition oder Auslagerungsdatei. Anonyme Daten werden in den Swap geschrieben, bevor anonyme Seiten freigegeben werden.
• Gerät gesichert : Geräte werden über Blockgerätedateien adressiert, die behandelt werden können, als ob sie Dateien wären. Daten können von ihnen gelesen und auf sie geschrieben werden. In einer gerätegestützten Speicherzuordnung sind Daten von einem Gerät gespeichert.
• Gemeinsam genutzt: Mehrere Seitentabelleneinträge können derselben RAM-Seite zugeordnet werden. Der Zugriff auf die Speicherstellen über eine der Zuordnungen zeigt die gleichen Daten. Unterschiedliche Prozesse können sehr effizient miteinander kommunizieren, indem sie die Daten in diesen gemeinsam überwachten Speicherstellen verändern. Gemeinsam beschreibbare Zuordnungen sind ein gängiges Mittel, um eine hochleistungsfähige Kommunikation zwischen Prozessen zu erreichen.
• Copy on Write : Copy on Write ist eine faule Zuordnungstechnik. Wenn eine Kopie einer bereits im Speicher befindlichen Ressource angefordert wird, wird die Anforderung erfüllt, indem eine Abbildung auf die ursprüngliche Ressource zurückgegeben wird. Wenn einer der Prozesse, die die Ressource „gemeinsam nutzen“, versucht, darauf zu schreiben, muss die Ressource wirklich im Speicher repliziert werden, damit die Änderungen an der neuen Kopie vorgenommen werden können. Die Speicherallokation findet also nur beim ersten Schreibbefehl statt.

Für die Auslagerung müssen wir uns nur mit den ersten beiden in der Liste befassen: Dateiseiten und anonyme Seiten.

Austauschbarkeit

Hier ist die Beschreibung von Swappiness aus der Linux-Dokumentation auf GitHub:

"This control is used to define how aggressive (sic) the kernel will swap memory pages. Higher values will increase aggressiveness, lower values decrease the amount of swap. A value of 0 instructs the kernel not to initiate swap until the amount of free and file-backed pages is less than the high water mark in a zone.

The default value is 60."

Das hört sich so an, als würde Swappiness die Intensität des Swaps erhöhen oder verringern. Interessanterweise heißt es, dass das Setzen von Swapiness auf Null Swap nicht ausschaltet. Es weist den Kernel an, nicht zu wechseln, bis bestimmte Bedingungen erfüllt sind. Aber es kann immer noch zu einem Austausch kommen.

Lassen Sie uns tiefer graben. Hier ist die Definition und der Standardwert von vm_swappiness in der Kernel-Quellcodedatei vmscan.c:

/*
* From 0 .. 100. Higher means more swappy.
*/
int vm_swappiness = 60;

Der Swappiness-Wert kann zwischen 0 und 100 liegen. Auch hier klingt der Kommentar sicherlich so, als ob der Swappiness-Wert einen Einfluss darauf hat, wie viel Swappen stattfindet, wobei ein höherer Wert zu mehr Swappen führt.

Weiter unten in der Quellcodedatei können wir sehen, dass einer neuen Variablen namens swappiness ein Wert zugewiesen wird, der von der Funktion mem_cgroup_swappiness() zurückgegeben wird. Eine weitere Verfolgung des Quellcodes zeigt, dass der von dieser Funktion zurückgegebene Wert vm_swappiness ist. Jetzt wird also die Variable swappiness auf den Wert gesetzt, auf den vm_swappiness gesetzt wurde.

int swappiness = mem_cgroup_swappiness(memcg);

Und etwas weiter unten in derselben Quellcodedatei sehen wir Folgendes:

/*
* With swappiness at 100, anonymous and file have the same priority.
* This scanning priority is essentially the inverse of IO cost.
*/
anon_prio = swappiness;
file_prio = 200 - anon_prio;

Das ist interessant. Aus swappiness werden zwei unterschiedliche Werte abgeleitet. Die Variablen anon_prio und file_prio diese Werte. Wenn der eine zunimmt, nimmt der andere ab und umgekehrt .

Der Linux-Swappiness-Wert legt tatsächlich das Verhältnis zwischen zwei Werten fest.

Der Goldene Schnitt

Dateiseiten enthalten Daten, die leicht abgerufen werden können, wenn dieser Speicher freigegeben wird. Linux kann die Datei einfach erneut lesen. Wie wir gesehen haben, müssen, wenn die Dateidaten im RAM geändert wurden, diese Änderungen in die Datei geschrieben werden, bevor die Dateiseite freigegeben werden kann. Aber in jedem Fall kann die Dateiseite im RAM neu gefüllt werden, indem Daten aus der Datei gelesen werden. Warum sich also die Mühe machen, diese Seiten zur Auslagerungspartition oder Auslagerungsdatei hinzuzufügen? Wenn Sie diese Daten erneut benötigen, können Sie sie genauso gut aus der Originaldatei zurücklesen statt aus einer redundanten Kopie im Auslagerungsbereich. Dateiseiten werden also nicht im Swap gespeichert. Sie werden wieder in der Originaldatei „gespeichert“.

Bei anonymen Seiten gibt es keine zugrunde liegende Datei, die den Werten im Speicher zugeordnet ist. Die Werte auf diesen Seiten wurden dynamisch ermittelt. Sie können sie nicht einfach aus einer Datei wieder einlesen. Die einzige Möglichkeit, anonyme Seitenspeicherwerte wiederherzustellen, besteht darin, die Daten irgendwo zu speichern, bevor der Speicher freigegeben wird. Und das ist, was Swap hält. Anonyme Seiten, auf die Sie erneut verweisen müssen.

Beachten Sie jedoch, dass sowohl für Dateiseiten als auch für anonyme Seiten das Freigeben des Speichers einen Schreibvorgang auf der Festplatte erfordern kann. Wenn sich die Dateiseitendaten oder die anonymen Seitendaten seit dem letzten Schreiben in die Datei oder zum Auslagern geändert haben, ist ein Dateisystemschreibvorgang erforderlich. Um die Daten abzurufen, ist ein Lesen des Dateisystems erforderlich. Beide Arten der Seitenwiederherstellung sind kostspielig. Der Versuch, die Festplatteneingabe und -ausgabe zu reduzieren, indem das Austauschen anonymer Seiten minimiert wird, erhöht nur die Menge an Festplatteneingabe und -ausgabe, die erforderlich ist, um mit Dateiseiten fertig zu werden, die in Dateien geschrieben und aus Dateien gelesen werden.

Wie Sie dem letzten Code-Snippet entnehmen können, gibt es zwei Variablen. Einer namens file_prio für „Dateipriorität“ und einer namens anon_prio für „anonyme Priorität“.

• Die anon_prio Variable wird auf den Linux-swappiness-Wert gesetzt.
• Der file_prio Wert wird auf 200 minus dem anon_prio Wert gesetzt.

Diese Variablen enthalten Werte, die zusammenwirken. Wenn beide auf 100 gesetzt sind, sind sie gleich. Bei allen anderen Werten sinkt anon_prio von 100 auf 0 und file_prio steigt von 100 auf 200. Die beiden Werte fließen in einen komplizierten Algorithmus ein, der bestimmt, ob der Linux-Kernel mit einer Präferenz für das Zurückfordern (Freigeben) von Dateiseiten oder anonym ausgeführt wird Seiten.

Sie können sich file_prio als die Bereitschaft des Systems vorstellen, Dateiseiten freizugeben, und anon_prio als die Bereitschaft des Systems, anonyme Seiten freizugeben. Was diese Werte nicht tun, ist, irgendeine Art von Trigger oder Schwellenwert dafür festzulegen, wann Swap verwendet wird. Das wird woanders entschieden.

Wenn jedoch Speicher freigegeben werden muss, werden diese beiden Variablen – und das Verhältnis zwischen ihnen – von den Rückgewinnungs- und Austauschalgorithmen berücksichtigt, um zu bestimmen, welche Seitentypen bevorzugt für die Freigabe berücksichtigt werden. Und das bestimmt, ob die zugehörige Festplattenaktivität Dateien für Dateiseiten verarbeitet oder Speicherplatz für anonyme Seiten auslagert.

Wann greift Swap eigentlich ein?

Wir haben festgestellt, dass der Linux-swappiness-Wert eine Präferenz für die Art der Speicherseiten festlegt, die auf eine mögliche Rückgewinnung gescannt werden. Das ist in Ordnung, aber irgendetwas muss entscheiden, wann der Swap eingreift.

Jede Speicherzone hat eine Hochwassermarke und eine Niedrigwassermarke. Dies sind vom System abgeleitete Werte. Sie sind Prozentsätze des RAM in jeder Zone. Es sind diese Werte, die als Swap-Trigger-Schwellenwerte verwendet werden.

Um zu überprüfen, was Ihre High- und Low-Water-Marks sind, schauen Sie mit diesem Befehl in die Datei /proc/zoneinfo :

 weniger /proc/zoneinfo 

Jede der Zonen verfügt über einen Satz von Speicherwerten, die in Seiten gemessen werden. Hier sind die Werte für die Zone DMA32 auf der Testmaschine. Die Niedrigwassermarke liegt bei 13966 Seiten und die Hochwassermarke bei 16759 Seiten:

• Wenn unter normalen Betriebsbedingungen der freie Speicher in einer Zone unter die untere Grenze der Zone fällt, beginnt der Swap-Algorithmus mit dem Scannen von Speicherseiten auf der Suche nach Speicher, den er zurückfordern kann, wobei die relativen Werte von anon_prio und file_prio .
• Wenn der Linux-Auslagerungswert auf null gesetzt ist, findet Auslagerung statt, wenn der kombinierte Wert von Dateiseiten und freien Seiten kleiner als die obere Grenze ist.

Sie können also sehen, dass Sie den Linux-swappiness-Wert nicht verwenden können, um das Verhalten von swap in Bezug auf die RAM-Nutzung zu beeinflussen. Es funktioniert einfach nicht so.

Worauf sollte Swapiness eingestellt werden?

Dies hängt von Hardware, Arbeitslast, Festplattentyp und davon ab, ob Ihr Computer ein Desktop oder ein Server ist. Offensichtlich wird dies keine Einheitsgröße für alle Arten von Einstellungen sein.

Und Sie müssen bedenken, dass Swap nicht nur als Mechanismus verwendet wird, um RAM freizugeben, wenn Ihnen der Speicherplatz ausgeht. Swap ist ein wichtiger Bestandteil eines gut funktionierenden Systems, und ohne Swap wird es für Linux sehr schwierig, eine vernünftige Speicherverwaltung zu erreichen.

Das Ändern des Linux-Auslagerungswerts hat eine sofortige Auswirkung; Sie müssen nicht neu starten. So können Sie kleine Anpassungen vornehmen und die Auswirkungen überwachen. Idealerweise tun Sie dies über einen Zeitraum von mehreren Tagen mit verschiedenen Arten von Aktivitäten auf Ihrem Computer, um zu versuchen, eine möglichst ideale Einstellung zu finden.

Dies sind einige Punkte, die Sie beachten sollten:

• Der Versuch, Swap zu „deaktivieren“, indem der Linux-Swappinness-Wert auf Null gesetzt wird, verschiebt einfach die mit dem Swap verknüpfte Festplattenaktivität auf die mit der Datei verknüpfte Festplattenaktivität.
• Wenn Sie über veraltete, mechanische Festplatten verfügen, können Sie versuchen, den Linux-Swappiness-Wert zu reduzieren, um die anonyme Seitenrückgewinnung zu vermeiden und die Abwanderung von Swap-Partitionen zu reduzieren. Wenn Sie eine Einstellung verringern, erhöht sich natürlich die andere Einstellung. Die Reduzierung der Swap-Abwanderung erhöht wahrscheinlich die Abwanderung des Dateisystems. Aber Ihr Computer ist möglicherweise glücklicher, wenn er eine Methode der anderen vorzieht. Wirklich, der einzige Weg, es sicher zu wissen, ist, es zu versuchen und zu sehen.
• Bei Einzweckservern, z. B. Datenbankservern, erhalten Sie möglicherweise Anleitung von den Anbietern der Datenbanksoftware. Sehr oft haben diese Anwendungen ihre eigenen speziell entwickelten Dateicache- und Speicherverwaltungsroutinen, auf die Sie sich besser verlassen sollten. Die Softwareanbieter können je nach Maschinenspezifikation und Arbeitslast einen Linux-Auslagerungswert vorschlagen.
• Für den durchschnittlichen Desktop-Benutzer mit relativ neuer Hardware? Lass es so wie es ist.

So legen Sie den Linux-Swappiness-Wert fest

Bevor Sie Ihren Swappiness-Wert ändern, müssen Sie seinen aktuellen Wert kennen. Wenn Sie es ein wenig reduzieren möchten, ist die Frage ein bisschen weniger als was? Das kannst du mit diesem Befehl herausfinden:

 cat /proc/sys/vm/swappiness 

Um den Wert für die Auslagerung zu konfigurieren, verwenden Sie den Befehl sysctl :

 sudo sysctl vm.swappiness=45 

Der neue Wert wird sofort verwendet, ein Neustart ist nicht erforderlich.

Tatsächlich kehrt der Swappiness-Wert bei einem Neustart auf seinen Standardwert von 60 zurück. Wenn Sie mit dem Experimentieren fertig sind und sich für den neuen Wert entschieden haben, den Sie verwenden möchten, können Sie ihn über Neustarts hinweg dauerhaft machen, indem Sie ihn zu /etc/sysctl.conf hinzufügen. /etc/sysctl.conf -Datei. Sie können den von Ihnen bevorzugten Editor verwenden. Verwenden Sie den folgenden Befehl, um die Datei mit dem nano -Editor zu bearbeiten:

 sudo nano /etc/sysctl.conf 

Wenn nano geöffnet wird, scrollen Sie zum Ende der Datei und fügen Sie diese Zeile hinzu. Wir verwenden 35 als permanenten Swappiness-Wert. Sie sollten den Wert ersetzen, den Sie verwenden möchten.

 vm.swappiness=35 

Um Ihre Änderungen zu speichern und nano zu verlassen, drücken Sie „Strg+O“, drücken Sie „Enter“ und drücken Sie „Strg+Z“.

Die Speicherverwaltung ist komplex

Die Speicherverwaltung ist kompliziert. Und deshalb ist es für den durchschnittlichen Benutzer normalerweise besser, dies dem Kernel zu überlassen.

Es ist leicht zu glauben, dass Sie mehr RAM verwenden, als Sie tatsächlich sind. Dienstprogramme wie top und free können einen falschen Eindruck erwecken. Linux verwendet freien Arbeitsspeicher für eine Vielzahl eigener Zwecke, wie z. B. das Zwischenspeichern von Festplatten. Dadurch wird die „verbrauchte“ Speicherzahl künstlich erhöht und die „freie“ Speicherzahl reduziert. Tatsächlich wird der als Disk-Cache verwendete Arbeitsspeicher sowohl als „benutzt“ als auch als „verfügbar“ gekennzeichnet, da er jederzeit sehr schnell zurückgefordert werden kann.

Für Uneingeweihte mag das so aussehen, als ob Swap nicht funktioniert oder dass der Swap-Wert geändert werden muss.

Wie immer steckt der Teufel im Detail. Oder in diesem Fall der Daemon. Der Kernel-Swap-Daemon.