XZ Utils backdoor
Die Backdoor in XZ Utils war kein Programmierfehler. Jemand, der zum vertrauenswürdigen Maintainer geworden war, versteckte Schadcode in zwei Releases der Kompressionsbibliothek xz, mit SSH als Ziel. Sie wurde entdeckt, bevor sie die meisten stabilen Linux-Releases erreichte.
- Betroffen
- xz 5.6.0 und 5.6.1
- Behoben in
- zurück auf 5.4.6 (CISA)
- Veröffentlicht
- 2024-03-29
Was die Backdoor ist
Die Release-Pakete von xz 5.6.0 und 5.6.1 enthielten versteckten Code. Auf manchen Linux-Systemen wird liblzma in den SSH-Server geladen, und der Code manipulierte die Authentifizierung so, dass der Besitzer des Angreiferschlüssels hineinkam.
In den Logs erkennen
Welche Logins deuten auf die Backdoor hin?
Es wurde keine Netzwerksignatur veröffentlicht und keine Ausnutzung gemeldet. Ein Microsoft-Ingenieur bemerkte, dass SSH-Logins unter Debian unstable etwa 0,8 statt 0,3 Sekunden dauerten, dazu Fehler unter valgrind, und verfolgte beides bis zu xz zurück.
So funktioniert der Angriff
- 1Über zwei Jahre wird jemand zum vertrauenswürdigen Maintainer von xz
- 2Versteckter Code steckt in den Release-Paketen von xz 5.6.0 und 5.6.1
- 3Auf manchen Linux-Systemen wird liblzma in den SSH-Server geladen
- 4Der Schlüssel des Angreifers würde SSH öffnen
Warum die XZ-Backdoor so gefährlich war
NVD und Red Hat bewerten CVE-2024-3094 beide mit 10.0, dem höchstmöglichen CVSS-Wert. Sie braucht keinen Login und keine Aktion eines Nutzers, funktioniert über das Netzwerk, und ihre Auswirkungen reichen über die xz-Bibliothek selbst hinaus. Deshalb ist der Scope als geändert markiert. Das Ziel war der SSH-Server, das Programm, mit dem sich Administratoren aus der Ferne an Linux-Rechnern anmelden. Forschende, die den Code untersuchten, zeigten, dass der Besitzer des privaten Schlüssels des Angreifers einen SSH-Server mit Backdoor dazu bringen konnte, jeden beliebigen Befehl als root auszuführen, noch vor jeder Anmeldung, und dass eine erfolgreiche Nutzung auf den normalen Log-Stufen keine SSH-Einträge hinterließ.
Die Backdoor war außerdem darauf gebaut, versteckt zu bleiben. Die bösartigen Teile standen nicht im lesbaren Quellcode: Die Release-Pakete enthielten ein geändertes Build-Skript, m4/build-to-host.m4, das im Git-Repository des Projekts fehlte, und es zog beim Build eine versteckte Objektdatei aus zwei binären „Test“-Dateien. Gebaut wurde sie nur unter x86-64-Linux mit GCC, während eines Debian- oder RPM-Paket-Builds. Zur Laufzeit prüfte sie, ob sie innerhalb von sshd lief, und hielt an, wenn sie bestimmte Debugging-Umgebungen erkannte. Befehle mussten mit einem Ed448-Schlüssel signiert sein. Niemand sonst konnte die Backdoor also nutzen, selbst wenn er sie fand.
XZ Utils ist eine verbreitete Kompressionsbibliothek unter Linux. OpenSSH nutzt sie nicht direkt, aber Debian, Fedora und mehrere andere Distributionen patchen sshd so, dass es mit systemd spricht, und libsystemd lädt liblzma. Kaspersky schrieb, die Operation hätte es fast geschafft, SSH-Server weltweit zu kompromittieren. Sie wurde vorher entdeckt: Debian stable, Red Hat Enterprise Linux, SUSE Linux Enterprise und openSUSE Leap lieferten sie nie aus.
Ist deine Version betroffen?
- Linux und macOS
xz --version - Debian und Ubuntu
dpkg -l xz-utils liblzma5 - Red Hat und Fedora
rpm -q xz xz-libs
Betroffen. Aktualisiere auf 5.4.6.
So erkennst du die XZ-Backdoor
Die Backdoor hinterlässt in Logs fast nichts. Die Erkennung beginnt deshalb mit Versionen und Dateien und schaut dann darauf, wie sich sshd verhält.
- Die installierte Version von xz und liblzma prüfenNur 5.6.0 und 5.6.1 enthalten die Backdoor. Frag den Paketmanager: Kali rät zu apt-cache policy liblzma5, openSUSE zu rpm -q liblzma5. Rollback-Pakete der Distributionen, etwa 5.6.1+really5.4.5-1 von Debian, sind sauber, auch wenn die Nummer mit 5.6.1 beginnt.
- Herausfinden, welche Prozesse liblzma ladenAngreifbar waren nur Systeme, auf denen sshd liblzma lädt, meist über libsystemd. Akamai veröffentlichte Abfragen, die jeden Prozess mit liblzma im Speicher und jedes installierte xz- oder liblzma-Paket auflisten. Das Skript detect.sh von Vegard Nossum, verlinkt im Bericht von Freund, prüft, ob das installierte sshd verwundbar aussieht.
- Binärdateien und Quellcodebäume scannenDer kostenlose Scanner von Binarly prüft Binärdateien auf die manipulierten ifunc-Resolver, Kaspersky veröffentlichte eine YARA-Regel für den Code der Backdoor, und Microsoft Defender meldet Namen wie Backdoor:Linux/XZBackdoorBuild. Such in Quellcodebäumen und Build-Caches nach der eingeschleusten Zeile in m4/build-to-host.m4, die nur die Release-Tarballs hatten, und nach den Payload-Dateien tests/files/bad-3-corrupt_lzma2.xz und tests/files/good-large_compressed.lzma, die auch in Git eingecheckt waren.
- Die Dauer von SSH-Logins messenSo wurde die Backdoor gefunden. Auf einem betroffenen Rechner dauerte ein fehlgeschlagener SSH-Login etwa 0,8 Sekunden statt etwa 0,3, und sshd verbrauchte mehr CPU als sonst. Wird SSH nach einem xz-Update plötzlich langsamer, lohnt sich ein genauerer Blick.
- Beobachten, was sshd startetEin Befehl, der über die Backdoor läuft, wird vom sshd-Prozess selbst gestartet, außerhalb jeder normalen Login-Sitzung. Akamai und die Forschung zu xzbot weisen beide darauf hin: Der Prozessbaum unterscheidet sich von einer normalen SSH-Sitzung, und auf der Stufe INFO oder höher wird nichts geloggt. Endpoint-Tools, die eine Baseline der Kindprozesse von sshd haben, können das markieren.
Eine Logzeile prüfen
Durchsuche die Logs selbst
Welche SSH-Logins waren langsam? Die Backdoor machte jeden einzelnen länger.
Beheben, in dieser Reihenfolge
- 1Jede Kopie findenPrüfe das installierte xz auf jedem Rechner. Nur 5.6.0 und 5.6.1 enthalten die Backdoor.
- 2Zu einem sauberen Release zurückkehrenFühre ein Downgrade auf 5.4.6 durch, wie es die CISA empfiehlt.
- 3Die Angriffsfläche verkleinernHalte das Internet von SSH auf diesen Rechnern fern und such dann nach allem Ungewöhnlichen.
Verwandte Schwachstellen
Zeitleiste
- 2024-03-29Andres Freund meldet die Backdoor, nachdem ihm langsame SSH-Logins aufgefallen sind
- 2024-03-29Sie hatte Fedora 40 Beta, Fedora Rawhide und Debian unstable erreicht
- 2024-05-29Upstream veröffentlicht neue, saubere Releases
Wie der Angriff mit der XZ-Backdoor ablief
Keine der veröffentlichten Analysen berichtet, dass die Backdoor gegen ein echtes System eingesetzt wurde, und Akamai sah keine Scans danach. Der Angriff, der tatsächlich stattfand, richtete sich gegen das Projekt selbst und dauerte mehr als zwei Jahre. Eine Person unter dem Namen Jia Tan schickte am 29. Oktober 2021 einen ersten kleinen Patch an die xz-Mailingliste. Ab April 2022 beschwerten sich Konten namens Jigar Kumar und Dennis Ens in Nachrichten, dass Patches zu langsam vorankämen und das Projekt einen neuen Maintainer brauche. Der erste Commit von Jia Tan wurde im Juni 2022 übernommen, das Konto wurde im Oktober 2022 in die GitHub-Organisation des Projekts aufgenommen, und im März 2023 baute es sein erstes Release, 5.4.2.
Im Juli 2023 schaltete Jia Tan die ifunc-Unterstützung in den Builds des Projekts für OSS-Fuzz ab, einen automatisierten Testdienst, mit der Begründung, sie vertrage sich nicht mit einem Speicherprüfer. Ifunc ist ein Mechanismus, der beim Laden eines Programms die Implementierung einer Funktion auswählt, und genau darüber klinkte sich die Backdoor später ein. Jia Tan veröffentlichte 5.6.0 am 24. Februar 2024 und 5.6.1 mit einer überarbeiteten Backdoor am 9. März und drängte dann Distributionen, sie zu übernehmen: Eine E-Mail bat einen Fedora-Maintainer, Fedora 40 zu aktualisieren, ein Konto namens Hans Jansen bat Debian, auf 5.6.1 umzusteigen, und Jia Tan stellte am 28. März eine Anfrage bei Ubuntu, am selben Tag, an dem Freund die Backdoor vertraulich meldete.
Die Releases erreichten mehrere schnelllebige Distributionen. Debian hatte die schädlichen Pakete in testing, unstable und experimental, die Versionen 5.5.1alpha-0.1 bis 5.6.1-1. openSUSE Tumbleweed und MicroOS lieferten sie vom 7. bis 28. März 2024 aus, und Nutzer von Kali Linux, die zwischen dem 26. und 29. März aktualisierten, bekamen sie. Fedora Rawhide war betroffen, und die Beta von Fedora 40 enthielt Builds von 5.6.0, auch wenn Fedora 40 laut Red Hat vom eigentlichen Exploit offenbar nicht betroffen war. Am 15. April 2024 meldete die OpenJS Foundation ähnliche drängende E-Mails, die Maintainer-Rechte für JavaScript-Projekte verlangten, und erklärte, der Angriff auf XZ sei womöglich kein Einzelfall.
Wer die XZ-Backdoor entdeckt hat
Andres Freund, ein Mitarbeiter von Microsoft, fand sie durch Zufall. Über mehrere Wochen bemerkte er unter Debian unstable, dass SSH-Logins viel CPU verbrauchten, dazu Fehler von valgrind, einem Werkzeug zur Speicherprüfung. Ein fehlgeschlagener Login, der früher etwa 0,3 Sekunden dauerte, brauchte jetzt etwa 0,8. Er verfolgte die Verzögerung bis zu liblzma zurück, meldete sie am 28. März 2024 vertraulich an das Sicherheitsteam von Debian und die geschlossene Mailingliste distros und veröffentlichte seine Analyse am 29. März auf der Liste oss-security. Red Hat vergab am selben Tag CVE-2024-3094, und die CISA forderte Nutzer auf, zu einer nicht kompromittierten Version zurückzukehren.
Der ursprüngliche Maintainer, Lasse Collin, hat die schädlichen Releases nicht erstellt. Er sagt, die Tarballs von 5.6.0 und 5.6.1 seien von Jia Tan erstellt und signiert worden, einem Co-Maintainer. GitHub sperrte beide Konten und deaktivierte das Repository. Collins Konto wurde am 2. April wiederhergestellt, die Repositorys kamen am 9. April zurück, und neue saubere Releases erschienen am 29. Mai 2024, zusammen mit Version 1.0 seiner Prüfnotizen.
Lehren aus der XZ-Backdoor
Die XZ-Backdoor zeigte, dass sich ein Projekt über seine Menschen angreifen lässt. Ein geduldiger Angreifer gewann, unterstützt von Konten, die sich beschwerten, das Projekt brauche einen neuen Maintainer, über zwei Jahre das Vertrauen des Maintainers. Die anschließende Warnung von OpenJS und OpenSSF nennt die Warnzeichen: Unbekannte, die hartnäckig auf Maintainer-Rechte drängen, Empfehlungen von anderen unbekannten Konten, binäre Blobs in Pull Requests, Änderungen an Build-Schritten und künstlich erzeugte Dringlichkeit. Der wichtigste Rat ist, Maintainer zu finanzieren und zu unterstützen und jede Änderung von einer zweiten Person prüfen zu lassen, auch die von Maintainern.
Die Backdoor veränderte auch, was Verteidiger prüfen. Der Release-Tarball passte nicht zum Git-Repository. Ein Build aus dem geprüften Quellcode oder ein Vergleich der beiden hätte das eingeschleuste Build-Skript also verraten. Binäre Testdateien und abgeschaltete Testfunktionen versteckten den Payload. Und erst ein eigener Patch der Distribution, der sshd mit libsystemd verknüpfte, brachte eine Kompressionsbibliothek in den Login-Pfad. Zu wissen, was jeder kritische Dienst tatsächlich lädt, und eine Inventur der Paketversionen zu führen, beantwortet die Frage „Sind wir betroffen?“
Der Fall
XZ Backdoor: die Build-Server
- Jede Kopie mit Backdoor finden
- Welche ist aus dem Internet erreichbar?
- Zurückrollen
Fragen
Wurde die XZ-Backdoor je für einen Angriff genutzt?
Keiner der veröffentlichten Berichte beschreibt eine Ausnutzung in freier Wildbahn. Sie wurde entdeckt, bevor die meisten stabilen Distributionen sie auslieferten.
Warum ist der Fix eine ältere Version?
Die Backdoor steckte in den Releases 5.6.0 und 5.6.1 selbst, daher entfernt sie der Wechsel zurück auf 5.4.6.
Was ist die XZ-Backdoor?
Das ist Schadcode, versteckt in den Versionen 5.6.0 und 5.6.1 von XZ Utils, einer verbreiteten Kompressionsbibliothek unter Linux, geführt als CVE-2024-3094. Auf manchen Linux-Systemen wird liblzma in den SSH-Server geladen, und der versteckte Code änderte, wie SSH Schlüssel prüfte. Wer den privaten Schlüssel des Angreifers besaß, konnte dann Befehle auf dem Server ausführen.
Wer ist Jia Tan?
Jia Tan ist der Name, den der Co-Maintainer nutzte, der die Releases 5.6.0 und 5.6.1 mit Backdoor gebaut und signiert hat. Das Konto trug ab Oktober 2021 zu xz bei und erhielt im Lauf des folgenden Jahres Maintainer-Rechte. Die hier zitierten Analysen sagen nicht, wer hinter dem Namen steckt.
Wurde die XZ-Backdoor gepatcht?
Ja. Die Distributionen ersetzten 5.6.0 und 5.6.1 innerhalb weniger Tage durch sauberen Code, etwa Debian mit 5.6.1+really5.4.5-1, und das Projekt veröffentlichte am 29. Mai 2024 neue saubere Releases. Die CISA rät zu einer nicht kompromittierten Version wie 5.4.6.
Wie prüfe ich, ob ich von der XZ-Backdoor betroffen bin?
Prüfe das installierte xz- oder liblzma-Paket mit deinem Paketmanager, zum Beispiel mit apt-cache policy liblzma5 oder rpm -q liblzma5. Betroffen sind nur 5.6.0 und 5.6.1, und zwar vor allem auf schnelllebigen Distributionen wie Debian testing und unstable, Fedora Rawhide, openSUSE Tumbleweed und Kali. Stabile Releases wie Debian stable und Red Hat Enterprise Linux haben sie nie ausgeliefert.
Ist die XZ-Backdoor noch eine Bedrohung?
Das Risiko ist heute gering, da die schädlichen Versionen im März 2024 entfernt wurden und keine Nutzung in freier Wildbahn gemeldet ist. Sie kann aber auf Systemen stecken, die in diesen Wochen aus Rolling-Distributionen gebaut und nie aktualisiert wurden. openSUSE riet, betroffene Tumbleweed-Systeme neu zu installieren und ihre Zugangsdaten auszutauschen, denn eine frühere Kompromittierung lässt sich vom Rechner selbst aus kaum ausschließen.
Waren macOS oder Windows von der XZ-Backdoor betroffen?
Laut der Analyse von Andres Freund wurde die Backdoor nur unter x86-64-Linux mit GCC während eines Debian- oder RPM-Paket-Builds gebaut. Andere Systeme konnten xz 5.6.x installieren, ohne eine funktionierende Backdoor zu bekommen. Ein Update auf eine saubere Version ist trotzdem die einfache Lösung.