Citrix Bleed
Citrix Bleed sprawiał, że bramy NetScaler zwracały pamięć z tokenami sesji osób już zalogowanych. Z takim tokenem atakujący przejmował sesję bez hasła i bez MFA, a załatanie nie kończyło sesji, które już wykradziono.
- Dotyczy
- NetScaler 13.0, 13.1 i 14.1 przed kompilacjami z października 2023
- Naprawiono w
- 14.1-8.50, 13.1-49.15, 13.0-92.19
- Opublikowano
- 2023-10-10
- Aktywnie wykorzystywana od
- 2023-10-18
Czym jest Citrix Bleed
Urządzenie NetScaler skonfigurowane jako brama VPN lub logowania można było jednym nieuwierzytelnionym żądaniem zmusić do zwrócenia fragmentu pamięci. Ta pamięć zawierała ważne tokeny sesji zalogowanych użytkowników.
Wykradziony token to sesja, nie hasło: atakujący ma już za sobą hasło i MFA.
Wykryj w logach
Mia zalogowała się raz. Które żądanie ukradło jej sesję?
Żądanie wywołujące wyciek ma nienormalny nagłówek Host, widoczny w logach WAF lub proxy przed bramą. Przejęcie widać po tym, że sesja jednego użytkownika jest używana z dwóch lub więcej adresów przy tylko jednym logowaniu.
Jak działa atak
- 1Atakujący wysyła żądanie z ogromnym nagłówkiem Host
- 2Brama zwraca fragment swojej pamięci
- 3W tej pamięci są tokeny sesji zalogowanych użytkowników
- 4Atakujący używa tokenu: bez hasła, bez MFA
Dlaczego Citrix Bleed był tak groźny
NetScaler Gateway to drzwi wejściowe do sieci firmy: pracownicy łączą się przez niego z VPN, wirtualnymi pulpitami i aplikacjami wewnętrznymi, więc musi odpowiadać każdemu w internecie. Citrix Bleed tkwił w stronie, którą brama wyświetla, zanim ktokolwiek się zaloguje, więc wystarczyło jedno żądanie przez WWW bez konta. Zwrócona pamięć mogła zawierać ważne ciasteczko sesji NetScaler AAA. AAA to skrót od authentication, authorization and accounting (uwierzytelnianie, autoryzacja i rozliczanie), a ciasteczko mówi bramie, że użytkownik przeszedł już sprawdzenie hasła i MFA. Z nim atakujący po prostu kontynuował sesję tego użytkownika.
Źródło problemu było niewielkie. Badacze z Assetnote ustalili, że kod budujący odpowiedź z konfiguracją OpenID bramy ufał długości zwracanej przez funkcję C snprintf, czyli długości, jakiej tekst by potrzebował, a nie długości faktycznie zapisanej. Gdy odpowiedź przekraczała bufor o rozmiarze 131 072 bajtów, brama wysyłała bajty leżące za nim w pamięci. Nazywa się to odczytem poza buforem (buffer over-read): czytaniem za końcem bloku pamięci. W przykładowej odpowiedzi Assetnote wróciło około 16 KB więcej niż rozmiar bufora. Mandiant zauważa, że wyciek nie powoduje awarii urządzenia, więc po stronie właściciela nie dzieje się nic oczywistego.
Trzy rzeczy utrudniały opanowanie sytuacji. Mandiant ustalił, że luka była wykorzystywana jako zero-day od końca sierpnia 2023 roku, około sześciu tygodni przed poprawką. Mandiant ustalił też, że serwer WWW NetScalera nie loguje żądań do podatnej strony, więc wielu właścicieli nie miało żadnego zapisu wycieku. A załatanie nie anulowało sesji, które już wykradziono. Tygodnie po poprawce niezałatane bramy nadal były częste: Kevin Beaumont naliczył 7 listopada 2023 roku około 5000 niezałatanych serwerów, a badacz Yutaka Sejiyama 14 listopada ponad 10 400 podatnych serwerów, według Tenable prawie 30% z nich w Stanach Zjednoczonych.
Czy twoja wersja jest podatna?
- Wiersz poleceń NetScalera
show ns version
Podatna. Zaktualizuj do 13.1-49.15 / 14.1-8.50.
Jak wykryć Citrix Bleed
Citrix, Mandiant i CISA opublikowali te sposoby na wykrycie zarówno wycieku pamięci, jak i przejęcia sesji, które po nim następuje.
- Porównaj Client_ip i Source w ns.logBrama zapisuje zdarzenia SSLVPN TCPCONNSTAT w /var/log/ns.log lub na serwerze syslog. Każde z nich podaje użytkownika (User), adres, z którego się zalogował (Client_ip), i adres, który teraz używa sesji (Source). Source niezgodny z Client_ip, zwłaszcza z nietypowego kraju lub sieci, może oznaczać przejętą sesję; użytkownicy w ruchu, którzy zmieniają Wi-Fi lub VPN, mogą powodować nieszkodliwe niezgodności.
- Szukaj jednego adresu używającego sesji wielu użytkownikówW tych samych zdarzeniach TCPCONNSTAT sprawdź, czy jeden adres Source w krótkim czasie używa sesji należących do kilku różnych użytkowników. CISA sugeruje też oznaczać użytkowników VPN powiązanych z dwoma lub więcej publicznymi adresami IP w różnych podsieciach lub odległych miejscach. Część dopasowań mogą wyjaśniać wspólne adresy NAT, więc potwierdź, zanim zaczniesz działać.
- Szukaj w logach WAF lub proxy długich nagłówków HostPodatne strony to /oauth/idp/.well-known/openid-configuration i /oauth/rp/.well-known/openid-configuration. Sam NetScaler nie loguje żądań do nich, więc użyj zapory aplikacji webowej lub urządzenia sieciowego stojącego przed nim. Żądania do tych ścieżek z nienormalnie długim nagłówkiem Host to znak prób wykorzystania luki.
- Przechowuj logi na tyle długo, by móc spojrzeć wsteczDomyślnie ns.log przechowuje 25 plików po 100 KB na każdy typ logu, łącznie około 2,5 MB, co według Mandiant może nie obejmować okresu, który trzeba zbadać. Przekazuj logi NetScalera na serwer syslog lub do SIEM, żeby historia TCPCONNSTAT przetrwała.
- Zbadaj zrzuty pamięci przed restartemNa niezałatanym urządzeniu zrzuty pamięci (core dumps) procesu silnika pakietów NSPPE są przechowywane w /var/core. Mandiant szukał bardzo długich czytelnych ciągów, ponad 120 000 znaków, w ponad 99% złożonych ze znaku 0, które pasują do zbyt dużego nagłówka Host. Ich zebranie wymaga ponad 5 GB wolnego miejsca na dysku i braku wcześniejszego restartu, a Mandiant zaznacza, że nie odróżniają nieudanej próby od udanej.
- Wytrop, co intruz zrobił dalejNa wirtualnych pulpitach Citrix Mandiant sprawdza klucze rejestru w HKLM\SOFTWARE\Policies\Citrix\<session>\Evidence pod kątem ClientName i ClientIP każdej sesji, gdzie domyślna nazwa hosta, taka jak DESKTOP-########, to sygnał ostrzegawczy. CISA radzi szukać nowych narzędzi zdalnego dostępu, nowych kont, poleceń takich jak whoami, quser i net, mshta.exe wywoływanego z adresami WWW i plików takich jak adobelib.dll w C:\Users\Public.
Sprawdź linijkę logu
Przeszukaj logi samodzielnie
Znajdź żądanie, przez które wyciekła sesja Mii.
Napraw to w tej kolejności
- 1Załataj bramęZainstaluj poprawioną wersję. Nie ma obejścia.
- 2Zakończ wszystkie sesjeTokeny skradzione przed załataniem nadal działają. Reset hasła ich nie kończy.
- 3Sprawdź, co zrobiliPrzejrzyj, do czego miały dostęp przejęte sesje, i zamknij wszystko, co utworzyły.
Luki powiązane z Citrix Bleed
Oś czasu
- 2023-10-10NetScaler wydaje poprawkę
- 2023-10-18CISA wpisuje lukę na listę wykorzystywanych
- 2023-11-21CISA informuje, że partnerzy LockBit 3.0 wykorzystują ją, także przeciwko Boeing Distribution
Ataki Citrix Bleed w praktyce
Mandiant śledził cztery osobne, nienazwane grupy wykorzystujące lukę przeciwko kancelariom prawnym i firmom usług profesjonalnych, firmom technologicznym i instytucjom rządowym w obu Amerykach, Europie, na Bliskim Wschodzie, w Afryce i regionie Azji i Pacyfiku. Po przejęciu sesji rozpoznawały sieć, kradły dane logowania za pomocą Mimikatz i zrzutów pamięci LSASS (procesu Windows przechowującego sekrety logowania) i instalowały narzędzia zdalnego dostępu, takie jak Atera, AnyDesk i SplashTop. Jedna z grup wdrożyła FREEFIRE, backdoor w .NET, który odbierał polecenia przez Slacka. Tenable wymienia wśród atakujących także grupę ransomware Medusa.
Partnerzy ransomware LockBit 3.0 wykorzystywali lukę na szeroką skalę. W komunikacie AA23-325A z 21 listopada 2023 roku CISA, FBI, MS-ISAC i australijskie ACSC opisały, jak partnerzy włamali się przez Citrix Bleed do Boeing Distribution Inc., działu Boeinga zajmującego się częściami i dystrybucją. Boeing udostępnił wskaźniki włamania. Partnerzy zainstalowali narzędzia takie jak AnyDesk, Splashtop i ScreenConnect, uruchomili skrypt PowerShell o nazwie 123.ps1, który zapisał C:\Users\Public\adobelib.dll, utworzyli zaplanowane zadanie UpdateAdobeTask i użyli kopii Plink ze zmienioną nazwą (servicehost.exe) do tunelowania ruchu.
Potem przyszły kolejne ofiary. ICBC Financial Services, amerykańska część Industrial and Commercial Bank of China, padła 8 listopada 2023 roku ofiarą ransomware, co zakłóciło rozliczanie transakcji amerykańskimi obligacjami skarbowymi. Media podały, że stał za tym LockBit, a Beaumont zwrócił uwagę, że NetScaler ICBC jeszcze kilka dni wcześniej nie był załatany na Citrix Bleed, co jest prawdopodobną, ale niepotwierdzoną drogą wejścia. Xfinity, należące do Comcast, podało, że atakujący wykorzystali lukę Citrix między 16 a 19 października 2023 roku, gdy poprawka była już dostępna, a jego zgłoszenie w stanie Maine wymienia 35 879 455 osób. Wykradzione dane obejmowały nazwy użytkowników i hashe haseł.
Kto znalazł Citrix Bleed
Citrix podaje, że lukę znalazł jego własny zespół wewnętrzny. Cloud Software Group, właściciel Citrix, opublikował 10 października 2023 roku biuletyn CTX579459 z poprawionymi buildami, razem z drugą luką, CVE-2023-4967. Wtedy nie wiedział o żadnych atakach. 17 października Citrix zaktualizował alert, podając, że zauważono wykorzystanie, a Mandiant tego samego dnia poinformował, że ataki zaczęły się pod koniec sierpnia. CISA dodała CVE do katalogu Known Exploited Vulnerabilities 18 października.
Nazwa pochodzi od Assetnote (dziś część Searchlight Cyber). Jej badacz Dylan Pindur porównał załatany i niezałatany build, opublikował analizę techniczną z datą 24 października 2023 roku i udostępnił dowód koncepcji. Tenable przypisuje Assetnote nazwę Citrix Bleed; badacz bezpieczeństwa Kevin Beaumont narysował jej logo. Citrix podaje, że Shadowserver Foundation zauważyła 25 października gwałtowny wzrost prób wykorzystania przeciwko niezałatanym urządzeniom.
Lekcje z Citrix Bleed
Citrix Bleed pokazał, że MFA chroni logowanie, a nie sesję, która po nim następuje. Gdy token sesji wycieknie, hasło i drugi składnik atakujący ma już za sobą, dlatego CISA ostrzegła, że MFA nie zadziała tu tak, jak powinno. Poprawka dla takiej luki ma dwie części: zainstaluj poprawkę, a potem zakończ każdą aktywną i trwałą sesję, żeby skradzione tokeny przestały działać. Wskazówki samego Citrix wymieniają polecenia kill aaa session -all, kill icaconnection -all, kill rdp connection -all, kill pcoipConnection -all i clear lb persistentSessions.
Pokazał też, jak mało wiele zespołów widziało na brzegu własnej sieci. Urządzenie nie logowało ataku i przechowywało tylko kilka megabajtów własnych logów. Na pytanie, czy zostali trafieni, mogli odpowiedzieć ci obrońcy, którzy przekazywali logi bramy dalej, mieli przed nią WAF i pilnowali, czy jedna sesja nie jest używana z dwóch miejsc. Komunikat CISA o Citrix Bleed prosi organizacje o załatanie systemów w ciągu 24 do 48 godzin od ujawnienia; w tym przypadku Shadowserver zauważył skok prób wykorzystania mniej więcej dwa tygodnie po poprawce.
Sprawa
Citrix Bleed: brama
- Ustal, czego dotyczy biuletyn
- Czyja to sesja?
- Wyrzuć intruza
Pytania
Czy reset hasła zatrzyma atakującego używającego Citrix Bleed?
Nie. Atakujący ma token sesji, a nie hasło. Po załataniu zakończ sesje na bramie.
Dlaczego NVD i Citrix oceniają ją inaczej?
NVD ocenia ją na 7.5 (wysoka), a Citrix, producent, na 9.4 (krytyczna). Obie oceny dotyczą tej samej luki.
Czym jest Citrix Bleed?
Citrix Bleed to CVE-2023-4966, luka w NetScaler ADC i NetScaler Gateway. Gdy urządzenie działa jako brama VPN lub logowania, jedno nieuwierzytelnione żądanie może zmusić je do zwrócenia części pamięci, w której może być ciasteczko sesji zalogowanego użytkownika. Atakujący może użyć tego ciasteczka, żeby przejąć sesję bez hasła i bez MFA.
Czy Citrix Bleed został załatany?
Tak. Citrix wydał poprawione buildy 10 października 2023 roku: 14.1-8.50, 13.1-49.15 i 13.0-92.19, a do tego 13.1-37.164 dla 13.1-FIPS i 12.1-55.300 dla 12.1-FIPS i 12.1-NDcPP. Wersja 12.1 nie ma już wsparcia i nie dostaje poprawki, więc CISA zaleca aktualizację do wspieranej wersji.
Czy Citrix Bleed nadal jest zagrożeniem?
Brama z poprawionym buildem i wyczyszczonymi starymi sesjami nie jest podatna na tę lukę. Niezałatane urządzenia i te bez wsparcia nadal są. Bardzo podobna luka, CVE-2025-5777, czyli Citrix Bleed 2, została ujawniona i wykorzystana w 2025 roku, więc te same kontrole nadal mają sens.
Których konfiguracji NetScalera dotyczy Citrix Bleed?
Urządzeń zarządzanych przez klienta, skonfigurowanych jako Gateway (serwer wirtualny VPN, ICA Proxy, CVPN lub RDP Proxy) lub jako serwer wirtualny AAA. Według Citrix luka nie dotyczy urządzeń używanych tylko do tradycyjnego równoważenia obciążenia, NetScaler ADM, Citrix SD-WAN ani usług chmurowych zarządzanych przez Citrix.
Jak sprawdzić, czy trafił mnie Citrix Bleed?
Szukaj w ns.log lub na serwerze syslog zdarzeń SSLVPN TCPCONNSTAT, w których Client_ip i Source się różnią albo jeden Source używa sesji kilku użytkowników. Sprawdź w logach WAF żądania do /oauth/idp/.well-known/openid-configuration z bardzo długimi nagłówkami Host. Jeśli znajdziesz takie znaki, przyjmij, że doszło do przejęcia, i zbadaj, do czego miały dostęp te sesje.
Kto nazwał Citrix Bleed?
Tenable przypisuje nazwę badaczom z Assetnote, którzy w październiku 2023 roku opublikowali pierwszą analizę techniczną. Kevin Beaumont stworzył logo, a w 2025 roku nadał kolejnej luce, CVE-2025-5777, nazwę Citrix Bleed 2.