Hejto.pl
Dodaj post

Wpisz coś do wyszukania (minimum 2 znaki)

Awaria Crowdstrike. Niebieskie ekrany śmierci

Sum

w Technologia

79

Na całym świecie pojawiła się awaria powodująca nieustanne rebootowanie urządzeń i pojawianie się niebieskiego ekranu śmierci na komputerach z Windows

Komentarze (63)

Kosmonauta1

Prosta zasada. Kto produkcji nie wy⁎⁎⁎ie ten nie zazna szczęścia w niebie.

Inspirator0

Od kilku dni w pracy pakiet office cały czas rzuca mi błędami. Na tyle częśto, że nie da się na nim w ogóle pracować. Wersja online też. Libre office też.

Dzieki tej awarii, dział IT zdobył wreszcie doskonałą wymówkę, by spuścic mnie i moje problemy na drzewo ( ͡° ͜ʖ ͡°)

Osobistość0

Ciekawe jak wysokie będa straty finansowe globalnie

Gruba ryba0

Jak to sie przedostalo do produckji po testach, qa, i innych kuzwa rzeczach...dramat 😂

Gruba ryba6

@Usyrak "Na poczcie masakra. Kolejka nie z tej ziemi, Panie nie mogą sobie poradzić z komputerami, nie działa płatność kartą. Generalnie masakra...
Ps. Nie ma żadnej awarii. Tam tak jest zawsze"

Osobistość0

W turystyce panika jakby co 😉

Fanatyk0

Pewnie jak zwykle największym wrogiem Microsoftu jest sam Microsoft. Oczywscie zrzuca to na jakiś hakierow

Fanatyk0

@Thereforee XD zbyt serio wszystko bierzesz

Autorytet1

@Thereforee Lol! Firma prawdziwie interoperacyjna, wykopyrtnie każdy system.

Autorytet3

@kodyak "Jakby nie robili na Microsofcie to wszystko było by git "

Lol, lmao even xD
https://access.redhat.com/solutions/7068083

Kernel panic miesiąc temu na Redhat wywołali XD

Kernel panic observed after booting 5.14.0-427.13.1.el9_4.x86_64 by falcon-sensor process. - Red Hat Customer PortaleBPF program causes kernel panic on kernels 5.14.0-410+ . Below is an example of a kernel panic on the falcon-sensor process, observed after booting on kernel version 5.14.0-427.13.1.el9_4.x86_64. [ 462.396258] BUG: unable to handle page fault for address: ffff9a4bdb0f2d88 [ 462.396291] #PF: supervisor write access in kernel mode [ 462.396309] #PF: error_code(0x0002) - not-present page [ 462.396327] PGD 14e203067 P4D 14e203067 PUD 0 [ 462.396345] Oops: 0002 [#1] PREEMPT SMP NOPTI [ 462.397204] CPU: 1 PID: 6496 Comm: falcon-sensor-b Kdump: loaded Not tainted 5.14.0-427.13.1.el9_4.x86_64 #1 [ 462.397838] Hardware name: VMware, Inc. VMware7,1/440BX Desktop Reference Platform, BIOS VMW71.00V.21100432.B64.2301110304 01/11/2023 [ 462.398482] RIP: 0010:backtrack_insn+0x408/0x800 [ 462.399131] Code: 30 00 0f 85 64 fd ff ff 41 ba 01 00 00 00 b9 01 00 00 00 45 8d 48 ff 44 89 d0 d3 e0 85 c2 74 0f 89 c6 f7 d6 21 d6 89 74 bb 0c 09 44 8b 0c 83 c1 01 83 f9 06 0f 84 71 01 00 00 44 89 d0 8b 54 [ 462.400531] RSP: 0018:ffffbdf980977a80 EFLAGS: 00010246 [ 462.401231] RAX: 0000000000000002 RBX: ffff9a47db0f2d80 RCX: 0000000000000001 [ 462.401937] RDX: 0000000000000002 RSI: 0000000000000000 RDI: 0000000000000000 [ 462.402631] RBP: ffff9a47db0f0000 R08: 0000000000000000 R09: 00000000ffffffff [ 462.403325] R10: 0000000000000001 R11: 0000000000000001 R12: 0000000000000058 [ 462.404026] R13: ffff9a47db0f0a90 R14: ffff9a47ea2f6000 R15: ffffbdf982a5f300 [ 462.404722] FS: 00007f8228020740(0000) GS:ffff9a48b5e40000(0000) knlGS:0000000000000000 [ 462.405432] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [ 462.406152] CR2: ffff9a4bdb0f2d88 CR3: 000000012b41a000 CR4: 00000000003506e0 [ 462.406901] Call Trace: [ 462.407611] [ 462.408306] ? srso_return_thunk+0x5/0x5f [ 462.408999] ? show_trace_log_lvl+0x26e/0x2df [ 462.409686] ? show_trace_log_lvl+0x26e/0x2df [ 462.410372] ? __mark_chain_precision+0x166/0x630 [ 462.411058] ? __die_body.cold+0x8/0xd [ 462.411742] ? page_fault_oops+0x134/0x170 [ 462.412429] ? srso_return_thunk+0x5/0x5f [ 462.413135] ? kernelmode_fixup_or_oops+0x84/0x110 [ 462.413823] ? exc_page_fault+0xa8/0x150 [ 462.414512] ? asm_exc_page_fault+0x22/0x30 [ 462.415210] ? backtrack_insn+0x408/0x800 [ 462.415909] ? copy_array+0x4d/0xb0 [ 462.416621] ? __pfx_verbose+0x10/0x10 [ 462.417321] ? __pfx_disasm_kfunc_name+0x10/0x10 [ 462.418023] __mark_chain_precision+0x166/0x630 [ 462.418725] check_cond_jmp_op+0x738/0xbd0 [ 462.419432] ? is_state_visited+0x450/0x740 [ 462.420157] do_check+0x85b/0xac0 [ 462.420854] do_check_common+0x2a9/0x340 [ 462.421566] bpf_check+0xf7c/0x10a0 [ 462.422250] ? srso_return_thunk+0x5/0x5f [ 462.422929] ? __kmem_cache_alloc_node+0x1c7/0x2d0 [ 462.423578] ? __x86_indirect_jump_thunk_r15+0x20/0x5e [ 462.424234] bpf_prog_load+0x636/0x970Red Hat Customer Portal
Autorytet0

@kodyak O czym ty bredzisz? Nigdzie nie ma mowy o żadnym włamaniu.

Fanatyk0

@sierzant_armii_12_malp i tak się niewiele zmieni, bo firmy mają po prostu taniej kupując Windows, office i usługi chmury itp.
Nie mówiąc o całej masie oprogramowania działającego tylko na windows do obsługi różnych maszyn, baz itp.

Fanatyk4

Rok linuksa jak nic. Współpracując z zagranicznymi firmami fajnie widać kto oberwał.

Fanatyk10

@Usyrak - to ich nauczyć testować updaty na niższych środowiskach a nie od razu na produkcji :smirk:
Coś czuję, że nadchodzi rok Linuksa :stuck_out_tongue_winking_eye:

Mocarz1

@koszotorobur "Nie zawszę robię testy, ale jak już robię, to robię je na produkcji" ( ͡°( ͡° ͜ʖ( ͡° ͜ʖ ͡°)ʖ ͡°) ͡°) Nie powiem w jakiej krytycznej dla funkcjonowania państwa branży się tak robi.

Fenomen7

U nas CrowrdStrike nie jest popularny, więc jakieś tam incydenty mogą być (głównie w korpo, które są tylko oddziałami jakichś firm z USA), ale raczej przejdziemy przez to suchą stopą. No i ci, którzy oparli się na chmurze mają teraz problem.
Mnie zastanawia skala tego problemu - nagle się okazuje, że mnóstwo systemów, które nie powinny być wystawione do sieci, jednak jest wystawiona. Dlaczego? Pewnie dlatego, że coraz więcej oprogramowania wymusza stały dostęp do Sieci, żeby coś tam w chmurze porobić, cały czas się aktualizować itd. I widać jakie tego mogą być skutki.
Czekam na jakąś analizę techniczną, a nie na clickbaitowe nagłówki i artykuły pisane przez ludzi, którzy nie mają pojęcia o czym piszą :smiley:

Lider1

@LovelyPL no i w sumie to ze wszystkim się zgodzę poza tym fragmentem, że wizjonerzy mieli rację, bo chmura często wychodzi tanio. Chmura prawie nigdy nie wychodzi tanio, a już na pewno nie w rozwiązaniach czysto enterprise'owych, jak musisz postawić maszynę, która ma określone wymagania wydajnościowe, a nie jest jakimś odpowiednikiem t2.micro. Może jakieś jumphosty, albo środowiska DT i od biedy A, ale ujmę to tak- korpo w którym robię świadczy klientom usługi hostingowe, utrzymaniowe, wdrożeniowe itp. I też wpadli na pewnym etapie w to szaleństwo, że chmura to jest tańsza, szybsza, wydajniejsza i niezawodniejsza. Zaczęły się wielkie projekty, wielkie wyliczenia, wielkie prezentacje... przeflancowali bezpiekę, do dziś nie wiem jak patrząc po papierach, które przedstawili, ale dobra, no i doszliśmy do etapu testów. I faktycznie- jakieś jumphosty i inne maszyny typu "siedzę i się nudzę" działały spoko. A potem zaczęły się testy baz danych z naszego scenariusza, gdzie dla klienta liczą się pojedyncze IOPSy i się zrobiło niezręcznie, bo żadna konfiguracja nie dawała stabilnych rezultatów, nawet ta najbardziej wyjebana. A potem się zaczęło robić jeszcze ciekawiej, jak przeliczyliśmy jakie konfiguracje musielibyśmy mieć, żeby odwzorować wydajność nawet normalnych aplikacji i koszty jakie to wygenerowało były takie, że nie było nawet sensu iść do klientów pytać czy chcą iść do "lepszej" chmury, bo znaliśmy z góry odpowiedź. W poprzedniej pracy też brałem udział w projekcie migracji jakichś 8000 serwerów do chmury, w sumie to do dwóch- AWS i Azure i też dziwnym trafem baaaaardzo szybko po przeliczeniu kosztów okazało się, że kurde, jednak taniej jest utrzymywać swój on-prem i wymieniać sprzęt co 4-5 lat i płacić nawet za najbardziej premium support. Ja rozumiem zalety chmury, spoko, ale to naprawdę nie jest tanie rozwiązanie. A już na pewno nie tak elastyczne, jak własny on-prem.

Fenomen3

@NiebieskiSzpadelNihilizmu
I tak szczerze mówiąc, to ci wizjonerzy mieli rację. Chmura często wychodzi taniej i jest bardziej niezawodna. Nie powiedzieli im tylko o tym, że jak dobrze walnie, to będzie to, co dzisiaj :smiley:
Jak mi w piwnicy walnie serwer, to ja mam problem. Jak walnie MS parę datacenter, to wszyscy mamy problem.

Ciekaw jestem czy po dzisiejszej lekcji będą jakiekolwiek zmiany w podejściu:
a) do chmury
b) do odpowiedzialności dostawców oprogramowania

Czy po prostu czekamy na kolejny raz ale większy niż dzisiaj.

Lider3

@LovelyPL dlaczego? To proste- bo wszelkiej maści wizjonerzy na kiju sprzedali managerom w korpo bajeczki, że jak przejdą do chmury to będzie taniej i niezawodniej. Sprzedali na tyle skuteczne, że managerowie poszli do swoich managerów z przygotowanymi pod tezę wykresikami w pptxach, a ci poszli do management boardu. A temu słysząc słowo "oszczędność" oczy zmieniły się w pięciozłotówki i zanim prezentacja się skończyła, to decyzja już była podjęta. Dziś po prostu było delikatne pierdnięcie jako ostrzeżenie, a i tak obsrali się po całości ci, którzy absolutnie nigdy nie powinny tego problemu doświadczyć. Czemu doświadczyli- chyba wszyscy wiemy.

Osobistość6
Osobistość8

@Usyrak A to jest powiązane?
https://tvn24.pl/biznes/najnowsze/globalna-awaria-informatyczna-nie-dzialaja-systemy-na-lotniskach-w-bankach-i-sklepach-st8009690

Globalna awaria informatyczna. Nie działają systemy na lotniskach, problemy mają bankiTrwa globalna awaria systemów informatycznych. Utrudnienia znacząco wpływają na działalność gospodarki, w tym linii lotniczych, terminali morskich, banków. Firma CrowdStrike tworząca oprogramowanie antywirusowe przekazała w oświadczeniu, że do problemów doszło w wyniku nieudanej poprawki do jednego z jej produktów. Microsoft dodał, że równocześnie doszło też do problemów z jego własnym oprogramowaniem. Chaos to efekt połączonego skutku tych dwóch awarii.TVN24 Biznes
Autorytet8

@ramen Z artykułu to nie wynika, ale mowa o systemie Windows, czas ten sam - więc całkiem możliwe

EDIT. TVN zaktualizowało artykuł i chodzi właśnie o CrowdStrike.

Autorytet5

A tak naprawdę to śmieszne, że pierwszy raz słyszę o sofcie zabezpieczającym, dopiero jak wywołał awarię.

Osobistość0

@ZygoteNeverborn To w sumie słabo bo to bardzo dobry soft i mega drogi.

Fenomen9

"Na szczęście" tylko tych, które mają oprogramowanie Crowdstrike :smiley:
Jak się ktoś tutaj taki trafi, to jest sposób na naprawienie tego problemu:

* "Boot Windows into Safe Mode
* Navigate to the C:\\Windows\\System32\\drivers\\CrowdStrike directory in Explorer
* Locate the “C-00000291-00000000-00000032.sys” file, rightclick and rename it to “C-00000291-00000000-00000032.renamed”
* Boot the host normally.

"

Problem jest o tyle powazny, że windows wpada w pętlę bootowania i bez ręcznej naprawy nic nie zrobisz, bo nie ma jak wczytać poprawki. Ktoś nieźle dał ciała (albo sabotował firmę) :smiley:

Gruba ryba2

@HolQ będzie miał dużo czasu na szukanie nowej roboty (⌒ ͜ʖ⌒)

Gruba ryba4

@LovelyPL ktoś chciał długi weekend xD

Fenomen24

Już miałem obejścia gotowe, bo mi parę serwerów padło, ale pan Crowrstrike napisał, że mamy sami nie cudować, wiec idę na kawkę. Firma nam dość poważnie stanęła. Rok Linuxa się zbliża, jak nic xD

Kosmonauta4

@HerrJacuch teraz Żabka z swoimi systemami 100% na linuxe po przejęciu comarcha powinna sprzedawać systemy Comarch na Linux reklamując się tym że ich rozwiązania zawsze działają xD

Gruba ryba2

@HerrJacuch mam nadzieję, że moi na to nie wpadną xD jest piątek i jest zajebista pogoda xD

Fenomen1

@HolQ U nas już powoli wstaje wszystko, ręcznie stosujemy poprawkę wspomnianą przez @LovelyPL i jakoś to leci.
Trzymajcie się tam xD

Gruba ryba6

@HerrJacuch u mnie chcą cała fabrykę do chaty wysłać. Siedzę i pije kawkę...fajnie że w piątek xD

Autorytet5

@HerrJacuch Cyber risk that starts with CrowdStrike...
ends with Microsoft's BSOD.

( ͡° ͜ʖ ͡°)

Autorytet12

@HerrJacuch Wiem na pewno, że nie będzie to rok CrowdStrike. xD

Fanatyk21

@Usyrak Nie ma tego złego... pewnie wielu idiotycznych meetingów dzisiaj uda się uniknąć dzięki tej awarii. Jako jeden z niewielu ludzi w mojej branży siedzących w 100% na Linuksie będę miał w końcu spokojny dzień.

Lider3

@LondoMollari oj tam oj tam. To był po prostu niezapowiedziany test, taki jak to niby biznes ma wpisany w tabelce przy sekcji "odporność aplikacji" 😉 Jeszcze możnaby do kompletu zrobić test tego co mają w tabelce na pozycji "disaster recovery RPO i RTO" 😉 Dziś po prostu wyszło kto swój biznes traktuje na poważnie i ma swoją własną, lokalną infrę i dba o jej stabilność, a kto dał się nabrać na bajeczki ewangelistów o tym, ze chmura jest szybsza, tańsza i stabilniejsza i przemigrował wszystko wierząc, że to nagle, magicznie stało się niezajebywalne.

Fenomen2

@LondoMollari akurat ten soft nie jest gówniany (w sensie - do dzisiaj działał bardzo dobrze) :smiley:

Fanatyk1
Szczególnie, że w kombinacji z BitLockerem podobno ciężko się wbić do Safe Mode.

@Thereforee A Bitlocker teraz jest domyślnie włączony przy nowych instalkach.

Cóż, kilka serwerów na Windowsie mam, na szczęście wszystkie w mocno prywatnej sieci, i bez takich gówien poinstalowanych.

Autorytet4

@LondoMollari Gorzej, kiedy jesteś takim typowym serwisantem i masz pod sobą te przeklęte urządzenia z bootloopem - takiemu to ja nie zazdroszczę. Szczególnie, że w kombinacji z BitLockerem podobno ciężko się wbić do Safe Mode.