Cloudflare-katkos pyytää CTO:ta anteeksi

Suuri osa Internetistä pimeni tiistaina sen jälkeen, kun kriittinen Cloudflare-palvelu epäonnistui, jolloin jotkin maailman suurimmista verkkosivustoista – mukaan lukien X, ChatGPT, Perplexity, Spotify ja Canva – jäivät väliaikaisesti offline-tilaan, jolloin miljoonat ihmiset katsoivat “sisäisen palvelimen virheilmoituksia”. Yritys on sittemmin ratkaissut ongelman, mutta ei ennen kuin se on häirinnyt miljoonien käyttäjien palveluita maailmanlaajuisesti.

Häiriö jätti miljoonat katsomaan “sisäisten palvelinvirheiden” viestejä, mikä herätti hämmennystä, meemejä ja kiihkeitä päivityksiä. Mutta Cloudflare vahvisti pian, että se käsittelee kriittistä sisäistä vikaa, ei kyberhyökkäystä.

Cloudflaren teknologiajohtaja Dane Knecht esitti harvinaisen, tylyn anteeksipyynnön pian sen jälkeen, kun palvelut alkoivat toipua, sanoen, että yritys oli “peittänyt asiakkaitamme ja laajempaa Internetiä”.

Rutiinimuutos, joka laukaisi maailmanlaajuisen romahduksen

Katkos alkoi noin kello 11.48 UTC 18. marraskuuta, kun Cloudflaren järjestelmät alkoivat kaatua sen bottien lievennyskerroksessa. Tämä on sisäänrakennettu turvajärjestelmä, joka tarkistaa verkkosivuston liikenteen päivittäin epäilyttävän toiminnan varalta.

Nämä virheet leviävät nopeasti maailmanlaajuiseen verkkoon ja vaikuttivat kaikkeen verkkosivustojen lataamisesta API-kutsuihin ja jopa Cloudflaren omiin Access- ja WARP-suojaustyökaluihin.

Sen sijaan yksinkertaisen kokoonpanon muutoksen olisi pitänyt olla uinuva virhe, joka oli haudattu syvälle Cloudflaren bottien lieventämisjärjestelmään.

“Avoimuus tapahtuneesta on tärkeää, ja aiomme jakaa häiriön ja lisätietoja muutaman tunnin sisällä. Lyhyesti sanottuna, bottien lieventämiskykyämme tukevan palvelun piilevä bugi alkoi kaatua tekemämme rutiininomaisen kokoonpanomuutoksen jälkeen. Tämä johti laajaan verkkomme ja muiden palveluiden heikkenemiseen. Tämä ei ollut hyökkäys”, Knecht korosti.

Korjaus otettu käyttöön, mutta jotkin ominaisuudet pysyivät hitaina

Cloudflaren insinöörit ottivat käyttöön korjauksen klo 14.42 UTC ja aloittivat liikennevirtojen palauttamisen. Sivustot palasivat verkkoon hitaasti, mutta yritys varoitti, että analytiikka, lokit ja kojelautatyökalut pysyisivät edelleen hitaita. Osana lievennystoimia Cloudflare keskeytti väliaikaisesti WARP-pääsyn Lontoossa oleville käyttäjille.

“Korjaus on tehty ja uskomme, että tapaus on nyt ratkaistu. Jatkamme virheiden seurantaa varmistaaksemme, että kaikki palvelut ovat palanneet normaalisti”, yhtiö sanoi.

Virheet ja viive paranevat edelleen, mutta meillä on edelleen raportteja ajoittaisista virheistä. Tiimi jatkaa tilanteen seuraamista sen parantuessa ja etsii tapoja nopeuttaa täydellistä toipumista.

Toistaiseksi Cloudflare sanoo, että asiat ovat palanneet normaaliksi. Katkos kuitenkin korostaa, kuinka haavoittuvia jopa suuret pilvi- ja tietoturva-alustat ovat edelleen haavoittuvia pienille sisäisille virheille, jotka voivat aiheuttaa laajoja häiriöitä.

Recent Articles

spot_img

Related Stories

Stay on op - Ge the daily news in your inbox

[tdn_block_newsletter_subscribe input_placeholder="Email address" btn_text="Subscribe" tds_newsletter2-image="730" tds_newsletter2-image_bg_color="#c3ecff" tds_newsletter3-input_bar_display="" tds_newsletter4-image="731" tds_newsletter4-image_bg_color="#fffbcf" tds_newsletter4-btn_bg_color="#f3b700" tds_newsletter4-check_accent="#f3b700" tds_newsletter5-tdicon="tdc-font-fa tdc-font-fa-envelope-o" tds_newsletter5-btn_bg_color="#000000" tds_newsletter5-btn_bg_color_hover="#4db2ec" tds_newsletter5-check_accent="#000000" tds_newsletter6-input_bar_display="row" tds_newsletter6-btn_bg_color="#da1414" tds_newsletter6-check_accent="#da1414" tds_newsletter7-image="732" tds_newsletter7-btn_bg_color="#1c69ad" tds_newsletter7-check_accent="#1c69ad" tds_newsletter7-f_title_font_size="20" tds_newsletter7-f_title_font_line_height="28px" tds_newsletter8-input_bar_display="row" tds_newsletter8-btn_bg_color="#00649e" tds_newsletter8-btn_bg_color_hover="#21709e" tds_newsletter8-check_accent="#00649e" embedded_form_code="YWN0aW9uJTNEJTIybGlzdC1tYW5hZ2UuY29tJTJGc3Vic2NyaWJlJTIy" tds_newsletter="tds_newsletter1" tds_newsletter3-all_border_width="2" tds_newsletter3-all_border_color="#e6e6e6" tdc_css="eyJhbGwiOnsibWFyZ2luLWJvdHRvbSI6IjAiLCJib3JkZXItY29sb3IiOiIjZTZlNmU2IiwiZGlzcGxheSI6IiJ9fQ==" tds_newsletter1-btn_bg_color="#0d42a2" tds_newsletter1-f_btn_font_family="406" tds_newsletter1-f_btn_font_transform="uppercase" tds_newsletter1-f_btn_font_weight="800" tds_newsletter1-f_btn_font_spacing="1" tds_newsletter1-f_input_font_line_height="eyJhbGwiOiIzIiwicG9ydHJhaXQiOiIyLjYiLCJsYW5kc2NhcGUiOiIyLjgifQ==" tds_newsletter1-f_input_font_family="406" tds_newsletter1-f_input_font_size="eyJhbGwiOiIxMyIsImxhbmRzY2FwZSI6IjEyIiwicG9ydHJhaXQiOiIxMSIsInBob25lIjoiMTMifQ==" tds_newsletter1-input_bg_color="#fcfcfc" tds_newsletter1-input_border_size="0" tds_newsletter1-f_btn_font_size="eyJsYW5kc2NhcGUiOiIxMiIsInBvcnRyYWl0IjoiMTEiLCJhbGwiOiIxMyJ9" content_align_horizontal="content-horiz-center"]