4.2.2026 käyttökatko
4.2.2026 keskiviikkona aamulla, n. kello 08:30 aikaan, Gostan valvontakanaville alkoi tulla hälytyksiä. Lisäksi useat asiakkaat raportoivat, että kirjausten muodostamisessa on ongelmia, eikä Gosta saa yhteyttä taustajärjestelmiin.
N. kello 09:00 huomattiin, että koko Gostan taustapalvelin oli kaatunut muistin loppumiseen. Pian tämän jälkeen Gostaan laitettiin virheviesti sivun ylälaitaan, ja uusien käyntien luonti estettiin. Gostalaiset selvittivät ongelmaa aamupäivän tiiviisti, ja n. 11.30 ongelma oli ratkaistu ja palvelut palautettu käyttöön.
Teknisempi selvitys
Havaitut ongelmat johtuivat usean eri asian seikan yhteisvaikutuksena:
Keskiviikkoaamu oli vilkas kirjauspäivä, ja Gostalla oli paljon käyttöä
Gostaan oli maanantaina tuotu uusi ominaisuus, joka pyrkii virhetilanteissa yrittämään puheentunnistusta uudelleen nopeammin, jotta kirjausluonnos muodostuisi nopeammin
Gostan käyttämällä puheentunnistuspalvelulla oli keskiviikkoaamuna omia, Gostasta riippumattomia käyttökatkoksia
Gostan palvelimet oli konfiguroitu epäoptimaalisesti ns. skaalauksen ja muistinkäytön suhteen
Näiden tekijöiden yhteisvaikutuksena Gostan käyttöliittymä generoi yhä enemmän ja enemmän puheentunnistuskutsuja, joka epäoptimaalisen muistinkäytön johdosta aiheutti sen, että taustapalvelimet kaatuivat kokonaan, ja uudelleen noustuaan kaatuivat heti uudelleen, kun uudelleenyrityslogiikka muodosti yhä lisää kutsuja.
Miten teemme jatkossa paremmin
Jotta näin ei käy jatkossa, mietimme uudelleenyrityslogiikan paremmin. Lisäksi palvelinten skaalaus ja muistinkäyttö on jo nyt mietitty viisaammin, jotta ne selviävät paremmin Gostan kasvavasta käytöstä.
Gostan tiimi pahoittelee 4.2.2026 aamupäivän käyttökatkoa, ja teemme kaikkemme että vastaava ei enää toistuisi.