Palvelimet

Linux-valvonta: mitä seurata ja milloin hälyttää

Useimmat palvelinongelmat eivät synny yllättäen. Levy täyttyy viikkojen aikana, muistinkäyttö kasvaa päivä päivältä ja varmenne vanhenee tiettynä päivänä. Ongelma on siinä, ettei kukaan katso. Ensimmäinen merkki on silloin asiakkaan puhelu: ”sivunne ei aukea”.

Valvonta tarkoittaa, että palvelin itse ilmoittaa ennen kuin jokin hajoaa. Hyvä valvonta ei lähetä sinulle satoja viestejä päivässä, vaan vain ne, joiden perusteella pitää tehdä jotain.

Mitä seurata

Saatavuus ulkopuolelta

Tärkein kysymys on yksinkertainen: aukeaako sivu? Se pitää tarkistaa palvelimen ulkopuolelta, koska kun palvelin on alhaalla, se ei voi itse ilmoittaa siitä. Tarkistus hakee sivun muutaman minuutin välein ja hälyttää, jos vastausta ei tule tai se tulee virhekoodilla.

Tarkista etusivun lisäksi se, mikä on liiketoiminnalle tärkeää: verkkokaupan kassa, kirjautuminen, lomakkeen lähetys. Etusivu voi tulla välimuistista silloinkin, kun tietokanta on alhaalla.

Levytila

Täysi levy on yksi yleisimmistä syistä, miksi palvelin yllättäen lakkaa toimimasta. Tietokanta ei pysty kirjoittamaan, lokit eivät mahdu ja varmuuskopio jää kesken. Levy ei yleensä täyty yhdessä yössä, vaan vähitellen lokien, varmuuskopioiden ja ladattujen tiedostojen takia.

Hyvä raja on varoitus 80 prosentissa ja hälytys 90 prosentissa. Vielä parempi on seurata kasvunopeutta: jos levy täyttyy nykyvauhdilla kahden viikon päästä, se on varoitus jo tänään.

Muisti ja prosessori

Lyhytaikainen prosessorin piikki on normaali. Huolestua kannattaa, kun kuorma pysyy korkeana pidempään tai kun muistinkäyttö kasvaa jatkuvasti eikä koskaan laske. Jälkimmäinen viittaa usein sovelluksen muistivuotoon, joka lopulta johtaa siihen, että järjestelmä alkaa sulkea prosesseja.

Palvelut

Verkkopalvelin (Nginx tai Apache), tietokanta (PostgreSQL, MySQL, MariaDB), sovelluspalvelin, Docker-kontit. Toimivatko kaikki tarvittavat palvelut, ja ovatko ne käynnistyneet itsestään uudelleenkäynnistyksen jälkeen?

Varmenteet ja verkkotunnus

Vanhentunut SSL-varmenne tekee sivusta selaimessa käyttökelvottoman, vaikka palvelin toimisi. Automaattinen uusinta voi hajota hiljaa. Seuraa vanhenemispäivää ja hälytä vähintään kaksi viikkoa etukäteen. Sama koskee verkkotunnusta.

Varmuuskopiot

Valvonnan pitää kertoa paitsi se, että varmuuskopio tehtiin, myös se, että se on järkevän kokoinen ja päätyi perille. Varmuuskopio, joka on ollut viimeiset kolme kuukautta tyhjä tiedosto, on huonompi kuin varmuuskopion puuttuminen, koska se antaa väärän turvallisuudentunteen. Miksi varmuuskopio pitää myös koepalauttaa, kerron tarkemmin kirjoituksessa palvelimen varmuuskopiointi ja palautustesti.

Tietoturva

Epäonnistuneiden kirjautumisten määrä, huomaamatta jääneet tietoturvapäivitykset, yllättäen avautuneet portit. Ne eivät yleensä vaadi välitöntä reagointia yöllä, mutta niiden pitää päätyä päivittäiseen katsaukseen.

Hälytys vai varoitus?

Valvonnan yleisin virhe on liian monta viestiä. Jos puhelin piippaa kaksikymmentä kertaa päivässä, ihminen lakkaa lukemasta viestejä ja ohittaa myös sen yhden tärkeän.

Siksi viestit kannattaa jakaa kolmeen ryhmään:

  • Hälytys: palvelu on alhaalla tai kaatuu lähituntien aikana. Vaatii välitöntä toimintaa.
  • Varoitus: jokin kehittyy huonoon suuntaan (levy 80 %, varmenne vanhenee 14 päivän päästä). Hoida työaikana.
  • Katsaus: trendit ja tilastot. Katso kerran viikossa.

Jokaisen hälytyksen kohdalla pitäisi olla selvää, mitä tehdä. Jos hälytyksen perusteella ei koskaan tarvitse tehdä mitään, se pitää poistaa tai muuttaa varoitukseksi.

Automaattinen valvonta ei ole sama kuin päivystys

Tärkeä ero, jota kannattaa kysyä palvelua ostaessa: automaattinen valvonta toimii ympäri vuorokauden, mutta se ei tarkoita, että joku reagoi ympäri vuorokauden. Valvonta huomaa ongelman kello 3 yöllä, mutta korjaako joku sen kello 3, on sopimuskysymys.

Ylläpitopaketissani on automaattinen ympärivuorokautinen valvonta ja hälytykset. Häiriöt ratkaistaan arkipäivisin, ja vasteaika on kirjattu sopimukseen. Jos yritys tarvitsee ympärivuorokautista päivystystä, sovimme siitä erikseen. Näin molemmat osapuolet tietävät, mitä odottaa. Mitä ylläpitosopimus muuten sisältää, kerron kirjoituksessa Linux-palvelimen ylläpito.

Yhteenveto

Hyvä valvonta seuraa saatavuutta ulkopuolelta, levytilaa, palveluita, varmenteita ja varmuuskopioita ja hälyttää vain silloin, kun pitää toimia. Loput menevät varoituksiksi tai katsaukseen.

Jos palvelimellasi ei ole valvontaa tai se tekee hulluksi hälytyksillään, katso Linux-palvelinten ylläpito tai kuvaile palvelimesi. Laitan valvonnan ja varmuuskopiot kuntoon ja dokumentoin, mitä seurataan.

Lue myös

Liittyvät palvelut

Kuka huolehtii palvelimestasi?

Asennus, päivitykset, varmuuskopiot ja valvonta — Linux-palvelin, jonka takana on joku, jolle voi soittaa.