Ongelmia nettiyhteydessä Valokuitusverkossa

Incident Report for LocalNet Status

Postmortem

Suoritimme yöllä tarpeellisen reitittimen vaihdon kasvattaaksemme kapasiteettia vastaamaan kasvanneisiin asiakas- ja liikennemääriin. Huolto oli valmisteltu huolellisesti ja se suoritettiin keskiyön jälkeen, jotta se aiheuttaisi mahdollisimman vähän haittaa asiakkaillemme. Puolisen tuntia kestäneen katkoksen jälkeen huolto oli valmis, reititin vaihdettu ja liikennemäärät ja dhcp-leaset vaikuttivat palanneen normaalitasolle, joka toki yöaikaan ei ollut tarkkaan arvioitavissa. Kaikki vaikutti toimivan, joten tässä vaiheessa huoltohenkilöstö vetäytyi yöpuulle.

Aamulla tuli kuitenkin useita vikailmoituksia, jotka liittyivät selvästi vaihdetun laitteen kautta kulkevaan palveluun. Itse laitteessa ei näyttänyt olevan vikaa, siinä oli asiakkaita kiinni ja liikenne soljui, mutta jotain oli pielessä. Melko pian ongelma saatiin rajattua tiettyyn asiakasryhmään. Ongelma koski vain niitä asiakkaita, jotka oli kytketty ennen viime syksyn nielupäivitystä ja jotka olivat valinneet priva-ip reitityksen ja eivät olleet pk-seudulla 09-metro alueella. Tämä yhdistelmä muodosti ketjun, jolla liikennöinti ei onnistunut koko matkalta asiakkaalta reitittimelle. Syyksi paljastui tietoturvamielessä tehty esto yhdessä kytkimessä kahden portin välillä, joka oli paikallaan vanhalla kokoonpanolla, mutta esti osan tarpeellista liikennettä uudella kokoonpanolla.

Kun syy oli paikannettu, korjaus oli helppo ja saatiin nopeasti toteutettua.

Otamme tästä opiksi ja tutkimme jatkossa tarkemmin miten eri liikennevirrat koko verkon läpi kulkee ja mitä vaikutuksia muutoksilla on yksittäisiin liikennevirtoihin.

Pahoittelut katkoksesta.

Posted Jun 13, 2025 - 13:57 EEST

Resolved

Nyt pitäisi olla viimeisetkin bitit jälleen linjoilla. Pahoittelut katkoksesta.

Mikäli yhteys ei toimi reitittimen uudelleenkäynnistyksestä huolimattakaan, ole yhteydessä helpdeskiimme.
Posted Jun 13, 2025 - 10:54 EEST

Monitoring

Vika korjattu. Laitamme lisätietoa aiheuttajasta myöhemmin. Vika koski osaa niistä Valokuitusasiakkaistamme, joilla on oletus eli priva-ipv4 reititys. Seuraamme vielä tilannetta.

Mikäli yhteys ei toimi, käynnistäkää oma reititin ja päätelaite uudelleen.
Posted Jun 13, 2025 - 09:48 EEST

Identified

Yön huoltokatkon jäljiltä on ilmennyt osalla asiakkaista ongelmaa nettiin pääsyssä. Selvitämme asiaa.
Posted Jun 13, 2025 - 08:37 EEST
This incident affected: Valokuitunen liittymät.