Driftsproblemer 14.09.26

Hei,
I går opplevde våre kunder en alvorlig driftsforstyrrelse som førte til svært treg respons i Susoft POS. For mange ble systemet i praksis vanskelig eller umulig å bruke i perioden.
Vi beklager ulempene dette medførte for våre kunder, ansatte og partnere.
Susoft POS er utviklet for å kunne fortsette i offline-modus dersom en kasse mister forbindelsen til våre sentrale tjenester eller til internett. Hendelsen i går var imidlertid av en annen karakter.
Våre databasesystemer ble utsatt for en unormalt høy belastning. Forbindelsen mellom POS og våre sentrale tjenester var fortsatt aktiv, og systemet oppfattet derfor forbindelsen som tilgjengelig. Responsen fra sentrale tjenester ble imidlertid så treg at dette påvirket kassene betydelig. Den automatiske offline-funksjonen ble derfor ikke aktivert slik den normalt ville gjort ved et fullstendig bortfall av forbindelsen.
Vi har foreløpig ikke konkludert med den underliggende årsaken. Undersøkelsene omfatter både databaseplattformen, infrastrukturen og våre applikasjoner.
Det viktigste arbeidet vårt nå foregår på to nivåer:
- Redusere risikoen for at en tilsvarende situasjon får samme konsekvens igjen.
Vi gjennomgår hvordan POS skal reagere dersom responstiden fra sentrale tjenester blir unormalt høy, selv om forbindelsen teknisk sett fortsatt er oppe. - Finne den underliggende årsaken.
Vi gjennomfører en grundig teknisk analyse av hendelsen. Dette inkluderer logger, databasebelastning, applikasjonsaktivitet, trafikkmønstre og infrastrukturen rundt tjenestene.
Vi ønsker ikke å trekke forhastede konklusjoner. En fullstendig analyse vil derfor kunne ta noen uker. Dersom vi identifiserer konkrete forhold tidligere, vil nødvendige tiltak naturligvis bli gjennomført fortløpende.
Hendelsen har høyeste prioritet hos oss. Målet er ikke bare å finne årsaken til gårsdagens problem, men også å gjøre løsningen mer robust mot tilsvarende hendelser i fremtiden.
Vi vil holde våre partnere og kunder orientert når vi har mer informasjon.
Takk for forståelsen og for tilliten til Susoft.
Med vennlig hilsen
Susoft