Dienst Hosted VPS werkt niet naar behoren

Statusupdate:
Interconnect heeft vanavond de werkzaamheden succesvol afgerond.

Gevolg:
De verbinding was rond 21:45 weer volledig operationeel.

Vervolg:
Wij zijn in contact met Interconnect om de oorzaak te bespreken. Zodra dit rapport is uitgebracht delen we dit.

Statusupdate:
Interconnect heeft vandaag laten weten dat ze vanavond om 21u nog een laatste maal een wijziging moeten doorvoeren om de verbinding weer redundant te maken.

Gevolg:
De diensten in ons datacenter zijn vanaf vrijdag 19 april vanaf 21:00 tijdelijk niet beschikbaar. Ze hebben aangegeven dat dit uiterlijk tot 21:30 zal duren. Wij staan paraat om een update uit te geven of met hen te communiceren als dit anders is.

Vervolg:
Interconnect is bezig met een ReasonForOutage op te stellen. Zodra deze beschikbaar is zullen we deze met jullie delen.

De storing bij Interconnect is volledig opgelost, men is bezig met de nazorg. Dit heeft verder geen gevolgen voor de beschikbaarheid

Het afgelopen weekend heeft Inteconnect onderhoudswerkzaamheden doorgevoerd waarbij het switching cluster weer redundant is uitgevoerd; onze monitoring heeft ook geen noemenswaardige onderbrekingen meer waargenomen in de verbindingen.

We passen de status van de storing aan naar ‘monitoring’; totdat alle verbindingen ook weer via het redundante switching cluster verlopen, houden wij de storing nog open.

Mochten er zich toch nog problemen met de verbindingen voordoen dan willen wij u vragen om telefonisch contact te zoeken met onze servicedesk om de oorzaak te onderzoeken.

Aansluitend zijn wij in afwachting van de resultaten van het onderzoek van Interconnect naar wat de uiteindelijk oorzaak is geweest van de storingen vorige week.

Update vanuit Interconnect:
De huidige workaround zorgt ervoor dat de omgeving werkt, echter de VPN verbindingen zijn hierdoor instabiel, hier wordt op dit moment ook hard aan gewerkt.

We hebben een update ontvangen vanuit Interconnect aangaande de lopende storing,

Vanaf 8:15 is de omgeving bij Interconnect weer benaderbaar.

We blijven de situatie nauwlettend volgen

Er is na het onderhoud gisterenavond wederom een storing; op dit moment zijn we samen met Interconnect aan het kijken om een work-around toe te passen.

Over 30 minuten volgt een update ten aanzien van deze storing.

Zie hier het bericht van de update vanuit Interconnect. We blijven de situatie monitoren.:

Onderstaande update van 05:36 is ongewijzigd, vanaf dit tijdstip is de nacht relatief rustig verlopen.

Rond 08:00 uur plaatsen wij een nieuwe update, hebben wij eerder nieuws delen wij dit uiteraard direct.

De issues met verbindingen van klanten die zich bij ons gemeld hebben, zijn inmiddels grotendeels voorzien van een workaround. Daarnaast zijn wij samen met onze leverancier Juniper nog steeds op zoek naar de Root Cause van dit incident.

April 12, 2024 · 07:05

Er wordt tussen 1800 - 1900 of 1900 - 2000 onderhoud uitgevoerd door Interconnect om de omgeving weer te herstellen naar normaal.

Zie hier het bericht van de update vanuit Interconnect. We blijven de situatie monitoren.

—- Melding Interconnect —-

Tijdens deze werkzaamheden kunt u downtime ervaren tussen 18:00 uur en 19:00 uur, of tussen 19:00 uur en 20:00 uur. Over het exacte window wordt u zo spoedig mogelijk geïnformeerd. Indien deze werkzaamheden niet direct het gewenste resultaat opleveren zullen wij direct een rollback uitvoeren naar de huidige situatie binnen bovengenoemd window

We hebben een update ontvangen vanuit Interconnect aangaande de lopende storing, hieronder een kopie van deze update.

Zie ook de storingspagina van Interconnect zelf voor de laatste updates.

https://status.interconnect-noc.nl/

— Kopie update —-

Zoals te lezen was in onze vorige updates, hebben wij de hele nacht doorgewerkt om het IP-Fabric Platform weer op te brengen. Momenteel draait dit enige tijd stabiel, echter is de redundantie nog niet volledig hersteld. Alle Diensten zijn inmiddels weer beschikbaar.

Op dit moment zijn we bezig met de voorbereiding van een definitieve, redundante- oplossing. Zodra hierover meer bekend is zullen wij u nader informeren.

Mocht u op dit moment nog onderbrekingen ervaren, neem dan contact op met ons Customer Service Team.

Status:
Het onderliggende probleem is nog steeds actief bij Interconnect. Afgelopen nacht hebben we ook meerdere keren gezien dat de verbinding is weggevallen. Interconnect heeft aangegeven een workaround te hebben geïmplementeerd waardoor de verbinding voor nu stabieler zou moeten zijn ten koste van redundantie.

Het volledige bericht is hier te lezen: https://status.interconnect-noc.nl/incidents/196312

Wat doet Ratho:
Wij hebben de mogelijkheden besproken om onze dienstverlening op een andere manier stabieler aan te bieden. Helaas zijn we tot de conclusie gekomen dat er voor nu geen realistischere optie is anders dan afwachten op dat Interconnect het probleem verhelpt.

Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
Volgens Interconnect zou de verbinding nu stabiel moeten zijn en kunt u gewoon gebruik maken van onze diensten.

Volgende update
Zodra we meer weten brengen we weer een update uit. In de tussentijd kunt u ook gebruik maken van de storingspagina van Interconnect zelf: https://status.interconnect-noc.nl/incidents/196312

Status:
Interconnect heeft spoed onderhoud uitgevoerd wat niet succesvol is afgerond. We merken dat de verbinding naar het datacenter niet stabiel is.
Ze blijven bezig met het onderzoeken van het probleem.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
Op dit moment net zo weinig als wij. We moeten afwachten tot Interconnect het probleem heeft opgelost. De verbinding lijkt willekeurig weg te vallen dus zolang het werkt kunt u gebruik maken van onze diensten gehost in het datacenter.

Volgende update
Morgenvroeg zullen we een volgende update uitbrengen.

Status:
Interconnect geeft nog steeds aan dat ze problemen hebben waarbij zij nu hun leverancier hebben ingeschakeld. Het lijkt er wel op dat onze omgeving stabiel is.

De problematiek zit echt in de verbinding en niet in de door ons ingezette hardware.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
De problemen lijken voor onze diensten verholpen, we hebben hier nog geen officieel bericht van gezien. Voor nu kunt u proberen weer gebruik te maken van de diensten.

Volgende update
Wij monitoren zelf de status pagina van Interconnect verder. Mochten we later vanavond een update kunnen geven dan komen we met een update. Anders zullen we morgenvroeg weer een update plaatsen.

Status:
Verbinding met het datacenter lijkt weer mogelijk. We monitoren de omgeving nauwlettend en bekijken wat Interconnect te melden heeft. Zij hebben aangegeven in hun nieuwste update dat ze nog steeds op onderzoek uit zijn.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
De problemen lijken verholpen, we hebben hier nog geen officieel bericht van gezien. Voor nu kunt u proberen weer gebruik te maken van de diensten maar we weten nog niet of het probleem daadwerkelijk weer verholpen is.

Volgende update
Aangezien de verbindingen weer mogelijk zijn zullen we uiterlijk om 17:00u de volgende update geven.

Status:
De leverancier heeft aangegeven dat ook zij zien dat het weer mogelijk is om een verbinding te maken met hun datacenter in Eindhoven. Toch zijn ze nog op zoek waar het probleem precies zit.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
U kunt weer gebruik maken van de diensten, maar zolang Interconnect nog niet heeft aangegeven dat het probleem bekend is en verholpen kan het zijn dat de verbinding toch weer weg valt.

Volgende update
Wij volgen vanaf nu het update stramien vanuit Interconnect, de volgende update zal uiterlijk 16:00 op deze pagina worden geplaatst.

Status:
Verbinding met het datacenter lijkt weer mogelijk. We monitoren de omgeving nauwlettend en bekijken wat Interconnect te melden heeft.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
De problemen lijken verholpen, we hebben hier nog geen officieel bericht van gezien. Voor nu kunt u proberen weer gebruik te maken van de diensten maar we weten nog niet of het probleem daadwerkelijk weer verholpen is.

Volgende update
Wij volgen vanaf nu het update stramien vanuit Interconnect, de volgende update zal uiterlijk 15:30 op deze pagina worden geplaatst.

Status:
Interconnect is nog steeds op zoek naar de oorzaak. Ze plaatsen minimaal iedere 30 minuten een update.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
Helaas zijn onze diensten die gehost worden in het datacenter nu niet beschikbaar. U kunt er dan ook geen gebruik van maken. Geef bij uw collega’s/relaties aan dat er met man en macht wordt gewerkt om dit probleem te verhelpen.

Volgende update
Wij volgen vanaf nu het update stramien vanuit Interconnect, de volgende update zal uiterlijk 15:30 op deze pagina worden geplaatst.

Status:
Interconnect, het datacenter waar wij onze diensten hosten, geeft aan dat zij de problemen hebben. Ze zijn deze aan het onderzoeken.

Wat doet Ratho:
Wij houden de statuspagina van Interconnect nauwlettend in de gaten en schakelen meteen als er meer bekend is.

Wat kunt u doen:
Helaas zijn onze diensten die gehost worden in het datacenter nu niet beschikbaar. U kunt er dan ook geen gebruik van maken. Geef bij uw collega’s/relaties aan dat er met man en macht wordt gewerkt om dit probleem te verhelpen.

Volgende update
Wij plaatsen om 15:00 op deze pagina een nieuwe update.

Beste gebruiker,

Op dit moment ervaren wij een storing, waardoor je geen gebruik kan maken van de dienst(en) zoals je dat gewend bent. Het gaat om de volgende:

• Hosted VPS (virtual private server) in het datacenter

Deze omgeving host uw servers waarop u werkzaam bent

Het kan zijn dat je deze dienst niet gebruikt. In dat geval kan je deze update negeren.

Op dit moment is de omgeving niet bereikbaar en kunt u niet inloggen op de omgeving

Er wordt op dit moment hard gewerkt aan een oplossing door onze engineers

Wij doen er alles aan om dit zo snel mogelijk op te lossen.

Voor 10-4 / 15:00 komen we met een nieuwe update.
Op www.ratho.nl/status communiceren we altijd alle updates.

Stuur dit bericht door

We willen je vragen dit bericht door te sturen naar jouw eigen team(s) en/of collega(’s) die ook hinder kunnen ondervinden.

Groet,
Team Ratho