http://status.xprovide.be/ NOC http://status.xprovide.be/ Belgacom bgp niet stabiel, alle klanten overgeschakeld naar primaire interoute lijn Impact: minimaal http://status.xprovide.be/ Er is een probleem opgedoken op een lijn. De failover is in werking. 12:47 Belgacom lijn terug oke. http://status.xprovide.be/ 10:30 Een belgacom lijn is gefaald bgp heeft alles gereroute naar interoute 12:01 Lijn begacom is terug, alles is terug overgeschakeld http://status.xprovide.be/ Er is blijkbaar een algemene onderbreking. Wij wachten op informatie van het datacenter. 00:00 DCO: Problemen in brussel zuid, zowel syntigo als belgacom geimpacteerd 00:45 DCO: Alle klanten gerouteerd via 2de interoute lijn, iedereen is bereikbaar maar niet aan volle snelheid. 01:45 De lijnen lijken weer beschikbaar te zijn. http://status.xprovide.be/ Er is blijkbaar weer een algemene onderbreking. Wij wachten op informatie. 16:01 We zijn terug online en vragen uitleg aan DCO. Oorzaak lag bij spontane reload van een router. http://status.xprovide.be/ Van 15:28 tot 15:33 was er een korte, algemene netwerk onderbreking. De oorzaak lag bij Syntigo die met een onderbroken lijn zit. 17.18 DCO zal een interventie houden aan de Syntigo lijn, downtime zou maar 5min moeten zijn 18.27 DCO zal naar Zaventem gaan om routing om te leiden, ze verwachten de problemen opgelost te hebben tegen 21.00 18.55 Lijnen liggen eruit, wij wachten op een reactie 19.48 Terug online 19.53 Lijnen er terug uit 20.29 Er is terug connectie 20.46 Lijnen lijken nu reeds 15 min stabiel, voorzichtig afwachten 21.30 DCO: nieuwe interventie in Brussel, Gigabit interface (sfp) wordt vervangen 01.51 Alle routes werden nagezien door het datacenter De oorzaak lag bij een defecte patch in InterXion waar de lijn naar het het Datacenter vertrekt. 10/06/2011 21.14 Lijn Brussel werd opnieuw getest en blijkt stabiel te zijn, deze zal na proefdraaien morgen terug ingeschakeld worden. http://status.xprovide.be/ Er zijn wegvallende connecties. Wij vermoeden vanuit het datacenter. Bezig met onderzoeken. Problemen liggen bij DCO, ze zijn overgeschakeld naar een andere verbinding en het zou moeten opgelost zijn nu. http://status.xprovide.be/ Bij onze racks is een probleem met de connectie. Sommige connecties komen erdoor andere niet. 10:05 DCO onderzoekt het probleem 11:04 Problemen lijken te verbeteren, wij onderzoeken alles verder 10:12 aanhoudende problemen 11:35 Probleem gelokaliseerd bij één van de klanten, connectie lijkt hersteld te zijn 12:20 We zijn bezig met een extra oplossing downtime 5 min 12:50 bij laden van nieuwe configuratie is probleem terug opgedoken, een technieker is momenteel de switch aan het herconfigureren ter plaatse 14:00 We zitten vast in file, dco gaat kijken naar her 15:10 Eta 20 15:30 Aangekomen, technieker is bezig uitleg volgt deze avond 15:50 Opgelost http://status.xprovide.be/ Bericht van DCO: Belgacom routes liggen eruit. failover werkte (bgp omschakeling duurt 1 minuut), nu lijnen opnieuw geconfigureerd voor het voorkomen van traffic jams. normaal mag er geen vertraging zijn, bij problemen gelieve contact op te nemen. 15:19 mails hadden een vertraging van ongeveer 10 min http://status.xprovide.be/ deze morgen tussen 7:13 en 8:00 zijn er problemen geweest met de interout en belgacom lijnen tergelijker tijd. Hierdoor werkte de failover scripts niet naar behoren de lijnen zijn nu hersteld, de scripts worden nagekeken http://status.xprovide.be/ Bericht van DCO: Helaas was er een onderbreking op de hoogspanningvoedingen. UPS en generator werkte correct. Er waren onverwachte neveneffecten op de koeling, de freeaircooling welke moet in dienst treden bleek niet goed geregeld te zijn. De mensen van de leverancier volgen dit verder op. De temperatuur is net binnen de ASHREA normen gebleven (korte piek naar 29 graden), alles draait nu weer normaal. http://status.xprovide.be/ Er zijn problemen met een ups in zaal 2 klanten zijn in bypass geplaatst apc verwittigt op dit moment geen klanten geimpacteerd - Bericht van DCO - 18:16 DCO update: de ups heeft kennelijk grote problemen, alle geimpacteerde klanten worden op de hoogte gebracht. Tot nu toe is er geen down time, als murphy meer wil zijn er geen hoogspannings onderbreking en zal er niets gebeuren. - Bericht van DCO (25/08/2010 23:48:04) - monteur heeft het nog niet kunnen oplossen, morgen ochtend 9:00 worden nieuwe stukken aangevoerd. Morgen rond 9:30 verdere update, tenzij er andere problemen zijn - update 26/08/2010 13:44 - Probleem UPS is opgelost. nog een update