[OPGELOST] Storing bij T-mobile / Tele2

    Startdatum 2019-05-10 8:46
    Einddatum 2019-05-10 15:42

     

    Wij ontvingen bericht van onze VoIP-leverancier dat verbindingen met het netwerk van T-mobile momenteel niet mogelijk zijn. Zij hebben dit probleem met de hoogste prioriteit geëscaleerd.

     

    Impact:

    De storing bij Tele2 is landelijk en raakt zowel vaste telefonie als VoIP-diensten.

     

    Meer informatie:

    https://www.nu.nl/internet/5885535/vast-telefoonnetwerk-tele2-kampte-urenlang-met-grote-storing.html

     

    Update 8:57

    Technici hebben ontdekt dat de storing wordt veroorzaakt door een probleem bij Tele2.

     

    Update 8:59

    Tele2 heeft bevestigd dat de storing meerdere VoIP-leveranciers raakt, waaronder de onze.

     

    Update 9:15

    De storing bij Tele2 is landelijk en raakt zowel vaste telefonie als VoIP-diensten.

     

    Update 9:32

    Inkomend en uitgaand verkeer van en naar telecom-leveranciers buiten de Tele2/T-Mobile infrastructuur heeft geen last van deze storing. Het is nog niet bekend wanneer de storing opgelost zal zijn.

     

    Update 10:40

    Het is nog steeds niet bekend wanneer de storing opgelost zal zijn.

     

    Update 12:03

    Het is nog steeds niet bekend wanneer de storing opgelost zal zijn. Veel telecom-leveranciers hebben inmiddels wel omleidingen ingesteld, waardoor de bereikbaarheid beter zou moeten zijn.

     

    Update 14:19

    De omleidingen ingesteld door de getroffen telecom-leveranciers heeft ervoor gezorgd dat de meeste verbindingen weer werken sinds begin deze middag. Er is nog geen nieuws bekend over de oplossing bij Tele2 zelf.

     

    Update 15:42

    Tele2 heeft het probleem opgelost. Mocht u nog steeds problemen ondervinden, neem dan AUB contact op met uw 1A-partner.

    [OPGELOST] Kwaliteitsverlies in telefoniegesprekken

    Startdatum 2019-04-23 08:30
    Einddatum  2019-04-23 09:30

     

    Onze monitoring gaf aan dat er packet loss was tussen onze voIP-provider en de telefonie-servers. Mogelijk heeft dit invloed gehad op de gesprekskwaliteit.

     

    Impact:

    Bij gesprekken buiten het telefonienetwerk van 1A treedt er mogelijk verlies van gesprekskwaliteit op. Gesprekken binnen ons netwerk ondervinden geen hinder.

     

    Update 11:30

    Onze monitoring geeft aan dat de packet loss niet meer optreedt.

    [OPGELOST] Storing bepaalde DSL en FttH internetlijnen

    Startdatum 2019-04-18 09:15
    Einddatum  2019-04-18 16:22

     

    Een van onze leveranciers voor internetaansluitingen heeft problemen met het IP-verkeer naar onder andere Microsoft.com en Teamviewer.com. Ook is er soms een korte onderbreking van de verbinding.

     

    Impact:

    Doordat het probleem optreedt in het netwerk van de leverancier, speelt dit bij alle 1A-internet verbindingen die via deze leverancier lopen.

    A) De internetverbinding verbreekt soms even.

    B) Sommige delen van het internet zijn helemaal niet bereikbaar (Microsoft, Teamviewer).

     

    Update 12:27

    De leverancier is nog steeds hard bezig het probleem te verhelpen.

     

    Update 15:26

    Het onderzoek bij de leverancier is nog steeds gaande, helaas hebben zij nog geen oplossing gevonden voor het probleem.

     

    Update 16:22

    De leverancier geeft aan dat het probleem opgelost is.

     

    Update 17:10

    Voor zover wij zien is het probleem inderdaad opgelost.

    Tickets die via de 1A-partners zijn aangemeld worden verder afgehandeld.

     

    Post-Mortem:

    De leverancier geeft aan dat het probleem speelde in verkeer dat zij routeren via interconnect-partners NL-ix en AMS-ix.

    Op 18-april zijn tussen 08:30 en 15:45 verstoringen opgetreden in verbindingen naar een aantal netwerken, waaronder Microsoft en Teamviewer.

    De leverancier houdt met deze interconnect-partners de connectiviteit de komende tijd extra in de gaten.

    [OPGELOST] Bij VodafoneZiggo speelt een storing met geluid in gesprekken

    Startdatum 2019-04-18 08:00
    Einddatum  2019-04-18 17:15

     

    VodafoneZiggo reported connection and quality issues with their voice services.

    Outbound traffic towards the affected destinations will be rerouted.

    Inbound traffic might still be affected, we have received reports of calls lacking audio

     

    Impact:

    U kunt problemen met geluid ervaren wanneer u gebeld wordt door iemand met een VodafoneZiggo abonnement.

    Dit kan ook optreden wanneer u belt naar iemand met een VodafoneZiggo abonnement. 

     

    Update 12:45

    Despite the efforts of all parties involved the fix is not complete yet and ready for production.

    While we wait for a definitive solution, customers might still experience audio/connectivity issues on inbound voice traffic originating from VodafoneZiggo sources

     

    Update 14:55

    The solution is in place and the first tests are successful. As soon as we receive an official statement we will report back.

     

    Update 17:15

    VodafoneZiggo had reported that all numbers and services are operational again. This incident is marked resolved.

    [OPGELOST] Stroomstoring bij TransIP

    Tijdens een Black building test van de provider is in een van onze datacenters is de stroom weggevallen. Ondanks de redundante stroomverbinding zijn er toch servers uitgevallen. De stroomvoorziening is inmiddels weer hersteld en de getroffen servers zijn weer gestart.

     

    10:34: De stroom is weggevallen en kort daarna weer hersteld. Controle van de servers en services is gestart.

    11:00: Alle servers en services zijn gecontroleerd.

    [OPGELOST] Storing bij TransIP

    Er is een storing opgetreden bij bij een van onze datacenters waardoor de servers daar tijdelijk niet bereikbaar zijn geweest. Hieronder het tijdsverloop zoals gecommuniceerd door TransIP:

     

    5:32: Er is een storing opgetreden waardoor er problemen in de netwerkverbinding van onze colocatie-klanten is ontstaan.

    8:23: Onze systeembeheerders zijn hard aan het werk om het probleem op te lossen. Wij zullen uiterlijk 9:30 een nieuwe update plaatsen. De oorzaak is nog in onderzoek.

    9:30: De netwerkconnectiviteit van shared colocations zijn hersteld. De verbindingen van sommige private colocations zijn nog niet hersteld. Hier wordt door onze systeembeheerders nog hard aan gewerkt.