Onderwerp: A1 internet / VirtualPBX down?

Oorspronkelijk geplaatst door winfredhaan

@visser @systemdeveloper Bedankt voor jullie adviseren.

Zo te lezen heb ik nog heel wat te leren. Ik weet alles over rioleringen maar dit gaat boven mij pet. Daarom zoek je dan ook een partij die er wel verstand van heeft. De hele ICT wereld is net het Wilde Westen met allerlei cowboys die zeggen alles te kunnen. Het is dan als leek erg moeilijk om hieruit te kiezen. Als leek is het ook niet te doen om bedrijven te vergelijken immers ik heb geen idee waar ze mee bezig zijn. Voor jullie als 'vak idioten' is het allemaal gesneden koek net als voor mij 1+1=2. Jullie kunnen wel vergelijken omdat jullie weten wat je moet vergelijken. Wij hebben 3 jaar geleden gekozen voor A1 en dat is tot nu toe goed bevallen. Er waren nooit problemen dus ook geen reden voor argwaan of voorbereiden treffen zoals nu noodzakelijk is. Immers ik moet ervan uit kunnen gaan dat alles goed geregeld is. Misschien een beetje naief?

Helaas moet ik zeggen, maar heb je gelijk. Het is gewoon een slechte zaak voor de hele hosting branche dat dingen soms op deze manier fout gaan, en dat een klant feitelijk heel weinig handvat heeft om een goede van een slechte leverancier te onderscheiden, zonder ook heel inhoudelijk te gaan en diep in de keuken van de provider te kijken, en eventueel dingen zelf te regelen die je nu juist buiten de deur wilt leggen bij een professionele partij.

Iemand die voor een euro'tje in de maand bij een puisterige scholier host kun je nog zeggen, "ja, maar wat verwacht je nou eigenlijk" als het misgaat, maar dat is jammer genoeg geen voldoende onderscheid.

Ik weet niet of wat er nu mis is bij A1 een situatie van "echt onvoorstelbaar kleine kans dat alles zo samenliep en zoveel tegelijk fout ging", of dat men in beheer of ontwerp normaal echt wel beter had kunnen (en moeten , reëel qua marktsegment en goed haalbaar) anticiperen en beter opvangen. Gegarandeerd is achteraf aan te wijzen hoe dit specifieke geval niet gebeurd was dit of dat anders gedaan was, of dat ook duidelijk genoeg vooraf aan te wijzen was weet ik niet.

Het resultaat is duidelijk zwaar falen in elk geval. Er is zeker een grens aan wat je qua redundantie nog zinvol kunt bouwen (en sommige setups zijn zo complex dat daar meer storingen van komen dan dat je voorkomt), maar een beetje redelijke recovery tijd voor worst-case falen ('volledige restore van backup binnen één of twee dagen' bijvoorbeeld) is dan de grens waar je op mikt.

Oorspronkelijk geplaatst door winfredhaan

We hebben nu een nieuwe partij uitgenodigd om een voorstel te doen om al onze ict zaken onder de loep te nemen en op te waarderen waar nodig is. Deze situatie moet een eenmalige les zijn. Wat ik uit jullie berichten begrijp is dat de problemen bij A1 misschien niet waren te voorkomen maar dat de omvang zoals deze nu is had kunnen worden voorkomen. Als bij jullie je toilet verstopt zit dan help ik jullie je binnen een dag en laat ik jullie ook niet een week zitten met een probleem.

Er is zeker een analogie met jouw branche, inclusief de conclusie dat _als_ de shit eenmaal de fan raakt het opruimen vervelend is :-)
Laat de partij die je nu uitnodigt het je in elk geval _goed_ uitleggen wat ze gaan doen, en welke achterliggende keuzes ze maken.
Als je nu komt met de vraag 'ik wil redundant' is dat een heel leuk project voor de techneuten om het superdeluxe te bouwen.

Maar laat je niet gek maken met drie datacenters ver weg van schiphol, of hoeveel meter atoombunker beton er wel niet omheen zit, of hoeveel meter boven NAP . Als het misgaat, is het op deze manier. Meer beton had niet geholpen, en als de Noordzee tegen het DC klotst zijn er grotere issues dan een verstopt riool.

Bedenk wat je wilt bereiken, en ik stel me zo voor dat "ik wil zonodig binnen een halve dag omgeschakeld kunnen zijn waarbij mijn website en mail weer werken" voor je budget en businesswens een goede match zijn. Dat kan prima voor een heel reëele prijs. Veel sneller/beter kan ook, voor andere prijzen en gewoonlijk met meer beheeroverhead.

Oorspronkelijk geplaatst door winfredhaan

Iedereen bedankt en ik hou dit forum nog wel even in de gaten om op de hoogte te blijven en wie weet ik leer ik er nog van.

Oorspronkelijk geplaatst door winfredhaan

@systemdeveloper Ik geloof je op je woord wat je zegt, maar als leek heb ik geen idee waar je het over hebt. Maar je heb gelijk dat er zo snel mogelijk iets moet gebeuren. De tuinen beginnen aardig vol te liggen.

Wat systemdeveloper zegt (en ik ook noemde in #46 ) is dat je even elders een mailservice leent/krijgt/huurt.
Ik meen het zelfs als stil aanbod te lezen, maar dat zul je zelf moeten vragen.

In de DNS van je domein staat welke server mail voor je domein aanpakt, en als die verwijzing naar die andere server staat (die wel bereikbaar is) komt je mail weer aan. Je kunt dan nog niet bij je oude mail, maar nieuwe komt weer binnen en je kunt ook weer mailen met je domein.
Een simpele webpagina met contactinformatie dat je even moeilijk bereikbaar was wegens een zware storing bij je ISP is trouwens ook geen grote load op een webserver.
Mail is geen zware service (in elk geval mail voor een typische MKB klant is dat niet), en het is technisch snel te op te zetten.

Oorspronkelijk geplaatst door visser

Wat systemdeveloper zegt (en ik ook noemde in #46 ) is dat je even elders een mailservice leent/krijgt/huurt.
Ik meen het zelfs als stil aanbod te lezen, maar dat zul je zelf moeten vragen.

Nou, ik wil niet direct een zakelijk aanbod doen aangezien dat a) niet hoort in dit topic en b) ik nooit een klant van iemand anders wil 'jatten' en c) ik nooit aanbiedingen doe eigenlijk .
Maar als ik iemand met een paar mb ruimte even een weekje of zo uit de brand kan helpen zodat ie niet een week omzet kwijt is, dan heb ik daar geen probleem mee.
Misschien had ik het inderdaad niet moeten zeggen.

Oorspronkelijk geplaatst door visser

In de DNS van je domein staat welke server mail voor je domein aanpakt,

Staat dit niet de hardeschijf bij A1? A1 zegt niets te kunnen doen omdat ze nergens bij kunnen komen. En als dit zo eenvoudig is (voor jullie bedoel ik, niet voor mij ) had A1 dit dan niet allang moeten verzorgen. Hmmm, zal ze morgenvroeg direct bellen.

<blockquote class="twitter-tweet" lang="nl"><p>Daarna zal alles weer worden aangesloten in ons datacenter in Amsterdam en gaan we de systemen weer opstarten.</p>&mdash; A1 Internet (@A1InternetBV) <a href="https://twitter.com/A1InternetBV/statuses/406778385646354433">30 november 2013</a></blockquote>
<script async src="//platform.twitter.com/widgets.js" charset="utf-8"></script>

Volgens mij gaan ze de goede kant weer op. Zal het morgen opgelost zijn?

Oorspronkelijk geplaatst door systemdeveloper

Nou, ik wil niet direct een zakelijk aanbod doen aangezien dat a) niet hoort in dit topic en b) ik nooit een klant van iemand anders wil 'jatten' en c) ik nooit aanbiedingen doe eigenlijk .
Maar als ik iemand met een paar mb ruimte even een weekje of zo uit de brand kan helpen zodat ie niet een week omzet kwijt is, dan heb ik daar geen probleem mee.
Misschien had ik het inderdaad niet moeten zeggen.

For the record,ik bedoelde mijn post in elk geval niet als hint of verwijt dat je dit niet had moeten zeggen.

Oorspronkelijk geplaatst door winfredhaan

Staat dit niet de hardeschijf bij A1? A1 zegt niets te kunnen doen omdat ze nergens bij kunnen komen. En als dit zo eenvoudig is (voor jullie bedoel ik, niet voor mij ) had A1 dit dan niet allang moeten verzorgen. Hmmm, zal ze morgenvroeg direct bellen.

Uiteindelijk staat de bovenste verwijzing naar je domein bij SIDN, en dat is te wijzigen zonder iets aan de servers van A1 te doen.
Makkelijker is het wel op de DNSen van A1 om dit te doen, als ze daar inmiddels weer bij kunnen.

Je hebt eerst een andere partij nodig die het hosten van je mail wil doen, en eventueel een webpagina'tje. Die kunnen alles al voorbereiden, en jou de gegevens geven (servernaam voor MX record, evt IP adres waar het A record voor www.jouwdomein.nl naar toe moet verwijzen, als je ook de webpagina doet) .
Het vinden van die andere partij , voor even of voor langer is wat je dan zelf moet doen.

Dan is het enige wat A1 moet doen dat in de DNS zone van je domein zetten.
Technisch is het, voor even of langer dan even, gewoon je diensten bij een andere provider onderbrengen.

Of ze het voor je hadden moeten verzorgen ? Het is dus het inkopen van een dienst bij een concurrent en hun klant daar naar toe verhuizen . Afgezien van een lopend contract is er niks wat de klant belet ook bij die concurrent te blijven ook als de zaak opgelost is. Daarnaast kosten die dingen (vooral het regelen, evt de klant helpen mail programma in te stellen, password opnieuw zetten bij de nieuwe mailhoster) dus tijd en die zal heel schaars geweest zijn. Voor een volledig klantenbestand is dat wel erg ondoenlijk, als je dat onvoorbereid moet gaan doen. Maar alleen nog de DNS aanpassen voor een klant die de vervanging zelf geregeld heeft is een kleine moeite.
Voor je orientatie, dit is een forum met vooral webhosters, en het wordt als onbeleefd gezien om een klant te 'jatten' als een collega een probleem heeft, want je (als hoster) zou zomaar morgen zelf in die situatie kunnen zitten. Wie zonder zonde is ....
Katten op andere partijen en klanten aanraden te verhuizen gebeurt eigenlijk alleen als die heel slecht liggen bij de collegae, duidelijk niet serieus bezig zijn (de 'vakantie is begonnen' scholieren hosters) of toevallig grote anonieme partijen zijn en men dan nooit rondgehangen heeft met de technische counterparts. Anders is er een zekere solidariteit. Afijn, ook dat zul je vanuit je eigen branche wel herkennen.

De email doet het weer , hopen dat alle gemiste emailtjes nog binnen komen. Er druppelt nu wat gemiste emailtjes binnen. De website is nog uit de lucht maar die zal denk ik ook wel binnenkort weer online staan.

Gelukkg maar. Hou er rekening mee dat de meeste mailservers 4 dagen proberen om mail af te leveren en het daarna opgeven. Dus wellicht komen die van de laatste dagen nog binnen, maar je kunt wel iets kwijt zijn dus.

Succes!

Oorspronkelijk geplaatst door winfredhaan

De email doet het weer , hopen dat alle gemiste emailtjes nog binnen komen. Er druppelt nu wat gemiste emailtjes binnen. De website is nog uit de lucht maar die zal denk ik ook wel binnenkort weer online staan.

Gelukkig maar. Ik keek trouwens net even op je google+ albums ( https://plus.google.com/116275877715647831105/posts, en dat was interessant om te zien. Een sector die ik alleen als eindgebruiker ken . Maar goed om te zien, en duidelijk van iemand die serieus met z'n vak bezig is en daar trots op is. Top.

Oorspronkelijk geplaatst door systemdeveloper

Gelukkg maar. Hou er rekening mee dat de meeste mailservers 4 dagen proberen om mail af te leveren en het daarna opgeven. Dus wellicht komen die van de laatste dagen nog binnen, maar je kunt wel iets kwijt zijn dus.

Overigens geeft mij dit een prima argument om de backup mx dienst voor m'n eigen klanten gewoon te houden, kost weinig en mocht het onmogelijke mogelijk worden, dan blijft in ieder geval de email bewaard.
Het zelfde geldt voor dns, ik weet dat de kans dat 2 nameservers tegelijk down zijn extreem onwaarschijnlijk is, maar toch hou ik graag 3 nameservers in 3 dcs.

Oorspronkelijk geplaatst door vDong

Overigens geeft mij dit een prima argument om de backup mx dienst voor m'n eigen klanten gewoon te houden, kost weinig en mocht het onmogelijke mogelijk worden, dan blijft in ieder geval de email bewaard.
Het zelfde geldt voor dns, ik weet dat de kans dat 2 nameservers tegelijk down zijn extreem onwaarschijnlijk is, maar toch hou ik graag 3 nameservers in 3 dcs.

Slim, 2 ns kan nog wel eens tricky zijn. Het zal niet de eerste keer zijn dat 1 ns down en de 2de dns het opeens niet trekt omdat iemand in de loop der jaren toch meer gegroeid is dan gedacht.

Oorspronkelijk geplaatst door systemdeveloper

Slim, 2 ns kan nog wel eens tricky zijn. Het zal niet de eerste keer zijn dat 1 ns down en de 2de dns het opeens niet trekt omdat iemand in de loop der jaren toch meer gegroeid is dan gedacht.

Dan moet het wel heel erg goed gegaan zijn met iemand in aantal veel gequeriede domeinen, als authoritive DNS een te zware load oplevert voor een enkele server.
(alle NS records krijgen grosso modo evenveel queries, dus als je van twee naar één server gaat bij een storing, zat de eventueel instortende server al op 50% van z'n capaciteit. Dat moet je kunnen zien aankomen in je monitoring. Een secundaire _resolver_ die 't niet trekt kan je eerder verrassen)

Oorspronkelijk geplaatst door visser

Dan moet het wel heel erg goed gegaan zijn met iemand in aantal veel gequeriede domeinen, als authoritive DNS een te zware load oplevert voor een enkele server.
(alle NS records krijgen grosso modo evenveel queries, dus als je van twee naar één server gaat bij een storing, zat de eventueel instortende server al op 50% van z'n capaciteit. Dat moet je kunnen zien aankomen in je monitoring. Een secundaire _resolver_ die 't niet trekt kan je eerder verrassen)

In a perfect world, jazeker. Maar ik heb al partijen gezien die een 2de dns hebben, alleen omdat iemand riep dat het verstandig was. En dan ergens een 2de vps van nog geen 5 euro hebben waar bij 10% load op de main ns overeenkomt met 90% load op het vpsje. En resolvers op same vps natuurlijk. Anyway, meer is beter, simpel.
Daarom zijn meer backups ook beter dan 1 enkele backup, en raid 1 ook beter dan raid 0.

Bij ons is het telefoonverkeer gelukkig weer hersteld.