Bekijk Volledige Versie : Storing SIDN
Voor de liefhebbers:
Onderwerp/subject: STORINGSMELDING/SERVICE INTERRUPTION
- English version of this message below -
Aanvang: 17-10-08 09.30 uur
Eind: onbekend
Status: het probleem wordt onderzocht
Op dit moment is er sprake van een ernstige verstoring in onze systemen, waardoor DRS en de (Who)Is tijdelijk onbereikbaar zijn. Het probleem wordt momenteel onderzocht.
* Gevolgen voor de dienstverlening:
- Uw aanvragen worden tijdelijk niet verwerkt:
- Aanvragen per e-mail worden in een wachtrij geplaatst en nadat
de storing is opgelost in volgorde van binnenkomst aangeboden aan DRS.
- Het is niet mogelijk aanvragen in te dienen via de DRS-webinterface.
- De (Who)Is is tijdelijk onbereikbaar.
- De zonefilegeneratie is tot nader order uitgesteld.
Onze excuses voor het ongemak.
Wij houden u via de deelnemerssite op de hoogte van deze verstoring.
Met vriendelijke groeten,
SIDN
DIT E-MAIL ADRES SVP NIET GEBRUIKEN. U kunt uw vragen en opmerkingen sturen naar: support@sidn.nl.
* * * * * * *
martysmarty
17/10/08, 11:48
Aanvragen gister middag gingen ook al erg langzaam
Was toch te verwachten in samenhang met
START: 17-10-08 Onderhoudsvenster DTO/DCO ;)
Hmm dit is wel ongemakkelijk. Hopen dat het probleem snel is opgelost.
dennis0162
17/10/08, 12:31
Alweer? Gisteren ook al.
Gisteren was geen storing.
Was gewoon misbruik van de gautomatiseerde systemen als je het mij vraagt.
FF NS checks indienen voor een kleine 5.000 domeinen...
Een NS check is alleen zinvol als je een registratie of verhuizing hebt ingediend en deze niet uitgevoerd kan worden doordat de NS nog niet in orde was.
Heb gisteren diverse malen gebeld gehad en kreeg diverse malen het bericht dat de queue gevuld werd met een zelfde type bericht, alleen NS checks.
Hoop wel dat het probleem snel is verholpen.
Paul Jansen
17/10/08, 14:13
12.15u Update verstoring.
Op dit moment zijn we nog bezig met het onderzoek naar de oorzaak van de verstoring. Wij verwachten dat dit nog enige tijd gaat duren. Inmiddels is wel vastgesteld dat de storing niet te maken heeft met het huidige onderhoudsvenster DTO/DCO.
Wij zullen om 13.30u weer een update geven, tenzij er eerder al nieuws te melden is.
Paul, is er enige relatie met de quarantaine?
FYI: Aankomend weekend komen de eerste domeinen die in quarantaine gegaan zijn, vrij.
Ze mogen nu toch wel opschieten, 10 over half 2 en nog geen update.
Moet de ns records wijzigen namelijk van een .nl domein maar dat is nu dus afwachten.
Update verstoring, 13.30u
17/10/2008
In samenwerking met externe partijen is de storing nog in onderzoek. De oorzaak wordt op dit moment gezocht in de communicatie tussen de diverse database componenten. Het is nog niet bekend of het hardware of software betreft.
Om 15.00u geven wij een nieuwe update tenzij er eerder al nieuws te melden is.
Paul Jansen
17/10/08, 14:58
Excuus, ik had niet gezien dat R Vos de update al had geplaatst, bij deze mijn bericht verwijderd
Vervelend...maar kan een keer gebeuren.
Het heeft lange tijd goed gegaan gelukkig.
Een nadeel is dat klanten bij mij komen vragen waarom de domeinen niet direct geregistreerd worden.
Maar dan hebben we wat te doen op de vrijdag middag ;)
Als ze nou eens een storing krijgen in het administratie systeem waardoor de rekening van 50% wordt gehalveerd... :P
Ze mogen nu toch wel opschieten
Tjah, tis niet meer een email naar Piet en wachten op de koffie tegenwoordig :)
Offtopic: Paul, is er al iets meer bekend over de deelnemersdag in december??
De evenementenagenda laat nog niet veel los behalve een datum....
Tjah, tis niet meer een email naar Piet en wachten op de koffie tegenwoordig :)
Ik had het hier over de update, zodat we iets meer te weten kwamen;)
Natuurlijk kan het gebeuren, alleen het komt niet bepaald goed uit op dit moment:p maar dat is meestal zo, als het niet goed uitkomt gebeurt het toch.
Hopelijk weten we om 3 uur meer!
Paul Jansen
17/10/08, 15:09
Het is overigens niet bekend of er een relatie met de quarantaine is, dit zullen wij natuurlijk nader onderzoeken.
Vraagje aan onze belgen, gebeurd dit bij DNS.be wel eens?
Toch weer verrassend en frustrerend, dat de SIDN net als de vorige keer bij een grote outage een tijd aangeeft dat er een update komt en deze tijd structureel nooit gehaald wordt.
De storing is niet opgelost bij SIDN
Edit: sorry, iemand was me al voor :X
Paul Jansen
17/10/08, 16:18
Update volgt in een paar minuten
Storing is niet opgelost bij SIDN
Wachtend.
Vanaf de SIDN deelnemersite:
Het onderzoek naar de storing heeft ertoe geleid dat het noodzakelijk is om enkele specifieke Oracle processen nader te analyseren. Over het tijdstip van oplossen kunnen we helaas nog niets zeggen.
Om 17u geven wij een nieuwe update, tenzij er eerder al nieuws te melden is.
Ja we zitten er bovenop....
Het is nogal niet onhandig om zo'n lange storing te hebben.
Toch wel weer frappant dat het weer dat Oracle SQL cluster lijkt te zijn die het veroorzaakt.
Meen dat dit bij de vorige serieuze problemen ook zo was.
Vanaf de SIDN deelnemersite:
Ja we zitten er bovenop....
Het is nogal niet onhandig om zo'n lange storing te hebben.
Toch wel weer frappant dat het weer dat Oracle SQL cluster lijkt te zijn die het veroorzaakt.
Meen dat dit bij de vorige serieuze problemen ook zo was.
Dan wachten we nog even, hopelijk word de oplossing snel gevonden.
Paul Jansen
17/10/08, 16:22
Volgende keer eerst F5-en alvorens te plaatsen, ik weet t...
Sorry Paul...
Ik hoop dat je ons (de deelnemers) begrijpt dat we hier boven op zitten en elkaar dus ook buiten besloten sites om op de hoogte houden.
Het begint nu toch wel aardig irritant te worden :(
Wachtend.
Kom zeg, iets meer inhoudelijk mag het gerust wel.
Tja, maar hij moet een ns wijzigen, en niet eens deelnemer, dus wat wil je... :s
Kom zeg, iets meer inhoudelijk mag het gerust wel.
Ik had er iets anders staan, maar dat was net gezegd voor mij en kon het niet verwijderen;) Sorry hiervoor.
Vaxon Networks
17/10/08, 16:41
Wie vergoedt de schade?
Niet echt overmacht, in deze periode had je allang hardware kunnen aanschaffen en backup terug kunnen zetten o.i.d.
martysmarty
17/10/08, 16:43
Wie vergoedt de schade?
Niet echt overmacht, in deze periode had je allang hardware kunnen aanschaffen en backup terug kunnen zetten o.i.d.
Wat heb je liever, direct weer online, dat er niet goed naar is gekeken, en binnen 1 maand hetzelfde? Of even wat langer wachten nu, zodat het in de toekomst kan worden vermeden?
Vaxon Networks
17/10/08, 16:49
Wat heb je liever, direct weer online, dat er niet goed naar is gekeken, en binnen 1 maand hetzelfde? Of even wat langer wachten nu, zodat het in de toekomst kan worden vermeden?
Ik verwacht van een registrar niet dit soort problemen. Zeker gezien de grote van de organisatie en de zonefile, kunnen ze dit soort fouten niet permiteren.
En gezien de tijd van de storing: Liever direct online en dan in de volgende maand kijken wat er aan de hand is.
Tja, je kunt hier nog 100 man registreren voor relatiebeheer, als je product niet goed (stabiel) is heb je er nog niets aan.
Het voordeel van SIDN: we kunnen helaas niet zonder.
Was er een tweede partij, dan.....
Bijna een jaar geleden ging het Oracle Cluster ook al ongenadig hard onderuit.
Zie ook: http://www.webhostingtalk.nl/906614-post1.html
Jammer genoeg kan ik de bron bij WebWereld zo snel niet terug vinden...
Edit: Beter zoeken: http://webwereld.nl/articles/48544/storing-maakt-registreren--nl-domeinen-onmogelijk.html
Ze maken het wel spannend met het weekend voor de deur :)
Ze gaan vast door tot ze het gevonden hebben... Ik denk dat we met z'n allen wel genoeg kritiek hebben gegeven de vorige keer :d
Vraagje aan onze belgen, gebeurd dit bij DNS.be wel eens?
Neen, dergelijke zaken gebeuren weinig of nooit bij dns.be
Er is allicht wel eens een outage of 2 geweest de laatste jaren, maar nooit uuuuuuren aan een stuk zoals hier. Wij zijn lid van zowel dns.be; eurid.eu, als van sidn.nl en als je het volume van storingsmails, onderhoudsmails e.d. bekijkt, dan is dat toch wel een verhouding van 1/20 (ten nadele van sidn uiteraard).
S.
Aanvang: 17-10-2008 09:00 uur
Eind: naar verwachting 17-10-2008 17:00 uur
Door de storing in onze systemen van dit moment loopt het onderhoudsvenster aan de DTO/DCO vertraging op. Het onderhoudsvenster zal daarom verlengd worden tot 17.00 uur, of eerder indien mogelijk.
Onze excuses voor het eventuele ongemak.
Met vriendelijke groeten,
SIDN
Als ze het maar niet in hun hoofd halen om op tijd weekend te vieren!
We hebben hier wel te maken met 24 uurs economie. :( Aldus de klanten.
Offtopic:
De Jupiler ligt al in de koeling hier, en 3* raden wat er open gaat om 16:30 ;)
Het is wel verdomd lastig dat het gewoon al vanaf 9:30 is.
Wat ik me altijd afvraag is wat veroorzaakt nu zo'n groot probleem, en hoe kan het dat er geen hot standby backup beschikbaar is.
Ze maken het wel spannend met het weekend voor de deur :)
Inderdaad.
Mag toch niet hopen dat ze om half 6 zoiets hebben van .... tis weekend...
Wie vergoedt de schade?
Niet echt overmacht, in deze periode had je allang hardware kunnen aanschaffen en backup terug kunnen zetten o.i.d.
Nu ook niet overdrijven hee, 't is zeker niet plezant, maar een echte ramp is dat nu toch ook niet? Geen enkele concurrent kan meer dan jijzelf op dit moment, zou graag eens weten hoeveel duizenden euro's jij verloren bent als budgethoster op zo een paar uur? De 10 domeinnamen of dergelijke die klaarstaan om geregistreerd te worden, kunnen ook wel deze avond of morgen worden geregistreerd zeker? Idem voor ns aanpassingen. Er kan er altijd wel eentje bijzitten die dringend is, maar nu niet in die mate dat je duizenden euro's schade zal lijden zeker?
Vind het idd wel onbegrijpelijk dat een organisatie van die grootte geen cold/hot standby servers klaarstaan heeft. Kan mij voorstellen dat ze het eerste uur proberen de situatie op de bestaande hard- en software recht te trekken, maar na een paar uur kies je toch eieren voor je geld sidn?
Sven
Inderdaad.
Mag toch niet hopen dat ze om half 6 zoiets hebben van .... tis weekend...
dan drinken we daar toch met z'n allen een pilsje en gaan we pas weg als het opgelost is :-)
Maar ik ga ervan uit dat het wel opgelost wordt en dat ze niet eerder weg gaan.
Misschien een gek idee, maar moet er niet eens gekeken worden wat onze zuiderburen anders (lees: kennelijk beter) doen en daarmee het huidige systeem verbeteren?
is er in belgie eigenlijk ook een limiet dat je maar een paar keer per dag de whois mag raadplegen?
Vaxon Networks
17/10/08, 17:28
Nu ook niet overdrijven hee, 't is zeker niet plezant, maar een echte ramp is dat nu toch ook niet?
Sven
Gaat om het feit dat dit niet de eerste keer is dat er problemen zijn. Vorige keer waren er zelfs domeinen van ons onbereikbaar. Alles bij elkaar is toch een schadepost.
martysmarty
17/10/08, 17:33
Misschien een gek idee, maar moet er niet eens gekeken worden wat onze zuiderburen anders (lees: kennelijk beter) doen en daarmee het huidige systeem verbeteren?
Kunnen we die discussie a.u.b. eens een keer overslaan?
Misschien een gek idee, maar moet er niet eens gekeken worden wat onze zuiderburen anders (lees: kennelijk beter) doen en daarmee het huidige systeem verbeteren?
is er in belgie eigenlijk ook een limiet dat je maar een paar keer per dag de whois mag raadplegen?
Dit is al gesuggereerd, zoals dns.be Eurid geholpen heeft, zullen zij allicht (tegen een prijs natuurlijk) ook wel bereid zijn om SIDN te helpen om een degelijk systeem op poten te zetten. SIDN heeft deze mogelijkheid intern bekeken en resoluut afgeschoten ... volharden in de boosheid noemen ze dat hier.
Dinges: quote van dns.be
"Our WHOIS service has some restrictions to prevent data harvesting of WHOIS information:
access restrictions, i.e. 1 query per second coming from the same IP address, 100 queries maximum per hour per IP address."
Sven
Dat de IS en WHOIS niet beschikbaar is, vind ik nog het ergst eigenlijk. Dat houdt nieuwe klanten tegen.
Wat ik niet snap is dat ik bij sommige collega's wel gewoon op kan vragen of een naam vrij is of niet. Zit het dan bij ons fout in het systeem ?
Tsja, het enige wat ik hoor is dat klanten zien dat alle domeinen die ze proberen te checken als beschikbaar zijn. Maar die melding krijgen ze nu overal, dus heel erg is dat nu ook weer niet. Ben wel benieuwd hoe lang het nog gaat duren.
Maar die melding krijgen ze nu overal
Nou dat is dus niet zo... Kijk eens bij one bijvoorbeeld.
Aanvang: 17-10-2008 09:00 uur
Eind: 17-10-2008 17:00 uur
De werkzaamheden aan de Deelnemers Testomgeving en Deelnemers Cursusomgeving zijn, met enige vertraging, succesvol afgerond.
Met vriendelijke groeten,
SIDN
Gaaf, dan ben ik best benieuwd hoe zij checken, of hebben zij hun IP in de sidn list staan?
Paul Jansen
17/10/08, 18:08
Update is in de maak, even geduld nog
Update is in de maak, even geduld nog
SIDN is terug online, maar niet heus.
Paul, kun jij dat misschien uitleggen.
Bij de grote meerdereheid van registrars werkt de IS en WHOIS niet. Maar bij enkele zoals one kun je dus wel checken of een domeinnaam vrij is of niet. Daar snap ik niets van. Tuurlijk kunnen ze zelf een cache opbouwen maar ook van hele aparte namen weten ze de status.
Paul, kun jij dat misschien uitleggen.
Bij de grote meerdereheid van registrars werkt de IS en WHOIS niet. Maar bij enkele zoals one kun je dus wel checken of een domeinnaam vrij is of niet. Daar snap ik niets van. Tuurlijk kunnen ze zelf een cache opbouwen maar ook van hele aparte namen weten ze de status.
D.m.v. dns-check?
Is een dns check altijd betrouwbaar voor alle tld's?
Is een dns check altijd betrouwbaar voor alle tld's?
Nee. Het is niet betrouwbaar maar wel een fijne fallback methode voor Registries zoals SIDN.
Hmm, ga ik voor de zekerheid maar implementeren.
D.m.v. dns-check?
Wauw... zo simpel....
Heb het direct geimplementeerd als fall-back.
Kunnen we die discussie a.u.b. eens een keer overslaan?
Het was ook geen vraag om een discussie maar een verhullend tikje frustratie :-)
Maar kennelijk is al eens hulp aangeboden en is deze helpende hand "resoluut afgeschoten".
Maar de problemen zijn voorbij (voorlopig althans), dus het weekend kan beginnen :thumbup:
Dit is al gesuggereerd, zoals dns.be Eurid geholpen heeft, zullen zij allicht (tegen een prijs natuurlijk) ook wel bereid zijn om SIDN te helpen om een degelijk systeem op poten te zetten. SIDN heeft deze mogelijkheid intern bekeken en resoluut afgeschoten ... volharden in de boosheid noemen ze dat hier.
Dinges: quote van dns.be
"Our WHOIS service has some restrictions to prevent data harvesting of WHOIS information:
access restrictions, i.e. 1 query per second coming from the same IP address, 100 queries maximum per hour per IP address."
Sven
Heren,
Dit soort discussies horen hier niet. Gaarne alleen replies die relevant zijn voor deze storing. Ook replies als "het werkt nog steeds niet" zijn niet de bedoeling - iedereen weet dat het niet werkt.
Als je het systeem van de SIDN wilt bespreken, maak daarvoor een ander topic aan (buiten het storingen gedeelte).
Hoi,
Net aantal opdrachten aangeboden bij DRS, maar nog geen reply van "Piet" de DRS computer terug ontvangen.
Kan me voorstellen dat er nogal wat in een queue staat, maar heeft iemand hier ideeën/update over?
Groet,
HighFly
Bij mij druppelen de bevestigingen wel binnen. Zit wel wat tijd tussen.
jeroen2496
17/10/08, 20:57
Even een offtopic vraagje, vind het zonde om een nieuw topic hier voor te openen :)
Sinds kort ben ik SIDN lid, en ben een aantal verhuizingen aan het doorvoeren.
Hoelang duurt zo'n verhuizing over het algemeen? Het lijkt maar niet op te schieten en bij de oude deelnemer is er al akkoord gegeven...
Als de oude deelnemer hem bevestigd heeft is de verhuizing ongeveer realtime.
Nu misschien iets vertraging door vandaag.
jeroen2496
17/10/08, 21:01
Als de oude deelnemer hem bevestigd heeft is de verhuizing ongeveer realtime.
Nu misschien iets vertraging door vandaag.
Hmm raar, status blijf in behandeling, is al een paar dagen zo!
Hmm raar, status blijf in behandeling, is al een paar dagen zo!
Heb je zelf wel bevestiging gegeven? Zijn je nameservers wel in orde? Anyway, offtopic.. beter nieuw topic openen.
In navolging van deze storing,
heeft er iemand een email bericht gehad dat de storing 'opgelost' is?
Hier helemaal niets gezien namelijk.
Hier wel de bevestiging gehad dat het probleem verholpen was. Uit m`n hoofd ergens rond 17:00
Hier wel de bevestiging gehad dat het probleem verholpen was. Uit m`n hoofd ergens rond 17:00
Verwar je het niet met de Deelnemer Test Omgeving? Die heb ik inderdaad wel gehad omstreeks 17 uur. Maar dat is dus iets anders als de live omgeving!
heeft er iemand een email bericht gehad dat de storing 'opgelost' is?
Volgens mij alleen maar Received: by localhost.sidn.nl Fri, 17 Oct 2008 16:59:19
GESLOTEN Onderhoudsvenster DTO/DCO / CLOSED Maintenance window RTE/RCE of ik heb per ongeluk net iets te vaak op DEL gedrukt :)
Die heb ik ook westerp. Maar dat is dan ook alles. Jammer dat we dus geen bericht hebben gehad per email deze keer.
De boefjes zijn het in de stress vergeten. Ik kijk voor de leut eens op de SIDN
pagina en ben ik nou gek of stond er vrijdag wel wat over de storing en hebben
ze dat weggehaald uit het nieuws? Ik kijk er zelden vandaar dat het me nu pas opvalt.
Ik was wat te snel. Deze mailtjes heb ik vrijdag gehad vanaf het noreply adres.
Bijgevoegd het overzicht van alle SIDN mails (zijnde niet DRS gerelateerd).
Wat mij opvalt is dat de verstoringsmelding van 16 oktober op de website eveneens niet per email is gecommuniceerd.
Ben ik de enige die het redelijk vind dat er zowel een aan- als afmelding per email wordt verzonden? Immers we gaan hier niet 24 uur per dag de SIDN website in de gaten houden om te constateren of het probleem is verholpen?
Ook al lijkt het daar soms wel op!
Sterker nog, een of andere API waar je die info uit kan halen en integreren
met eigen aanvraag e.d. oplossingen zou ook een idee zijn. Kleine moeite
veel gemak. Ook voor klanten de mogelijkheid om realtime te zien dat drs
up and running is en ze aanvragen in kunnen dienen etc. etc..