Onderwerp: Lazernet: Obelix TERUG down :(

De afgelopen maanden schering en inslag: de Obelix server van Lazernet
down...

OK, niet elke host kan een uptime garanderen van 99% maar wat zich de
laatste maanden bij Lazernet afspeelt is te gek voor woorden. Wat ik niet
begrijp is dat men de problemen met de Obelix server zag aankomen, maar dat
men het blijkbaar vertikte om preventief in te grijpen en de server te
vervangen voor het licht helemaal uitging!

Enkele weken geleden 'n mailtje gekregen van Rudy over een 'compensatie'
voor de geleden schade door de downtime... Tot op heden nog niks gezien...
'k vraag mij af wat hij nu gaat doen...



Troubletickets Lazernet:
03-11-2005 - 14.15u: Er is een probleem met de OBELIX server. Onze technici
gaan ter plaatse om dit deze middag nog op te lossen
UPDATE 15.45u: De schade aan de OBELIX lijkt behoorlijk groot. De server zal
volledig vervangen worden door een splinternieuwe server. Dit zal enkele
uren in beslag nemen. E-mails komen voorlopig in de wachtrij en zullen
straks afgeleverd worden op de nieuwe server.
UPDATE 22.30u: De nieuwe server is operationeel. Momenteel wordt cpanel
ge-installeerd. Daarna wordt de backup procedure gestart. Deze nieuwe server
is veel krachtiger en sneller dan de vorige.
UPDATE 04-11-2005 - 04.00u: Onze technici zijn nog steeds bezig de gegevens
van de oude schijven te kopieren naar de nieuwe server.
UPDATE 04-11-2005 - 07.00u: Pech blijft ons achtervolgen. Alhoewel
splinternieuwe server, blijft de Fedora software (Linux) crashen. Beide IT
mensen zijn uitgeput gaan slapen na dit nachtje doorwerken. Om 8u komt de
dagploeg om de installatie verder te zetten.
Onze excuses voor het ongemak.

In article <9sEaf.39161$PB.1866820@phobos.telenet-ops.be>,
"RadioHead" <rdihead@invaldi.gmail.com> wrote:

> De afgelopen maanden schering en inslag: de Obelix server van Lazernet
> down...
>
> OK, niet elke host kan een uptime garanderen van 99% maar wat zich de
> laatste maanden bij Lazernet afspeelt is te gek voor woorden. Wat ik niet
> begrijp is dat men de problemen met de Obelix server zag aankomen, maar dat
> men het blijkbaar vertikte om preventief in te grijpen en de server te
> vervangen voor het licht helemaal uitging!
>
> Enkele weken geleden 'n mailtje gekregen van Rudy over een 'compensatie'
> voor de geleden schade door de downtime... Tot op heden nog niks gezien...
> 'k vraag mij af wat hij nu gaat doen...
>
>
>
> Troubletickets Lazernet:
> 03-11-2005 - 14.15u: Er is een probleem met de OBELIX server. Onze technici
> gaan ter plaatse om dit deze middag nog op te lossen
> UPDATE 15.45u: De schade aan de OBELIX lijkt behoorlijk groot. De server zal
> volledig vervangen worden door een splinternieuwe server. Dit zal enkele
> uren in beslag nemen. E-mails komen voorlopig in de wachtrij en zullen
> straks afgeleverd worden op de nieuwe server.
> UPDATE 22.30u: De nieuwe server is operationeel. Momenteel wordt cpanel
> ge-installeerd. Daarna wordt de backup procedure gestart. Deze nieuwe server
> is veel krachtiger en sneller dan de vorige.
> UPDATE 04-11-2005 - 04.00u: Onze technici zijn nog steeds bezig de gegevens
> van de oude schijven te kopieren naar de nieuwe server.
> UPDATE 04-11-2005 - 07.00u: Pech blijft ons achtervolgen. Alhoewel
> splinternieuwe server, blijft de Fedora software (Linux) crashen. Beide IT
> mensen zijn uitgeput gaan slapen na dit nachtje doorwerken. Om 8u komt de
> dagploeg om de installatie verder te zetten.
> Onze excuses voor het ongemak.

Dat is een klaar bewijs van onkunde. Wie installeert er nu een neuwe
server terplaatse, zonder burn-in, testen en proeflopen?

Trouwens een beetje hoster heeft een standby server klaarstaan, al dan
niet onsite. In een totaal zakenplan van een hoster kost de server quasi
niks, dus het niet doen grenst aan de waanzin...

--
Watch it! My killfilter really kills!
<http://www.objectief.be/>

"Cyrano" <cyrano.mac@techemail.com> schreef in bericht
news:cyrano.mac-3C7A51.09242004112005@europe.isp.giganews.com...
> In article <9sEaf.39161$PB.1866820@phobos.telenet-ops.be>,
> "RadioHead" <rdihead@invaldi.gmail.com> wrote:
>
>> De afgelopen maanden schering en inslag: de Obelix server van Lazernet
>> down...
>>
>> OK, niet elke host kan een uptime garanderen van 99% maar wat zich de
>> laatste maanden bij Lazernet afspeelt is te gek voor woorden. Wat ik
>> niet
>> begrijp is dat men de problemen met de Obelix server zag aankomen, maar
>> dat
>> men het blijkbaar vertikte om preventief in te grijpen en de server te
>> vervangen voor het licht helemaal uitging!
>>
>> Enkele weken geleden 'n mailtje gekregen van Rudy over een 'compensatie'
>> voor de geleden schade door de downtime... Tot op heden nog niks
>> gezien...
>> 'k vraag mij af wat hij nu gaat doen...
>>
>>
>>
>> Troubletickets Lazernet:
>> 03-11-2005 - 14.15u: Er is een probleem met de OBELIX server. Onze
>> technici
>> gaan ter plaatse om dit deze middag nog op te lossen
>> UPDATE 15.45u: De schade aan de OBELIX lijkt behoorlijk groot. De server
>> zal
>> volledig vervangen worden door een splinternieuwe server. Dit zal enkele
>> uren in beslag nemen. E-mails komen voorlopig in de wachtrij en zullen
>> straks afgeleverd worden op de nieuwe server.
>> UPDATE 22.30u: De nieuwe server is operationeel. Momenteel wordt cpanel
>> ge-installeerd. Daarna wordt de backup procedure gestart. Deze nieuwe
>> server
>> is veel krachtiger en sneller dan de vorige.
>> UPDATE 04-11-2005 - 04.00u: Onze technici zijn nog steeds bezig de
>> gegevens
>> van de oude schijven te kopieren naar de nieuwe server.
>> UPDATE 04-11-2005 - 07.00u: Pech blijft ons achtervolgen. Alhoewel
>> splinternieuwe server, blijft de Fedora software (Linux) crashen. Beide
>> IT
>> mensen zijn uitgeput gaan slapen na dit nachtje doorwerken. Om 8u komt de
>> dagploeg om de installatie verder te zetten.
>> Onze excuses voor het ongemak.
>
> Dat is een klaar bewijs van onkunde. Wie installeert er nu een neuwe
> server terplaatse, zonder burn-in, testen en proeflopen?
>
> Trouwens een beetje hoster heeft een standby server klaarstaan, al dan
> niet onsite. In een totaal zakenplan van een hoster kost de server quasi
> niks, dus het niet doen grenst aan de waanzin...
>
> --
> Watch it! My killfilter really kills!
> <http://www.objectief.be/>

Beste,

toch even reageren.
eerst het vervolg van de updates :
-------------
UPDATE 04-11-2005 - 14.00u: De (oude) Obelix server komt stilaan terug
online. Intussen is de nieuwe cpanel server (Asterix) bijna klaar. Zodra
deze online is, zullen alle accounts van Obelix gekopieerd worden naar de
nieuwe Asterix server. We verwachten dat alles in de loop van deze namiddag
terug operationeel zal zijn.

Alle andere servers zijn intussen gewoon operationeel.
------------------

De Obelix server kende de afgelopen weken inderdaad problemen. De reden is
een klant die via scripts een behoorlijk aantal SPAM mailings wilde
versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
bleven komen, raakte de server steeds aan een te hoge load waardoor deze
(veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze server
te vervangen. Dit was gepland voor dit weekeinde. Murphy besliste hier
anders over, waardoor gisteren overhaast de nieuwe server diende
ge-installeerd te worden. Maar de nieuwe (Linux)-Fedora versie heeft
blijkbaar nog enkele bugs waardoor de SATA RAID configuratie niet lukte. (ik
ben zelf geen technieker hoor).
Intussen is de oorzaak gevonden en is de Obelix server terug online. Dit
weekeinde worden alle Obelix accounts verplaatst naar de nieuwe server. Een
kleine 10% van onze klanten zijn getroffen geweest door deze panne. Het is
soms moeilijk om het juiste evenwicht te vinden tussen een zeer uitgebried
controlepaneel met vele mogelijkheden en scripts, in combinatie met security
en (dikwijls onwetende) klanten met allerlei exotische scripts.

Betreft de compensatie loopt er nu een actie, dewelke (zoals beloofd) 3
dagen geleden naar alle klanten is gemaild. Zij vinden deze actie ook terug
in het nieuws van hun controlepaneel.

MVG
Rudy Ryckewaert
zaakvoerder
LazerNet bvba

On Fri, 4 Nov 2005 19:24:35 +0100, "Rudy Ryckewaert"
<rudy@eurostadion.be> wrote:

>De Obelix server kende de afgelopen weken inderdaad problemen. De reden is
>een klant die via scripts een behoorlijk aantal SPAM mailings wilde
>versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
>bleven komen, raakte de server steeds aan een te hoge load waardoor deze
>(veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze server

kan er mij iemand eens uitleggen waarom een server moet rebooten als
er langere tijd een hogere load is ?

On 2005-11-04, Rudy Ryckewaert wrote:

> Beste,
>
> toch even reageren.
> eerst het vervolg van de updates :
> -------------
> UPDATE 04-11-2005 - 14.00u: De (oude) Obelix server komt stilaan terug
> online. Intussen is de nieuwe cpanel server (Asterix) bijna klaar. Zodra
> deze online is, zullen alle accounts van Obelix gekopieerd worden naar de
> nieuwe Asterix server. We verwachten dat alles in de loop van deze namiddag
> terug operationeel zal zijn.
>
> Alle andere servers zijn intussen gewoon operationeel.
> ------------------
>
> De Obelix server kende de afgelopen weken inderdaad problemen. De reden is
> een klant die via scripts een behoorlijk aantal SPAM mailings wilde
> versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
> bleven komen, raakte de server steeds aan een te hoge load waardoor deze
> (veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze server
> te vervangen. Dit was gepland voor dit weekeinde. Murphy besliste hier
> anders over, waardoor gisteren overhaast de nieuwe server diende
> ge-installeerd te worden. Maar de nieuwe (Linux)-Fedora versie heeft
> blijkbaar nog enkele bugs waardoor de SATA RAID configuratie niet lukte. (ik
> ben zelf geen technieker hoor).

Klein vraagje... waarom installeer je eigenlijk een distributie op een server
waarvan gekend is dat ze eigenlijk niet stabiel is? RedHat zelf geeft aan dat
FC een 'work in progress' is.

Ik vraag me af of het niet gewoon beter is om ofwel een product te nemen dat
zijn degelijkheid reeds bewezen heeft 'in the field', of een product te nemen
waar je support bij krijgt (cfr RHES).

Gewoon een vraagje...

Jan

On 2005-11-04, Diva wrote:
> On Fri, 4 Nov 2005 19:24:35 +0100, "Rudy Ryckewaert"
><rudy@eurostadion.be> wrote:
>
>>De Obelix server kende de afgelopen weken inderdaad problemen. De reden is
>>een klant die via scripts een behoorlijk aantal SPAM mailings wilde
>>versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
>>bleven komen, raakte de server steeds aan een te hoge load waardoor deze
>>(veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze server
>
> kan er mij iemand eens uitleggen waarom een server moet rebooten als
> er langere tijd een hogere load is ?

Omdat je op dat moment er kan van uitgaan dat er een proces hangt/...

Een reboot kan op dat moment het probleem verhelpen. KAN, niet ZAL.

Jan

On Fri, 4 Nov 2005 20:35:11 +0100, Jan De Luyck
<jan.geene.spam.aub@kcore.org> wrote:

>> kan er mij iemand eens uitleggen waarom een server moet rebooten als
>> er langere tijd een hogere load is ?
>
>Omdat je op dat moment er kan van uitgaan dat er een proces hangt/...
>
>Een reboot kan op dat moment het probleem verhelpen. KAN, niet ZAL.

ik dact dat je met kill afzonderlijke processen kon killen zonder dat
je een hele server moet rebooten. ;-)

On 2005-11-04, Diva wrote:
> On Fri, 4 Nov 2005 20:35:11 +0100, Jan De Luyck
><jan.geene.spam.aub@kcore.org> wrote:
>
>>> kan er mij iemand eens uitleggen waarom een server moet rebooten als
>>> er langere tijd een hogere load is ?
>>
>>Omdat je op dat moment er kan van uitgaan dat er een proces hangt/...
>>
>>Een reboot kan op dat moment het probleem verhelpen. KAN, niet ZAL.
>
> ik dact dat je met kill afzonderlijke processen kon killen zonder dat
> je een hele server moet rebooten. ;-)

Hahah jah klopt wel :P Maar op deze manier schakel je gelijk enkele mogelijke
dependencies uit die anders misschien nog voor problemen kunnen zorgen.

Een andere piste is als je bvb een DoS attack te verduren krijgt - je reboot de
machine en mogelijks zien ze dat 'ie offline is en ze ermee stoppen... who
knows. De ware reden moet je aan Lazernet vragen tuurlijk.

Jan

In article <436ba768$0$10959$ba620e4c@news.skynet.be>,
"Rudy Ryckewaert" <rudy@eurostadion.be> wrote:

> De reden is
> een klant die via scripts een behoorlijk aantal SPAM mailings wilde
> versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
> bleven komen, raakte de server steeds aan een te hoge load waardoor deze
> (veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze server
> te vervangen.

Je klant stuurt spam, maar de mails blijven komen...

Kan je dat eens verduidelijken, want daar ben ik te simpel voor, vrees
ik.


En "veiligheidshalve" rebooten vanwege overload?

Weerom is mijn verstand niet in staat deze manier van werken te
grokken...

--
Watch it! My killfilter really kills!
<http://www.objectief.be/>

In article <fops33-9g4.ln1@precious.kcore.org>,
Jan De Luyck <jan.geene.spam.aub@kcore.org> wrote:

> On 2005-11-04, Diva wrote:
> > On Fri, 4 Nov 2005 19:24:35 +0100, "Rudy Ryckewaert"
> ><rudy@eurostadion.be> wrote:
> >
> >>De Obelix server kende de afgelopen weken inderdaad problemen. De reden is
> >>een klant die via scripts een behoorlijk aantal SPAM mailings wilde
> >>versturen, hetgeen door de server geblokkeerd wordt. Maar omdat de mails
> >>bleven komen, raakte de server steeds aan een te hoge load waardoor deze
> >>(veiligheidshalve) rebootte. Er werd onlangs dan ook voorzien om deze
> >>server
> >
> > kan er mij iemand eens uitleggen waarom een server moet rebooten als
> > er langere tijd een hogere load is ?
>
> Omdat je op dat moment er kan van uitgaan dat er een proces hangt/...
>
> Een reboot kan op dat moment het probleem verhelpen. KAN, niet ZAL.
>
> Jan

Inderdaad. Elke keer dat de tank van mijn auto leeg is, laat ik ook de
carbuteur kuisen...

--
Watch it! My killfilter really kills!
<http://www.objectief.be/>

"Rudy Ryckewaert" <rudy@eurostadion.be> schreef in bericht
news:436ba768$0$10959$ba620e4c@news.skynet.be...
>
> Betreft de compensatie loopt er nu een actie, dewelke (zoals beloofd) 3
> dagen geleden naar alle klanten is gemaild. Zij vinden deze actie ook
> terug in het nieuws van hun controlepaneel.
>
> MVG
> Rudy Ryckewaert
> zaakvoerder
> LazerNet bvba

Is dat deze compensatie?
"Spetterende actie : GRATIS BE DOMEINEN !!!
Beste klant,
Vanaf 1 november tot 31 januari 2006 betaalt u bij LazerNet 0 euro in plaats
van 10 euro voor de registratie van nieuwe domeinnamen!
Gebruik het online bestelformulier op http://www.lazernet.be of stuur een
e-mail naar sales@lazernet.be. Op uw factuur zal 0.0 euro aangerekend worden
voor de registratie van uw BE domeinnaam. Als u enkel een BE domeinnaam
registreert zonder extra diensten, zal u uiteraard geen factuur ontvangen.
De registratie is volledig gratis en vrijblijvend gedurende het eerste jaar.
Aan het einde van het eerste jaar heeft u de mogelijkheid de domeinnaam te
verlengen, of op te zeggen zonder extra kosten. Er zijn dus nergens
verborgen kosten of addertjes onder het gras!
Binnenkort volgen nog meer acties voor onze trouwe klanten."

Mmm, sta me toe Rudy te zeggen dat dit niet echt een compensatie is...

Bij RealRoot kan je ook een gratis .be domeinnaam reggen zonder dat daar
sprake is van compensatie ( http://reg.registratie-domein.be/ )...

Onze site is eergisteren vanaf 14 uur tot gisteren 14 uur offline geweest...
Ik begrijp niet dat de probleemserver niet vroeger werd vervangen want geeft
toe, de laatste maanden was het wel altijd iets met de Obelix server.

aXs schreef:

> Is dat deze compensatie?
> "Spetterende actie : GRATIS BE DOMEINEN !!!

> Mmm, sta me toe Rudy te zeggen dat dit niet echt een compensatie is...
>
> Bij RealRoot kan je ook een gratis .be domeinnaam reggen zonder dat daar
> sprake is van compensatie ( http://reg.registratie-domein.be/ )...
>
Die aktie is overal, is daarom dat je elders ook kan lezen dat de helft
van .be in 2 dagen ingenomen is door Nederlanders.....

"Randal" <randal@geenmail.com> schreef in bericht
news:dki4qh$1pnm$1@nl-news.euro.net...
> aXs schreef:
>
>> Is dat deze compensatie?
>> "Spetterende actie : GRATIS BE DOMEINEN !!!
>
>> Mmm, sta me toe Rudy te zeggen dat dit niet echt een compensatie is...
>>
>> Bij RealRoot kan je ook een gratis .be domeinnaam reggen zonder dat daar
>> sprake is van compensatie ( http://reg.registratie-domein.be/ )...
>>
> Die aktie is overal, is daarom dat je elders ook kan lezen dat de helft
> van .be in 2 dagen ingenomen is door Nederlanders.....

de GRATIS domeinen zijn zeker NIET overal hoor. De meesten verrekenen gewoon
6 euro korting. Enkel een aantal Agents die sowieso al goedkoop waren hebben
de actie dan maar meteen gratis gemaakt.
Zoals gezegd zijn er nog meerdere zaken gepland, maar deze nieuwsgroep is
niet het middel om dat allemaal te gaan verkondigen, want dan gaat het meer
op ongewenste reclame lijken.

MVG
RR

Het is logisch dat de helft van de domeinnamen door Hollanders is
ingepalmd, omdat bepaalde collegas daar reclame gaan maken met de
boodschap: "Registreer je zot voo 0 Euro".

Wij hebben besloten maximaal 5 domeinnamen per klant gratis te gaan
geven. Op een bepaald Nederlands forum zie je Nederlanders die er prat
op gaan minstens 35 namen te hebben geregged de eerste uren. Als Host
moet je toch een bekke je verantwoordelijkheid nemen!

"Rudy Ryckewaert" <rudy@eurostadion.be> schreef in bericht
news:436dc1f5$0$31252$ba620e4c@news.skynet.be...
>
> de GRATIS domeinen zijn zeker NIET overal hoor. De meesten verrekenen
> gewoon 6 euro korting. Enkel een aantal Agents die sowieso al goedkoop
> waren hebben de actie dan maar meteen gratis gemaakt.
> Zoals gezegd zijn er nog meerdere zaken gepland, maar deze nieuwsgroep is
> niet het middel om dat allemaal te gaan verkondigen, want dan gaat het
> meer op ongewenste reclame lijken.
>

De GRATIS domeinen zijn echt wel bijna overal (combell.be, alfahosting.be,
enz ...) dus dit als compensatie geven aan je klanten is zwakjes. Het kost
je bovendien als hoster helemaal niks. Het is dus DNS.be die jouw
compensatie betaald

--
SIMBA