Onderwerp: Inkijk in Hetzner datacenter

Hier is een video over het Hetzner datacenter in Falkenstein met een hele hoop desktop pc's.

Gaaf! Een heel datacenter zonder een enkele server. Het zijn allemaal consumentenspullen.
En dat past wel bij de ervaringen met Hertzner. Het is niet slecht, maar goed is echt iets anders.

Goed dat ze er geen geheim van maken. Ik bewaar het filmpje ook even voor als een klant/prospect weer eens vraagt waarom het bij ons meer kost. Het is altijd lastig uitleggen dat goede spullen meer kosten, beter presteren en minder kosten omdat er minder tijd nodig is voor het oplossen van problemen omdat je gewoon minder problemen hebt.

Prachtig voorbeeld van Peanuts en monkeys en leuk voor een gameserver natuurlijk, maar om er productiesystemen op te draaien....

Leuk om te zien dat er inderdaad bedrijven zijn die gewoon open zijn over hun bedrijf.
Dat vind ik persoonlijk meetellen wanneer je voor een dienst kiest.

Ik heb geen ervaring verder met dit bedrijf.

Gaaf om te zien in ieder geval!

Wel mooi om te zien en er is echt wel over nagedacht, vooral de eigen hardware die ze hebben.

Oorspronkelijk geplaatst door Tuxis_IE

Gaaf! Een heel datacenter zonder een enkele server. Het zijn allemaal consumentenspullen.
En dat past wel bij de ervaringen met Hertzner. Het is niet slecht, maar goed is echt iets anders.

Goed dat ze er geen geheim van maken. Ik bewaar het filmpje ook even voor als een klant/prospect weer eens vraagt waarom het bij ons meer kost. Het is altijd lastig uitleggen dat goede spullen meer kosten, beter presteren en minder kosten omdat er minder tijd nodig is voor het oplossen van problemen omdat je gewoon minder problemen hebt.

Prachtig voorbeeld van Peanuts en monkeys en leuk voor een gameserver natuurlijk, maar om er productiesystemen op te draaien....

Verschil is dat Hetzner niet gewoon even wat boardjes ergens online besteld, maar Asus e.d. (welke ook gewoon een serverline moederborden hebben), speciaal een lijn voor Hetzner heeft. Verder hebben ze goed over zaken nagedacht, dus niet "even" een rack volgepropt met wat goedkoop spul.

Harddisks los rechtop staand testen, een keer stoten en je hebt letterlijk een domino effect.

Oorspronkelijk geplaatst door mgielissen

Harddisks los rechtop staand testen, een keer stoten en je hebt letterlijk een domino effect.

Prima test ;-) maar ze zijn ook aan het testen met eigen gebouwde craddles, dus ook daar lijken ze wel over na te denken.

Uiteindelijk zie ik hier niet zo een grote verschillen met OVH, Google, Facebook, Microsoft, AWS, ... die ook allemaal een gelijkaardig concept gebruiken van eigen hardware in eigen racks. En ik denk dat er ook nog veel andere grote spelers op de markt zijn die zo een concept gebruiken maar er niet zo open over zijn. En wat maakt het uiteindelijk ook uit voor de cloud, of je nu een epyc server besteld en die zit in een 1u dell/hp server of in een custom motherboard met custom case zolang de hardware hetzelfde doet maakt het voor de klant niet uit.

Wat je niet ziet in de film van Roman is dat hetzner in de gebouwen er naast ook wel degelijk 19" racks heeft met colocation en high end hardware voor eindklanten.

Oorspronkelijk geplaatst door Tuxis_IE

Gaaf! Een heel datacenter zonder een enkele server. Het zijn allemaal consumentenspullen.
En dat past wel bij de ervaringen met Hertzner. Het is niet slecht, maar goed is echt iets anders.

Goed dat ze er geen geheim van maken. Ik bewaar het filmpje ook even voor als een klant/prospect weer eens vraagt waarom het bij ons meer kost. Het is altijd lastig uitleggen dat goede spullen meer kosten, beter presteren en minder kosten omdat er minder tijd nodig is voor het oplossen van problemen omdat je gewoon minder problemen hebt.

Prachtig voorbeeld van Peanuts en monkeys en leuk voor een gameserver natuurlijk, maar om er productiesystemen op te draaien....

Maar wat zeg je dan als blijkt dat Hetzner 99.9% uptime garandeert en ook haalt?

Verder ben je best wel denigrerend/negatief over ze terwijl ze een prima dienst leveren tegen een prima prijs. Hoezo get monkeys? Wat vind jij dat hun diensten money waardig maakt?

Ik ga het proberen uit te leggen, dus lees het helemaal. Wellicht wordt duidelijk waarom ik het een prachtig bedrijf vind maar het uit ervaring monkey's levert.

Maar wat zeg je dan als blijkt dat Hetzner 99.9% uptime garandeert en ook haalt?

Uptime, altijd leuk. Wanneer vind de leverancier dat het up is? Je het alsnog over 8 uur per jaar die niet perse aaneengesloten hoeft te zijn. Als de PC het doet, maar hij is helemaal leeg, want stuk geweest, hebben zij dan de uptime gehaald? En vervangen is voor hen geen probleem. PC zegt PEOF. Alstublieft, hier hebt u een lege nieuwe. Want dat gedeelte hebben ze goed voor elkaar. Apparatuur wordt best snel vervangen.

Je kan er overigens ook servers huren met Xeons en Epyc CPU's maar ik ben wel bang dat dat de aanpak dan weer hetzelfde blijft en dan zijn ze niet meer zo voordelig.

Wat vind jij dat hun diensten monkey waardig maakt?

Ze gebruiken ook consumentenspullen die ze het predicaat server geven. De moederborden (zoek het typenummer maar eens op), CPU's (idem), disken (uit ervaring) zijn consumer grade. Maar hun website praat over servers. En met alle respect, er zit wel degelijk verschil in performance en beschikbaarheid van serverapperatuur en consumentenapparatuur.

We hebben voldoende beheer gedaan op Hertzner "servers" om ermee te stoppen. Disken vaak stuk, "servers" die niet presteren en voedingen stuk. En dan gaat je server uit of werkt niet goed. En dan wordt je server wel snel gerepareerd, dat is zeker het probleem niet, maar daarna mag je toch echt ook zelf aan het werk om te zorgen dat het weer gaat werken. En dan ga je proberen dat probleem op te lossen door redundantie aan te schaffen die je normaal gesproken niet nodig hebt. En dan is het maar de vraag of het nog zo voordelig is. Problemen oplossen die je niet hoeft te hebben als je de juiste oplossing hebt is zelden voordelig. Maar de server doet het, uptime gehaald.
Het punt is, je wil helemaal niet dat het stuk gaat of dat je problemen op moet lossen die je niet hoeft te hebben, want daar ben je heel druk mee. Tijd is geld, zeker als je meer servers in beheer krijgt.

Wist je bijvoorbeeld dat Ceph disken stuk maakt? Nee, ik ook niet. Bij Hetzner vallen de disken bij bosjes uit als je Ceph erop draait. En wellicht kun je andere disken doen enzo, behalve als het aan de koeling ligt, maar daar wil je precies niet mee bezig zijn. Dat gevogel. Gewoon goede spullen, goede datacenters en niet op zoek naar de grens van laagste prijs en kwaliteit. Als je die bereikt is dat echt niet leuk of efficient.

Dus jij en ik snappen dat het best goed kan werken en waarvoor je het kan gebruiken, maar dat je rekening moet houden met wat vaker dingetjes en soms dingen. En als je geen dingetjes hebt, dan heb je geluk, want het is niet by design. En dat schaalt dus niet. Want bij 1000 servers heb je dan gegarendeerd regelmatig feest (wij hadden het bij 10 servers al) En ook dan kan pima zijn maar niet in productie IMHO.

Waar wij last van hebben:
Het echte probleem: Waarom kost bij Tuxis een Dedicated Proxmox Server met 8 cores, 128GB geheugen en 3,5 TB SSD € 290,- per maand en bij Hetzner maar € 151,-? Tuurlijk, Tuxis levert een Proxmox licentie, monitoring, onderhoud en beheer, maar moet dat € 139,- per maand kosten?
De meeste mensen lezen (vooral ook omdat het op de website staat): een SERVER met 8 cores, 128 Gbyte geheugen en 2x 3TB datacneter edition SSD's voor € 151,-! En ze hebben ook Xeons en Epycs! Wow, die neem ik later wel. En dat is best vervelend. Ik krijg hier al nauwelijks uitgelegd dat het toch echt minder is en dat wij dat niet gaan beheren. We houden van onze nachtrust. Want de XEONS en Epycs worden daar weinig gehuurd, want wat maakt dat nou weer uit.

Wat zij NIET lezen is: U huurt een PC die 25% kost van de prijs van een server met de kwaliteit van een thuisPC, enkele voeding en met bijbehorende lagere prestaties die in een prima, maar niet optimaal datacenter staat. Wéér uitleggen waarom wij echt geen spullen daar gaan beheren want als je veel afneemt merk je wel degelijk dat het minder is.

Ik hoop dat ik enigszins duidelijk heb kunnen maken waarom dat ik niet zo enthiousiast wordt van het hele verhaal. Knap wat ze als bedrijf behalen.
Het woord server op de website is echt misleidend.

Oorspronkelijk geplaatst door Tuxis_IE

Ik ga het proberen uit te leggen, dus lees het helemaal. Wellicht wordt duidelijk waarom ik het een prachtig bedrijf vind maar het uit ervaring monkey's levert.


Uptime, altijd leuk. Wanneer vind de leverancier dat het up is? Je het alsnog over 8 uur per jaar die niet perse aaneengesloten hoeft te zijn. Als de PC het doet, maar hij is helemaal leeg, want stuk geweest, hebben zij dan de uptime gehaald? En vervangen is voor hen geen probleem. PC zegt PEOF. Alstublieft, hier hebt u een lege nieuwe. Want dat gedeelte hebben ze goed voor elkaar. Apparatuur wordt best snel vervangen.

Je kan er overigens ook servers huren met Xeons en Epyc CPU's maar ik ben wel bang dat dat de aanpak dan weer hetzelfde blijft en dan zijn ze niet meer zo voordelig.


Ze gebruiken ook consumentenspullen die ze het predicaat server geven. De moederborden (zoek het typenummer maar eens op), CPU's (idem), disken (uit ervaring) zijn consumer grade. Maar hun website praat over servers. En met alle respect, er zit wel degelijk verschil in performance en beschikbaarheid van serverapperatuur en consumentenapparatuur.

We hebben voldoende beheer gedaan op Hertzner "servers" om ermee te stoppen. Disken vaak stuk, "servers" die niet presteren en voedingen stuk. En dan gaat je server uit of werkt niet goed. En dan wordt je server wel snel gerepareerd, dat is zeker het probleem niet, maar daarna mag je toch echt ook zelf aan het werk om te zorgen dat het weer gaat werken. En dan ga je proberen dat probleem op te lossen door redundantie aan te schaffen die je normaal gesproken niet nodig hebt. En dan is het maar de vraag of het nog zo voordelig is. Problemen oplossen die je niet hoeft te hebben als je de juiste oplossing hebt is zelden voordelig. Maar de server doet het, uptime gehaald.
Het punt is, je wil helemaal niet dat het stuk gaat of dat je problemen op moet lossen die je niet hoeft te hebben, want daar ben je heel druk mee. Tijd is geld, zeker als je meer servers in beheer krijgt.

Wist je bijvoorbeeld dat Ceph disken stuk maakt? Nee, ik ook niet. Bij Hetzner vallen de disken bij bosjes uit als je Ceph erop draait. En wellicht kun je andere disken doen enzo, behalve als het aan de koeling ligt, maar daar wil je precies niet mee bezig zijn. Dat gevogel. Gewoon goede spullen, goede datacenters en niet op zoek naar de grens van laagste prijs en kwaliteit. Als je die bereikt is dat echt niet leuk of efficient.

Dus jij en ik snappen dat het best goed kan werken en waarvoor je het kan gebruiken, maar dat je rekening moet houden met wat vaker dingetjes en soms dingen. En als je geen dingetjes hebt, dan heb je geluk, want het is niet by design. En dat schaalt dus niet. Want bij 1000 servers heb je dan gegarendeerd regelmatig feest (wij hadden het bij 10 servers al) En ook dan kan pima zijn maar niet in productie IMHO.

Waar wij last van hebben:
Het echte probleem: Waarom kost bij Tuxis een Dedicated Proxmox Server met 8 cores, 128GB geheugen en 3,5 TB SSD € 290,- per maand en bij Hetzner maar € 151,-? Tuurlijk, Tuxis levert een Proxmox licentie, monitoring, onderhoud en beheer, maar moet dat € 139,- per maand kosten?
De meeste mensen lezen (vooral ook omdat het op de website staat): een SERVER met 8 cores, 128 Gbyte geheugen en 2x 3TB datacneter edition SSD's voor € 151,-! En ze hebben ook Xeons en Epycs! Wow, die neem ik later wel. En dat is best vervelend. Ik krijg hier al nauwelijks uitgelegd dat het toch echt minder is en dat wij dat niet gaan beheren. We houden van onze nachtrust. Want de XEONS en Epycs worden daar weinig gehuurd, want wat maakt dat nou weer uit.

Wat zij NIET lezen is: U huurt een PC die 25% kost van de prijs van een server met de kwaliteit van een thuisPC, enkele voeding en met bijbehorende lagere prestaties die in een prima, maar niet optimaal datacenter staat. Wéér uitleggen waarom wij echt geen spullen daar gaan beheren want als je veel afneemt merk je wel degelijk dat het minder is.

Ik hoop dat ik enigszins duidelijk heb kunnen maken waarom dat ik niet zo enthiousiast wordt van het hele verhaal. Knap wat ze als bedrijf behalen.
Het woord server op de website is echt misleidend.

Jij houd een eigen interpretatie erop na over wat een server is. En daarom vind jij het dat ze monkeys leveren. Een server is niets meer dan hardware wat content serveert / beschikbaar stelt. Of je dat op een IBM Mainframe doet, op een Dell PowerEdge doet of op een Raspberry doet, het blijft een server.

Het is aan de klant om te kiezen of je dat op enterprise-grade hardware wilt doen of op consumenten-grade hardware.

Hetzner kiest er voor om voornamelijk servers aan te bieden op consumenten-grade hardware en kennelijk is daar een heel groot doelgroep voor. Daar is niets misleidend aan. Jammer dat je denigrerend over het bedrijf spreekt terwijl ze erg succesvol zijn.

Ik heb een aantal Ceph clusters in beheer gehad, sommige type schijven gaan eerder stuk dan andere, maar dat heeft niets met Hetzner te maken. Als je Ceph omgevingen in beheer hebt gehad weet je heel erg goed het belang van de schijven, die kies je speciaal uit om te dienen als OSD of als WAL/DB. Ceph ga je niet klakkeloos deployen op hardware wat je niet kent of van te voren niet hebt uitgezocht.

En laat ik je wat verklappen. Ik heb in het verleden bij een groot hosting provider gewerkt met duizenden servers en honderdduizenden schijven. Een deel van de servers maakte gebruik van consumer-grade schijven en een deel enterprise-grade. Het was echt niet zo dat consumenten-grade schijven er bij bosjes neervielen en de enterprise-grade schijven niet.

Wat garanderen jullie als uptime? Je doet heel makkelijk over die 8 uur per jaar, maar dat is heel gebruikelijk. Welke partij op WHT garandeert een hogere uptime? Ik denk geen enkele.

Oorspronkelijk geplaatst door xaban

Jij houd een eigen interpretatie erop na over wat een server is. En daarom vind jij het dat ze monkeys leveren. Een server is niets meer dan hardware wat content serveert / beschikbaar stelt. Of je dat op een IBM Mainframe doet, op een Dell PowerEdge doet of op een Raspberry doet, het blijft een server.

Het is aan de klant om te kiezen of je dat op enterprise-grade hardware wilt doen of op consumenten-grade hardware.

Hetzner kiest er voor om voornamelijk servers aan te bieden op consumenten-grade hardware en kennelijk is daar een heel groot doelgroep voor. Daar is niets misleidend aan. Jammer dat je denigrerend over het bedrijf spreekt terwijl ze erg succesvol zijn.

Ik snap je reactie hierop, maar ik kan me wel vinden in de reactie van Ronald en dat is puur omdat je het bekijkt vanaf je klant en die verschilt tussen Hertzner en Tuxis en wellicht vele andere hostingpartijen.

Geloof helemaal dat er markt is voor de diensten die Hertzner levert aan klanten, maar dit zullen mogelijk meer klanten zijn in de hobby sfeer of waar hoge beschikbaarheid niet van belang is.

Tuxis bedient klanten die hoge beschikbaarheid vereisen en levert een ander soort omgeving aan haar klanten.

Helaas kom je wel eens mensen tegen die de kosten gaan vergelijken van Tuxis en Hertzner en dan zeggen waarom kan het in Duitsland voor minder?
Dan snap ik als je bij Hertzner ziet server en de lage prijs dat je dan denkt ik ben een dief voor mijn eigen portemonnee en de discussie start over de kosten. Puur op de vergelijking server == server, terwijl de ene server eigenlijk een desktop ingericht als server is, maar dat je dit niet ziet op de site. Kortom je kan geen eerlijke vergelijking maken.

Gebruiken van consumer-grade schijven is een keuze, maar het zou wel fair zijn als iedereen dat meldt om de eerlijke vergelijking te kunnen maken.

Hogere uptime dan 99,9% is meestal middels een SLA, niet basis dienstverlening. Puur omdat 99,9% volstaat voor 95% van de klanten

Oorspronkelijk geplaatst door stefantriep

Ik snap je reactie hierop, maar ik kan me wel vinden in de reactie van Ronald en dat is puur omdat je het bekijkt vanaf je klant en die verschilt tussen Hertzner en Tuxis en wellicht vele andere hostingpartijen.

Geloof helemaal dat er markt is voor de diensten die Hertzner levert aan klanten, maar dit zullen mogelijk meer klanten zijn in de hobby sfeer of waar hoge beschikbaarheid niet van belang is.

Tuxis bedient klanten die hoge beschikbaarheid vereisen en levert een ander soort omgeving aan haar klanten.

Helaas kom je wel eens mensen tegen die de kosten gaan vergelijken van Tuxis en Hertzner en dan zeggen waarom kan het in Duitsland voor minder?
Dan snap ik als je bij Hertzner ziet server en de lage prijs dat je dan denkt ik ben een dief voor mijn eigen portemonnee en de discussie start over de kosten. Puur op de vergelijking server == server, terwijl de ene server eigenlijk een desktop ingericht als server is, maar dat je dit niet ziet op de site. Kortom je kan geen eerlijke vergelijking maken.

Gebruiken van consumer-grade schijven is een keuze, maar het zou wel fair zijn als iedereen dat meldt om de eerlijke vergelijking te kunnen maken.

Hogere uptime dan 99,9% is meestal middels een SLA, niet basis dienstverlening. Puur omdat 99,9% volstaat voor 95% van de klanten

Indien het Enterprise schijven zijn geeft Hetzner dat gewoon aan door middel van: Ent.HDD of Enterprise HDD.
Indien het om Datacenter SSD gaat geeft Hetzner dat ook gewoon aan door middel van: SSD Datacenter Edition.

Verder is het heel duidelijk of je een Xeon CPU krijgt of niet. Daar maken ze geen geheim van en verbergen ze verder ook niet. Ook kan je gewoon filteren op ECC geheugen, dus daar zijn ze ook transparant in.

Daarnaast geeft Tuxis aan alsof 8 uur veel is, maar dat is gewoon gebruikelijk en zelfs aan de hoge kant van garantie, menig provider garandeert een lagere uptime. Vandaar dat ik vroeg wat Tuxis zelf garandeert. Om het in perspectief te plaatsen.

Een Rolls Royce zegt toch ook niet 'pay peanuts get monkeys' over de goedkopere merken? Dat is toch niet logisch?

Het is een ander verhaal als ze enkel met datacenter/enterprise producten adverteren maar vervolgens consumer-grade hardware verkopen. Maar dat doen ze niet.

Oorspronkelijk geplaatst door stefantriep

Helaas kom je wel eens mensen tegen die de kosten gaan vergelijken van Tuxis en Hertzner en dan zeggen waarom kan het in Duitsland voor minder?
Dan snap ik als je bij Hertzner ziet server en de lage prijs dat je dan denkt ik ben een dief voor mijn eigen portemonnee en de discussie start over de kosten. Puur op de vergelijking server == server, terwijl de ene server eigenlijk een desktop ingericht als server is, maar dat je dit niet ziet op de site. Kortom je kan geen eerlijke vergelijking maken.

Tja dan kun je dit ook in alles doortrekken he, waarom is benzine in Luxemburg goedkoper, waarom is coca-cola in Frankrijk goedkoper, waarom is op restaurant gaan in Duitsland goedkoper.

Er zijn wel meer redenen waarom datacenters in Duitsland (en Frankrijk) goedkoper zijn dan in Nederland/Belgie kijk maar naar taxen/belasting, stroomprijzen, .... Uiteindelijk als voor de klant de kosten een belangrijke reden zijn dan maakt het voor hun niet uit waarom of waar het staat. Zoals eerder al aangegeven heeft hetzner ook gewoon 19" enterpise servers en custom oplossingen die daarom niet noodzakelijk goedkoper zijn dan andere providers. Ze steken ook niet onder stoelen of banken wat ze gebruiken en is het nog steeds aan de consument om ook wat vooronderzoek te doen voor ze iets bestellen. Het zou een hele andere zaak worden moest je als consument tegen hetzner of een andere provider zeggen ik wil het volgende hosten met xxx budget wat stel je voor en je krijgt een "consumenten" server voor de prijs van een enterprise server, maar dat is dus zover ik weet niet het geval.

En ja ik snap uiteraard ook de frustratie om het woord server te gebruiken bij consumenten hardware, maar daar is op zich niks verkeerd mee, je zou ook als concurrent/provider kunnen opteren om zelf overal gebruik te maken van "high-end enterprise server" of "high-end enterprise hardware".

En om het over uptime te hebben, ik denk dat bij geen enkele provider die enkel dedicated levert (non managed dus) je moet/kan verwachten dat bij hardware falen zij hun zorgen gaan maken over jouw data, want dat is immers jouw eigen zaak om backups of redundantie of RDS te hebben. En ja ze halen dus hun uptime door gewoon te zeggen "oh das naar, maar hier een volledig nieuwe hdd/sdd/server/..." en dat jij aan de slag moet om de software te fixen.

Even een kleine side-note, je moet tegenwoordig niet denken omdat je enkel high-end enterprise hardware met SLA vanuit de fabrikant/vendor hebt dat je daarom ook safe zit. Ik ken verhalen van beheerders die voor grote providers werken en meerdere eigen datacenters hebben en enkel cisco, hpe, ibm/lenovo gebruiken dat zij ondertussen al 10 weken aan het wachten zijn op nieuwe mobo's voor enkele servers en dat de levering van nieuwe servers ten vroegste Q1 2022 is (ondanks hun SLA contracten). Dus dan kun je je ook afvragen wat je dan bent met high-end enterprise met SLA contacten als ze het toch niet kunnen waarmaken op dit moment.

Oorspronkelijk geplaatst door The-BosS

Even een kleine side-note, je moet tegenwoordig niet denken omdat je enkel high-end enterprise hardware met SLA vanuit de fabrikant/vendor hebt dat je daarom ook safe zit. Ik ken verhalen van beheerders die voor grote providers werken en meerdere eigen datacenters hebben en enkel cisco, hpe, ibm/lenovo gebruiken dat zij ondertussen al 10 weken aan het wachten zijn op nieuwe mobo's voor enkele servers en dat de levering van nieuwe servers ten vroegste Q1 2022 is (ondanks hun SLA contracten). Dus dan kun je je ook afvragen wat je dan bent met high-end enterprise met SLA contacten als ze het toch niet kunnen waarmaken op dit moment.

Dit heet in de meeste gevallen overmacht door covid / chips die niet voorradig zijn en herken ik helaas ook op dit moment, maar dan voor een nieuwe specifieke server voor een klant. Het is vervelend, maar lost zich wel op in 2022 gok ik.