Onderwerp: Meten is weten... of niet?

Voor mijn aanbieding was ik wel eens benieuwd hoe dat nou zit met performance (want daar vraagt TS specifiek om). Daarom onderstaande totaal niet wetenschappelijke test. Uitgevoerd op een oude Mac via het meest goedkope ADSL lijntje. De snelheden van de drie dezelfde installaties liggen erg dicht bij elkaar en wisselen tussen meestal minder dan 3 seconde tot soms wel 5 seconde (waarschijnlijk netwerk oorzaak). De installatie van Randy is consequent de snelste. De installatie van Ber|Art is afwijkend en is ook 200kB groter.

Naar aanleiding van de berichten in http://www.webhostingtalk.nl/aanbied...o-hosting.html (Magento hosting) deed t.bloo een meting van de sites. Dit bericht werd afgesplitst van de aanbiedingsthread. Opinies en commentaar zijn welkom.

zou je dezelfde test willen uitvoeren op www.boumanonline.nl ? ben benieuwd hoe die het doet tussen deze 4

Moest vandaag steeds lang wachten (exim debug klusje) en had daarbij de beschikking over de zelfde opstelling als de eerdere testen. Daarom nog maar wat extra sites gegoogled en de testen wat breder aangepakt. Nog steeds een zeer zwakke test natuurlijk, met name omdat dit netwerk heel erg wisselt in de loop van de tijd. Maar het geeft wel een algemeen beeld.

Code:

url                           1      2      3      4      5    som/5
magento.dommelhosting.nl   3,36   2,76   2,63   3,14   4,43      3,3
magento.ispi.nl            3,53   3,36   4,06   2,97   3,30      3,4
magento.webwinkelhost.nl   4,76   4,35   4,44   4,44   4,18      4,4
www.boumanonline.nl        4,63   4,81   5,06   4,37   5,11      4,8
www.medienhof.net          5,17   4,55   4,70   5,02   4,71      4,8
www.poncha.be              5,74   5,59   5,05   5,13   5,15      5,3
demo.magentocommerce.com   5,68   6,54   6,49   6,59   6,72      6,4
www.grandcruexpertise.eu   8,96   8,53   8,68   8,78   8,78      8,7
www.printed-t-shirts.eu    8,94  15,55  16,76  14,06  12,16     13,5

Wanneer: zaterdag 13 december 2008, circa 17:00 uur
Apparatuur: iMac PPC 2GHz, 1GB
Software: OS X 10.4.11, Safari 3.2.1
Netwerk: ADSL Telfort 2Mbit down 1Mbit up, 802.11b FON router
Werkwijze: laad site eerste keer, klik op refresh en noteer "total time" van de web inspector

Disclaimer: http://magento.dommelhosting.nl staat op een van mijn eigen webservers (standaard DirectAdmin setup, 1.8GHz Opteron 144, 2GB DDR, linux RAID-1) die in het weekend niet veel te doen heeft. De andere sites staan vast en zeker op servers die veel meer gebruikt worden.

Oneerlijke meting Erwin, jij staat eerste. Dat kan niet! ** pakt een biertje en gaat zijn verdriet verdrinken **. Okay. Ook een biertje richting 040...

Goed dat je een nieuwe meting gestart hebt. Bij de vorige draaide PHP nog als Apache Module. Inmiddels is dit netjes omgezet naar FastCGI. (Ik heb het nog niet zo op mod_ruid, maar ieder zijn voorkeuren). Daarmee is ook alle caching (Eaccellerator) vervallen. Ik weet nog niet wat ik ga gebruiken. APC, XCache, etc. Ook het tunen van alles moet nog even opnieuw. Iemand suggesties/ervaringen voor een cache module? (Geen EA, deze werkt niet in een CGI-omgeving)

Toch interessant om een dergelijk overzicht te zien. Toch zal alles iets eerlijker moeten. Ik zie verschillende soorten demo's en winkels. Eigenlijk zou een ieder eens standaard installatie (1.1.8) met demo-artikelen moeten hebben wil je echt een goed vergelijk willen maken.

uren zitten pielen om eerste te worden Nee, dat is nu juist het gekke, ik deed destijds voor die aanbieding dat testje en was hoogst verbaasd dat mijn lichte server het zo veel beter deed dan al die mensen die gevirtualiseerde, geloadbalancete, gescheiden, multicorende, geoptimaliseerde en wat-niet-al servers gebruiken. Het lijkt er op dat onder load Magento gewoon altijd traag wordt.

Een vast testprotocol is best een goed idee. Misschien kan Ber|Art eens beginnen met het repareren van z'n site? En misschien zijn er nog meer WHT-ers met een standaard Magento demoshop.

PS: ik heet geen Erwin? evengoed thanks voor het biertje

Jullie meten toch gewoon laadtijd? Heeft niet zoveel te maken met de performance van de VPS, daarvoor zijn de verschillen te klein. Dit lijkt meer op front-end engineering: maak de site zo snel mogelijk qua laden, zelfs als het script erachter en plaatjes hetzelfde zijn. Of zie ik het nu fout?

De hoster demowinkels gebruiken allemaal dezelfde (standaard) Magento template dus daar zit er in principe geen verschil tussen rendertijden. Die andere winkels hebben inderdaad een afwijkende template wat de vergelijking minder nuttig maakt omdat dat inderdaad nogal wat kan schelen.

An sich vind ik de vergelijking erg nuttig aangezien de performance van Magento op shared hosting over het algemeen flink wat te wensen over laat. Waar ik bij dit soort vergelijkingen altijd meer in geïnteresseerd ben is in hoeverre de demowinkel representatief is voor de prestaties van het eindproduct. Veel hosters bieden immers zowel shared, VPS of zelfs dedicated oplossingen aan. Ik vind het dan ook netjes dat t.bloo meldt dat het om een server gaat die verder niet zoveel te doen heeft. Ook Randy lijkt de demo niet op een productieserver te hosten (neem aan dat daar geen ongetunede software op draait). Iets waar klanten die op zoek zijn naar een shared hosting pakket dus wel rekening mee moeten houden denk ik.

Heb er weer een. Deze demoshop is wel minder kilobytes dan de andere shops. Verder geen idee of het op een klantenserver draait natuurlijk...

Code:

demo.rackspeed.de          3,73   2,66   3,15   2,80   2,39      2,9

Ik vind de meetmethode ook niet bijster betrouwbaar, maar was gewoon benieuwd hoe snel zo'n shop laadt voor de gemiddelde klant.

de topic is alweer van een tijdje terug, maar ik had hem nooit gezien, vandaar de late reaktie

leuk overzicht, ook leuk om te zien dat de demoshops bovenaan staan (logisch met weinig poespas en met de cache aan), de demoshop van magentocommerce zelf is wat trager vanaf hier omdat hij overseas wordt gehost imo, dat betekent dat boumanonline en medienhof de snelste customs zijn (volgens deze mini test)

MAARRR de cache stond nog uit bij boumanonline! daarom mijn vraag aan dhr. t.bloo, wil je het nog eens doen?

en zullen we allemaal eens een 1.2.0.1 demoshop in online zetten om van elkaar te leren?

Done: mijnmagento.nl

Ben eigenlijk best benieuwd.

ik zal ze zodadelijk eens allemaal nameten, als iemand nog adressen om te testen weet dan neem ik die mee

de testresultaten zijn er

Code:

url                                    1      2      3      4      5      gem
http://magento.dommelhosting.nl       2,73   3,17   2,95   3,23   3,13    3,0
http://magento.ispi.nl                3,70   3,13   3,49   3,19   3,45    3,4
http://magento.ditiseentest.nl        4,08   3,96   4,03   3,59   4,07    3,9
http://demo.liteserver.nl/magento     3,78   4,03   4,29   4,10   3,66    4,0
http://www.boumanonline.nl            5,71   4,28   3,74   4,16   3,94    4,4
http://magento-demo.rackspeed.de      4,36   5,33   4,22   4,41   4,06    4,5
http://demo.magento.xtrahost.co.uk    4,45   4,10   5,22   4,56   4,46    4,6
http://mijnmagento.nl                 4,18   4,64   4,45   5,35   4,71    4,7
http://www.vianetz.com/magento        5,40   5,20   4,62   3,48   4,86    4,7
http://www.printed-t-shirts.eu        6,23   4,54   4,46   4,32   5,37    5,0
http://magento.webwinkelhost.nl       4,72   5,12   5,38   5,13   4,73    5,0
http://www.nubluemagento.co.uk        4,49   7,46   4,50   5,32   4,21    5,2
http://magento.phoenix-medien.de      8,41   5,98   3,68   4,67   3,74    5,3
http://www.poncha.be                  5,60   4,96   5,13   7,70   5,27    5,7
http://www.medienhof.net              5,74   5,09   6,08   6,28   6,11    5,9
http://vps.hhhost.net                 6,25   6,54   6,14   5,80   7,70    6,5
http://www.magentify.com              7,81   5,52   7,83   6,15   6,89    6,8
http://beta.hhhost.net/magento        8,17   5,91   6,00   8,18  10,69    7,8
http://magento.aspirationhosting.com  8,36   7,61   8,66   7,97   7,69    8,1
http://www.grandcruexpertise.eu      10,02   9,56   8,77   9,18   8,87    9,3
http://demo.magentocommerce.com      19,63  21,07  13,57  18,85  18,58   18,3

Oorspronkelijk geplaatst door t.bloo

Disclaimer: http://magento.dommelhosting.nl staat op een van mijn eigen webservers (standaard DirectAdmin setup, 1.8GHz Opteron 144, 2GB DDR, linux RAID-1) die in het weekend niet veel te doen heeft. De andere sites staan vast en zeker op servers die veel meer gebruikt worden.

Geldt dit nog steeds? Of heb je inmiddels de shop naar een productie server geplaatst? Mijnmagento.nl staat op een productie server, echter beperkt in gebruik, maar wel met aantal live shops (quadcore Xeon, 2 GB ram, Raid 1 setup)

Waar test je eigenlijk mee als ik vragen mag? Ben er wel benieuwd naar.

Oorspronkelijk geplaatst door ®on

Waar test je eigenlijk mee als ik vragen mag? Ben er wel benieuwd naar.

Volgens de screenshots met Web Inspector, standaard functie in Safari op OSX