Bekijk Volledige Versie : partiele stroomstoring in NIKHEF
mousehouse
10/03/07, 17:26
Wij kregen deze melding binnen:
Hi,
NIKHEF has a partial power failure.
<knip>
Best regards,
NOC
Geen idee wie daar allemaal last van hebben ;-) maar duidelijk te zien op de AMS-IX page...
Ik vind dat er nogal lax mee wordt omgesprongen:
* ZIP * Quotes verwijderd, zal maar braaf zijn...
Klopt. Had er ook al melding van gekregen. Zelfs de noodvoorziening was niet opgestart. Gelukkig zelf niet zoveel last van tot dusver.
al aantal uurtjes plat :-) fijnnn z'n oud kantoorpand, gewoon alles moven naar echte datacenters ;)
wel schandalig dat "het" AMX-IX in zo'en kraakpand zit in plaats van een DC met deftige stroomvoorzieningen.
damn je mag toch verwachten dat een ams-ix core site (http://www.ams-ix.net/technical/topology.html) goeie stroom backup heeft.....
als je kijkt bij de uptime monitor hier op wht zie je een aantal partijen die er last van hebben.
At the moment we experience some troubles in (part of) our network. This is noticable in packetloss and an unstable network. At this moment we suspect the power-outage currently in Nikhef to be the root-cause of the problems.
Onze apparatuur op NIKHEF draait gewoon door
maar er zijn inderdaad een hele hoop problemen op nikhef
die van AMS-IX blijkbaar niet lol
zo timeout gehad, planet is weer aan het omswitchen, NIKHEF komt weer up, zo lijkt het.
ams-ix draait gewoon, het probleem zit hem bij de members van de ams-ix
Bij mij klapt net pas het een en ander eruit. Blijkbaar wordt er het een en ander geherouteerd.
Nu kan ik helaas niet meer heel Eweka bereiken. Echt erg dat ze die stroom redundantie nog niet hebben verbeterd bij NIKHEF
Bij mij klapt net pas het een en ander eruit. Blijkbaar wordt er het een en ander geherouteerd.
Nu kan ik helaas niet meer heel Eweka bereiken. Echt erg dat ze die stroom redundantie nog niet hebben verbeterd bij NIKHEF
hier hetzelfde
{edit} 17:19 kan er weer op
Bij mij klapt net pas het een en ander eruit. Blijkbaar wordt er het een en ander geherouteerd.
Nu kan ik helaas niet meer heel Eweka bereiken. Echt erg dat ze die stroom redundantie nog niet hebben verbeterd bij NIKHEF
denk een router die een reload heeft gekregen door de outage.
Doet het inderdaad weer. Iedergeval moet er is goed worden nagedacht over de toekomst van AMS-IX en de gehele routering van internet door Nederland door AMS-IX en al hun members. Want het is nu allemaal nog net iets te gevoelig.
Doet het inderdaad weer. Iedergeval moet er is goed worden nagedacht over de toekomst van AMS-IX en de gehele routering van internet door Nederland door AMS-IX en al hun members. Want het is nu allemaal nog net iets te gevoelig.
TC2 + SARA + NIKHEF, als die drie down zijn hebben we idd een groot probleem.
TC2 + SARA + NIKHEF, als die drie down zijn hebben we idd een groot probleem.
In GlobalSwitch draait toch ook nog wat?
Volgns mij als TC2 NIKHEF al uitklapt hebben we al genoeg problemen, http://www.ams-ix.net/graphics/topology1_small.jpg
MediaServe
10/03/07, 18:34
Doet het inderdaad weer. Iedergeval moet er is goed worden nagedacht over de toekomst van AMS-IX en de gehele routering van internet door Nederland door AMS-IX en al hun members. Want het is nu allemaal nog net iets te gevoelig.
Providers kunnen er prima voor kiezen om op meerdere POP's te verbinden met AMS-IX. Als je dat N+1 doet qua capaciteit dan hoef je geen grote problemen te verwachten bij een stroomstoring. Als je er als provider voor kiest om afhankelijk te zijn van 1 POP dan kun je dus wel problemen verwachten.
De AMS-IX is opzich prima redundant, de members helaas niet allemaal :)
Aan de statistieken te zien lijkt alles het weer te doen.
Providers kunnen er prima voor kiezen om op meerdere POP's te verbinden met AMS-IX. Als je dat N+1 doet qua capaciteit dan hoef je geen grote problemen te verwachten bij een stroomstoring. Als je er als provider voor kiest om afhankelijk te zijn van 1 POP dan kun je dus wel problemen verwachten.
De AMS-IX is opzich prima redundant, de members helaas niet allemaal :)
Volgens mij zijn SARA en NIKHEF de druurste Datacenters in NL. Dan kan je wel geld gaan uitgeven aan een backupoplossing, echter waarbetaal je dan die belachelijk hoge prijzen in SARA en NIKHEF voor? Vorig jaar zomer was het al raak met SARA, nu NIKHEF, het zal maar een keer gebeuren dat beide datacenters plat gaan op het zelfde moment.
WI-Hosting
10/03/07, 18:47
Providers kunnen er prima voor kiezen om op meerdere POP's te verbinden met AMS-IX. Als je dat N+1 doet qua capaciteit dan hoef je geen grote problemen te verwachten bij een stroomstoring. Als je er als provider voor kiest om afhankelijk te zijn van 1 POP dan kun je dus wel problemen verwachten.
De AMS-IX is opzich prima redundant, de members helaas niet allemaal :)
Zeg maar gerust, bijna allemaal niet ;)
Tijdens de outage zo'n drop van 50% van de traffic.
Het is niet AMS-IX z'n probleem om de redundancy van meerdere POP's te regelen, maar het zou wel handig zijn om nu langzaam aan wat meer uit te breiden in Core PoP's.
Misschien een idee om een core buiten amsterdam te zetten? Zodat als er een stroomstoring in een groot deel van amsterdam is (had SARA vorig jaar toch?), dat je dan alsnog een PoP hebt die goed door kan draaien :)
[edit] zie ook trebbor's bericht :)
MediaServe
10/03/07, 19:01
Zeg maar gerust, bijna allemaal niet ;)
Inderdaad, ik zou er zelf ook niet zo snel voor kiezen ;)
Je kunt prima backup via transit hebben. Er zijn echter ook providers die niet voldoende backup transit hebben en dus echt afhankelijk zijn van een enkele AMS-IX POP. Beetje dom dus :p
Echter het argument dat AMS-IX iets aan de redundancy moet doen ben ik het niet mee eens. Omdat de AMS-IX juist prima redundant is. Het zijn de providers die er (bewust) voor kiezen om hier geen gebruik van te maken. Wat AMS-IX wel zou kunnen doen is kiezen voor betere datacentra en misschien SARA en NIKHEF langzaam uitfaseren.
Tijdens de outage zo'n drop van 50% van de traffic.
Kijk even naar de Y-axis van de grafiek, hij begint niet bij 0 Mbps :)
Het was 130 Gbps in plaats van 210 Gbps, dus 38% van de traffic weg.
WI-Hosting
10/03/07, 19:33
Echter het argument dat AMS-IX iets aan de redundancy moet doen ben ik het niet mee eens. Omdat de AMS-IX juist prima redundant is. Het zijn de providers die er (bewust) voor kiezen om hier geen gebruik van te maken. Wat AMS-IX wel zou kunnen doen is kiezen voor betere datacentra en misschien SARA en NIKHEF langzaam uitfaseren.
Het gaat niet om het wegvallen van 1 van de locaties waar ik het nu over heb. Ik ben van mening dat ALS er een algehele stroomstoring in amsterdam plaatsvindt (3 jaar geleden in rotterdam ook gebeurd), dat AMS-IX dan wel helemaal plat gaat.
Dus ben daarom wel van mening dat ze minimaal 1 core buiten amsterdam moeten plaatsen.
Daarnaast stimuleert het plaatsen van een core buiten amsterdam ook het gebruik van datacentra buiten amsterdam, wat zich nu snel begint te ontwikkelen.
Kijk even naar de Y-axis van de grafiek, hij begint niet bij 0 Mbps :)
Het was 130 Gbps in plaats van 210 Gbps, dus 38% van de traffic weg.
Ach, 12%, het gaat in ieder geval om flinke hoeveelheden ;)
(...)ALS er een algehele stroomstoring in amsterdam plaatsvindt (3 jaar geleden in rotterdam ook gebeurd), dat AMS-IX dan wel helemaal plat gaat.
Daar zijn toch (diesel)generatoren en contracten met brandstof leveranciers voor?
WI-Hosting
10/03/07, 19:59
Daar zijn toch (diesel)generatoren en contracten met brandstof leveranciers voor?
En dat durf je nog te zeggen na de gebeurtenissen het afgelopen jaar?
Hoeveel datacentra zijn nou getroffen, we zitten toch al rond de 8 ofzo? :)
Die generatoren en contracten werken niet altijd even goed ;)
mousehouse
10/03/07, 20:09
{Offtopic}
Volgens mij is de AMS-IX al bezig om haar core sites uit te breiden en/of verplaatsen. Op de site van euNetworks staat een press-release dat daar een nieuwe core site komt, en ik hoorde over nog een nieuwe core-site in Amsterdam waarvan ik niet weet of het publieke kennis is.
Met een core-node minder zal de AMS-IX niet slechter draaien lijkt me zo, maar als er een access switch uit knalt ben je verder van huis. Daarnaast weet ik niet hoe het binnen NIKHEF geregeld is maar gezien de tarieven aldaar lijkt me dat de meeste providers een 1/4 kast met wat infra spul hebben en verder vrij weinig. Het verbaasd me niets als blijkt dat veel enkel uitgevoerd is op enkele stroomgroepen...
{Ontopic}
Aan het traffic te zien is NIKHEF weer up&running. Ben erg benieuwd wat voor mooi verhaal ze straks hebben waarom ze een strakke 3 uur offline geweest zijn!
Misschien een idee om een core buiten amsterdam te zetten? Zodat als er een stroomstoring in een groot deel van amsterdam is (had SARA vorig jaar toch?), dat je dan alsnog een PoP hebt die goed door kan draaien :)
Dan is het geen AMSterdam Internet eXchange meer he :) En ook dan geldt: als de leden niet aangesloten zijn bij de betreffende PoP, dan heeft het nog steeds geen zin. Het is simpelweg noodzaak dat je als lid zijnde bij 2 of meer PoPs aangesloten bent. Als dat in dit geval al zo was, dan was er uberhaubt vrijwel geen probleem geweest.
Naar mijn mening is het simpelweg de verantwoordelijkheid van de leden van AMSIX om te verbinden vanaf meerdere locaties (bijvoorbeeld Nikhef + GlobalSwitch). Dit probleem ligt niet bij AMSIX, maar bij de leden en in dit geval bij Nikhef.
Nikhef is inderdaad een van de duurste datacentra in Nederland. Dat is uiteraard voornamelijk door de gigantische hoeveelheid vraag op die locactie, vanwege de grote hoeveelheid carriers die hier aanwezig zijn - maar dan nog geldt dat als ze dergelijke hoge bedragen vragen, dat je toch wel zou mogen verwachten dat de stroomvoorziening 100% op orde is.
nja wrm hebben al die DC's dieselgeneratoren en/of UPS'en??? ze werken toch niet dus wrm ze aankopen?
ik hang in ieder geval mijn servers in een datacenter wat in zijn hele bestaan nog geen stroomstoring gehad heeft... en waar maandelijk alles word getest zelfs met een live test (en ja er zijn al eens dingen misgelopen toen maar de backupsystemen hebben alles mooi overgeschakeld. en ALS er al eens een feed wegvalt geen ramp... de STS in onze rack zorgt voor sroom op de servers zonder downtime via de andere feed. zouden ze bij NIKHEF en AMS-IX eens aan moeten denken.
de stroom word al zo duur dan (vind ik) dat je toch een continue voorziening mag verwachten en de nodige backup systemen en het onderhoud er aan...
Het probleem ligt (zoals al een paar keer gezegd is) niet bij AMS-IX, maar bij hun leden. Deze zouden op twee verschillende lokaties kunnen connecten, maar vaak hebben ze ook te weinig capaciteit als hun AMS-IX verbinding wegvalt.
Toevallig viel het me gisteren op dat een grote hosting-isp met een goede reputatie (ik zal de naam niet noemen) in het datacentrum waar de servers staan alleen een 10 Gbit lijn naar de AMS-IX heeft en 2x 1 Gbit naar een ander datacentrum waar ze dan een aantal Gbit's aan transit afnemen... die Gbit's aan transit zijn leuk, maar als hun AMS-IX-lijn wegvalt, hebben ze dus nog meer 2x 1 Gbit over tussen hun servers en de routers die nog wel een connectie naar buiten hebben.
Ik snap ook niet waarom veel ISP's naast AMS-IX niet nog een NL-IX-connectie erbij nemen. NL-IX is erg goedkoop en kan daarnaast als alternatief dienen als AMS-IX uitvalt.
Hetzelfde geldt overigens ook voor ISP's die meedoen aan OpenPeering. Een groot aantal zet geen directe peering-verbindingen op met andere ISP's als ze elkaar al via OpenPeering zien. Als de BGP-sessie met OpenPeering dus wegvalt ben je meteen al je peers kwijt... Ook hierbij kan ik een paar grote namen noemen die zich hier schuldig aan maken (maar dat laat ik ook maar netjes achterwege).
Het probleem met de stroomstoringen in Nederland is dat ons stroomnet gewoon te goed is. Daardoor valt de stroom maar heel zelden uit en kunnen we niet vaak genoeg onze noodstroom voorzieningen in het echt testen.
Het probleem met de stroomstoringen in Nederland is dat ons stroomnet gewoon te goed is. Daardoor valt de stroom maar heel zelden uit en kunnen we niet vaak genoeg onze noodstroom voorzieningen in het echt testen.
Eens, in landen als Engeland hoef je de kwaliteit van de NL DC's op de meeste locaties niet te verwachten. Dat doet natuurlijk niets af aan het feit dat backupvoorzieningen gewoon moeten werken...
Ik begreep dat de noodstroomvoorziening niet gefaald heeft, maar dat er een hoofdzekering gesprongen is en later een tweede. Deze zekeringen zitten blijkbaar tussen de racks en de hoofd/noodstroomvoorziening in.
Uit een mail van OpenPeering:
Only a part of the racks in the Nikhef datacenter was hit by the power outage, apparantly first on one power group around 11:15 and then on their second (backup) power group around 14:15.
At least one fuse was blown. That would explain that UPS or generator backup power could not have resolved this: apparently there was power to the building, but not all the way to some racks due to blown fuses. However, this is partly speculation. Nikhef will provide details about the incident on monday.
Even wachten tot maandag voor een verklaring van NIKHEF.
als je een A + B feed hebt en een STS gebruikt waren er dus geen problemen geweest...
als je een A + B feed hebt en een STS gebruikt waren er dus geen problemen geweest...
Voor een router zou ik dus nooit een STS gebruiken, behoorlijke namelijk SPOF. Pak gewoon een router met redudant voeding op een A en B feed ;)
Wat betreft de storing, erg vervelend enzo maar ik denk dat de AMS-IX al druk bezig is met verbetering (POP op eunetworks oa), buiten dat is het natuurlijk praktisch 2 ams-ix aansluitingen te hebben op twee locaties, scheelt je als provider sowieso veel gedoe mocht er iets mis gaan.
idd wrm werkte de 2de feed dan daar niet?
wel erg dat alle systemen het somehow lieten afweten... en voor een gesprongen zekering heb ik geen 4 uur nodig om deze te vervangen hoor!
even voor de mensen die afgeven dat ISP's maar 2 verbindingen moeten hebben, Ik heb het hier over de erg slechte infrastructuur van het DC niet over hoeveel verbindingen ISP's moeten hebben voor hun downtimes te voorkomen ;)
Toevallig viel het me gisteren op dat een grote hosting-isp met een goede reputatie (ik zal de naam niet noemen) in het datacentrum waar de servers staan alleen een 10 Gbit lijn naar de AMS-IX heeft en 2x 1 Gbit naar een ander datacentrum waar ze dan een aantal Gbit's aan transit afnemen... die Gbit's aan transit zijn leuk, maar als hun AMS-IX-lijn wegvalt, hebben ze dus nog meer 2x 1 Gbit over tussen hun servers en de routers die nog wel een connectie naar buiten hebben.
Zolang het traffic niet die 2 gigabit over gaat, is er niets aan de hand, zou je zeggen.
Ik zag gister trouwens dat meer access ISPs problemen hadden, dan hosting ISPs. Kijk naar @home, UPC, DTAG, UUNet, etc.
Ik snap ook niet waarom veel ISP's naast AMS-IX niet nog een NL-IX-connectie erbij nemen. NL-IX is erg goedkoop en kan daarnaast als alternatief dienen als AMS-IX uitvalt.
Als je bedoelt waarom hosting ISPs dit niet doen, komt dit omdat er amper access ISPs op de NL-IX zitten, en degene die er op zitten, peeren vaak niet. Daar kan je dus niet je verkeer kwijt, als de AMS-IX plat gaat. Bij ons gaat 98% van ons traffic naar die access ISPs. De hosting ISP members van de NL-IX zitten er vaak alleen maar op omdat ze ook andere diensten afnemen van Openpeering.
Hetzelfde geldt overigens ook voor ISP's die meedoen aan OpenPeering. Een groot aantal zet geen directe peering-verbindingen op met andere ISP's als ze elkaar al via OpenPeering zien. Als de BGP-sessie met OpenPeering dus wegvalt ben je meteen al je peers kwijt... Ook hierbij kan ik een paar grote namen noemen die zich hier schuldig aan maken (maar dat laat ik ook maar netjes achterwege).
Gelukkig is het internet wereldje niet allemaal zo zwart-wit zoals je het nu voorstelt. Wat voor jou heel simpel en logisch is, kan misschien enorm veel geld kosten, of onmogelijk zijn om legio redenen.
De beste stuurlui.... de rest kan je zelf wel afmaken, denk ik.
MediaServe
11/03/07, 15:35
als je een A + B feed hebt en een STS gebruikt waren er dus geen problemen geweest...
Behalve als iedereen dat doet en de B-feed ineens voluit wordt belast ;)
Dan zegt die zekering ook boem ;)
euro-access
11/03/07, 18:30
In princiepe kan de B feed het gewoon overnemen
alleen apparatuur verbruikt steeds meer stroom
meeste DC's en met name de oudere hebben hier problemen mee
die gingen uit van 500-1000Watt per m2
tegenwoordig heb je veel meer stroom verbruik per m2.
dus zijn de zekeringen te klein.
Wij hebben dit probleem ook gehad in september.
Op basis van 1000watt per m2 zijn ook de hoofdzekeringen geinstalleerd.
verbruik is meer (er zijn al servers met 1200 watt+ voedingen)
B feed kon het dus ook niet aan en alles lag plat.
Oplossing : normaal worden 63amp zekeringen gebruikt. Deze zijn nu bij ons geupgrade naar 160amp per fase.
Nikhef en Sara zijn zeer oud dus zullen ook nog zeker op lage wattage per m2 berekend zijn.
en als de zekeringen er uitgeklapt zijn is dit een logische verklaring
Zelfde probleem heb je dadelijk met AIRCO's 500- 1000watt per m2 is ook warmte. stroom verbruik is verdubbeld dus moeten de airco's ook dubbel kunnen koelen
Senario zomer 2007 :
Hitte gold 14 dagen 35 graden (was ook in de zomer 2006)
het pand warmt op aan de buitenkant en trekt naar binnen.
meer stroom verbruik + warmte = zware airco problemen.
Easynet heeft afgelopen zomer hier dus last van gehad en zal mij ook niks
verbazen als dit jaar andere DC's hier ook problemen mee krijgen.
Oplossing : normaal worden 63amp zekeringen gebruikt. Deze zijn nu bij ons geupgrade naar 160amp per fase.
Moeten wel de kabels dik genoeg zijn anders heb je dadelijk een paar gloeidraden liggen ipv kabels.
Maar als het mogelijk is is dat zeker een oplossing.
en als de zekering van de A feed weg valt zou de UPS moeten overnemen en de generator opstarten wat dus niet blijkt gebeurt te zijn
en van 64A naar 160A zonder nieuwe (dikkere) geleiders te leggen zal niet mogelijk zijn, te hoog brandgevaar.
en als de zekering van de A feed weg valt zou de UPS moeten overnemen en de generator opstarten wat dus niet blijkt gebeurt te zijn
Ik denk dat je de rest van de thread nog maar eens moet lezen, want dat heeft er helemaal niets mee te maken. Generator of geen generator - als de stroom niet bij de racks kan komen doordat de stoppen gesprongen zijn, dan ligt de boel sowieso plat.
Ja der moet al een kortsluitstroom (10-15 keer In) of overstroom lopen voor een zekering springt of dacht je dat een zekering van 64A op exact 64A springt.....
euro-access
12/03/07, 14:38
de Generators zitten direct aan de hoofd power feeds
samen met de UPS, dit gaat met 1000+ amp.
deze word vertakt naar een groepen kast. Daarin zit dus een zekering
63 amp en die word weer verdeelt naar meerdere 16amp zekeringen.
Als de zekering er uitklapt kan de generator wel aanspringen (wat hij dus NIET DOET want hoofd feed werkt gewoon) maar de zekering laat dus niks door.
Generator en UPS is ervoor als de hoofd feed van Nuon / Essent er uit knalt.
Nikhef en Sara zijn zeer oud dus zullen ook nog zeker op lage wattage per m2 berekend zijn.
Wellicht oud maar die upgraden ook hoor, ik weet dat ze bij Sara flink bezig
zijn op dit moment om onderanderen voor een nieuwe super computer extra
stroom aan te leggen etc' .. dus het zal allemaal wel mee vallen met dat 'oud'.
euro-access
12/03/07, 15:01
ben je wel eens bij sara / nikhef binnen geweest?
Ja der moet al een kortsluitstroom (10-15 keer In) of overstroom lopen voor een zekering springt of dacht je dat een zekering van 64A op exact 64A springt.....
dat niet maar als je hem langdurig overbelast springt die ook ;) daarom valt het in eerste in stantie ook niet erg op dat je je groepen te zwaar belast, want alles draait lekker door. tot de zekering een keer denkt van nu heb ik genoeg gehad, dan is het *plof* en huh hoe kan dat?
met pech wordt je B feed dan ineens ook een stuk zwaarder belast en als die ook al rond de grens zat is het snel afgelopen.
het is nu eenmaal zo dat de servers en vermogen per m2 harder gegroeid is als waarop de dcs berekend zijn. sommige werken hier actief aan, anderen passief
MediaServe
12/03/07, 16:31
of dacht je dat een zekering van 64A op exact 64A springt.....
De zekeringen die ze gebruiken zijn zeer traag en kun je gerust een paar uur overbelasten met een aantal Amps
euro-access
12/03/07, 16:38
Ehhh meeste DC's gebruiken snelle zekeringen
want je kunt niet veroorloven dat er meer dingen fout gaan.
dus SNEL ...
Zekeringen zijn altijd relatief traag...
Je moet niet vergeten dat PC's (servers) een geschakelde voeding hebben die nogal grote inschakelstromen genereren. (Als je de stekker in het stopcontact propt dan hoor je misschien wel de vonk....) Als een rack nu getripped is, en de zekering (breaker meestal) wordt teruggezet, dan genereren al de servers dit inschakelverschijnsel. Dus dan kan een rack wat normaal gesproken maar 5A trekt opeens (zeer kortstondig) >100A trekken. Als een zekering/breaker nu "supergevoelig" zou wezen, dan zal je de machines nooit meer aan kunnen zetten...
Wat informatie over zekeringen:
http://www.littelfuse.com.hk/data/zh/Product_Catalogs/AUTOFUSEOLOGY.pdf
euro-access
12/03/07, 17:12
Hi
Easynet DC geeft aan snelle zekeringen te gebruiken
en ik dacht andere DC's ook
zullen altijd traag zijn voor overbelasting, kortsuilting is natuurlijk altijd super snel (hoe sneller hoe beter)
En normaal gezien meten ze het verbruik toch (voor te factureren) dus zien ze wnnr ze close aan de grens zitten en wanneer ze moeten upgraden wat zij duidelijk niet doen...
en een B-feed dient als backup als die ook al niet goed afgezekerd is is het wel heel erg gesteld met dat DC
PS: ik dacht dat er 2 borden waren per feed, als de ene zekering het begeeft (kapot is) neemt het 2e bord over.
PS: ik dacht dat er 2 borden waren per feed, als de ene zekering het begeeft (kapot is) neemt het 2e bord over.
Als er een zekering eruit gaat, dan is dat meestal voor een reden. Dus er is helemaal geen reden voor een opstelling zoals jij hierboven beschrijft. Als er 2 zekeringen parallel staan dan mag je, binnen grenzen, stellen dat het totale afgezekerde vermogen gelijk is aan de beide zekeringen bij elkaar opgeteld....
ben je wel eens bij sara / nikhef binnen geweest?
Bij Nikhef niet, tja wel binnen.. maar niet op de dc vloeren ofzo.
Bij Sara elke dag omdat ik er bezig ben met een afstudeer opdracht.. (locatie Amsterdam).
Ik houd me verder niet bezig met wat voor stroom feeds en wat dan al wel niet gebruikt word. Ik wou enkel aangeven dat er ook hier dingen vernieuwd worden.
Verder wil ik me hier niet in mengen en kan ik natuurlijk al helemaal geen uitspraken gaan doen in naam van of wat dan ook.
Probeer enkel wat informatie te geven... wil het best voor je navragen
maar je kan beter zelf even bellen lijkt me.