PDA

Bekijk Volledige Versie : eigen netwerk opzetten



svbeek
23/05/05, 20:14
Ik ben bezig met een analyse van de mogelijkheden wat betreft het opzetten van een eigen netwerk. Het netwerk moet betaalbaar, schaalbaar en redundant uitgevoerd zijn.
Ik heb al heel wat gelezen over BGP4, diverse routers, zebra, etc.
Aan de hand daarvan heb ik de volgende punten opgesteld:

- Het netwerk zal twee routers gebruiken voor redundantie
- Het netwerk zal twee coreswitches gebruiken voor redundantie
- De switches en routers zullen onderling in een full mesh dmv gigabit
links verbonden worden
- De coreswitches/routers zullen onderling OSPF draaien
- Er moeten op de coreswitches minstens 48 10/100 mbit en 12 gigabit
poorten beschikbaar zijn
- Het gebruik van een zebra router is wat mij betreft geen optie

Het netwerk zal in het begin zeker geen 100+ mbit hoeven te routen, en voorzien zijn van 100mbit transit/peering links, mogelijk 1 of 2 gigabit links.

Nu nog een keuze maken wat betreft de te gebruiken hardware.
Ik heb geen 50.000 euro liggen dus een paar junipers is geen optie, al zou ik het wel graag willen. Ik ben een beetje aan het rondkijken naar bruikbare hardware en heb mijn oog laten vallen op de volgende spullen:

routers: cisco 7206 (non vxr), cabletron ssr-8 aka riverstone 8000, bigiron m4000 met management 4 module

coreswitches: netiron, bigiron 4000, cisco 4000/4500, apline 3804

Wat ik nu graag zou willen weten wie ervaring heeft met zulk spul in een dergelijke setup. Goede/slechte ervaringen, do's en don't do's?
Is een full mesh een echt nodig of voldoet minder ook? Nadeel is in ieder geval dat er veel interfaces nodig zijn. Een alternatief is meerdere vlan's over een link routen, maar ik heb wel eens gehoord dat dit soms problemen geeft, kan iemand me hier meer over vertellen?

Cisco routers hebben verder een interessante feature, netflow. Dit lijkt me ideaal om het traffic naar verschillende netwerken te analyseren. Is er ook een dergelijke feature voor bijvoorbeeld de cabletron router?

Verder nog een laatste puntje, is het verstandig om twee verschillende routers te nemen omdat je dan bijvoorbeeld problemen in de software niet op beide routers tegelijk spelen, of is twee de zelfde juist weer handig? Zelfde voor de switches.

Tevens zou ik binnenkort (natuurlijk tegen uurprijs) wel eens willen babbelen met iemand die echt verstand van zaken heeft. Dwz ervaring met BGP4 routing in een productieomgeving en ervaring met een of meerdere van de bovenstaande apparaten. Bij interesse graag een pm sturen.

Reinier v Eeden
24/05/05, 12:35
Sander,

Ik raad je aan om voor de Bigiron 4000 te gaan met een ander blade.
De Cisco 7206 komt op de 2e plaats, bij een denial of service aanval ben je PLAT. Een foundry heeft altjid nog foundry-shield en is cisco like met veel opties.

Riverstone en Cabletron raad ik je af.
Wanneer je voor de foundry gaat als 2 stuks core-routers kun je ook 2 andere foundries gebruiken als coreswitches en deze intern met elkaar verbinden dmv 10gigabit aangezien foundry dit support, wij hebben de volgende setup:

- Border switches - (hier komen de uplinks in)
- Corerouter(s) - Routing ofcourse :)
- Core-Switch - (gaat naar de ring en daarna colocatie)

Ik raad je aan om 2 dezelfde routers te nemen omdat je dan maar 1 reserve onderdeel van alles moet hebben, dit scheelt je in kosten met 2 verschillende routers zul je dubbele reserve onderdelen aan moeten schaffen.

DOMENICO EDIT: Commercial weggehaald. Niet meer doen!

vr gr
reinier

svbeek
24/05/05, 12:51
Ik hoor veel goede verhalen over foundry als coreswitch, maar ook veel negatieve dingen over hun bgp4 routing support. En foundry support geen ipv6, iets wat met het oog op de toekomst wel wenselijk is.

Qua spares heb je inderdaad een goed punt.

Wat betreft de border switches, je route dus over verschillende vlans via de borderswitches? Creer je dan niet een extra point of failure aangezien er gelijk meerdere uplinks uitliggen als deze switch kapotgaat?

Cliff
24/05/05, 13:06
Origineel geplaatst door Reinier v Eeden
Sander,

Ik raad je aan om voor de Bigiron 4000 te gaan met een ander blade.
De Cisco 7206 komt op de 2e plaats, bij een denial of service aanval ben je PLAT.

Dat is natuurlijk bullshit, een 7206 is puur een chassis. Met een NPE-G1 module en een 7206VXR chassis doorsta je nog wel wat ddosjes.

Wat ik niet snap is waarom iedereen eerst kijkt naar of je door een ddos plat ligt. Dit ligt uiteraard geheel aan wat voor klanten je hebt. In de 3 jaar dat wij nu bestaan hebben wij pas 1 ddos gehad.

Reinier v Eeden
24/05/05, 13:09
Iedere uplink is ook redundant uitgevoerd bij ons, multihomed.

Example:

- Rokscom link1 @ nikhef
- Rokscom link2 @ redbus

Dit gaat uiteraard ook over een aparte /30 per sessie. En dus ook over een apart VLAN.

Beide uplinks komen via een andere kant van de ring en op een andere borderswitch binnen. En dit is idd via vlans als er 1 borderswitch uitvalt neemt de ander het toch over, hetzelfde geld als er bijvoorbeeld een vezel zou breken.

groeten
reinier

Cliff
24/05/05, 13:09
Origineel geplaatst door svbeek
Ik hoor veel goede verhalen over foundry als coreswitch, maar ook veel negatieve dingen over hun bgp4 routing support. En foundry support geen ipv6, iets wat met het oog op de toekomst wel wenselijk is.

Qua spares heb je inderdaad een goed punt.

Wat betreft de border switches, je route dus over verschillende vlans via de borderswitches? Creer je dan niet een extra point of failure aangezien er gelijk meerdere uplinks uitliggen als deze switch kapotgaat?

Wij hebben alle transits en peerings rechtstreeks op onze routers geconnect en niet via vlans op switches, omdat dit inderdaad de kans op failure verhoogd. Een foundry support overigens wel IPv6 maar dit is enkel in bepaalde chassisen. Er schijnt overigens wel een 7.7.02 release te zijn welke ook op de BigIron IPv6 zou ondersteunen.

Zou je een Foundry kiezen pak dan ten alle tijden een JetCore based box en geen IronCore. Met een JetCore based box en een M4 management module met 512 meg ram BGP'd deze machine als een tiet. Full tables slikt het binnen een paar seconden. Dat de BGP4 support door velen zo slecht bevonden word is omdat dit allen gebaseerd is op ironcore machines met M2 of M3 management modules.

Reinier v Eeden
24/05/05, 13:18
Origineel geplaatst door Cliff


Dat is natuurlijk bullshit, een 7206 is puur een chassis. Met een NPE-G1 module en een 7206VXR chassis doorsta je nog wel wat ddosjes.

Wat ik niet snap is waarom iedereen eerst kijkt naar of je door een ddos plat ligt. Dit ligt uiteraard geheel aan wat voor klanten je hebt. In de 3 jaar dat wij nu bestaan hebben wij pas 1 ddos gehad.

Vraag met af over wat voor denial of service je het nu hebt. Omdat je het bullshit noemt, neem ik aan dat je uit ervaring spreekt. Net zoals ik.

groeten
reinier

luser
24/05/05, 13:20
Vergeet niet dat er naast zebra nog een aantal alternatieven zijn. Een van de best hiervan op dit moment is OpenBGPD wat samen met OpenBSD komt.
Als je een beetje deftige hardware koopt (+-2k per router) krijg je er wel 150mbit of meer door.

Ps. In de nieuwe OpenBSD die deze week released is zit ook een nieuwe ontwikkeling bij OpenOSPF.

luser
24/05/05, 13:25
Je setup ziet er goed uit maar bekijk ook volgende oplossing.

2 Corerouters verbonden met 2 coreswitches in een full mesh, maar je laat de link tussen de 2 coreswitches weg.
Op de coreswitches draai je geen routing protocol, hierdoor kan je gebruik maken van fastiron's die een stuk goedkoper te verkrijgen zijn.
Nu laat je de router de GW spelen en maakt een VRRP systeem (of onder OpenBSD CARP), de laatste 3 adressen in de range reserveer je hiervoor.
Ziet er dan zo uit:
.252 router 1
.253 router 2
.254 gw ip wat de 2 tussen hun gooien (master/slave situatie of gewoon welke eerste up komt)

svbeek
24/05/05, 14:10
Geen enkele hostbased router oplossing is een goede oplossing wat mij betreft.. :) Zelfs een pc met redundant voeding en de harddisk in raid is nog minder betrouwbaar dan een redunant uitgevoerde 'hardware' router. En voor de prijs van 2k per stuk heb ik ook bijna een leuke gebruikte 7200 of riverstone.

Hoe zit het trouwens met foundry software? Moet je voor een bigiron geen layer 3 software bijkopen voor ie bgp kan ofzo?

Heeft een van jullie praktijkervaring met de riverstone 8000? Deze zijn zeer betaalbaar en ik lees er toch wel goede verhalen over. Nogmaals, er hoeven geen honderden megabits doorheen geroute te worden. En het risico van een DDoS is denk ik te verwaarlozen aangezien we in onze algemene voorwaarden het gebruik van o.a. irc gerelateerde services vanaf ons netwerk verbieden.

Mocht het netwerk eenmaal wat meer verkeer trekken zouden ze altijd nog vervangen kunnen worden door twee zwaardere routers. Tegen die tijd is er waarschijnlijk ook wel wat meer budget voor leuker spul :)

luser
24/05/05, 14:14
Dan zou ik alleen op foundry blijven, 2xbig/net iron en 2xfastiron.

De riverstone's waren 2 jaar geleden nog goed te gebruiken maar tegenwoordig worden ze beetje oud ;).

Ik doelde op 2k voor een tyan board, redundant psu, quad kaart en set gigE's.
Als je dat bij een cisco wilt zit je toch wel bij 7.5k en meer hoor ;)

Cliff
25/05/05, 18:27
Origineel geplaatst door Reinier v Eeden


Vraag met af over wat voor denial of service je het nu hebt. Omdat je het bullshit noemt, neem ik aan dat je uit ervaring spreekt. Net zoals ik.

groeten
reinier

Een ddos van zo'n 120Kpps. Het feit dat jij zegt dat een cisco 7200 niet voldoet is bullshit omdat er diverse management modules voor zijn. Een NPE-G1 kun je natuurlijk niet vergelijken met een NPE-200.

Cliff
25/05/05, 18:29
Origineel geplaatst door svbeek
Geen enkele hostbased router oplossing is een goede oplossing wat mij betreft.. :) Zelfs een pc met redundant voeding en de harddisk in raid is nog minder betrouwbaar dan een redunant uitgevoerde 'hardware' router. En voor de prijs van 2k per stuk heb ik ook bijna een leuke gebruikte 7200 of riverstone.

Hoe zit het trouwens met foundry software? Moet je voor een bigiron geen layer 3 software bijkopen voor ie bgp kan ofzo?



Alle BigIron software releases hebben standaard BGP erin. Indien je goedkoop wilt spelen kun je de software van HP's 9300 serie gebruiken welke identiek is aan de BigIron (behalve dan hier en daar een search en replace op Foundry / HP :)

host3000
25/05/05, 18:30
Origineel geplaatst door Cliff
.....

[offtopic]
Kwam laatst jouw afstudeerproject tegen. Interessant!

Cliff
25/05/05, 22:26
Origineel geplaatst door host3000


[offtopic]
Kwam laatst jouw afstudeerproject tegen. Interessant!

Weliswaar behoorlijk gedateerd :) Een boel dingen die daarin vermeld staan kloppen niet echt meer en zou ik nu niet meer kiezen. Daarnaast is het niet echt off-topic want het ging wel over het opzetten van een netwerk :)

InstantXs
25/05/05, 23:09
Waarom alles 2e hands? misschien is het de overweging waard om nieuw spul te halen met een goed service contract.. heb je het weliswaar niet redundant, maar wel vervangen in bv 4 uur. is nog betrouwbaarder ook imo.

host3000
26/05/05, 00:01
Is 4 uur niet erg lang als er blade het begeven heeft?

Je kunt toch beter zelf reservemateriaal paraat (stand-by zelfs) hebben? Ik snap idd wel dat een nieuw courant model met servicecontract te preferen is boven een used zonder, maar is het inderdaad zo dat de meerkosten van het eerste vergelijkbaar zijn met de kosten van het tweede? Ik heb de indruk dat servicecontracten een veelvoud van hardwarekosten zijn (maar daar heb ik uiteraard geen ervaring mee).

InstantXs
26/05/05, 00:09
Wij hebben daar wel ervaring mee, en over het algemeen ben je voor 2 oude modellen ONGEVEER evenveel kwijt als een nieuw model incl service. Ligt natuurlijk ook deels aan je config.

Maar als de nood erg hoog is, zijn er altijd wel collega's die je kunnen helpen. Eventueel zou je spare parts wel refurbished kunnen hebben, maar om alles secondhands uit te voeren? zou niet mijn voorkeur hebben.

(ik zeg dit omdat wij ervaring hebben met beide opties)

svbeek
26/05/05, 00:25
Ik krijg de indruk dat wat gebruikte onderdelen als spare hebben idd goedkoper is als een servicecontract. Toch bedankt voor de tip, ik neem het zeker mee in de overwegingen.

Dillard
26/05/05, 01:04
Interessant topic:

Wat zou de hier voorgestelde opstelling kosten (dus 2x big/net iron en 2 x fastiron) in een full-mesh setting (qua hardware).

Ik ben het eens met InstantXS dat nieuw natuurlijk wel de voorkeur verdient, maar in het begin je budget niet toereikend is voor 2 x nieuw. En ik denk dat een service contract van 4 uur wel leuk is op een server, maar niet op een (je enige) corerouter of core-switch of zie ik dit fout ?

luser
26/05/05, 01:33
http://cgi.ebay.com/ws/eBayISAPI.dll?ViewItem&category=51268&item=5776192751&rd=1
Zo 2 stuks, das 10k.

http://cgi.ebay.com/ws/eBayISAPI.dll?ViewItem&category=71522&item=5775260235&rd=1
Zo 2, das +-3k

+ schipping, wat kabels etc...

Zit je aan +-15k.

EDIT: Heel ruw geschat offcourse ;)

EDIT2: http://www.networkhardware.com/ zit nu ook in NL, neem contact op met hun ze helpen je verder met prijzen ;)

Dillard
26/05/05, 02:21
Origineel geplaatst door luser

EDIT2: [url]http://www.networkhardware.com/ zit nu ook in NL, neem contact op met hun ze helpen je verder met prijzen ;)

Gelukkig; ik zie me al 15k over "paypallen" en dan bidden dat mijn fijngevoelige hardware schadevrij (en uberhaubt) aankomt :D

Is ebay DE plaats voor dit soort refurbished equipment? Ik heb al wel eens gemerkt dat de prijzen in de VS voor dit soort spul een stuk lager ligt dat in NL.

luser
26/05/05, 05:11
ebay.com kan je veel koopjes doen ja, maar er zijn ook veel bedrijven te vinden waar je direkt contact mee kan opnemen. Betaal je meer voor, heb je wel de zekerheid op een non-DOA toestel en krijg je meestal nog 90 dagen garantie.
Shipping via fedex/ups is veilig als het spul goed verpakt is & juist geshipped wordt.

host3000
26/05/05, 09:42
Nu we toch aan het op waarde inschatten zijn ;) ....

Ik zie erg weinig netwerken met joint transit en/of nl transit. Joint transit lijkt mij voor lage commitments wel interessant, nl transit neemt de noodzaak van alle peers opzetten weg (althans, voor een groot gedeelte).

Nu is nl transit niet gratis, maar de prijs voor een 100 Mbit flat fee poort is niet zo hoog.

Waarom is er weinig joint transit in de netwerken. Is dat een kwaliteitsfactor (hoewel er m.i. redelijke carriers in zitten) of anders ....?

Reinier v Eeden
26/05/05, 09:52
Het is meer dat jointtransit loopt te liegen op hun website over de feed die je krijgt.

Die mix krijg je helemaal niet.

groeten
reinier

host3000
26/05/05, 09:53
Origineel geplaatst door Reinier v Eeden
Het is meer dat jointtransit loopt te liegen op hun website over de feed die je krijgt.

Die mix krijg je helemaal niet.

groeten
reinier

Want je krijgt wat .....?

ProServe
26/05/05, 10:38
Origineel geplaatst door luser
http://cgi.ebay.com/ws/eBayISAPI.dll?ViewItem&category=51268&item=5776192751&rd=1
Zo 2 stuks, das 10k.
http://cgi.ebay.com/ws/eBayISAPI.dll?ViewItem&category=71522&item=5775260235&rd=1
Zo 2, das +-3k
+ schipping, wat kabels etc...
Zit je aan +-15k.

Ja, alleen zijn dat non-Jetcore dozen, en wil je die dus niet gebruiken voor routing. Ook zit er maar 256MB in die eerste BI, wat ook aan de lage kant is voor een paar full feeds. (sowieso moet je eigenlijk geen routing doen op switches, maargoed)
Vergeet ook de shipping en inklaringskosten niet.

svbeek
26/05/05, 10:59
Verzendkosten zijn iets van 150 euro voor zo'n ding, nog te doen..

handy
26/05/05, 11:15
Ik geloof er NIETS van dat JT loopt te liegen. Het zijn de zelfde personen van NLIX en deze zijn betrouwbaar. Als je bewijs hebt, dan mag je deze natuurlijk altijd posten :)

InstantXs
26/05/05, 11:32
Origineel geplaatst door svbeek
Verzendkosten zijn iets van 150 euro voor zo'n ding, nog te doen..

Je vergeet de 19% die je moet betalen als je dit importeert. (ja je krijgt hier nog een mooie factuur van de vervoerder van)

Reinier v Eeden
26/05/05, 11:46
20 carriers aansluiten is niet zo moeiljik he als je prepends op je dure verbindnigen gooit en de local-preference laag zet.

Heb een heleboel traceroutes gedaan waarvan een aantal geplakt.

- Carrier1
- KPN Eurornigs
- BIT - > Interroute
- Hostlab/Reasonnet - > DTAG
- Flag telecom

Het meeste verkeer gaat over KPN DTAG en Carrier1, een colocatie partij kan dit doen maar een transit partij niet vind ik.

Inderdaad ze HEBBEN het wel, maar sturen er amper verkeer overheen het gaat allemaal over links van hostlab en BIT en 2 directe carriers. De rest staat ongelofelijk laag.

Nou vind ikzelf (persoonlijk) DtAG FLAG en Interroute niet bepaald spectaculair, carrier1 heb ik geen ervaringen mee kpn wel.

Iedereen kan 20 partijen aansluiten en bij iedere carrier 1 mbit afnemen en toch al ze verkeer over een ander sturen, dat is toch niet zo moeilijk jongens?? Alleen IK persoonlijk voel mij dan bedonderd.

Op een jointransit link:
-----------------------------------------
traceroute www.nic.pl

traceroute to www.nic.pl (62.181.3.11), 30 hops max, 40 byte packets
2 jointtransit.customer.openpeering.nl (217.170.0.9) 1.002 ms 0.885 ms 0.954 ms
3 openpeering.bit.nl (217.170.0.246) 2.066 ms 1.283 ms 1.723 ms
4 ge2-0.1000M.asd9nxg1.ip.tele.dk (195.69.144.104) 1.655 ms 1.325 ms 1.079 ms
5 pos6-0.2488M.ldn2nxg1.ip.tele.dk (195.249.2.133) 9.283 ms 9.259 ms 9.138 ms
6 pos5-0.2488M.ldn2nxg2.ip.tele.dk (80.63.82.6) 83.732 ms 81.800 ms 79.850 ms
7 pos4-0.2488M.ffm2nxg1.ip.tele.dk (195.249.2.41) 16.697 ms 16.758 ms 17.161 ms
8 cpe.ge1-0.0x3ef2914a.ffm2nxg1.customer.tele.dk (62.242.145.74) 17.381 ms 19.672 ms 19.421 ms

-----------------------------------------
traceroute www.nic.es (EERST OVER BIT EN DAN KOMT INTERROUTE PAS?!!)

traceroute to www.nic.es (194.69.254.54), 30 hops max, 40 byte packets

2 jointtransit.customer.openpeering.nl (217.170.0.9) 0.853 ms 0.824 ms 0.857 ms
3 openpeering.bit.nl (217.170.0.246) 1.265 ms 1.445 ms 1.196 ms
4 ams-001.interoute.net (195.69.144.81) 1.394 ms 1.251 ms 1.256 ms
5 PO4-0.Ams-Koo-core-2.interoute.net (212.23.41.190) 30.405 ms 30.297 ms 30.376 ms
6 PO6-2.lon-wal-core-1.interoute.net (212.23.41.41) 30.235 ms 30.589 ms 30.353 ms
7 PO6-3.lon-wal-core-2.interoute.net (217.118.119.2) 30.228 ms 30.334 ms 30.217 ms
8 PO6-2.Par-Gar-core-1.interoute.net (212.23.42.42) 14.862 ms 14.843 ms 14.827 ms
9 PO7-0.mad-001-access-1.interoute.net (212.23.42.213) 30.395 ms 30.480 ms 30.154 ms
10 212.23.53.2 35.029 ms 35.492 ms 34.480 ms
11 217.15.32.101 35.539 ms 35.372 ms 35.532 ms

-----------------------------------------
traceroute www.linkwan.com (EERST OVER REASONNET EN DAN KOMT DTAG PAS?!!)

traceroute to www.linkwan.com (218.16.120.18), 30 hops max, 40 byte packets

2 ams-ge-1-1.nl.dtag.de (213.189.31.1) 0.897 ms 0.948 ms 0.948 ms
3 217.239.40.129 367.935 ms 368.031 ms 368.093 ms
4 62.156.139.194 3931.147 ms 3930.683 ms 3930.645 ms
5 202.97.61.66 3890.060 ms 3889.859 ms 3889.342 ms
6 202.97.61.33 376.396 ms 376.443 ms 376.190 ms
7 202.97.60.165 375.921 ms 375.651 ms 375.635 ms

-----------------------------------------
traceroute www.ok.ee
traceroute to www.ok.ee (194.204.30.231), 30 hops max, 40 byte packets

2 g02-01.50.amn-bbr-01.carrier1.net (212.4.194.137) 1.014 ms 0.806 ms 0.891 ms
3 212.4.194.34 1.045 ms 1.011 ms 0.908 ms
4 so-0-2-0.TR2.AMS2.ALTER.NET (146.188.3.217) 1.072 ms 1.067 ms 1.357 ms
5 so-7-0-0.TR2.STK2.ALTER.NET (146.188.3.130) 38.787 ms 38.645 ms 38.525 ms
6 ge-0-3-0.XR1.STK3.ALTER.NET (146.188.11.237) 38.898 ms 38.736 ms 38.787 ms
7 POS1-0.GW9.STK3.ALTER.NET (146.188.7.78) 38.566 ms 38.428 ms 38.614 ms
8 finnet-gw.customer.alter.net (146.188.67.194) 36.177 ms 35.942 ms 35.939 ms
9 kista11-ge0-1-0.sto.kolumbus.net (62.248.254.38) 36.046 ms 36.156 ms 35.856 ms
10 m40-ka-so5-0-0.hel.kolumbus.net (193.229.1.25) 42.134 ms 41.971 ms 41.762 ms

Maargoed ik ga weer verder werken, klant heeft een grote storing.

groeten
reinier

svbeek
26/05/05, 12:29
Origineel geplaatst door InstantXs


Je vergeet de 19% die je moet betalen als je dit importeert. (ja je krijgt hier nog een mooie factuur van de vervoerder van)

Maar die kan je weer aftrekken toch?

ProServe
26/05/05, 13:41
Renier, die trace over tele.dk en interoute gaan gewoon over de AMS-IX, ik gok dat Openpeering zelf geen peering met die gasten kan krijgen, en dat BIT ze AMS-IX routes lekt daarom. Het gaat dus niet over BIT transit, maar over de AMS-IX.

Reinier v Eeden
26/05/05, 13:43
Maar jointransit adverteerd wel dat ze interroute hebben ?? Waarom dan over de AMSIX sturen ipv hun directe link?

groeten
reinier

ProServe
26/05/05, 13:51
Nou, omdat de AMS-IX gratis is, en via een transit link het geld kost? :)

luser
26/05/05, 14:27
Origineel geplaatst door InstantXs


Je vergeet de 19% die je moet betalen als je dit importeert. (ja je krijgt hier nog een mooie factuur van de vervoerder van)

Ja en als bedrijf kan je die zover ik weet terugtrekken (je moet is bellen naar het 0800 nummer van fedex).

EDIT: damn, quoten op vorige pagina niet slim ;)

InstantXs
26/05/05, 15:11
ja je kan dat 3 maanden later wel terug vorderen bij de belastingdiens, maar je moet het wel betalen in eerste instantie... is toch wel iets waar je rekening mee moet houden.

luser
26/05/05, 15:17
Klopt wel maar als je voor 15k aankopen kan doen lijkt me dit niet echt een probleem ;)