Onderwerp: Groot aantal bestanden verplaatsen

Beste leden,

Ik zit met een probleem waar ik even jullie ervaringen over wil horen.

Ik draai momenteel een groot forum. Loopt allemaal goed, maar is een verouderde versie van phpbb.

Ik heb een splinternieuwe server aangeschafd, en deze draait nu goed.
Een nieuw forum is geinstalleerd, en het oude is geconverteerd.
Het nieuwe forum draait dus goed, op de nieuwe server.

Nu moet ik alleen nog de foto's en avatars van het oude forum (oude server) naar de nieuwe zien te krijgen. Het betreft een ruime 12.000 bestanden, met een totale grote van ongeveer 1,2 GB. Hoofdzakelijk foto's, dus hoeft geen extra-mega-super-speciale-beveiligde verbinding te zijn.

Ik heb een aantal dingen gehoord, maar weet niet hoe goed dit werkt:

- Via FTP: Server -> server
- Via FTP: Server -> mijn computer -> server
- via SSH ?? (nooit van gehoord, is het betrouwbaar?)

Hebben jullie nog andere tips die ik kan nakijken om deze giga-klus op te lossen ? (ja, ik heb hier 3 voorbeelden, maar ik wil na de tijd niet horen dat het ook binnen enkele stappen klaar kon zijn terweil ik moeilijk zit te doen).

Dus daarom vraag ik: Wat is de beste manier om 12.000 bestanden, van mijn oude naar de nieuwe server te krijgen ?

Alvast bedankt voor jullie antwoorden.

Maarten

ps: Mods, ik wist niet goed waar dit topic thuis hoorde. je mag het verplaatsen als het verkeerd staat.

Met scp of ftp zou ik het inderdaad van de ene server naar de andere kopieëren. Dat gaat over het algemeen het snelste en minder kans op corrupte data. Dat risico loop je wel als je gaat ftp-en naar je thuislijntje en dan weer de data gaat pushen naar de nieuwe server.

Hoe minder (onnodige) schakels hoe beter.

lftp gebruik ik zelf altijd, dan kun je ook hele mappen putten (met wildcarding):
mput -d mapnaam/*

http://lftp.yar.ru/lftp-man.html
mput [-c] [-d] [-a] [-E] [-O base] files
Upload files with wildcard expansion. By default it uses the
base name of local name as remote one. This can be changed
by `-d' option.
-c continue, reput
-d create directories the same as in file names and put the
files into them instead of current directory
-E delete source files after successful transfer (dangerous)
-a use ascii mode (binary is the default)
-O <base> specifies base directory or URL where files should be placed

Ik zou hiervoor gewoon tar of eventueel rsync gebruiken:

tar -cf - directory/ | ssh user@hostname (cd /home/temp; tar -xf - )

zoals men zegt : zet het in een TAR, en download deze met wget van server A naar server B.

tar of rsync inderdaad, met rsync kan je makkelijk controleren of alles derop staat door het nog een keer uit te voeren.

Oorspronkelijk geplaatst door IT-worX

zoals men zegt : zet het in een TAR, en download deze met wget van server A naar server B.

Het zou kunnen dat je hier op je oude server de schijfruimte niet voor vrij hebt. Je hebt namelijk c.a. 1.2 GB extra nodig als je het eerst in een tar stopt.

Ik zou voor scp gaan:
scp -R /jouwdir/subdir user@server.nl:/remotepath

rsync is het meest geavanceerd inderdaad, maar als je nog nooit hiermee gewerkt hebt misschien wat moeilijk. Voor beginners raad ik altijd aan tar + ftp. Met

Code:

tar zcf fotos.tgz fotos/

maak je een ingepakt bestand op je eerste server. Vervolgens kun je dat bestand met ieder ftp programma overhalen, bijvoorbeeld eerst naar je eigen PC. Heb je gelijk een backup voor de zekerheid! Dan kun je die tar file uitpakken via

Code:

tar zxf fotos.tgz

rsync gebruiken. Ik gebruik het zelfs voor V2V migraties van Xen naar VMware, als er iets irri is...

Code:

rsync -avz -e "ssh -c arcfour" /home/dir root@1.2.3.4:/home/dir