Rsync: Difference between revisions

From ICO wiki
Jump to navigationJump to search
 
(37 intermediate revisions by the same user not shown)
Line 1: Line 1:
= Sissejuhatus =
= Sissejuhatus =
Rsync on vaba tarkvara unixi laadsetele süsteemidele mis sünkroniseerib faile ja kaustu ühest asukohast teise.
Rsync on vaba tarkvara unixi laadsetele süsteemidele mis sünkroniseerib faile ja kaustu ühest asukohast teise. [1]
Rsync töötab suhteliselt samamoodi kui käsk [http://en.wikipedia.org/wiki/RCP rcp], aga tal on rohkem võtmeid ning ta kasutab rsynci kaugvärskendamise protokolli, mis toob kohale vaid erinevused kahe komplekti failide vahel - seega kiirendab see märkimisväärselt üle võrgu toimuvat sünkroniseerimist.
Rsync töötab sarnaselt käsuga [http://en.wikipedia.org/wiki/RCP rcp], aga tal on rohkem võtmeid ning ta kasutab rsynci kaugvärskendamise protokolli, mis toob kohale vaid erinevused kahe komplekti failide vahel - seega kiirendab see märkimisväärselt üle võrgu toimuvat sünkroniseerimist. [2]


Tarkvara ametlik koduleht asub aadressil [http://rsync.samba.org/ http://rsync.samba.org/]
Tarkvara ametlik koduleht asub aadressil [http://rsync.samba.org/ http://rsync.samba.org/]


= Paigldamine =
= Paigldamine =
Rsync peaks kõigi kaasaegsete distributsioonide "standardvarustuses" olema. Kahtluste tekkimisel tasuks pakihalduri abiga kontrollida, kas [http://en.wikipedia.org/wiki/Rsync rsync], [http://en.wikipedia.org/wiki/Xinetd xinetd] ja [http://en.wikipedia.org/wiki/Secure_Shell ssh] ikka paigaldatud on.
Rsync peaks kõigi kaasaegsete distributsioonide "standardvarustuses" olema. Kahtluste tekkimisel tasuks pakihalduri abiga kontrollida, kas [http://en.wikipedia.org/wiki/Rsync rsync], [http://en.wikipedia.org/wiki/Xinetd xinetd] ja [http://en.wikipedia.org/wiki/Secure_Shell ssh] ikka paigaldatud on. [3]


Ubuntu korral võiks see toimuda näiteks nii
Ubuntu korral võiks see toimuda näiteks nii
    apt-get install rsync xinetd ssh
apt-get install rsync xinetd ssh


= Kasutamine =
= Kasutamine =
Lihtsaim moodus üle võrgu varukoopia tegemiseks on kasutada ''rsync'' 'i üle SSH ('''-e ssh''' võti). Alternatiiviks oleks ''rsync daemon'' 'i kasutamine (nõuab küll rohkem häälestamist ja konfiureerimist aga omab ka mõningaid eeliseid)
Lihtsaim moodus üle võrgu varukoopia tegemiseks on kasutada ''rsync'' 'i üle SSH ('''-e ssh''' võti). Alternatiiviks oleks ''rsync daemon'' 'i kasutamine (nõuab küll rohkem häälestamist ja konfigureerimist aga omab ka mõningaid eeliseid)
Kohaliku varukoopia tegemine nõuab ainult ''rsync'''i olemasolu ja lugemise/kirjutamise  õiguseid sünkroniseeritavates kataloogides
Kohaliku varukoopia tegemine nõuab ainult ''rsync'''i olemasolu ja lugemise/kirjutamise  õiguseid sünkroniseeritavates kataloogides. [3]


== Iseseisvana ==
== Iseseisvana ==
Line 23: Line 23:
  rsync -a -e ssh <lähtekataloog> <kasutaja>@<serveri nimi või aadress>:<sihtkataloog>
  rsync -a -e ssh <lähtekataloog> <kasutaja>@<serveri nimi või aadress>:<sihtkataloog>
'''-e ssh''' võti käsib ''rsync'' 'il kasutada SSH ''shell'' 'i.
'''-e ssh''' võti käsib ''rsync'' 'il kasutada SSH ''shell'' 'i.
== Koos serveriga (rsyncd) ==
Varundusserverit luues oleks mõistlik seal kasutada ''rsync daemon'' 'it mis võimaldab parooliga ligipääsu lugemiseks/kirjutamiseks teatud kaustadele. [1]
=== xinetd häälestamine ===
[3] Ava fail /etc/default/rsync ja muuda seal RSYNC_ENABLE parameetri väärtus:
RSYNC_ENABLE=inetd
Järgmiseks loo fail /etc/xinetd.d/rsync mille sisu võiks olla selline:
service rsync
{
    disable = no
    socket_type = stream
    wait = no
    user = root
    server = /usr/bin/rsync
    server_args = --daemon
    log_on_failure += USERID
}
=== Seadmistamine ===
Seadistusfailiks on /etc/rsyncd.conf
Näidis:
max connections = 10
log file = /var/log/rsync.log
timeout = 300
[share1]
    comment = <kausta või faile kirjeldav kommentaar või märkus>
    path = <failide asukoht>
    read only = no
    auth users = <kasutajanimi1>, <kasutajanimi2>
    secrets file = /etc/rsyncd.secrets
[share2]
    path = <failide asukoht>
    comment = <kausta või faile kirjeldav kommentaar või märkus>
    dont compress = *
    hosts allow = *.acme.com
    hosts deny = *
* '''dont compress''' lülitab määratud failitüüpide jaoks pakkimise välja (näiteks pilte ja videoid, mis on juba pakitud, pole mõtet hakata uuesti pakkima). Vaikimisi ei pakita *.gz *.tgz *.zip *.z *.rpm *.deb *.iso *.bz2 *.tbz faile. [1]
* '''secrets file''' näitab ära kasutajate ja paroolifailide asukoha.
* '''read only''' abil saame muuta selle kataloogi ainult loetavaks. Vaikeväärtus on '''yes'''.
* '''auth users''' kaudu saame piirata ligipääsu ainult teatud kasutajatele.
* '''hosts allow''' ja '''hosts deny''' abil saame reguleerida erinevate hostide ligipääsu sellele kataloogile.
Kasutajate- ja paroolifaili loomiseks võid kasutada omale meelepärast tekstiredatorit. Faili sisu peab vastama reeglile:
<kasutajanimi>:<parool>
Kuna selles failis hoitakse kasutajanime ja parooli ''plain textina'', siis tuleks ligipääs sellele võimalikult kinni keerata.
chmod 600 /etc/rsyncd.secrets
=== Teenuse käivitamine ===
Kui kõik eelnevad seadistured on tehtud, siis on järgi jäänud vaid ''rsync daemon'' 'i esmane käivitamine
/etc/init.d/xinetd restart
=== Kasutamine ===
Lihtsaim viis, kataloogi sünkroniseerimiseks ''rsync daemon'' serveriga, oleks selline:
rsync -a <lähtekataloog> <kasutaja>@<serveri nimi või aadress>::<jagatud kataloogi nimi>


== Olulisemad võtmed ==
== Olulisemad võtmed ==
    * --archive -a arhiivi võti mida kasutades kindlustatakse kuupäevade õiguste omanike ja linkide säilumine soovituslik võti
Järgnevalt tooks ära mõned olulisemad võtmed, mida võib ''rsync'' 'i kasutamisel vaja minna. Täpsema ülevaate saab, kui vaadata ''rsync'' 'i ''man'' lehekülge. [1]
    * --verbose -v protsessi kohta põhjalikuma info näitamine nt failinimekiri
* '''-a''' või '''--archive''' võtme kasutamine kindlustab kuupäevade, õiguste, omanike ja linkide säilumise
    * --progress ülekande progressi kohta info
* '''-v''' või '''--verbose''' annabb kogu sünkroniseerimisprotsessi kohta põhjalikumat infot (nt. failide nimed, vms...)
    * --stats ülevaatlikum statistika kulunud ajast ja failide hulgast
* '''--progress''' näitab infot ülekande progressi kohta
    * --compress -z toimub pakkimine enne ülekandmist
* '''--stats''' näitab ülevaatlikumat statistikat kulunud ajast ja failide hulgast
    * --delete -d kustutatakse mitte eksisteerivad failid eelnevast backupist
* '''-z''' või '''--compress''' käsib ''rsync'' 'il kasutada zlib pakkimist
    * --exclude "*bak" mingite faililaiendite, failinimede ignoreerimine näiteks avi, mp3 võib määrata ka võtmega --exclude-from faili milles failides või kaustades asjadest mida ei backupida
* '''-d''' või '''--delete''' kasutamisel kustutatakse mitte eksisteerivad failid eelnevast backupist
* '''--exclude "<faili kirjeldus>"''' abil saab vältida mingile kindla mustriga klappivate failide varundamise. Faili kirjeldamiseks võib kasutada nii laiendit kui ka mingit osa faili nimest
* '''-n''' nö. "eelvaate" režiim, kus ''rsync'' lihtsalt ütleb mida ta teeks ilma reaalselt faile üle kandmata
* '''-c''' käseb genereerida kõigi failide kontrollsummad. Tavajuhul ''rsync'' lihtsalt võrdleb faili loomise ja muutmise aegu, et selgitada välja kas see on muutunud või ei. Kuna selle võtme kasutamine võib ''rsync'' 'i muuta üsnagi aeglaseks, siis tasuks seda kasutada vaid tõsise vajaduse korral, näiteks kui on kahtlus, et failide sisu on kuidagi rikutud.
 
Varundamisel mõnele sellisele andmekandjale, mille failisüsteem ei toeta õiguseid (näiteks FAT failisüsteemiga vormindatud USB mälupulk), tuleks '''-a''' asemel kasutada võtmekomplekti '''-rlt''' [5]
* '''-r''' kaasab ka alamkataloogid
* '''-l''' kopeerib ka ''symlink'' 'id
* '''-t''' säilitab failide kuupäevainfo


Veel mõned erandjuhtudel vajaminevad parameetrid
== Näited ==
Varundame kasutajate kodukataloogid serveris 192.168.1.10 asuvasse kausta "/var/backup". Varundusserveri ruumi säästmiseks pakime failid kokku ja kustutame eelnevast backupist nüüdseks mitte eksisteerivad failid ära. Kasutajate muusikavaramu ja lemmikloomade videod jätame ka kõrvale.
rsync -az --delete -e ssh --exclude "*.mp3" --exclude "*.avi" --exclude "*.mpg" /home remoteuser@remotehost.remotedomain:/var/backup


    * -n Mille korral rsync lihtsalt ütleb mida ta teeks ilma reaalselt faile üle kandmata
Paremaks ja mugavamaks teatud failide ja kataloogide kõrvale jätmiseks on mugav kasutada nö ''exclude'' faili. Tekita oma lemmik tekstiredaktoriga fail, mille sisuks oleks erinevate kataloogide ja/või failide nimed ja/või asukohad mida sa '''ei soovi''' varundada.
    * -W Teatab rsyncile kanda üle terve fail selle asemel, et kasutada oma block leveli võrdlemise vahendeid. Kui kasutada on väga kiire võrguühendus võib see võti muuta tööd kiiremaks kuna rsync ei pea faile kontrollima, kasutades rsynci üle interneti on tõenäoliselt seda võtit kasutada ebapraktiline
*.mp3
    * -c Käseb genereerida kõigi failide kontrollsummad. Tavajuhul rsync lihtsalt võrdleb faili loomise ja muutmise aeg, et selgitada välja kas see on muutunud või ei. Kasutades seda võtit võib rsync muutuda üsnagi aeglaselt seega kasutada vaid tõsise vajaduse korral, näiteks kui kahtlus, et failide info on kuidagi rikutud.
*.avi
    * -z suunab rsynci kasutama zlib pakkimist
*.mpg
Eelmine näide ''exclude'' faili abil oleks selline
rsync -az --delete -e ssh --exclude-from <exclude faili nimi> /home remoteuser@remotehost.remotedomain:/var/backup


== Serveriga (rsyncd) ==
Varundame kausta /etc serveris 192.168.1.10 asuvasse kausta "backup"
rsync -a /etc kasutaja@192.168.1.10::backup


=Kasutatud kirjandus=
=Kasutatud kirjandus=
*http://kuutorvaja.eenet.ee/wiki/Rsync
*[1] http://kuutorvaja.eenet.ee/wiki/Rsync
*http://www.bsd.ee/handbook/mirrors-rsync.html
*[2] http://www.bsd.ee/handbook/mirrors-rsync.html
*https://help.ubuntu.com/community/rsync
*[3] https://help.ubuntu.com/community/rsync
*[4] http://www.fredshack.com/docs/rsync.html
*[5] http://sial.org/howto/rsync/


== Autor ==
= Autor =
:Martin Lehari
:Martin Lehari
:A22
:A22


[[Category: Operatsioonisüsteemide administreerimine ja sidumine]]
[[Category: Operatsioonisüsteemide administreerimine ja sidumine]]

Latest revision as of 13:34, 9 May 2010

Sissejuhatus

Rsync on vaba tarkvara unixi laadsetele süsteemidele mis sünkroniseerib faile ja kaustu ühest asukohast teise. [1] Rsync töötab sarnaselt käsuga rcp, aga tal on rohkem võtmeid ning ta kasutab rsynci kaugvärskendamise protokolli, mis toob kohale vaid erinevused kahe komplekti failide vahel - seega kiirendab see märkimisväärselt üle võrgu toimuvat sünkroniseerimist. [2]

Tarkvara ametlik koduleht asub aadressil http://rsync.samba.org/

Paigldamine

Rsync peaks kõigi kaasaegsete distributsioonide "standardvarustuses" olema. Kahtluste tekkimisel tasuks pakihalduri abiga kontrollida, kas rsync, xinetd ja ssh ikka paigaldatud on. [3]

Ubuntu korral võiks see toimuda näiteks nii

apt-get install rsync xinetd ssh

Kasutamine

Lihtsaim moodus üle võrgu varukoopia tegemiseks on kasutada rsync 'i üle SSH (-e ssh võti). Alternatiiviks oleks rsync daemon 'i kasutamine (nõuab küll rohkem häälestamist ja konfigureerimist aga omab ka mõningaid eeliseid) Kohaliku varukoopia tegemine nõuab ainult rsync'i olemasolu ja lugemise/kirjutamise õiguseid sünkroniseeritavates kataloogides. [3]

Iseseisvana

Lihtsaim viis, lokaalse masina piires kahe kataloogi sünkroniseerimiseks, oleks selline:

rsync -a <lähtekataloog> <sihtkataloog>

-a või --archive võtme kasutamine kindlustab kuupäevade, õiguste, omanike ja linkide säilumise

Üle võrgu sünkroniseerimine toimub saranaselt:

rsync -a -e ssh <lähtekataloog> <kasutaja>@<serveri nimi või aadress>:<sihtkataloog>

-e ssh võti käsib rsync 'il kasutada SSH shell 'i.

Koos serveriga (rsyncd)

Varundusserverit luues oleks mõistlik seal kasutada rsync daemon 'it mis võimaldab parooliga ligipääsu lugemiseks/kirjutamiseks teatud kaustadele. [1]

xinetd häälestamine

[3] Ava fail /etc/default/rsync ja muuda seal RSYNC_ENABLE parameetri väärtus:

RSYNC_ENABLE=inetd

Järgmiseks loo fail /etc/xinetd.d/rsync mille sisu võiks olla selline:

service rsync
{
    disable = no
    socket_type = stream
    wait = no
    user = root
    server = /usr/bin/rsync
    server_args = --daemon
    log_on_failure += USERID
}

Seadmistamine

Seadistusfailiks on /etc/rsyncd.conf

Näidis:

max connections = 10
log file = /var/log/rsync.log
timeout = 300

[share1]
   comment = <kausta või faile kirjeldav kommentaar või märkus>
   path = <failide asukoht>
   read only = no
   auth users = <kasutajanimi1>, <kasutajanimi2> 
   secrets file = /etc/rsyncd.secrets

[share2]
   path = <failide asukoht>
   comment = <kausta või faile kirjeldav kommentaar või märkus>
   dont compress = *
   hosts allow = *.acme.com
   hosts deny = * 
  • dont compress lülitab määratud failitüüpide jaoks pakkimise välja (näiteks pilte ja videoid, mis on juba pakitud, pole mõtet hakata uuesti pakkima). Vaikimisi ei pakita *.gz *.tgz *.zip *.z *.rpm *.deb *.iso *.bz2 *.tbz faile. [1]
  • secrets file näitab ära kasutajate ja paroolifailide asukoha.
  • read only abil saame muuta selle kataloogi ainult loetavaks. Vaikeväärtus on yes.
  • auth users kaudu saame piirata ligipääsu ainult teatud kasutajatele.
  • hosts allow ja hosts deny abil saame reguleerida erinevate hostide ligipääsu sellele kataloogile.

Kasutajate- ja paroolifaili loomiseks võid kasutada omale meelepärast tekstiredatorit. Faili sisu peab vastama reeglile:

<kasutajanimi>:<parool>

Kuna selles failis hoitakse kasutajanime ja parooli plain textina, siis tuleks ligipääs sellele võimalikult kinni keerata.

chmod 600 /etc/rsyncd.secrets

Teenuse käivitamine

Kui kõik eelnevad seadistured on tehtud, siis on järgi jäänud vaid rsync daemon 'i esmane käivitamine

/etc/init.d/xinetd restart

Kasutamine

Lihtsaim viis, kataloogi sünkroniseerimiseks rsync daemon serveriga, oleks selline:

rsync -a <lähtekataloog> <kasutaja>@<serveri nimi või aadress>::<jagatud kataloogi nimi>

Olulisemad võtmed

Järgnevalt tooks ära mõned olulisemad võtmed, mida võib rsync 'i kasutamisel vaja minna. Täpsema ülevaate saab, kui vaadata rsync 'i man lehekülge. [1]

  • -a või --archive võtme kasutamine kindlustab kuupäevade, õiguste, omanike ja linkide säilumise
  • -v või --verbose annabb kogu sünkroniseerimisprotsessi kohta põhjalikumat infot (nt. failide nimed, vms...)
  • --progress näitab infot ülekande progressi kohta
  • --stats näitab ülevaatlikumat statistikat kulunud ajast ja failide hulgast
  • -z või --compress käsib rsync 'il kasutada zlib pakkimist
  • -d või --delete kasutamisel kustutatakse mitte eksisteerivad failid eelnevast backupist
  • --exclude "<faili kirjeldus>" abil saab vältida mingile kindla mustriga klappivate failide varundamise. Faili kirjeldamiseks võib kasutada nii laiendit kui ka mingit osa faili nimest
  • -n nö. "eelvaate" režiim, kus rsync lihtsalt ütleb mida ta teeks ilma reaalselt faile üle kandmata
  • -c käseb genereerida kõigi failide kontrollsummad. Tavajuhul rsync lihtsalt võrdleb faili loomise ja muutmise aegu, et selgitada välja kas see on muutunud või ei. Kuna selle võtme kasutamine võib rsync 'i muuta üsnagi aeglaseks, siis tasuks seda kasutada vaid tõsise vajaduse korral, näiteks kui on kahtlus, et failide sisu on kuidagi rikutud.

Varundamisel mõnele sellisele andmekandjale, mille failisüsteem ei toeta õiguseid (näiteks FAT failisüsteemiga vormindatud USB mälupulk), tuleks -a asemel kasutada võtmekomplekti -rlt [5]

  • -r kaasab ka alamkataloogid
  • -l kopeerib ka symlink 'id
  • -t säilitab failide kuupäevainfo

Näited

Varundame kasutajate kodukataloogid serveris 192.168.1.10 asuvasse kausta "/var/backup". Varundusserveri ruumi säästmiseks pakime failid kokku ja kustutame eelnevast backupist nüüdseks mitte eksisteerivad failid ära. Kasutajate muusikavaramu ja lemmikloomade videod jätame ka kõrvale.

rsync -az --delete -e ssh --exclude "*.mp3" --exclude "*.avi" --exclude "*.mpg" /home remoteuser@remotehost.remotedomain:/var/backup

Paremaks ja mugavamaks teatud failide ja kataloogide kõrvale jätmiseks on mugav kasutada nö exclude faili. Tekita oma lemmik tekstiredaktoriga fail, mille sisuks oleks erinevate kataloogide ja/või failide nimed ja/või asukohad mida sa ei soovi varundada.

*.mp3
*.avi
*.mpg

Eelmine näide exclude faili abil oleks selline

rsync -az --delete -e ssh --exclude-from <exclude faili nimi> /home remoteuser@remotehost.remotedomain:/var/backup

Varundame kausta /etc serveris 192.168.1.10 asuvasse kausta "backup"

rsync -a /etc kasutaja@192.168.1.10::backup

Kasutatud kirjandus

Autor

Martin Lehari
A22