Nie jesteś zalogowany.
Jeśli nie posiadasz konta, zarejestruj je już teraz! Pozwoli Ci ono w pełni korzystać z naszego serwisu. Spamerom dziękujemy!

Ogłoszenie

Prosimy o pomoc dla małej Julki — przekaż 1% podatku na Fundacji Dzieciom zdazyć z Pomocą.
Więcej informacji na dug.net.pl/pomagamy/.

#1  2012-04-01 00:49:21

  desavil - Użytkownik

desavil
Użytkownik
Zarejestrowany: 2010-11-02

Optymalny backup z rsync

W cronie uruchamiam sobie codziennie o godz. 2:00 polecenie:

Kod:

ssh user@serwer -p 22 'rm -R -f backup_old' && ssh user@serwer -p 22 'mkdir -p backup' && ssh user@serwer -p 22 'cp -R backup backup_old' && rsync -a --delete --delete-after --numeric-ids --exclude '/home/backup/apps/*/*.log' --rsh='ssh -p 22' /home/backup user@serwer:~/

Jego idea polega na przechowywaniu dwóch kopii aktualnej oraz poprzedniej.
Kopia poprzednia jest najpierw kopiowana, oraz wykonywanie jest porównanie plików na tej kopii z plikami serwera oraz nanoszone są zmiany. Rozwiązanie takie zastosowałem ponieważ nie chciałem codziennie kopiować wszystkich plików.

Kopia dotyczy ok. 400GB danych. Niestety trwa to ok. 24h. czasem można powiedzieć taka możliwość się zapętla, gdyż poprzednia kopia się jeszcze nie zakończyła tworzyć a nowa już się uruchamia. Dodatkowo wpływa to można powiedzieć bardzo źle na dysk serwera - długi czas odczytu podczas wykonywania kopii w taki sposób, że inne aplikacje w tym czasie nie działają poprawnie.

Macie może jakieś propozycje, rozwiązania w jaki sposób mógłbym to zrobić, aby było to wydajniejsze i trwało krócej? Może istnieje możliwość zrobienia NFS i uruchomienie jakiegoś sieciowego RAIDa opóźnionego, że np. tworzy się kolejka z plikami i są ciągle wysyłane. Tylko proszę nie pisać propozycji typu: kup serwer z dwoma dyskami i zrób RAID.

Pozdrawiam.

Ostatnio edytowany przez desavil (2012-04-01 00:50:39)

Offline

 

#2  2012-04-01 02:45:34

  Jacekalex - Podobno człowiek...;)

Jacekalex
Podobno człowiek...;)
Skąd: /dev/urandom
Zarejestrowany: 2008-01-07

Re: Optymalny backup z rsync

Próbowałeś DRBD?

Sznurki:
http://en.wikipedia.org/wiki/DRBD
http://www.howtoforge.com/setting-up-network-raid1-with-drbd-on-debian-squeeze
http://en.gentoo-wiki.com/wiki/Heartbeat_and_DRBD

Pozdro
;-)

Ostatnio edytowany przez Jacekalex (2012-04-01 02:52:20)


W demokracji każdy naród ma taką władzę, na jaką zasługuje ;)
Si vis pacem  para bellum  ;)       |       Pozdrawiam :)

Offline

 

#3  2012-04-01 11:33:00

  desavil - Użytkownik

desavil
Użytkownik
Zarejestrowany: 2010-11-02

Re: Optymalny backup z rsync

Dzięki :)
Mógłbym jeszcze uzyskać jakieś propozycje z rsync?

Offline

 

Stopka forum

Powered by PunBB
© Copyright 2002–2005 Rickard Andersson
To nie jest tylko forum, to nasza mała ojczyzna ;-)

[ Generated in 0.008 seconds, 11 queries executed ]

Informacje debugowania

Time (s) Query
0.00010 SET CHARSET latin2
0.00004 SET NAMES latin2
0.00093 SELECT u.*, g.*, o.logged FROM punbb_users AS u INNER JOIN punbb_groups AS g ON u.group_id=g.g_id LEFT JOIN punbb_online AS o ON o.ident='18.222.56.71' WHERE u.id=1
0.00067 UPDATE punbb_online SET logged=1732449645 WHERE ident='18.222.56.71'
0.00039 SELECT * FROM punbb_online WHERE logged<1732449345
0.00057 SELECT topic_id FROM punbb_posts WHERE id=198998
0.00095 SELECT id FROM punbb_posts WHERE topic_id=21000 ORDER BY posted
0.00088 SELECT t.subject, t.closed, t.num_replies, t.sticky, f.id AS forum_id, f.forum_name, f.moderators, fp.post_replies, 0 FROM punbb_topics AS t INNER JOIN punbb_forums AS f ON f.id=t.forum_id LEFT JOIN punbb_forum_perms AS fp ON (fp.forum_id=f.id AND fp.group_id=3) WHERE (fp.read_forum IS NULL OR fp.read_forum=1) AND t.id=21000 AND t.moved_to IS NULL
0.00007 SELECT search_for, replace_with FROM punbb_censoring
0.00083 SELECT u.email, u.title, u.url, u.location, u.use_avatar, u.signature, u.email_setting, u.num_posts, u.registered, u.admin_note, p.id, p.poster AS username, p.poster_id, p.poster_ip, p.poster_email, p.message, p.hide_smilies, p.posted, p.edited, p.edited_by, g.g_id, g.g_user_title, o.user_id AS is_online FROM punbb_posts AS p INNER JOIN punbb_users AS u ON u.id=p.poster_id INNER JOIN punbb_groups AS g ON g.g_id=u.group_id LEFT JOIN punbb_online AS o ON (o.user_id=u.id AND o.user_id!=1 AND o.idle=0) WHERE p.topic_id=21000 ORDER BY p.id LIMIT 0,25
0.00076 UPDATE punbb_topics SET num_views=num_views+1 WHERE id=21000
Total query time: 0.00619 s