Nie jesteś zalogowany.
Jeśli nie posiadasz konta, zarejestruj je już teraz! Pozwoli Ci ono w pełni korzystać z naszego serwisu. Spamerom dziękujemy!

Ogłoszenie

Prosimy o pomoc dla małej Julki — przekaż 1% podatku na Fundacji Dzieciom zdazyć z Pomocą.
Więcej informacji na dug.net.pl/pomagamy/.

#1  2012-04-01 00:49:21

  desavil - Użytkownik

desavil
Użytkownik
Zarejestrowany: 2010-11-02

Optymalny backup z rsync

W cronie uruchamiam sobie codziennie o godz. 2:00 polecenie:

Kod:

ssh user@serwer -p 22 'rm -R -f backup_old' && ssh user@serwer -p 22 'mkdir -p backup' && ssh user@serwer -p 22 'cp -R backup backup_old' && rsync -a --delete --delete-after --numeric-ids --exclude '/home/backup/apps/*/*.log' --rsh='ssh -p 22' /home/backup user@serwer:~/

Jego idea polega na przechowywaniu dwóch kopii aktualnej oraz poprzedniej.
Kopia poprzednia jest najpierw kopiowana, oraz wykonywanie jest porównanie plików na tej kopii z plikami serwera oraz nanoszone są zmiany. Rozwiązanie takie zastosowałem ponieważ nie chciałem codziennie kopiować wszystkich plików.

Kopia dotyczy ok. 400GB danych. Niestety trwa to ok. 24h. czasem można powiedzieć taka możliwość się zapętla, gdyż poprzednia kopia się jeszcze nie zakończyła tworzyć a nowa już się uruchamia. Dodatkowo wpływa to można powiedzieć bardzo źle na dysk serwera - długi czas odczytu podczas wykonywania kopii w taki sposób, że inne aplikacje w tym czasie nie działają poprawnie.

Macie może jakieś propozycje, rozwiązania w jaki sposób mógłbym to zrobić, aby było to wydajniejsze i trwało krócej? Może istnieje możliwość zrobienia NFS i uruchomienie jakiegoś sieciowego RAIDa opóźnionego, że np. tworzy się kolejka z plikami i są ciągle wysyłane. Tylko proszę nie pisać propozycji typu: kup serwer z dwoma dyskami i zrób RAID.

Pozdrawiam.

Ostatnio edytowany przez desavil (2012-04-01 00:50:39)

Offline

 

#2  2012-04-01 02:45:34

  Jacekalex - Podobno człowiek...;)

Jacekalex
Podobno człowiek...;)
Skąd: /dev/urandom
Zarejestrowany: 2008-01-07

Re: Optymalny backup z rsync

Próbowałeś DRBD?

Sznurki:
http://en.wikipedia.org/wiki/DRBD
http://www.howtoforge.com/setting-up-network-raid1-with-drbd-on-debian-squeeze
http://en.gentoo-wiki.com/wiki/Heartbeat_and_DRBD

Pozdro
;-)

Ostatnio edytowany przez Jacekalex (2012-04-01 02:52:20)


W demokracji każdy naród ma taką władzę, na jaką zasługuje ;)
Si vis pacem  para bellum  ;)       |       Pozdrawiam :)

Offline

 

#3  2012-04-01 11:33:00

  desavil - Użytkownik

desavil
Użytkownik
Zarejestrowany: 2010-11-02

Re: Optymalny backup z rsync

Dzięki :)
Mógłbym jeszcze uzyskać jakieś propozycje z rsync?

Offline

 

Stopka forum

Powered by PunBB
© Copyright 2002–2005 Rickard Andersson
Nas ludzie lubią po prostu, a nie klikając w przyciski ;-)

[ Generated in 0.008 seconds, 11 queries executed ]

Informacje debugowania

Time (s) Query
0.00013 SET CHARSET latin2
0.00005 SET NAMES latin2
0.00102 SELECT u.*, g.*, o.logged FROM punbb_users AS u INNER JOIN punbb_groups AS g ON u.group_id=g.g_id LEFT JOIN punbb_online AS o ON o.ident='3.137.180.62' WHERE u.id=1
0.00081 REPLACE INTO punbb_online (user_id, ident, logged) VALUES(1, '3.137.180.62', 1732455010)
0.00041 SELECT * FROM punbb_online WHERE logged<1732454710
0.00076 SELECT topic_id FROM punbb_posts WHERE id=198966
0.00090 SELECT id FROM punbb_posts WHERE topic_id=21000 ORDER BY posted
0.00056 SELECT t.subject, t.closed, t.num_replies, t.sticky, f.id AS forum_id, f.forum_name, f.moderators, fp.post_replies, 0 FROM punbb_topics AS t INNER JOIN punbb_forums AS f ON f.id=t.forum_id LEFT JOIN punbb_forum_perms AS fp ON (fp.forum_id=f.id AND fp.group_id=3) WHERE (fp.read_forum IS NULL OR fp.read_forum=1) AND t.id=21000 AND t.moved_to IS NULL
0.00005 SELECT search_for, replace_with FROM punbb_censoring
0.00071 SELECT u.email, u.title, u.url, u.location, u.use_avatar, u.signature, u.email_setting, u.num_posts, u.registered, u.admin_note, p.id, p.poster AS username, p.poster_id, p.poster_ip, p.poster_email, p.message, p.hide_smilies, p.posted, p.edited, p.edited_by, g.g_id, g.g_user_title, o.user_id AS is_online FROM punbb_posts AS p INNER JOIN punbb_users AS u ON u.id=p.poster_id INNER JOIN punbb_groups AS g ON g.g_id=u.group_id LEFT JOIN punbb_online AS o ON (o.user_id=u.id AND o.user_id!=1 AND o.idle=0) WHERE p.topic_id=21000 ORDER BY p.id LIMIT 0,25
0.00087 UPDATE punbb_topics SET num_views=num_views+1 WHERE id=21000
Total query time: 0.00627 s