Forum Debian Users Gang

vnu007dl · 2011-05-31 12:47:56

Mam nadzieję, że to dobre miejsce na taki temat, jak coś to proszę o przeniesienie.

Ostatnio ktoś mi zaoferował, że odda mi 3 jakieś stare kompy, w pierwszym odruchu powiedziałem nie, bo po co mi to, ale później pomyślałem że zmienię zdanie, bo może udało by się zrobić coś pożytecznego z tych śmieci, np klaster :) Czytam już 2 dni o tym, ale chcę dopytać o parę rzeczy zanim zacznę się w to bawić. Mianowicie:

1) Czy węzły (nody) muszą mieć takie same procesory? Z tego co wiem, są tam jakieś 2 intele i chyba jeden amd, czyli czy mogą być różne procesory o różnych taktowaniach?

2)Co tak naprawdę jest potrzebne żeby zrobić taki kalster, ja to rozumiem, że z każdego kompa potrzebuję płytę główna z procesorem. plus RAM i karta sieciowa, to wszystko trzeba połączyć swiczem, no i do tego jeden główny nod, czyli standardowy komputer z napędami, kartą grafiki i całą resztą.

3) Czy to mi wszystko pójdzie na Kubuntu? chcę to podłączyć przy pomocy MOSIXa, czy *buntu to obsługuje, czy przy instalacji systemu mi to samo wyskoczy, czy muszę to ręcznie kompilować?

winnetou · 2011-05-31 12:53:23

AFAIR procki nie muszą być takie same. Minimum (sprzętowe) jakie musisz mieć na nodach to proc+płyta+zasilacz+ram+siecówka (wskazany byłby dysk ale można to zrobić też po np pxe). No i jeszcze wszystko zależy od tego jakich chcesz zrobić klaster. Czy ma to być typowo obliczeniowy, czy klaster www, pocztowy czy jeszcze jakiś inny.

vnu007dl · 2011-05-31 13:10:39

A do czego potrzebny dysk? To są stare kompy i stare wolne dyski po 20GB pewnie, wiec chciałbym to wywalić bo raz to wolne i małe, a dwa niepotrzebnie by zużywało prąd bo i tak wszystkie dane miałbym, na jednym głównym nodzie na dużym szybkim dysku.

Co do tego klastra to chciałbym, był w stylu destop, czyli wspomagał zwykłą pracę kompa z naciskiem na edycję wideo, bo zajmuję się czasem re kompresją materiału HD z kamery i to czasem dość długo trwa.

winnetou · 2011-05-31 13:15:00

Jakiś OS do zarządzania klientem klastra by się przydał. Możesz to zrobić przez PXE jak nie chcesz tam dysków pakować.

Co do obróbki wideo to musiałbyś poszukać softu który umożliwia rozproszone przetwarzanie obrazu.
Bo złożenie klastra nie spowoduje że nagle w systemie przybędzie Ci ramu czy rdzeni (a przynajmniej ja się jeszcze z takim nie spotkałem - chyba że masz jakieś magiczne sposoby ;))

vnu007dl · 2011-05-31 13:47:28

No to na jakiej zasadzie to działa? Z tego co wiem, to wystarczy tylko zainstalować moduł MOSIX do jądra i gotowe i nie trzeba jakiegoś dodatkowego softu i wszystkie aplikacje w systemie widzą węzły jako procesory, a każde zadanie jest przekazywane do najsilniejszego wolnego węzła i jak tam już brakuje, to dzieli na kolejne ?

Co to jest PXE?

Ostatnio edytowany przez vnu007dl (2011-05-31 13:48:01)

winnetou · 2011-05-31 14:04:34

[url=http://pl.wikipedia.org/wiki/Preboot_Execution_Environment]PXE[/url] W skrócie bootownie systemu przez sieć
[url=http://www.bsdguru.org/node/33]Klastry i nie tylko[/url]
Gdzieś na BSDGuru widziałem jeszcze jak zrobić kalster z wykorzystaniem [url=http://www.beowulf.org/]Beowulf'a[/url]

ba10 · 2011-05-31 15:15:51

[quote=winnetou]Jakiś OS do zarządzania klientem klastra by się przydał. Możesz to zrobić przez PXE jak nie chcesz tam dysków pakować.[/quote]
Myślę że [url=http://fai-project.org]FAI[/url] mógłby być dobrym wyborem, choć nie wiem czy nie za duża armata na taka muchę ;) :)

Time (s)	Query
0.00010	SET CHARSET latin2
0.00004	SET NAMES latin2
0.00089	SELECT u., g., o.logged FROM punbb_users AS u INNER JOIN punbb_groups AS g ON u.group_id=g.g_id LEFT JOIN punbb_online AS o ON o.ident='3.145.62.36' WHERE u.id=1
0.00068	REPLACE INTO punbb_online (user_id, ident, logged) VALUES(1, '3.145.62.36', 1732773142)
0.00058	SELECT * FROM punbb_online WHERE logged<1732772842
0.00047	SELECT topic_id FROM punbb_posts WHERE id=174276
0.00011	SELECT id FROM punbb_posts WHERE topic_id=19062 ORDER BY posted
0.00057	SELECT t.subject, t.closed, t.num_replies, t.sticky, f.id AS forum_id, f.forum_name, f.moderators, fp.post_replies, 0 FROM punbb_topics AS t INNER JOIN punbb_forums AS f ON f.id=t.forum_id LEFT JOIN punbb_forum_perms AS fp ON (fp.forum_id=f.id AND fp.group_id=3) WHERE (fp.read_forum IS NULL OR fp.read_forum=1) AND t.id=19062 AND t.moved_to IS NULL
0.00005	SELECT search_for, replace_with FROM punbb_censoring
0.00084	SELECT u.email, u.title, u.url, u.location, u.use_avatar, u.signature, u.email_setting, u.num_posts, u.registered, u.admin_note, p.id, p.poster AS username, p.poster_id, p.poster_ip, p.poster_email, p.message, p.hide_smilies, p.posted, p.edited, p.edited_by, g.g_id, g.g_user_title, o.user_id AS is_online FROM punbb_posts AS p INNER JOIN punbb_users AS u ON u.id=p.poster_id INNER JOIN punbb_groups AS g ON g.g_id=u.group_id LEFT JOIN punbb_online AS o ON (o.user_id=u.id AND o.user_id!=1 AND o.idle=0) WHERE p.topic_id=19062 ORDER BY p.id LIMIT 0,25
0.00085	UPDATE punbb_topics SET num_views=num_views+1 WHERE id=19062
Total query time: 0.00518 s

Forum Debian Users Gang

Ogłoszenie

#1 2011-05-31 12:47:56

vnu007dl - Użytkownik

Kilka pytań o klaster

#2 2011-05-31 12:53:23

winnetou - złodziej wirków ]:->

Re: Kilka pytań o klaster

#3 2011-05-31 13:10:39

vnu007dl - Użytkownik

Re: Kilka pytań o klaster

#4 2011-05-31 13:15:00

winnetou - złodziej wirków ]:->

Re: Kilka pytań o klaster

#5 2011-05-31 13:47:28

vnu007dl - Użytkownik

Re: Kilka pytań o klaster

#6 2011-05-31 14:04:34

winnetou - złodziej wirków ]:->

Re: Kilka pytań o klaster

#7 2011-05-31 15:15:51

ba10 - Członek DUG

Re: Kilka pytań o klaster

Stopka forum

Informacje debugowania