Mars:Podstawy: Różnice pomiędzy wersjami

Z Komputery Dużej Mocy w ACK CYFRONET AGH
Skocz do:nawigacja, szukaj
(Utworzył nową stronę „__NOTITLE__ == Nazwa maszyny dostępowej == <code> zeus.cyfronet.pl </code> lub '''ui.cyfronet.pl''' (możliwe są też kombinacje domen Cyfronetu: '''zeus.cyf-k...”)
 
Linia 4: Linia 4:
  
 
<code>
 
<code>
  zeus.cyfronet.pl
+
  mars.cyf-kr.edu.pl
 
</code>
 
</code>
  
lub '''ui.cyfronet.pl''' (możliwe są też kombinacje domen Cyfronetu: '''zeus.cyf-kr.edu.pl''', '''zeus.cyfronet.krakow.pl''')
+
Możliwe są też kombinacje domen Cyfronetu: '''mars.cyfronet.pl''', '''mars.cyfronet.krakow.pl''')
  
 
== Zasoby dyskowe ==
 
== Zasoby dyskowe ==
Linia 17: Linia 17:
 
! Kopia bezpieczeństwa  
 
! Kopia bezpieczeństwa  
 
|-
 
|-
|/people/login || 5GB || [katalog domowy użytkownika] || tak
+
|/people/login || 10GB || [katalog domowy użytkownika] || tak
 
|-
 
|-
|/storage/login || 100GB || [składowanie danych użytkownika] || nie
+
|/scratch/login || 600GB || [składowanie danych użytkownika] || nie
 
|-
 
|-
|/mnt/lustre/scratch/login || brak limitu || [przestrzeń dla plików tymczasowych zadań] || nie
+
|/scratch-lustre/mars/login || brak limitu || [przestrzeń dla plików tymczasowych zadań] || nie
 
|}
 
|}
  
Linia 32: Linia 32:
 
System kolejkowy: Torque
 
System kolejkowy: Torque
  
Zarządca zasobów: Moab
+
Zarządca zasobów: Maui
  
 
W celu uruchomienia zadania niezbędna jest wiedza na temat podstawowych komend systemu kolejkowego. [link]
 
W celu uruchomienia zadania niezbędna jest wiedza na temat podstawowych komend systemu kolejkowego. [link]
Linia 41: Linia 41:
 
! Nazwa kolejki !! Maksymalna liczba zadań użytkownika !! Maksymalny czas trwania zadania !! Dodatkowe informacje
 
! Nazwa kolejki !! Maksymalna liczba zadań użytkownika !! Maksymalny czas trwania zadania !! Dodatkowe informacje
 
|-
 
|-
| l_prio || 40 || 1 godzina || kolejka przeznaczona dla krótkich zadań, które powinny się szybko policzyć
+
| short || 10 || 6h || kolejka przeznaczona dla krótkich zadań, które powinny się szybko policzyć
 
|-
 
|-
| l_test || 10 || 15 minut || kolejka do testów działania zadania
+
| long || 5 || 200h || kolejka do testów działania zadania
 
|-
 
|-
| l_short || 1000 || 3 godziny ||  
+
| very_long || 5 || 999h ||  
 
|-
 
|-
| l_long || 700 || 3 doby ||  
+
| accelrys || 2 || 900h | wymagane uprawnienie |  
|-
 
| l_infinite || 700 || bez limitu ||
 
|}
 
 
 
== Opis właściwości węzłów obliczeniowych ==
 
 
 
{| class="wikitable" style="text-align:center;"
 
! Właściwość
 
! Opis
 
|-
 
| mhz2666 || szybkość procesora
 
|-
 
| 16, 24gb || ilość pamięci RAM w serwerze obliczeniowym
 
|-
 
| core8, core12 || ilość rdzeni w serwerze obliczeniowym
 
|-
 
| ib_ql || sieć Inifniband firmy Qlogic
 
|-
 
|ib_mlx || sieć Infiniband firmy Mellanox
 
|-
 
|infiniband || serwer obliczeniowy z siecią Infiniband
 
 
|}
 
|}
  
== Sposób korzystania z sieci Infiniband ==
+
==Zasady obowiązujące na komputerze Mars==
 
 
== Zasady obowiązujące na klastrze Zeus ==
 
 
 
* Obowiązuje całkowity zakaz używania maszyny dostępowej do wykonywania obliczeń. Administratorzy będą przerywać takie procesy bez ostrzeżenia.
 
 
 
* W celu skompilowania programu proszę użyć polecenia: <code>qsub -I -q l_interactive -l nodes=1:ppn=1</code><br/>Polecenie to spowoduje zalogowanie użytkownika na węzeł obliczeniowy, tam proszę uruchomić kompilację programu
 
  
* W celu wykonywania obliczeń niezbędne jest podanie identyfikatora grantu za pomocą parametru "-A".
+
  1. Każdy użytkownik posiada określoną "quota" w katalogu domowym /home (10GB)
Szczegółowy opis grantów znajduje się [[Granty|tutaj]].
+
    Ważne pliki należy umieszczać w katalogu domowym.
 +
  2. Dostepne są dwa katalogi robocze
 +
    a. /scratch o pojemności 2TB dostepny tylko na węzłach klastra Mars
 +
    b. /scratch-lustre o pojemności 24TB dostępny dla klastra Mars i Zeus
 +
  3. Dla każdego użytkownika utworzone są dwa katalogi:
 +
        a. /scratch/login
 +
        b. /scratch-lustre/mars/login
 +
    w których może prowadzić obliczenia.
 +
    Dla katalogu /scratch/login są ustawione dwa limity 'soft' na 50GB i 'hard' na 600GB
 +
    Oznacza to, że użytkownik w czasie obliczeń może zająć do 600GB ale potem musi
 +
    w ciagu 6 dni zejść poniżej 50GB aby można było przeprowadzać następne obliczenia.
 +
  4. Pliki nieużywane i nie modyfikowane dłużej niż 3 m-ce będą z katalogu
 +
    /scratch bezwzględnie usuwane bez ostrzeżenia w przypadku braku miejsca.
 +
  5. Pliki Gau*.rwf po zakończeniu zadania będą usuwane z katalogu /scratch i /scratch-lustre/mars
 +
    bez ostrzeżenia. Pliki z rozszeszeniem .rwf mające inną nazwę nie będą usuwane.
 +
  6. Katalogi /home , /scratch i /scratch-lustre/mars są dostępne dla zadań kolejkowych PBSa
 +
    na wszystkich węzłach

Wersja z 07:17, 5 mar 2012


Nazwa maszyny dostępowej

mars.cyf-kr.edu.pl

Możliwe są też kombinacje domen Cyfronetu: mars.cyfronet.pl, mars.cyfronet.krakow.pl)

Zasoby dyskowe

Lokalizacja Limit Przeznaczenie Kopia bezpieczeństwa
/people/login 10GB [katalog domowy użytkownika] tak
/scratch/login 600GB [składowanie danych użytkownika] nie
/scratch-lustre/mars/login brak limitu [przestrzeń dla plików tymczasowych zadań] nie

Dostępne oprogramowanie

Opis dostępnego oprogramowania znajduje się tutaj.

Uruchamianie zadań

System kolejkowy: Torque

Zarządca zasobów: Maui

W celu uruchomienia zadania niezbędna jest wiedza na temat podstawowych komend systemu kolejkowego. [link]

Opis kolejek

Nazwa kolejki Maksymalna liczba zadań użytkownika Maksymalny czas trwania zadania Dodatkowe informacje
short 10 6h kolejka przeznaczona dla krótkich zadań, które powinny się szybko policzyć
long 5 200h kolejka do testów działania zadania
very_long 5 999h
accelrys 2 wymagane uprawnienie |

Zasady obowiązujące na komputerze Mars

 1. Każdy użytkownik posiada określoną "quota" w katalogu domowym /home (10GB)
    Ważne pliki należy umieszczać w katalogu domowym.
 2. Dostepne są dwa katalogi robocze
    a. /scratch o pojemności 2TB dostepny tylko na węzłach klastra Mars
    b. /scratch-lustre o pojemności 24TB dostępny dla klastra Mars i Zeus
 3. Dla każdego użytkownika utworzone są dwa katalogi:
       a. /scratch/login
       b. /scratch-lustre/mars/login
    w których może prowadzić obliczenia.
    Dla katalogu /scratch/login są ustawione dwa limity 'soft' na 50GB i 'hard' na 600GB
    Oznacza to, że użytkownik w czasie obliczeń może zająć do 600GB ale potem musi
    w ciagu 6 dni zejść poniżej 50GB aby można było przeprowadzać następne obliczenia.
 4. Pliki nieużywane i nie modyfikowane dłużej niż 3 m-ce będą z katalogu
    /scratch bezwzględnie usuwane bez ostrzeżenia w przypadku braku miejsca.
 5. Pliki Gau*.rwf po zakończeniu zadania będą usuwane z katalogu /scratch i /scratch-lustre/mars
    bez ostrzeżenia. Pliki z rozszeszeniem .rwf mające inną nazwę nie będą usuwane.
 6. Katalogi /home , /scratch i /scratch-lustre/mars są dostępne dla zadań kolejkowych PBSa 
    na wszystkich węzłach