System Archiwizacji - HSM System Archiwizacji - HSM
System archiwizacji udostępniony przez PCSS oparty jest o klaster dwóch serwerów współdzielących zasób dyskowy. Współdzielona przestrzeń dyskowa zarządzana jest oprogramowaniem Hierarchicznego Zarządzania Archiwum (HSM - Hierarchical Storage Management) a realizacja tego mechanizmu odbywa się przy pomocy oprogramowania IBM Spectrum Protect for Space Management (do niedawna nazywane IBM Tivoli Storage Manager for Space Management). Pierwszy poziom hierarchii to przestrzeń dyskowa znajdująca się na macierzy i zarządzana przy użyciu systemu plików IBM Spectrum Scale (przed zmianą nazwy był to GPFS - General Parallel File System). Drugi poziom składowania danych w hierarchii to przestań taśmowa, na którą trafiają pliki dzięki czemu zostaje zwolnione miejsce w przestrzeni dyskowej. Przestrzeń taśmowa to wydzielona partycja biblioteki IBM TS 3500, która wyposażona jest w napędy taśmowe LTO5 oraz Jaguar gen8. W związku z tym, że potrzebny jest czas do przegrania plików pomiędzy przestrzeniami taśma-dysk, pobieranie plików z archiwum wiąże się z oczekiwaniem na dostępność pliku a czas oczekiwania liniowo zależy od wielkości pliku (może to być więc od kilku sekund do kilkunastu minut). Czas oczekiwania może się również wydłużyć w przypadku gdy kilku klientów chce uzyskać dostęp do plików w tym samym czasie i zadania odtworzenia plików czekają na dostęp do napędów, których liczba jest ograniczona.
Usługa archiwizacji dostępna jest pod adresem: backup.man.poznan.pl
Możliwy jest również dostęp bezpośrednio na serwery świadczące usługę czyli:
Z systemu archiwizacji w PCSS mogą korzystać:
Aby zalogować się na konto należy użyć posłużyć się identyfikatorem użytkownika oraz hasłem
Założenie pierwszego hasła lub późniejsza zmiana hasła do konta odbywa się przy pomocy serwisu: https://drawer.man.poznan.pl/pwd/?action=sendtoken UWAGA! zgodnie z polityką bezpieczeństwa jeśli przez 3 miesiące nikt się nie logował na konto to należy hasło wygenerować ponownie.
Dane dostępne są po protokole szyfrowanym przy pomocy aplikacji wykorzystującej ssh (transmisja szyfrowana):
W katalogu domowym użytkowania dostępnym poprzez protokoły szyfrowane dostępne są dwa katalogi
Korzystając z protokołu ftp użytkownik trafia od razu do katalogu ARCHIVE
Prosimy o to, aby pliki przesyłane do systemu archiwizacji były przystosowane do wymagań architektury systemu HSM zabrania się przesyłania tysięcy małych plików. Małe pliki powodują znaczące obciążenie usługi archiwizacyjnej, dlatego preferowane jest umieszczanie w usłudze dużych plików (np. obszernych plików multimedialnych, obrazów systemów, backów baz danych), lub wielu plików spakowanych w archiwum (zip,tar,gzip etc.).
Ze względu na długie czasy przesyłania plików o rozmiarze 500GB i więcej zdarza się, że nasz system kilkakrotnie próbuje obsłużyć dany plik gdy jest on nadal przesyłany do PCSS. W związku z powyższym, prosimy również o górne ograniczenie rozmiaru plików (najlepiej aby przesłanie pojedynczego pliku nie trwało dłużej niż 2 godziny), gdyż może to znacząco wpłynąć na szybkość obsługi przez serwery.
Prosimy o nie przenoszenie plików umieszczonych na serwerze pomiędzy katalogami np. zmieniając nazwę katalogu np. serwer_X na serwer_X.old - operacja taka powoduje dodatkowy, długotrwały ruch danych związany z operacjami wymazywania danych z serwera archiwizacji i backupu (pierwotna lokalizacja - katalog serwer_x) oraz ponownym wykonywaniem backupu oraz migracji dla nowej lokalizacji danych (katalog serwer_x.old)
Prosimy o nieużywanie polskich znaków w nazwach plików, gdyż czasami jest utrudniony dostęp dla systemu HSM do takich plików
ANS1228E Sending of object '/GPFS01/clients-stgr/../..Ma▒opolski..wmv' failed. ANS4042E Object name '/GPFS01/clients-stgr/../..Ma▒opolski..wmv' contains one or more unrecognized characters and is not valid.
Zalecamy dodatkowe szyfrowanie danych przez ich umieszczeniem w archiwum np. przy pomocy wydajnej aplikacji AES Crypt
Administratorzy systemu dostępni są pod adresem storage[at]man.poznan.pl