Moose File System

Z Wikipedii, wolnej encyklopedii
Skocz do: nawigacji, wyszukiwania
Moose File System
Distributed file system
MooseFS logo.png
Logo programu
Producent Core Technology
System operacyjny Linux, Solaris, Mac OS X, FreeBSD
Napisane w C
Pierwsze wydanie 2006
Aktualna wersja stabilna 2.0.34 CE[1][2]/ 21 sierpnia 2014; 28 dni temu
Licencja GNU General Public License
http://www.moosefs.org

Moose File System (MooseFS) – odporny na awarie, wysoko dostępny rozproszony system plików stworzony w 2005 roku w przedsiębiorstwie Core Technology. Od 5 maja 2008 roku kod źródłowy MooseFS oparty jest na licencji GNU General Public License. Sieciowy system plików MooseFS polega na tym, że dystrybuuje on dane na wiele maszyn wchodzących w skład danej instancji MooseFS. Wszystkie pliki są dostępne dla każdej z maszyn a jakakolwiek modyfikacja pliku jest odnotowana w całym systemie. Dane są od razu widoczne dla użytkownika w formie jednego zasobu (jak w olbrzymim dysku/katalogu). MooseFS wraz z OpenNebula tworzą niezawodną chmurę obliczeniową[3]. Dla typowych operacji plikowych MooseFS zachowuje się tak samo jak inne uniksowe systemy plików:

  • przechowuje atrybuty POSIX: uprawnienia, czasy dostępu i modyfikacji
  • posiada hierarchiczną strukturę: drzewo katalogów
  • obsługuje pliki specjalne: blokowe, urządzenia znakowe, gniazda i potoki (ang. pipes)
  • linki symboliczne: nazwy plików mogą wskazywać na pliki docelowe, które niekoniecznie znajdują się na MooseFS
  • hard linki: różne nazwy plików, które odnoszą się do tych samych danych na MooseFS

Możliwe jest również ograniczenie dostępu do systemu plików na podstawie adresu IP i/lub hasła.

Architektura[4][edytuj | edytuj kod]

MooseFS jest rozszerzeniem takich systemów storage’owych jak Google File System, Lustre lub Ceph. MooseFS składa się z czterech elementów:

  • Master serwer – Master serwer (serwer zarządzający) – pojedyncza maszyna kierująca całym systemem, przechowuje metadane dla każdego pliku (informacje o rozmiarze, atrybutach i lokalizacji pliku, uwzględniając wszystkie informacje dotyczące nieregularnych plików, takich jak: blokowe, urządzenia znakowe, gniazda i potoki).
  • Chunk serwery – dowolna liczba serwerów przechowująca pliki z danymi i synchronizująca całość ze sobą (jeśli niektóre pliki powinny istnieć w więcej niż w jednej kopii)
  • Metalogger serwery – dowolna liczba serwerów, wszystkie z nich przechowują changelog metadanych oraz okresowe pobierają plik metadanych; te serwery mogą przyjąć rolę Master serwera kiedy Master przestanie pracować
  • Klient – dowolna liczba komputerów używających procesu Moosefs do komunikacji z zarządzającym serwerem (otrzymuje i zmienia pliki z metadanymi) i z chunkserwerami (wymienia się aktualnymi danymi).

Dodatkowe funkcje w MooseFS[5][edytuj | edytuj kod]

  • Monitoring – pozwala na wygodny podgląd pracy całego systemu, jest dostępny przez przeglądarkę internetową. Interfejs ma formę wykresów, na których umieszczone są takie informacje jak: stan dysków/błędy dysków zużycie zasobów serwerów stan replikacji danych wydajność systemu.
  • Przeźroczysty kosz – dane umieszczone w koszu są przechowywane na czas ustalony przez użytkownika i dopiero po jego upływie są fizycznie usuwane.
  • Replikacja – każdy plik posiada atrybut o nazwie goal informuje on system w ilu kopiach ma być przechowywany dany plik, ta funkcja podnosi bezpieczeństwo danych.
  • Dynamiczna pojemność – węzeł MooseFS można rozszerzać poprzez dołączanie nowych komputerów lub dysków (o różnej ilości i wielkości) które automatycznie integrują się z całą siecią odpowiednimi operacjami kopiowania i usuwania.
  • Spójne snapshoty – fragmenty plików, które użytkownik modyfikuje są bardzo szybko duplikowane.

MooseFS w liczbach[6][edytuj | edytuj kod]

  • Maksymalny rozmiar storage’u: 2⁶⁴ = 16 EksbiBajtów = 16384 PebiBajtów
  • Maksymalny rozmiar pojedynczego pliku: 2^57 = 128 PebiBajtów
  • Maksymalna liczba plików w jednej instancji MooseFS: 2²⁹ = 536 milionów
  • Liczba aktywnych połączeń klientów jest nieograniczona i zależy od liczby deskryptorów plików w systemie.

Przypisy[edytuj | edytuj kod]

MooseFS ma tysiące użytkowników na całym świecie[7]. W Polsce od 4 lat jest używany przez ipla – interaktywną telewizję internetową i serwis świadczący usługi filmów na życzenie.

Gemius SA – przedsiębiorstwo, które zajmuje się badaniem rynku internetowego – używa MooseFS od początku powstania, czyli od 1999 roku.W AdOcean jest używany od 2010[8] roku. Działalność AdOcean polega głównie na gromadzeniu oraz przechowywaniu danych z sieci reklamowych, firma jest liderem w zakresie zaawansowanych technologii emisji i pomiaru reklam w internecie w kilkunastu krajach Europy Środkowo-Wschodniej.

Przypisy

Linki zewnętrzne[edytuj | edytuj kod]