🚀 go-pugleaf

RetroBBS NetNews Server

Inspired by RockSolid Light RIP Retro Guy

Thread View: pl.comp.os.linux
9 messages
9 total messages Started by Marcin Debowski Sat, 18 Jan 2025 09:14
rozproszone zasoby dyskowe
#907989
Author: Marcin Debowski
Date: Sat, 18 Jan 2025 09:14
11 lines
1263 bytes
Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
jeden obszar na jakimś kliencie?

Powiedzmy jest sobie host A, ma wolnego 4TB, B ma 2TB, C ma 5TB itd. I 
teraz jakiś klient na maszynie M zrobi z tego urządzenie blokowe 11TB? 
Takie lvm sieciowe. Czy iSCSI czasem czegoś takiego nie umożliwia? 
Czytam różne hał-tó i jestem trochę jak to mówią skonfudowany.

-- 
Marcin
Re: rozproszone zasoby dyskowe
#907990
Author: Dominik Ałaszewski
Date: Mon, 20 Jan 2025 07:00
21 lines
1778 bytes
Dnia 18.01.2025 Marcin Debowski <agatek@INVALID.zoho.com> napisał/a:
> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
> jeden obszar na jakimś kliencie?

Hmm, brzmi jak distributed volume na glusterfs :-)

Byłem przekonany, że glusterfs wymaga jednakowych cegiełek,
jednak już nie, vide:

https://docs.gluster.org/en/latest/release-notes/3.6.0/

https://blog.programster.org/glusterfs-distributed-volumes-with-different-size-bricks

Reasumując: powinno zadziałać :-)

-- 
Dominik Ałaszewski (via raspbianowy slrn)
"W życiu piękne są tylko chwile…" (Ryszard Riedel)
Wyrażam wyłącznie prywatne poglądy zgodnie z Art. 54 Konstytucji RP 
Pisząc na priv zmień domenę na gmail.
Re: rozproszone zasoby dyskowe
#907991
Author: Marcin Debowski
Date: Tue, 21 Jan 2025 04:12
21 lines
1582 bytes
On 2025-01-20, Dominik Ałaszewski <Dominik.Alaszewski@gazeta.pl.invalid> wrote:
> Dnia 18.01.2025 Marcin Debowski <agatek@INVALID.zoho.com> napisał/a:
>> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
>> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
>> jeden obszar na jakimś kliencie?
>
> Hmm, brzmi jak distributed volume na glusterfs :-)
>
> Byłem przekonany, że glusterfs wymaga jednakowych cegiełek,
> jednak już nie, vide:
>
> https://docs.gluster.org/en/latest/release-notes/3.6.0/
>
> https://blog.programster.org/glusterfs-distributed-volumes-with-different-size-bricks
>
> Reasumując: powinno zadziałać :-)

O, wygląda ciekawie. Nigdy nawet o tym nie słyszałem. Dzieki :) 

-- 
Marcin
Re: rozproszone zasoby dyskowe
#907992
Author: Marcin Debowski
Date: Fri, 24 Jan 2025 00:00
27 lines
2048 bytes
On 2025-01-21, Marcin Debowski <agatek@INVALID.zoho.com> wrote:
> On 2025-01-20, Dominik Ałaszewski <Dominik.Alaszewski@gazeta.pl.invalid> wrote:
>> Dnia 18.01.2025 Marcin Debowski <agatek@INVALID.zoho.com> napisał/a:
>>> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
>>> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
>>> jeden obszar na jakimś kliencie?
>>
>> Hmm, brzmi jak distributed volume na glusterfs :-)
>>
>> Byłem przekonany, że glusterfs wymaga jednakowych cegiełek,
>> jednak już nie, vide:
>>
>> https://docs.gluster.org/en/latest/release-notes/3.6.0/
>>
>> https://blog.programster.org/glusterfs-distributed-volumes-with-different-size-bricks
>>
>> Reasumując: powinno zadziałać :-)
>
> O, wygląda ciekawie. Nigdy nawet o tym nie słyszałem. Dzieki :) 

Pytanie: czy da się cegłę zrobić na podmontowanym zasobie po NFS'ie? 
Gluster skarży się, że potrzebuje mieć "extended attributes" ale wyższe 
wersje protokołu zdaje się oferują takoweż, więc się zastanawiam czy to 
kwestia ustawień (nfs), czy specyfiki glustera.

-- 
Marcin
Re: rozproszone zasoby dyskowe
#907993
Author: Dominik Ałaszewski
Date: Fri, 24 Jan 2025 07:28
13 lines
1550 bytes
Dnia 24.01.2025 Marcin Debowski <agatek@INVALID.zoho.com> napisał/a:

> Pytanie: czy da się cegłę zrobić na podmontowanym zasobie po NFS'ie? 

Z szybkiego sprawdzenia w sieci wynika, że chyba jednak się nie da.

https://github.com/gluster/glusterfs/discussions/4236

-- 
Dominik Ałaszewski (via raspbianowy slrn)
"W życiu piękne są tylko chwile…" (Ryszard Riedel)
Wyrażam wyłącznie prywatne poglądy zgodnie z Art. 54 Konstytucji RP 
Pisząc na priv zmień domenę na gmail.
Re: rozproszone zasoby dyskowe
#907995
Author: szopen
Date: Fri, 24 Jan 2025 08:07
14 lines
1524 bytes
On 18.01.2025 10:14, Marcin Debowski wrote:
> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych
> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w
> jeden obszar na jakimś kliencie?
> 
> Powiedzmy jest sobie host A, ma wolnego 4TB, B ma 2TB, C ma 5TB itd. I
> teraz jakiś klient na maszynie M zrobi z tego urządzenie blokowe 11TB?
> Takie lvm sieciowe. Czy iSCSI czasem czegoś takiego nie umożliwia?
> Czytam różne hał-tó i jestem trochę jak to mówią skonfudowany.

To jak nie gluster to może ceph?

-- 
szopen
Re: rozproszone zasoby dyskowe
#907994
Author: Marcin Debowski
Date: Fri, 24 Jan 2025 11:16
20 lines
1821 bytes
On 2025-01-24, Dominik Ałaszewski <Dominik.Alaszewski@gazeta.pl.invalid> wrote:
> Dnia 24.01.2025 Marcin Debowski <agatek@INVALID.zoho.com> napisał/a:
>
>> Pytanie: czy da się cegłę zrobić na podmontowanym zasobie po NFS'ie? 
>
> Z szybkiego sprawdzenia w sieci wynika, że chyba jednak się nie da.
>
> https://github.com/gluster/glusterfs/discussions/4236

Dzięki, miałem problemy z wyguglaniem.

Co znalazłem, to że na bardziej zawansowanych NASach (bo z taką intencją 
było to pytanie), ludzie wystawiają iSCSI, gdzie dalej host z glusterem 
widzi to jako urządzenie blokowe, a dalej to już z górki, bo mozna tam 
dać dowolny fs, którego rozszerzone atrybuty są akceptowane. Ale 
niestety mam trochę prostszych, starych NASów i tam się nic podobnego 
nie da zrobić.

-- 
Marcin
Re: rozproszone zasoby dyskowe
#907996
Author: marrgol
Date: Fri, 24 Jan 2025 11:27
11 lines
1595 bytes
On 2025-01-18 at 10:14 Marcin Debowski wrote:
> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
> jeden obszar na jakimś kliencie?
> 
> Powiedzmy jest sobie host A, ma wolnego 4TB, B ma 2TB, C ma 5TB itd. I 
> teraz jakiś klient na maszynie M zrobi z tego urządzenie blokowe 11TB? 
> Takie lvm sieciowe. Czy iSCSI czasem czegoś takiego nie umożliwia? 
> Czytam różne hał-tó i jestem trochę jak to mówią skonfudowany.

Może wystarczy NBD (Network Block Devices)?  Do tego zwykły LVM.
Re: rozproszone zasoby dyskowe
#907997
Author: Marcin Debowski
Date: Sun, 26 Jan 2025 01:57
31 lines
2577 bytes
On 2025-01-24, marrgol <marrgol@address.invalid> wrote:
> On 2025-01-18 at 10:14 Marcin Debowski wrote:
>> Czy jest jakieś rozwiązanie, które z różnych maszyn sieciowych 
>> pozwoliłoby zbierać wolne zasoby dyskowe i umożliwiać ich konsolidacje w 
>> jeden obszar na jakimś kliencie?
>> 
>> Powiedzmy jest sobie host A, ma wolnego 4TB, B ma 2TB, C ma 5TB itd. I 
>> teraz jakiś klient na maszynie M zrobi z tego urządzenie blokowe 11TB? 
>> Takie lvm sieciowe. Czy iSCSI czasem czegoś takiego nie umożliwia? 
>> Czytam różne hał-tó i jestem trochę jak to mówią skonfudowany.
>
> Może wystarczy NBD (Network Block Devices)?  Do tego zwykły LVM.

O czymś takim myślałem wymieniając w pierwszym poście iSCSI. Z NBD się 
wcześniej również nie spotkałem (albo też czytałem i zdąrzyłem już 
zapomnieć), ale NBD też wgląda ciekawie i mniej skomplikowanie, więc 
dzięki za info. Bardzo pouczający wątek się zrobił.

W sosunku do GlusterFS, NBD i iSCSI mają dla mnie tę wadę, że jak 
rozumiem operują na urządzeniach blokowych o zdefiniowanej wielkości. 
GlusterFS jest co prawda polecany do użycia również na dedykowanej 
partycji, ale z tego co jak dotąd zauważyłem, nie ma też większego 
problemu aby dzielił się miejscem z innymi usługami. To jest model 
użycia bliższy moim potrzebom, bo np. mam na jednym hoście te 2TB 
wolnego, na drugim dalsze kilka, na trzecim podobnie, etc. etc. i mogę 
sobie teraz ad hoc sklecić "ciągłą" przestrzeń dyskową np. na 
kilkanaście TB, która jest mi tymczasowo potrzebna na jakieś operacje z 
zasobami multimedialnymi.

-- 
Marcin
Thread Navigation

This is a paginated view of messages in the thread with full content displayed inline.

Messages are displayed in chronological order, with the original post highlighted in green.

Use pagination controls to navigate through all messages in large threads.

Back to All Threads