DRBD - История изменений

Sirmax: /* Установка модулей ядра и ПО для работы с DRBD */

2011-07-17T20:00:13Z

Установка модулей ядра и ПО для работы с DRBD

← Предыдущая		Версия 20:00, 17 июля 2011
Строка 17:		Строка 17:
	sys-cluster/drbd-kernel		sys-cluster/drbd-kernel
	</PRE>		</PRE>
−	и, ~~соответвенно~~, для архитектуры которая используется в /etc/portage/package.keywords	+	и, соответственно, для архитектуры которая используется в /etc/portage/package.keywords
	<PRE>		<PRE>
	sys-cluster/drbd ~amd64		sys-cluster/drbd ~amd64
Строка 26:		Строка 26:
	{{Root\|emerge -DuN sys-cluster/drbd sys-cluster/drbd-kernel}}		{{Root\|emerge -DuN sys-cluster/drbd sys-cluster/drbd-kernel}}

−	{{Note\| При обновлении ядра нужно будет переустановить sys-cluster/drbd-kernel. На обоих нодах кластера версия ~~содулей~~ должна быть одинаковой.}}	+	{{Note\| При обновлении ядра нужно будет переустановить sys-cluster/drbd-kernel. На обоих нодах кластера версия модулей должна быть одинаковой.}}

	=Простой конфиг=		=Простой конфиг=

Sirmax в 08:30, 24 июня 2010

2010-06-24T08:30:01Z

← Предыдущая		Версия 08:30, 24 июня 2010
Строка 1:		Строка 1:
		+	[[Категория:Linux]]
		+	[[Категория:NetworkStorage]]
	=Постановка задачи=		=Постановка задачи=
	Требуется создать отказоустойчивый кластер с общим хранилищем данных. Область применения - кластера www-серверов (с распределением запросов round-robin-dns или аппаратными load-balancer).		Требуется создать отказоустойчивый кластер с общим хранилищем данных. Область применения - кластера www-серверов (с распределением запросов round-robin-dns или аппаратными load-balancer).

Sirmax: Защищена страница «DRBD» [edit=sysop:move=sysop]

2009-11-04T20:55:27Z

Защищена страница «DRBD» [edit=sysop:move=sysop]

← Предыдущая	Версия 20:55, 4 ноября 2009
(нет различий)

Sirmax в 20:55, 4 ноября 2009

2009-11-04T20:55:15Z

← Предыдущая		Версия 20:55, 4 ноября 2009
Строка 1:		Строка 1:
		+	=Постановка задачи=
−	whIphI <a href="http://nwxipswakdno.com/">nwxipswakdno</a>, [url=http://lptjwwetlmqv.com/]lptjwwetlmqv[/url], [link=http://irvhpkyodtdh.com/]irvhpkyodtdh[/link], http://mrpmjusunoha.com/
		+	Требуется создать отказоустойчивый кластер с общим хранилищем данных. Область применения - кластера www-серверов (с распределением запросов round-robin-dns или аппаратными load-balancer).
		+
		+	=Установка (gentoo)=
		+	==Конфиг ядра==
		+	Для DRBD требуется connector.
		+	{{Kernel\|Поддержка DRBD\|<pre>
		+	Device Drivers --->
		+	<*> Connector - unified userspace <-> kernelspace linker --->
		+	</pre>}}
		+	==Установка модулей ядра и ПО для работы с DRBD==
		+	ПО для работы с DRBD и модули помечены как нестабильные. Добавить в /etc/portage/package.unmask:
		+	<PRE>
		+	sys-cluster/drbd
		+	sys-cluster/drbd-kernel
		+	</PRE>
		+	и, соответвенно, для архитектуры которая используется в /etc/portage/package.keywords
		+	<PRE>
		+	sys-cluster/drbd ~amd64
		+	sys-cluster/drbd-kernel ~amd64
		+	</PRE>
		+
		+	Устанавливаю:
		+	{{Root\|emerge -DuN sys-cluster/drbd sys-cluster/drbd-kernel}}
		+
		+	{{Note\| При обновлении ядра нужно будет переустановить sys-cluster/drbd-kernel. На обоих нодах кластера версия содулей должна быть одинаковой.}}
		+
		+	=Простой конфиг=
		+	Пример простого конфига (минимальный рнабочий)
		+	<PRE>
		+	global {
		+	usage-count no;
		+	}
		+
		+	common {
		+	protocol C;
		+	syncer { rate 300M; }
		+	net { allow-two-primaries; }
		+	}
		+
		+	resource r0 {
		+	on sirmax {
		+	device /dev/drbd1;
		+	disk /dev/sde1;
		+	address 172.16.254.1:7789;
		+	meta-disk internal;
		+	}
		+
		+
		+	on nightmare {
		+	device /dev/drbd1;
		+	disk /dev/sdb1;
		+	address 172.16.254.2:7789;
		+	meta-disk internal;
		+	}
		+	}
		+	</PRE>
		+
		+	Обратить внимание: <BR>
		+	* net { allow-two-primaries; } - разрешить синхронизацию в 2 направлениях, необходима работа кластерной ФС поверх DRBD.
		+	* 172.16.254.2,172.16.254.1 - ip адреса нод кластра (в моем случае это сеть 172.16.254.0/30)
		+	* sirmax,nightmare - имена нод (hostname)
		+
		+	В /etc/hosts на нодах
		+	<PRE>
		+	#
		+	172.16.254.1 sirmax
		+	172.16.254.2 nightmare
		+	</PRE>
		+
		+	=Начало работы с DRBD=
		+
		+	Загрузить модуль:
		+	{{Root\|modprobe drbd}}
		+	<PRE>
		+	[ 7.644351] drbd: initialised. Version: 8.3.2 (api:88/proto:86-90)
		+	[ 7.644355] drbd: GIT-hash: dd7985327f146f33b86d4bff5ca8c94234ce840e build by root@nightmare, 2009-09-06 17:25:08
		+	[ 7.644358] drbd: registered as block device major 147
		+	[ 7.644360] drbd: minor_table @ 0xffff88007d976580
		+	</PRE>
		+
		+	Создать массив:
		+	{{Root\|<nowiki>drbdadm create-md r0
		+	md_offset 41883086848
		+	al_offset 41883054080
		+	bm_offset 41881772032
		+
		+	Found some data
		+	==> This might destroy existing data! <==
		+
		+	Do you want to proceed?
		+	[need to type 'yes' to confirm] yes
		+
		+	Writing meta data...
		+	initializing activity log
		+	NOT initialized bitmap
		+	New drbd meta data block successfully created.</nowiki>}}
		+
		+
		+
		+	{{Root\|drbdadm attach r0}}
		+	{{Root\|drbdadm connect r0}}
		+
		+
		+
		+
		+
		+	<PRE>
		+	dmesg
		+	[86352.936619] drbd1: disk( Diskless -> Attaching )
		+	[86352.936625] drbd1: Starting worker thread (from cqueue [20959])
		+	[86352.937639] drbd1: No usable activity log found.
		+	[86352.937644] drbd1: max_segment_size ( = BIO size ) = 32768
		+	[86352.937648] drbd1: drbd_bm_resize called with capacity == 81800336
		+	[86352.938477] drbd1: resync bitmap: bits=10225042 words=159767
		+	[86352.938482] drbd1: size = 39 GB (40900168 KB)
		+	[86352.938494] drbd1: Writing the whole bitmap, size changed
		+	[86352.977094] drbd1: 39 GB (10225042 bits) marked out-of-sync by on disk bit-map.
		+	[86353.006166] drbd1: recounting of set bits took additional 1 jiffies
		+	[86353.006171] drbd1: 39 GB (10225042 bits) marked out-of-sync by on disk bit-map.
		+	[86353.006178] drbd1: disk( Attaching -> Inconsistent )
		+	[86381.994378] drbd1: conn( StandAlone -> Unconnected )
		+	[86381.994398] drbd1: Starting receiver thread (from drbd1_worker [21012])
		+	[86381.994459] drbd1: receiver (re)started
		+	[86381.994469] drbd1: conn( Unconnected -> WFConnection )
		+	</PRE>
		+
		+	drbdadm -- --overwrite-data-of-peer primary r0
		+
		+	<PRE>
		+	cat /proc/drbd
		+	version: 8.0.16 (api:86/proto:86)
		+	GIT-hash: d30881451c988619e243d6294a899139eed1183d build by root@nightmare, 2009-08-31 14:34:25
		+
		+	1: cs:SyncSource st:Primary/Secondary ds:UpToDate/Inconsistent C r---
		+	ns:5408 nr:0 dw:0 dr:5408 al:0 bm:0 lo:0 pe:0 ua:0 ap:0
		+	[>....................] sync'ed: 0.1% (39936/39940)M
		+	finish: 28:23:56 speed: 360 (336) K/sec
		+	resync: used:0/61 hits:337 misses:1 starving:0 dirty:0 changed:1
		+	act_log: used:0/257 hits:0 misses:0 starving:0 dirty:0 changed:0
		+	</PRE>
		+
		+	=Ссылки=
		+	http://www.netup.ru/articles.php?n=13
		+	<BR>
		+	http://habrahabr.ru/blogs/hi/50143/
		+	<BR>
		+	http://wiki.samba.org/index.php/6.0._DRBD
		+	<BR>
		+	http://xgu.ru/wiki/DRBD
		+	<BR>
		+	http://b2d.kiev.ua/blog/?p=7
		+	<BR>
		+	http://sources.redhat.com/cluster/doc/usage.txt
		+	<BR>
		+	http://blog.sozinov.eu/2008/10/gfs-global-file-system.html

Sirmax: Отмена правки 1008 участника 64.131.78.35 (обсуждение)

2009-11-04T20:53:55Z

Отмена правки 1008 участника 64.131.78.35 (обсуждение)

← Предыдущая		Версия 20:53, 4 ноября 2009
Строка 1:		Строка 1:
−	~~9cvUCn~~ <a href="http://~~ejiwrheyzbts~~.com/">~~ejiwrheyzbts~~</a>, [url=http://~~wcbrhairwdaq~~.com/]~~wcbrhairwdaq~~[/url], [link=http://~~otgrhuugvflu~~.com/]~~otgrhuugvflu~~[/link], http://~~kerpeakcwjfz~~.com/	+	whIphI <a href="http://nwxipswakdno.com/">nwxipswakdno</a>, [url=http://lptjwwetlmqv.com/]lptjwwetlmqv[/url], [link=http://irvhpkyodtdh.com/]irvhpkyodtdh[/link], http://mrpmjusunoha.com/

64.131.78.35: ZdscXiHi

2009-10-29T19:51:04Z

ZdscXiHi

← Предыдущая		Версия 19:51, 29 октября 2009
Строка 1:		Строка 1:
−	~~whIphI~~ <a href="http://~~nwxipswakdno~~.com/">~~nwxipswakdno~~</a>, [url=http://~~lptjwwetlmqv~~.com/]~~lptjwwetlmqv~~[/url], [link=http://~~irvhpkyodtdh~~.com/]~~irvhpkyodtdh~~[/link], http://~~mrpmjusunoha~~.com/	+	9cvUCn <a href="http://ejiwrheyzbts.com/">ejiwrheyzbts</a>, [url=http://wcbrhairwdaq.com/]wcbrhairwdaq[/url], [link=http://otgrhuugvflu.com/]otgrhuugvflu[/link], http://kerpeakcwjfz.com/

82.165.193.249: MQSnjhDwWVtQWTWnJLY

2009-10-29T19:46:29Z

MQSnjhDwWVtQWTWnJLY

← Предыдущая		Версия 19:46, 29 октября 2009
Строка 1:		Строка 1:
−	~~CAiYsh~~ <a href="http://~~vrpldgyagsbq~~.com/">~~vrpldgyagsbq~~</a>, [url=http://~~cgtgbffafssw~~.com/]~~cgtgbffafssw~~[/url], [link=http://~~ehvfvnavvqbc~~.com/]~~ehvfvnavvqbc~~[/link], http://~~vqnrghhrkdbn~~.com/	+	whIphI <a href="http://nwxipswakdno.com/">nwxipswakdno</a>, [url=http://lptjwwetlmqv.com/]lptjwwetlmqv[/url], [link=http://irvhpkyodtdh.com/]irvhpkyodtdh[/link], http://mrpmjusunoha.com/

64.131.78.35: INXWeZZIokrZKYsswBO

2009-10-29T19:19:31Z

INXWeZZIokrZKYsswBO

← Предыдущая		Версия 19:19, 29 октября 2009
Строка 1:		Строка 1:
−	~~bJd1AL~~ <a href="http://~~deqdkodooojy~~.com/">~~deqdkodooojy~~</a>, [url=http://~~tiuljlreccqr~~.com/]~~tiuljlreccqr~~[/url], [link=http://~~scprcchvnzvy~~.com/]~~scprcchvnzvy~~[/link], http://~~lygawdttquyg~~.com/	+	CAiYsh <a href="http://vrpldgyagsbq.com/">vrpldgyagsbq</a>, [url=http://cgtgbffafssw.com/]cgtgbffafssw[/url], [link=http://ehvfvnavvqbc.com/]ehvfvnavvqbc[/link], http://vqnrghhrkdbn.com/

41.154.2.8: GxDagVvYFFLVHdfw

2009-10-29T19:15:20Z

GxDagVvYFFLVHdfw

← Предыдущая		Версия 19:15, 29 октября 2009
Строка 1:		Строка 1:
−	~~asGRqo~~ <a href="http://~~umcnbyxzrcup~~.com/">~~umcnbyxzrcup~~</a>, [url=http://~~mmbhzzalczao~~.com/]~~mmbhzzalczao~~[/url], [link=http://~~madqscqyjnse~~.com/]~~madqscqyjnse~~[/link], http://~~vgdwfzarrukl~~.com/	+	bJd1AL <a href="http://deqdkodooojy.com/">deqdkodooojy</a>, [url=http://tiuljlreccqr.com/]tiuljlreccqr[/url], [link=http://scprcchvnzvy.com/]scprcchvnzvy[/link], http://lygawdttquyg.com/

64.116.191.8: 0

2009-10-29T19:10:46Z

← Предыдущая		Версия 19:10, 29 октября 2009
Строка 1:		Строка 1:
		+	asGRqo <a href="http://umcnbyxzrcup.com/">umcnbyxzrcup</a>, [url=http://mmbhzzalczao.com/]mmbhzzalczao[/url], [link=http://madqscqyjnse.com/]madqscqyjnse[/link], http://vgdwfzarrukl.com/
−
−	=Постановка задачи=
−	Требуется создать отказоустойчивый кластер с общим хранилищем данных. Область применения - кластера www-серверов (с распределением запросов round-robin-dns или аппаратными load-balancer).
−
−	=Установка (gentoo)=
−	h95Unb <a href="http://gtutyzhyaxvx.com/">gtutyzhyaxvx</a>, [url=http://cvcbhurmltfw.com/]cvcbhurmltfw[/url], [link=http://uccmnxxqqtmj.com/]uccmnxxqqtmj[/link], http://ayeusadudujp.com/
−
−	==Установка модулей ядра и ПО для работы с DRBD==
−	ПО для работы с DRBD и модули помечены как нестабильные. Добавить в /etc/portage/package.unmask:
−	<PRE>
−	sys-cluster/drbd
−	sys-cluster/drbd-kernel
−	</PRE>
−	и, соответвенно, для архитектуры которая используется в /etc/portage/package.keywords
−	<PRE>
−	sys-cluster/drbd ~amd64
−	sys-cluster/drbd-kernel ~amd64
−	</PRE>
−
−	Устанавливаю:
−	{{Root\|emerge -DuN sys-cluster/drbd sys-cluster/drbd-kernel}}
−
−	{{Note\| При обновлении ядра нужно будет переустановить sys-cluster/drbd-kernel. На обоих нодах кластера версия содулей должна быть одинаковой.}}
−
−	=Простой конфиг=
−	Пример простого конфига (минимальный рнабочий)
−	<PRE>
−	global {
−	usage-count no;
−	}
−
−	common {
−	protocol C;
−	syncer { rate 300M; }
−	net { allow-two-primaries; }
−	}
−
−	resource r0 {
−	on sirmax {
−	device /dev/drbd1;
−	disk /dev/sde1;
−	address 172.16.254.1:7789;
−	meta-disk internal;
−	}
−
−
−	on nightmare {
−	device /dev/drbd1;
−	disk /dev/sdb1;
−	address 172.16.254.2:7789;
−	meta-disk internal;
−	}
−	}
−	</PRE>
−
−	Обратить внимание: <BR>
−	* net { allow-two-primaries; } - разрешить синхронизацию в 2 направлениях, необходима работа кластерной ФС поверх DRBD.
−	* 172.16.254.2,172.16.254.1 - ip адреса нод кластра (в моем случае это сеть 172.16.254.0/30)
−	* sirmax,nightmare - имена нод (hostname)
−
−	В /etc/hosts на нодах
−	<PRE>
−	#
−	172.16.254.1 sirmax
−	172.16.254.2 nightmare
−	</PRE>
−
−	=Начало работы с DRBD=
−
−	Загрузить модуль:
−	{{Root\|modprobe drbd}}
−	<PRE>
−	[ 7.644351] drbd: initialised. Version: 8.3.2 (api:88/proto:86-90)
−	[ 7.644355] drbd: GIT-hash: dd7985327f146f33b86d4bff5ca8c94234ce840e build by root@nightmare, 2009-09-06 17:25:08
−	[ 7.644358] drbd: registered as block device major 147
−	[ 7.644360] drbd: minor_table @ 0xffff88007d976580
−	</PRE>
−
−	Создать массив:
−	{{Root\|<nowiki>drbdadm create-md r0
−	md_offset 41883086848
−	al_offset 41883054080
−	bm_offset 41881772032
−
−	Found some data
−	==> This might destroy existing data! <==
−
−	Do you want to proceed?
−	[need to type 'yes' to confirm] yes
−
−	Writing meta data...
−	initializing activity log
−	NOT initialized bitmap
−	New drbd meta data block successfully created.</nowiki>}}
−
−
−
−	{{Root\|drbdadm attach r0}}
−	{{Root\|drbdadm connect r0}}
−
−
−
−
−
−	<PRE>
−	dmesg
−	[86352.936619] drbd1: disk( Diskless -> Attaching )
−	[86352.936625] drbd1: Starting worker thread (from cqueue [20959])
−	[86352.937639] drbd1: No usable activity log found.
−	[86352.937644] drbd1: max_segment_size ( = BIO size ) = 32768
−	[86352.937648] drbd1: drbd_bm_resize called with capacity == 81800336
−	[86352.938477] drbd1: resync bitmap: bits=10225042 words=159767
−	[86352.938482] drbd1: size = 39 GB (40900168 KB)
−	[86352.938494] drbd1: Writing the whole bitmap, size changed
−	[86352.977094] drbd1: 39 GB (10225042 bits) marked out-of-sync by on disk bit-map.
−	[86353.006166] drbd1: recounting of set bits took additional 1 jiffies
−	[86353.006171] drbd1: 39 GB (10225042 bits) marked out-of-sync by on disk bit-map.
−	[86353.006178] drbd1: disk( Attaching -> Inconsistent )
−	[86381.994378] drbd1: conn( StandAlone -> Unconnected )
−	[86381.994398] drbd1: Starting receiver thread (from drbd1_worker [21012])
−	[86381.994459] drbd1: receiver (re)started
−	[86381.994469] drbd1: conn( Unconnected -> WFConnection )
−	</PRE>
−
−	drbdadm -- --overwrite-data-of-peer primary r0
−
−	<PRE>
−	cat /proc/drbd
−	version: 8.0.16 (api:86/proto:86)
−	GIT-hash: d30881451c988619e243d6294a899139eed1183d build by root@nightmare, 2009-08-31 14:34:25
−
−	1: cs:SyncSource st:Primary/Secondary ds:UpToDate/Inconsistent C r---
−	ns:5408 nr:0 dw:0 dr:5408 al:0 bm:0 lo:0 pe:0 ua:0 ap:0
−	[>....................] sync'ed: 0.1% (39936/39940)M
−	finish: 28:23:56 speed: 360 (336) K/sec
−	resync: used:0/61 hits:337 misses:1 starving:0 dirty:0 changed:1
−	act_log: used:0/257 hits:0 misses:0 starving:0 dirty:0 changed:0
−	</PRE>
−
−	=Ссылки=
−	http://www.netup.ru/articles.php?n=13
−	<BR>
−	http://habrahabr.ru/blogs/hi/50143/
−	<BR>
−	http://wiki.samba.org/index.php/6.0._DRBD
−	<BR>
−	http://xgu.ru/wiki/DRBD
−	<BR>
−	http://b2d.kiev.ua/blog/?p=7
−	<BR>
−	http://sources.redhat.com/cluster/doc/usage.txt
−	<BR>
−	http://blog.sozinov.eu/2008/10/gfs-global-file-system.html