Cluster Ganeti » Historique » Version 34
Mehdi Abaakouk, 20/08/2012 19:38
1 | 16 | Mehdi Abaakouk | h1. Cluster Ganeti |
---|---|---|---|
2 | 1 | Mehdi Abaakouk | |
3 | 9 | Mehdi Abaakouk | {{>toc}} |
4 | 9 | Mehdi Abaakouk | |
5 | 25 | Laurent GUERBY | h2. Liens |
6 | 25 | Laurent GUERBY | |
7 | 25 | Laurent GUERBY | talk par iustin a google I/O sur ganeti : a 28:00 http://youtu.be/TELArK6SmyY |
8 | 32 | Laurent GUERBY | extlinux pour ganeti http://anonscm.debian.org/gitweb/?p=mirror/dsa-puppet.git;a=blob;f=modules/ganeti2/templates/instance-debootstrap/hooks/20-dsa-install-bootloader.erb;h=2bbba5e762b512c1c7b081049cf8ffd6cc472f96;hb=master |
9 | 25 | Laurent GUERBY | |
10 | 18 | Laurent GUERBY | h2. Installation from scratch |
11 | 18 | Laurent GUERBY | |
12 | 23 | Laurent GUERBY | h3. Ganeti |
13 | 23 | Laurent GUERBY | |
14 | 18 | Laurent GUERBY | apt-get install ganeti2 |
15 | 1 | Mehdi Abaakouk | |
16 | 30 | Mehdi Abaakouk | h3. configuration LVM |
17 | 18 | Laurent GUERBY | |
18 | 30 | Mehdi Abaakouk | Dans le fichier */etc/lvm/lvm.conf* changer le filter lvm pour: |
19 | 23 | Laurent GUERBY | |
20 | 18 | Laurent GUERBY | <pre> |
21 | 18 | Laurent GUERBY | # filter = [ "a/.*/" ] |
22 | 18 | Laurent GUERBY | filter = ["r|/dev/cdrom|", "r|/dev/drbd[0-9]+|" ] |
23 | 1 | Mehdi Abaakouk | </pre> |
24 | 1 | Mehdi Abaakouk | |
25 | 29 | Mehdi Abaakouk | Evite les soucis avec DRBD (ie: pour que la machine hôte ne detecte pas les LVM qui sont dans le VM lors du vgscan and co) |
26 | 1 | Mehdi Abaakouk | |
27 | 30 | Mehdi Abaakouk | h3. configuration DRBD |
28 | 23 | Laurent GUERBY | |
29 | 19 | Laurent GUERBY | * activer drbd |
30 | 19 | Laurent GUERBY | |
31 | 19 | Laurent GUERBY | <pre> |
32 | 24 | Christophe Moille | #Â echo "options drbd minor_count=128 usermode_helper=/bin/true" >> /etc/modprobe.d/drbd-ganeti.conf |
33 | 19 | Laurent GUERBY | #Â rmmod drbd |
34 | 1 | Mehdi Abaakouk | # modprobe drbd |
35 | 19 | Laurent GUERBY | # cat /sys/module/drbd/parameters/usermode_helper |
36 | 1 | Mehdi Abaakouk | /bin/true |
37 | 1 | Mehdi Abaakouk | </pre> |
38 | 1 | Mehdi Abaakouk | |
39 | 30 | Mehdi Abaakouk | h3. Partitionnement |
40 | 1 | Mehdi Abaakouk | |
41 | 1 | Mehdi Abaakouk | <pre> |
42 | 30 | Mehdi Abaakouk | # fdisk /dev/sda |
43 | 23 | Laurent GUERBY | new primary part |
44 | 1 | Mehdi Abaakouk | hex code 8e |
45 | 30 | Mehdi Abaakouk | |
46 | 30 | Mehdi Abaakouk | # partprobe |
47 | 1 | Mehdi Abaakouk | </pre> |
48 | 19 | Laurent GUERBY | |
49 | 30 | Mehdi Abaakouk | h3. Création du VG pour ganeti |
50 | 30 | Mehdi Abaakouk | |
51 | 30 | Mehdi Abaakouk | <pre> |
52 | 19 | Laurent GUERBY | pvcreate /dev/sda2 |
53 | 1 | Mehdi Abaakouk | vgcreate vg_ganeti /dev/sda2 |
54 | 30 | Mehdi Abaakouk | </pre> |
55 | 18 | Laurent GUERBY | |
56 | 30 | Mehdi Abaakouk | S'il existe déjà vider le volume group et le recreer |
57 | 18 | Laurent GUERBY | |
58 | 18 | Laurent GUERBY | <pre> |
59 | 18 | Laurent GUERBY | pvs |
60 | 1 | Mehdi Abaakouk | vgs |
61 | 1 | Mehdi Abaakouk | lvs |
62 | 18 | Laurent GUERBY | lvremove |
63 | 18 | Laurent GUERBY | vgcreate kvmvg /dev/sdb... #TODO check |
64 | 18 | Laurent GUERBY | </pre> |
65 | 18 | Laurent GUERBY | |
66 | 23 | Laurent GUERBY | h3. Network |
67 | 23 | Laurent GUERBY | |
68 | 20 | Laurent GUERBY | <pre> |
69 | 20 | Laurent GUERBY | # dans /etc/network/interfaces |
70 | 20 | Laurent GUERBY | # The primary network interface |
71 | 20 | Laurent GUERBY | auto eth0 |
72 | 20 | Laurent GUERBY | iface eth0 inet manual |
73 | 20 | Laurent GUERBY | |
74 | 20 | Laurent GUERBY | # dans /etc/rc.local |
75 | 20 | Laurent GUERBY | ip l set eth0 up |
76 | 20 | Laurent GUERBY | |
77 | 20 | Laurent GUERBY | brctl addbr ganeti-br0 |
78 | 20 | Laurent GUERBY | ip li set ganeti-br0 up |
79 | 1 | Mehdi Abaakouk | brctl addif ganeti-br0 eth0 |
80 | 20 | Laurent GUERBY | |
81 | 20 | Laurent GUERBY | ip a a 10.42.0.13/24 dev ganeti-br0 |
82 | 20 | Laurent GUERBY | ip r a default via 10.42.0.1 |
83 | 20 | Laurent GUERBY | |
84 | 20 | Laurent GUERBY | </pre> |
85 | 18 | Laurent GUERBY | |
86 | 23 | Laurent GUERBY | h3. DNS |
87 | 21 | Laurent GUERBY | |
88 | 1 | Mehdi Abaakouk | <pre> |
89 | 1 | Mehdi Abaakouk | # Dans /etc/hosts |
90 | 21 | Laurent GUERBY | 10.42.0.10 tmaster.thsf tmaster |
91 | 21 | Laurent GUERBY | 10.42.0.11 t1.thsf t1 |
92 | 21 | Laurent GUERBY | 10.42.0.12 t2.thsf t2 |
93 | 21 | Laurent GUERBY | 10.42.0.13 t3.thsf t3 |
94 | 21 | Laurent GUERBY | </pre> |
95 | 23 | Laurent GUERBY | |
96 | 23 | Laurent GUERBY | h3. Ganeti Service |
97 | 21 | Laurent GUERBY | |
98 | 31 | Mehdi Abaakouk | On master: |
99 | 1 | Mehdi Abaakouk | |
100 | 31 | Mehdi Abaakouk | Initialiser le cluster: |
101 | 21 | Laurent GUERBY | <pre> |
102 | 21 | Laurent GUERBY | gnt-cluster init --nic-parameters mode=bridged,link=ganeti-br0 --master-netdev=ganeti-br0 \ |
103 | 1 | Mehdi Abaakouk | --vg-name vg_ganeti --enabled-hypervisors=kvm tmaster.thsf |
104 | 31 | Mehdi Abaakouk | </pre> |
105 | 1 | Mehdi Abaakouk | |
106 | 31 | Mehdi Abaakouk | Ajouter un noeud au cluster (t2): |
107 | 31 | Mehdi Abaakouk | <pre> |
108 | 21 | Laurent GUERBY | gnt-node add t2 |
109 | 31 | Mehdi Abaakouk | </pre> |
110 | 21 | Laurent GUERBY | |
111 | 31 | Mehdi Abaakouk | Installation d'outils d'administration de ganeti: |
112 | 21 | Laurent GUERBY | |
113 | 31 | Mehdi Abaakouk | <pre>apt-get install ganeti-htools ganeti-instance-debootstrap</pre> |
114 | 21 | Laurent GUERBY | |
115 | 31 | Mehdi Abaakouk | Ajout d'une VM |
116 | 22 | Laurent GUERBY | |
117 | 31 | Mehdi Abaakouk | <pre># vi /etc/hosts |
118 | 22 | Laurent GUERBY | 10.42.0.101 vm1.thsf vm1 |
119 | 22 | Laurent GUERBY | |
120 | 22 | Laurent GUERBY | gnt-cluster copyfile /etc/hosts |
121 | 22 | Laurent GUERBY | |
122 | 21 | Laurent GUERBY | gnt-instance add -H kernel_path=/boot/vmlinuz-3.2.0-2-amd64,initrd_path=/boot/initrd.img-3.2.0-2-amd64 \ |
123 | 21 | Laurent GUERBY | -t drbd -B memory=512M,vcpus=1 --disk 0:size=5G -I hail -o debootstrap+default vm1.thsf |
124 | 21 | Laurent GUERBY | </pre> |
125 | 10 | Mehdi Abaakouk | |
126 | 1 | Mehdi Abaakouk | h2. Administration des VMs |
127 | 27 | Laurent GUERBY | |
128 | 34 | Mehdi Abaakouk | h3. Gestion d'un gnt-instance migrate qui reste bloquer |
129 | 34 | Mehdi Abaakouk | |
130 | 34 | Mehdi Abaakouk | Symptôme: la progression du "gnt-instance migrate <vmname>" ne progresse plus" |
131 | 34 | Mehdi Abaakouk | |
132 | 34 | Mehdi Abaakouk | <pre> |
133 | 34 | Mehdi Abaakouk | # gnt-instance info -s nagios | grep 'node.:' -A1 |
134 | 34 | Mehdi Abaakouk | nodeA: h4.tetaneutral.net, minor=18 |
135 | 34 | Mehdi Abaakouk | nodeB: h6.tetaneutral.net, minor=27 |
136 | 34 | Mehdi Abaakouk | port: 12589 |
137 | 34 | Mehdi Abaakouk | </pre> |
138 | 34 | Mehdi Abaakouk | |
139 | 34 | Mehdi Abaakouk | Donc si on regarde sur la machine primaire et secondaire l'état: |
140 | 34 | Mehdi Abaakouk | |
141 | 34 | Mehdi Abaakouk | <pre> |
142 | 34 | Mehdi Abaakouk | # grep '18:' -A5 /proc/drbd # (et sur la secondaire: grep '27:' -A5 /proc/drbd) |
143 | 34 | Mehdi Abaakouk | 0: cs:SyncSource st:Primary/Primary ds:UpToDate/UpToDate C r--- |
144 | 34 | Mehdi Abaakouk | ns:601729944 nr:0 dw:0 dr:601737980 al:0 bm:429909 lo:0 pe:0 ua:0 ap:0 oos:0 |
145 | 34 | Mehdi Abaakouk | [===================>] sync'ed:100.0% (965/6869678)M |
146 | 34 | Mehdi Abaakouk | stalled |
147 | 34 | Mehdi Abaakouk | </pre> |
148 | 34 | Mehdi Abaakouk | |
149 | 34 | Mehdi Abaakouk | Si on tente un commande drbd on a: |
150 | 34 | Mehdi Abaakouk | |
151 | 34 | Mehdi Abaakouk | <pre> |
152 | 34 | Mehdi Abaakouk | # drbdsetup /dev/drbd18 sh-status |
153 | 34 | Mehdi Abaakouk | (longue attente) |
154 | 34 | Mehdi Abaakouk | No response from the DRBD driver! Is the module loaded? |
155 | 34 | Mehdi Abaakouk | </pre> |
156 | 34 | Mehdi Abaakouk | |
157 | 34 | Mehdi Abaakouk | Bref Drbd est dans les choux, ca semble être un bug connu des versions < 8.3.12 (TODO: chercher la ref) |
158 | 34 | Mehdi Abaakouk | |
159 | 34 | Mehdi Abaakouk | Pour réparer sur la machine h4, le node primaire, faire: |
160 | 34 | Mehdi Abaakouk | <pre> |
161 | 34 | Mehdi Abaakouk | # /etc/ganeti/iptables-to-reset-drbd-connection.sh 12589 # <-- 12589 le port de drbd récupéré plus haut |
162 | 34 | Mehdi Abaakouk | |
163 | 34 | Mehdi Abaakouk | ** Attention à être sur la bonne machine ** |
164 | 34 | Mehdi Abaakouk | Pour couper la connection |
165 | 34 | Mehdi Abaakouk | iptables -I INPUT -p tcp --dport 12589 -j REJECT --reject-with tcp-reset |
166 | 34 | Mehdi Abaakouk | iptables -I INPUT -p tcp --sport 12589 -j REJECT --reject-with tcp-reset |
167 | 34 | Mehdi Abaakouk | iptables -I OUTPUT -p tcp --dport 12589 -j REJECT --reject-with tcp-reset |
168 | 34 | Mehdi Abaakouk | iptables -I OUTPUT -p tcp --sport 12589 -j REJECT --reject-with tcp-reset |
169 | 34 | Mehdi Abaakouk | |
170 | 34 | Mehdi Abaakouk | Pour remettre la connection |
171 | 34 | Mehdi Abaakouk | iptables -D INPUT -p tcp --dport 12589 -j REJECT --reject-with tcp-reset |
172 | 34 | Mehdi Abaakouk | iptables -D INPUT -p tcp --sport 12589 -j REJECT --reject-with tcp-reset |
173 | 34 | Mehdi Abaakouk | iptables -D OUTPUT -p tcp --dport 12589 -j REJECT --reject-with tcp-reset |
174 | 34 | Mehdi Abaakouk | iptables -D OUTPUT -p tcp --sport 12589 -j REJECT --reject-with tcp-reset |
175 | 34 | Mehdi Abaakouk | </pre> |
176 | 34 | Mehdi Abaakouk | |
177 | 34 | Mehdi Abaakouk | Exécuter la première partie puis vérifier dans /proc/drbd qui celui-ci est en WFConnection. |
178 | 34 | Mehdi Abaakouk | |
179 | 34 | Mehdi Abaakouk | Puis rétablir la connexion avec la seconde partie et vérifier /proc/drbd que c'est bien reconnecté. |
180 | 34 | Mehdi Abaakouk | |
181 | 34 | Mehdi Abaakouk | Ensuite si ganeti n'a pas vu la réparation, faire sur le master node et le node primaire de la machine: |
182 | 34 | Mehdi Abaakouk | |
183 | 34 | Mehdi Abaakouk | <pre> |
184 | 34 | Mehdi Abaakouk | # /etc/init.d/ganeti restart |
185 | 34 | Mehdi Abaakouk | </pre> |
186 | 34 | Mehdi Abaakouk | Ceci passe en error le job de migration |
187 | 34 | Mehdi Abaakouk | |
188 | 34 | Mehdi Abaakouk | Puis sur le master node, on nettoye les résidu de la migration échouée: |
189 | 34 | Mehdi Abaakouk | <pre> |
190 | 34 | Mehdi Abaakouk | # gnt-instance migrate --cleanup nagios |
191 | 34 | Mehdi Abaakouk | </pre> |
192 | 34 | Mehdi Abaakouk | |
193 | 34 | Mehdi Abaakouk | |
194 | 18 | Laurent GUERBY | h3. Gestion d'un disque en I/O error |
195 | 27 | Laurent GUERBY | |
196 | 1 | Mehdi Abaakouk | First put the disk in failure offline: |
197 | 28 | Mehdi Abaakouk | |
198 | 28 | Mehdi Abaakouk | <pre>echo offline > /sys/block/sdb/device/state</pre> |
199 | 27 | Laurent GUERBY | |
200 | 1 | Mehdi Abaakouk | Then we need to remove the volume group, here /dev/kvmvg |
201 | 27 | Laurent GUERBY | We need to do it manually because vgremove will not work in this case |
202 | 28 | Mehdi Abaakouk | |
203 | 27 | Laurent GUERBY | <pre>/dev/kvmvg# for i in *; do echo === $(date) == $i ; dmsetup remove /dev/kvmvg/"$i"; echo $?; done</pre> |
204 | 1 | Mehdi Abaakouk | |
205 | 27 | Laurent GUERBY | This will leave a few lv when ganeti hasnt detected for some reason the disk failure. |
206 | 27 | Laurent GUERBY | For those left we need to force drbd to go Diskless, use either gnt-instance info or ls -l /var/run/ganeti/instance-disks/ or /var/lib/ganeti/config.data to find the VM and /dev/drbdNNN then |
207 | 28 | Mehdi Abaakouk | |
208 | 27 | Laurent GUERBY | <pre>drbdsetup /dev/drbd47 detach</pre> |
209 | 27 | Laurent GUERBY | |
210 | 27 | Laurent GUERBY | Then gnt-instance info VM to force ganeti to recognize the disk failure (it will take a few minutes) |
211 | 27 | Laurent GUERBY | |
212 | 27 | Laurent GUERBY | Then dmsetup remove will work. |
213 | 27 | Laurent GUERBY | |
214 | 27 | Laurent GUERBY | After the last dmsetup remove /dev/kvmvg will disappear. |
215 | 27 | Laurent GUERBY | |
216 | 27 | Laurent GUERBY | Now you can physically remove the disk and plug a new disk on a new SATA port (on the same SATA port the kernel didn't recognize the new drive) |
217 | 27 | Laurent GUERBY | Then create a LVM partition then vgcreate kvmvg /dev/sdX |
218 | 1 | Mehdi Abaakouk | |
219 | 27 | Laurent GUERBY | Now we need to recreate redundancy |
220 | 27 | Laurent GUERBY | |
221 | 1 | Mehdi Abaakouk | On the still running VM you can use |
222 | 28 | Mehdi Abaakouk | |
223 | 27 | Laurent GUERBY | <pre>gnt-instance replace-disks --submit -a VMname</pre> |
224 | 1 | Mehdi Abaakouk | |
225 | 27 | Laurent GUERBY | On the stopped VM you need to do manually |
226 | 28 | Mehdi Abaakouk | |
227 | 28 | Mehdi Abaakouk | <pre>gnt-instance replace-disks --submit -p VMname # if primary to reconstruct |
228 | 1 | Mehdi Abaakouk | gnt-instance replace-disks --submit -s VMname # if secondary to reconstruct</pre> |
229 | 1 | Mehdi Abaakouk | |
230 | 1 | Mehdi Abaakouk | At 15 MByte/s 1 TB to reconstruct will take about 18h30. |
231 | 28 | Mehdi Abaakouk | |
232 | 27 | Laurent GUERBY | Before remove the disk from the server, we must prepare the disk for unplug: |
233 | 29 | Mehdi Abaakouk | |
234 | 28 | Mehdi Abaakouk | <pre>echo 1 > /sys/block/sdX/device/delete</pre> |
235 | 28 | Mehdi Abaakouk | |
236 | 28 | Mehdi Abaakouk | |
237 | 28 | Mehdi Abaakouk | Links: |
238 | 27 | Laurent GUERBY | |
239 | 27 | Laurent GUERBY | http://docs.ganeti.org/ganeti/2.5/html/admin.html#preparing-for-disk-operations |
240 | 27 | Laurent GUERBY | http://docs.ganeti.org/ganeti/2.5/html/admin.html#generalized-storage-handling |
241 | 28 | Mehdi Abaakouk | http://www.lancealbertson.com/2011/02/handling-hdd-failures-with-ganeti/ |
242 | 27 | Laurent GUERBY | http://www.sakana.fr/blog/2009/05/04/linux-sata-hot-plug-unplug/ |
243 | 10 | Mehdi Abaakouk | |
244 | 1 | Mehdi Abaakouk | h3. Demarrer et arrêter une instance ? |
245 | 10 | Mehdi Abaakouk | |
246 | 10 | Mehdi Abaakouk | <pre> |
247 | 10 | Mehdi Abaakouk | gnt-instance start vm1 |
248 | 10 | Mehdi Abaakouk | gnt-instance stop vm1 |
249 | 1 | Mehdi Abaakouk | </pre> |
250 | 26 | Mehdi Abaakouk | |
251 | 26 | Mehdi Abaakouk | Si pendant l'extinction de la VM le message suivant apparait: |
252 | 26 | Mehdi Abaakouk | <pre>WARNING: Could not shutdown block device disk/0 on node h6.tetaneutral.net: drbd45: can't shutdown drbd device: /dev/drbd45: State change failed: (-12) Device is held open by someone</pre> |
253 | 26 | Mehdi Abaakouk | |
254 | 26 | Mehdi Abaakouk | Sur h6 on peut remarquer que l'on a un status non nominal sur drbd: |
255 | 26 | Mehdi Abaakouk | <pre>$ grep -A4 45: /proc/drbd |
256 | 26 | Mehdi Abaakouk | 45: cs:WFConnection ro:Primary/Unknown ds:UpToDate/DUnknown C r---- |
257 | 26 | Mehdi Abaakouk | ns:68584404 nr:0 dw:67728388 dr:2484540 al:535 bm:237 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0 |
258 | 26 | Mehdi Abaakouk | </pre> |
259 | 26 | Mehdi Abaakouk | |
260 | 26 | Mehdi Abaakouk | Pour résoudre le probléme taper: |
261 | 26 | Mehdi Abaakouk | <pre>drbdsetup /dev/drbd45 down</pre> |
262 | 26 | Mehdi Abaakouk | |
263 | 26 | Mehdi Abaakouk | Si le message persiste, il faut vérifier que plus aucun processus n'utilise le drbd45 sur h6, par exemple vérifier devmapper: |
264 | 26 | Mehdi Abaakouk | <pre>dmsetup ls | grep drbd45</pre> |
265 | 26 | Mehdi Abaakouk | |
266 | 26 | Mehdi Abaakouk | Référence dans la doc ganeti: http://docs.ganeti.org/ganeti/2.5/html/walkthrough.html#in-use-disks-at-instance-shutdown |
267 | 10 | Mehdi Abaakouk | |
268 | 1 | Mehdi Abaakouk | h3. Comment tout savoir sur une vm ? |
269 | 1 | Mehdi Abaakouk | |
270 | 1 | Mehdi Abaakouk | <pre> |
271 | 1 | Mehdi Abaakouk | gnt-instance info vm1 |
272 | 1 | Mehdi Abaakouk | </pre> |
273 | 10 | Mehdi Abaakouk | |
274 | 1 | Mehdi Abaakouk | h3. Déplacement le(s) disque(s) dur d'une VM |
275 | 1 | Mehdi Abaakouk | |
276 | 1 | Mehdi Abaakouk | Si la machine a ces disques au format plain (sans drbd), taper: |
277 | 1 | Mehdi Abaakouk | |
278 | 1 | Mehdi Abaakouk | <pre> |
279 | 1 | Mehdi Abaakouk | gnt-instance stop vm1 |
280 | 1 | Mehdi Abaakouk | gnt-instance move -n h6 vm1 |
281 | 1 | Mehdi Abaakouk | gnt-instance start vm1 |
282 | 1 | Mehdi Abaakouk | </pre> |
283 | 1 | Mehdi Abaakouk | |
284 | 1 | Mehdi Abaakouk | Si la machine utilise drbd (uniquement le disque de la node secondaire bascule): |
285 | 1 | Mehdi Abaakouk | |
286 | 1 | Mehdi Abaakouk | <pre> |
287 | 1 | Mehdi Abaakouk | gnt-instance replace-disks -n h6 vm1 |
288 | 10 | Mehdi Abaakouk | </pre> |
289 | 1 | Mehdi Abaakouk | |
290 | 1 | Mehdi Abaakouk | Si vous voulais déplacer l'autre disque du drbd, il faut basculer la machine, puis refaire la même chose |
291 | 10 | Mehdi Abaakouk | |
292 | 1 | Mehdi Abaakouk | h3. Basculer/migrer une machine qui utilise drbd |
293 | 1 | Mehdi Abaakouk | |
294 | 1 | Mehdi Abaakouk | Bascule avec arret de la machine: |
295 | 1 | Mehdi Abaakouk | |
296 | 1 | Mehdi Abaakouk | <pre> |
297 | 1 | Mehdi Abaakouk | gnt-instance failover vm1 |
298 | 1 | Mehdi Abaakouk | </pre> |
299 | 10 | Mehdi Abaakouk | |
300 | 10 | Mehdi Abaakouk | Sans arrêt, migration à chaud: |
301 | 1 | Mehdi Abaakouk | |
302 | 1 | Mehdi Abaakouk | <pre> |
303 | 1 | Mehdi Abaakouk | gnt-instance migrate vm1 |
304 | 10 | Mehdi Abaakouk | </pre> |
305 | 1 | Mehdi Abaakouk | |
306 | 1 | Mehdi Abaakouk | En cas de soucis primaire/secondaire: |
307 | 1 | Mehdi Abaakouk | |
308 | 1 | Mehdi Abaakouk | <pre> |
309 | 1 | Mehdi Abaakouk | gnt-instance migrate --cleanup vm1 |
310 | 1 | Mehdi Abaakouk | </pre> |
311 | 10 | Mehdi Abaakouk | |
312 | 1 | Mehdi Abaakouk | h3. Création d'une machine |
313 | 10 | Mehdi Abaakouk | |
314 | 10 | Mehdi Abaakouk | Un script est présent sur h1 voici ca doc: |
315 | 10 | Mehdi Abaakouk | <pre> |
316 | 10 | Mehdi Abaakouk | # /root/gnt-addvm |
317 | 10 | Mehdi Abaakouk | usage: gnt-addvm [options] VIRTUAL_MACHINE_HOSTNAME |
318 | 10 | Mehdi Abaakouk | -o OS | --os OS OS can be default natty32 natty64 sid64 squeeze32 squeeze64 wheezy64 |
319 | 10 | Mehdi Abaakouk | -s SIZE | --size SIZE default SIZE is 10G |
320 | 10 | Mehdi Abaakouk | -m MEM | --mem MEM default MEM is 256M |
321 | 10 | Mehdi Abaakouk | -c CPU | --cpu CPU default CPU is 1 |
322 | 10 | Mehdi Abaakouk | -n NODES | --nodes NODES default NODES is |
323 | 10 | Mehdi Abaakouk | -d MODE | --disk MODE default MODE is drbd |
324 | 10 | Mehdi Abaakouk | -q | --quick don't wait drbd sync |
325 | 10 | Mehdi Abaakouk | --dry-run show executed command |
326 | 10 | Mehdi Abaakouk | --cdrom PATH installation from iso file |
327 | 1 | Mehdi Abaakouk | </pre> |
328 | 10 | Mehdi Abaakouk | |
329 | 10 | Mehdi Abaakouk | |
330 | 10 | Mehdi Abaakouk | h3. Supprimer une machine |
331 | 1 | Mehdi Abaakouk | |
332 | 10 | Mehdi Abaakouk | <pre> |
333 | 1 | Mehdi Abaakouk | gnt-instance remove vm1 |
334 | 1 | Mehdi Abaakouk | </pre> |
335 | 10 | Mehdi Abaakouk | |
336 | 1 | Mehdi Abaakouk | si la vm est en drbd et que une des nodes du drbd ne fonctionne plus |
337 | 10 | Mehdi Abaakouk | |
338 | 1 | Mehdi Abaakouk | <pre> |
339 | 1 | Mehdi Abaakouk | gnt-instance remove --ignore-failures vm1 |
340 | 10 | Mehdi Abaakouk | </pre> |
341 | 14 | Mehdi Abaakouk | |
342 | 10 | Mehdi Abaakouk | |
343 | 10 | Mehdi Abaakouk | h3. Changer les cractéristique d'une VM, upgrade disk, net, cpu, mem |
344 | 1 | Mehdi Abaakouk | |
345 | 10 | Mehdi Abaakouk | Et hop une nouvelle carte réseau sur le vlan tsf |
346 | 1 | Mehdi Abaakouk | <pre> |
347 | 1 | Mehdi Abaakouk | gnt-instance modify --net add:link=br1 vm1 |
348 | 10 | Mehdi Abaakouk | </pre> |
349 | 10 | Mehdi Abaakouk | |
350 | 10 | Mehdi Abaakouk | Un petit disk en plus |
351 | 10 | Mehdi Abaakouk | <pre> |
352 | 1 | Mehdi Abaakouk | gnt-instance modify --disk add:size=50G vm1 |
353 | 10 | Mehdi Abaakouk | </pre> |
354 | 10 | Mehdi Abaakouk | |
355 | 10 | Mehdi Abaakouk | Un petite upgrade cpu et mémoire |
356 | 10 | Mehdi Abaakouk | <pre> |
357 | 1 | Mehdi Abaakouk | gnt-instance modify -B vcpus=2,memory=512M vm1 |
358 | 10 | Mehdi Abaakouk | </pre> |
359 | 1 | Mehdi Abaakouk | |
360 | 10 | Mehdi Abaakouk | Reboot pour prendre en compte le tout |
361 | 1 | Mehdi Abaakouk | <pre> |
362 | 1 | Mehdi Abaakouk | gnt-instance reboot -t full vm1 |
363 | 10 | Mehdi Abaakouk | </pre> |
364 | 10 | Mehdi Abaakouk | |
365 | 1 | Mehdi Abaakouk | == Je voudrais bien booter mon kernel ! ou un cdrom== |
366 | 10 | Mehdi Abaakouk | Je peux désactivé le kernel commun pour une vm |
367 | 10 | Mehdi Abaakouk | |
368 | 10 | Mehdi Abaakouk | <pre> |
369 | 10 | Mehdi Abaakouk | gnt-instance modify -H kernel_path="" vm1 |
370 | 1 | Mehdi Abaakouk | </pre> |
371 | 1 | Mehdi Abaakouk | Ou booter sur le cdrom pour le prochain démarrage commme ceci: |
372 | 10 | Mehdi Abaakouk | |
373 | 1 | Mehdi Abaakouk | <pre> |
374 | 1 | Mehdi Abaakouk | gnt-instance start -H boot_order=cdrom,cdrom_image_path=/path/to/debian-504-amd64-netinst.iso vm1 |
375 | 10 | Mehdi Abaakouk | </pre> |
376 | 1 | Mehdi Abaakouk | |
377 | 27 | Laurent GUERBY | |
378 | 10 | Mehdi Abaakouk | h3. Relocaliser les disques secondaires si un serveur est HS. |
379 | 10 | Mehdi Abaakouk | |
380 | 10 | Mehdi Abaakouk | Ceci déplace le disque redondant (qui n'est plus présent si le serveur est HS) est le reconstruit sur un autre serveur |
381 | 1 | Mehdi Abaakouk | |
382 | 10 | Mehdi Abaakouk | <pre> |
383 | 1 | Mehdi Abaakouk | gnt-instance replace-disks -I hail vm1 |
384 | 1 | Mehdi Abaakouk | </pre> |
385 | 1 | Mehdi Abaakouk | |
386 | 11 | Mehdi Abaakouk | |
387 | 11 | Mehdi Abaakouk | h3. Importer une image disque venant de lâextérieur |
388 | 11 | Mehdi Abaakouk | |
389 | 11 | Mehdi Abaakouk | Convertion de l'image au format raw (si c'est pas déjà le cas) |
390 | 11 | Mehdi Abaakouk | <pre> |
391 | 11 | Mehdi Abaakouk | kvm-img convert DISQUEVM.qcow -O raw DISQUEVM.raw |
392 | 11 | Mehdi Abaakouk | </pre> |
393 | 11 | Mehdi Abaakouk | |
394 | 11 | Mehdi Abaakouk | Copie du disque au format raw sur un lvm |
395 | 11 | Mehdi Abaakouk | <pre> |
396 | 11 | Mehdi Abaakouk | size=$(kvm-img info DISQUEVM.raw | sed -n -e 's/^virtual size:[^(]*(\([[:digit:]]*\).*)/\1/gp') |
397 | 11 | Mehdi Abaakouk | lvcreate -L ${size}b -n lv_migration_DISQUEVM kvmvg |
398 | 11 | Mehdi Abaakouk | dd if=DISQUEVM.raw of=/dev/kvmvg/lv_migration_DISQUEVM |
399 | 11 | Mehdi Abaakouk | </pre> |
400 | 11 | Mehdi Abaakouk | |
401 | 11 | Mehdi Abaakouk | Création de la VM |
402 | 11 | Mehdi Abaakouk | <pre> |
403 | 11 | Mehdi Abaakouk | gnt-instance add -B memory=512M --no-start -t plain -n $(hostname) --disk 0:adopt=lv_migration_DISQUEVM --net 0 -o debootstrap+default VMNAME.tetaneutral.net |
404 | 11 | Mehdi Abaakouk | </pre> |
405 | 11 | Mehdi Abaakouk | |
406 | 11 | Mehdi Abaakouk | Et pour finir, on transforme le format de disque de la VM en drbd: |
407 | 11 | Mehdi Abaakouk | <pre> |
408 | 11 | Mehdi Abaakouk | gnt-instance modify -t drbd -n h6 VMNAME.tetaneutral.net |
409 | 11 | Mehdi Abaakouk | </pre> |
410 | 17 | Mehdi Abaakouk | |
411 | 11 | Mehdi Abaakouk | h3. Copier une VM sur une autre machine |
412 | 11 | Mehdi Abaakouk | |
413 | 11 | Mehdi Abaakouk | Seul la machine *h1* a l'espace configurer pour faire des dumps de machine virtuelle. |
414 | 11 | Mehdi Abaakouk | |
415 | 11 | Mehdi Abaakouk | On lance un backup de celle-ci (attention cette commande *éteint* la machine): |
416 | 11 | Mehdi Abaakouk | <pre> |
417 | 11 | Mehdi Abaakouk | gnt-backup export -n h1 sileht2 |
418 | 11 | Mehdi Abaakouk | </pre> |
419 | 11 | Mehdi Abaakouk | |
420 | 11 | Mehdi Abaakouk | Les fichiers sont ensuite sur h1 dans /exports/sileht2.tetaneutral.net/ |
421 | 11 | Mehdi Abaakouk | |
422 | 11 | Mehdi Abaakouk | Le fichier qui nous intéresse est celui qui fini par *.snap* qui est le disque dur au format raw de la VM, dans mon cas: |
423 | 11 | Mehdi Abaakouk | <pre> |
424 | 11 | Mehdi Abaakouk | 09d836a0-22e0-4ea4-9104-c301351bb2e2.disk0_data.snap |
425 | 11 | Mehdi Abaakouk | </pre> |
426 | 11 | Mehdi Abaakouk | |
427 | 11 | Mehdi Abaakouk | Pour la démonstration je copie ce fichier sur h2: |
428 | 11 | Mehdi Abaakouk | <pre> |
429 | 11 | Mehdi Abaakouk | scp /exportfs/sileht2.tetaneutral.net/09d836a0-22e0-4ea4-9104-c301351bb2e2.disk0_data.snap h2:/root/sileht.raw |
430 | 11 | Mehdi Abaakouk | </pre> |
431 | 11 | Mehdi Abaakouk | |
432 | 11 | Mehdi Abaakouk | Et je le test avec kvm: |
433 | 11 | Mehdi Abaakouk | <pre> |
434 | 11 | Mehdi Abaakouk | kvm -m 256 -drive file=sileht.raw,format=raw,if=virtio,boot=on,cache=writeback -usbdevice tablet -netdev type=tap,id=netdev0,fd=10 -device virtio-net-pci,mac=aa:00:00:62:e3:a0,netdev=netdev0 |
435 | 1 | Mehdi Abaakouk | </pre> |
436 | 15 | Mehdi Abaakouk | |
437 | 15 | Mehdi Abaakouk | A savoir l'image utilise les pilotes kvm "virtio", si on souhaite utiliser la VM avec un autre logiciel de virtualisation, |
438 | 11 | Mehdi Abaakouk | il faudra modifié le fstab pour mettre /dev/sda1 au lieu de /dev/vda1 et supprimer le fichier /etc/udev/rules.d/70-persistent-net.rules |
439 | 14 | Mehdi Abaakouk | |
440 | 11 | Mehdi Abaakouk | h3. Monter une partition de machine virtuelle sur la machine hôte (!Attention DANGER!) |
441 | 11 | Mehdi Abaakouk | |
442 | 11 | Mehdi Abaakouk | Arret de la machine et activation des disques |
443 | 11 | Mehdi Abaakouk | <pre> |
444 | 11 | Mehdi Abaakouk | $ gnt-instance stop VMNAME.tetaneutral.net |
445 | 11 | Mehdi Abaakouk | $ gnt-instance activate-disks VMNAME.tetaneutral.net |
446 | 11 | Mehdi Abaakouk | h1.tetaneutral.net:disk/0:/dev/drbd34 |
447 | 11 | Mehdi Abaakouk | </pre> |
448 | 11 | Mehdi Abaakouk | |
449 | 11 | Mehdi Abaakouk | Ensuite pour voir les partitions du disque, ici le /dev/drbd34: |
450 | 11 | Mehdi Abaakouk | <pre> |
451 | 11 | Mehdi Abaakouk | kpartx -l /dev/drbd34 |
452 | 11 | Mehdi Abaakouk | </pre> |
453 | 11 | Mehdi Abaakouk | |
454 | 11 | Mehdi Abaakouk | On créé ensuite les partitions dans /dev avec devmapper |
455 | 11 | Mehdi Abaakouk | <pre> |
456 | 11 | Mehdi Abaakouk | kpartx -a /dev/drbd34 |
457 | 11 | Mehdi Abaakouk | ls -la /dev/mapper/drbd34* |
458 | 11 | Mehdi Abaakouk | </pre> |
459 | 11 | Mehdi Abaakouk | |
460 | 11 | Mehdi Abaakouk | A partir de maintenant on peut faire mumuse avec la partition, exemple: |
461 | 11 | Mehdi Abaakouk | <pre> |
462 | 11 | Mehdi Abaakouk | mount /dev/mapper/drbd34p1 /mnt/ |
463 | 11 | Mehdi Abaakouk | .... |
464 | 11 | Mehdi Abaakouk | umount /mnt |
465 | 11 | Mehdi Abaakouk | </pre> |
466 | 11 | Mehdi Abaakouk | |
467 | 11 | Mehdi Abaakouk | Puis *très important*, il faut nettoyer devmapper et déactiver les disk pour ganeti |
468 | 11 | Mehdi Abaakouk | |
469 | 11 | Mehdi Abaakouk | <pre> |
470 | 11 | Mehdi Abaakouk | kpartx -d /dev/drbd34 |
471 | 11 | Mehdi Abaakouk | gnt-instance deactivate-disks VMNAME.tetaneutral.net |
472 | 11 | Mehdi Abaakouk | gnt-instance start VMNAME.tetaneutral.net |
473 | 11 | Mehdi Abaakouk | </pre> |
474 | 1 | Mehdi Abaakouk | |
475 | 10 | Mehdi Abaakouk | h2. Administration des serveurs/nodes |
476 | 10 | Mehdi Abaakouk | |
477 | 10 | Mehdi Abaakouk | h3. Ãteindre/rebooter provisoirement un des serveurs sans coupure de service |
478 | 10 | Mehdi Abaakouk | |
479 | 10 | Mehdi Abaakouk | La procédure est la suivante: |
480 | 10 | Mehdi Abaakouk | - migration des machines virtuelles sur leurs secondaires |
481 | 10 | Mehdi Abaakouk | - Arret/Ralummage ou reboot du serveur |
482 | 1 | Mehdi Abaakouk | - remigration des machines virtuelles sur le serveur hX |
483 | 10 | Mehdi Abaakouk | |
484 | 10 | Mehdi Abaakouk | <pre> |
485 | 10 | Mehdi Abaakouk | gnt-node migrate hX |
486 | 1 | Mehdi Abaakouk | shutdown -h now # ou reboot |
487 | 1 | Mehdi Abaakouk | hbal -L --no-disk-moves -X |
488 | 10 | Mehdi Abaakouk | </pre> |
489 | 10 | Mehdi Abaakouk | |
490 | 10 | Mehdi Abaakouk | La resynchro drbd est automatique. |
491 | 10 | Mehdi Abaakouk | |
492 | 1 | Mehdi Abaakouk | h3. L'extinction d'une node proprement dans le but de la désactivé du cluster |
493 | 10 | Mehdi Abaakouk | |
494 | 10 | Mehdi Abaakouk | <pre> |
495 | 10 | Mehdi Abaakouk | gnt-node migrate hX # gnt-node failover hX |
496 | 1 | Mehdi Abaakouk | gnt-node evacuate -I hail hX |
497 | 1 | Mehdi Abaakouk | gnt-node modify -O yes hX |
498 | 10 | Mehdi Abaakouk | </pre> |
499 | 1 | Mehdi Abaakouk | |
500 | 10 | Mehdi Abaakouk | Ici toutes les VMs seront migrés et les données auront été déplacé vers les autres nodes. |
501 | 1 | Mehdi Abaakouk | |
502 | 10 | Mehdi Abaakouk | h3. Vérifier l'état du cluster |
503 | 10 | Mehdi Abaakouk | |
504 | 1 | Mehdi Abaakouk | Sur le masternode normalement h1 faire: |
505 | 10 | Mehdi Abaakouk | |
506 | 1 | Mehdi Abaakouk | <pre> |
507 | 1 | Mehdi Abaakouk | gnt-cluster verify |
508 | 10 | Mehdi Abaakouk | </pre> |
509 | 1 | Mehdi Abaakouk | |
510 | 10 | Mehdi Abaakouk | h3. Change le node principal (masternode) de "ganeti", celui qui permet de lancer des commandes ganeti. |
511 | 1 | Mehdi Abaakouk | |
512 | 1 | Mehdi Abaakouk | Allez sur un node, taper ceci et il deviendra "maternode": |
513 | 1 | Mehdi Abaakouk | |
514 | 1 | Mehdi Abaakouk | <pre> |
515 | 1 | Mehdi Abaakouk | gnt-node masterfailover |
516 | 10 | Mehdi Abaakouk | </pre> |
517 | 1 | Mehdi Abaakouk | |
518 | 10 | Mehdi Abaakouk | h3. Gestion des fichiers de configuration (ie: /etc/ganeti, /etc/hosts, /etc/rc.local, ...) |
519 | 1 | Mehdi Abaakouk | |
520 | 1 | Mehdi Abaakouk | Tous les fichiers de configuration à synchroniser entre toutes les nodes du cluster sont contenues dans ce script: |
521 | 1 | Mehdi Abaakouk | |
522 | 1 | Mehdi Abaakouk | <pre> |
523 | 1 | Mehdi Abaakouk | /etc/ganeti/pushconf.sh |
524 | 10 | Mehdi Abaakouk | </pre> |
525 | 1 | Mehdi Abaakouk | |
526 | 10 | Mehdi Abaakouk | Le lancer recopie ces fichiers du masternode vers les autres nodes. |
527 | 10 | Mehdi Abaakouk | |
528 | 10 | Mehdi Abaakouk | h3. Désactiver un serveur qui serait HS du cluster provisoirement. |
529 | 10 | Mehdi Abaakouk | |
530 | 10 | Mehdi Abaakouk | On bascule les machines qui n'ont pas le failover en automatique |
531 | 10 | Mehdi Abaakouk | |
532 | 10 | Mehdi Abaakouk | <pre> |
533 | 10 | Mehdi Abaakouk | gnt-node failover [ --ignore-consistency ] h2 |
534 | 10 | Mehdi Abaakouk | </pre> |
535 | 10 | Mehdi Abaakouk | |
536 | 10 | Mehdi Abaakouk | le --ignore-consistency permet de forcer ganeti à ne pas contrôler le disk avant le basculement |
537 | 10 | Mehdi Abaakouk | |
538 | 10 | Mehdi Abaakouk | On peux (optionnellement) déplacer les disques durs secondaires des VMs |
539 | 10 | Mehdi Abaakouk | |
540 | 10 | Mehdi Abaakouk | gnt-node evacuate [--early-release] -I hail hX |
541 | 10 | Mehdi Abaakouk | |
542 | 10 | Mehdi Abaakouk | le --early-release permet de forcer ganeti à ne pas contrôler le disk avant le basculement (utile si le disk de h2 est HS) |
543 | 10 | Mehdi Abaakouk | |
544 | 10 | Mehdi Abaakouk | Puis on désactive la node: |
545 | 10 | Mehdi Abaakouk | |
546 | 10 | Mehdi Abaakouk | <pre> |
547 | 10 | Mehdi Abaakouk | gnt-node modify -O yes h2 |
548 | 10 | Mehdi Abaakouk | </pre> |
549 | 1 | Mehdi Abaakouk | |
550 | 11 | Mehdi Abaakouk | |
551 | 10 | Mehdi Abaakouk | h3. Réinsertion dans le cluster d'un node désactivé |
552 | 10 | Mehdi Abaakouk | |
553 | 10 | Mehdi Abaakouk | - On réactive la node |
554 | 10 | Mehdi Abaakouk | - On remet dessus des machines et des disques en répartissant la charge du cluster |
555 | 10 | Mehdi Abaakouk | |
556 | 10 | Mehdi Abaakouk | <pre> |
557 | 10 | Mehdi Abaakouk | gnt-node modify -O no h2 |
558 | 10 | Mehdi Abaakouk | hbal -L -X |
559 | 10 | Mehdi Abaakouk | </pre> |
560 | 10 | Mehdi Abaakouk | |
561 | 10 | Mehdi Abaakouk | |
562 | 10 | Mehdi Abaakouk | h2. Setup d'un nouveau NODE |
563 | 10 | Mehdi Abaakouk | |
564 | 10 | Mehdi Abaakouk | h3. Installation |
565 | 1 | Mehdi Abaakouk | |
566 | 1 | Mehdi Abaakouk | * Installer squeeze basique avec juste ssh |
567 | 1 | Mehdi Abaakouk | * Ajouter wheezy dans /etc/apt/sources.list |
568 | 1 | Mehdi Abaakouk | |
569 | 1 | Mehdi Abaakouk | <pre> |
570 | 1 | Mehdi Abaakouk | # deb http://ftp.fr.debian.org/debian/ squeeze main |
571 | 1 | Mehdi Abaakouk | deb http://ftp.fr.debian.org/debian/ squeeze main contrib non-free |
572 | 1 | Mehdi Abaakouk | deb-src http://ftp.fr.debian.org/debian/ squeeze main contrib non-free |
573 | 1 | Mehdi Abaakouk | deb http://ftp.fr.debian.org/debian/ sid main contrib non-free |
574 | 1 | Mehdi Abaakouk | deb-src http://ftp.fr.debian.org/debian/ sid main contrib non-free |
575 | 1 | Mehdi Abaakouk | deb http://ftp.de.debian.org/debian-backports/ squeeze-backports main contrib non-free |
576 | 3 | Mehdi Abaakouk | deb-src http://ftp.de.debian.org/debian-backports/ squeeze-backports main contrib non-free |
577 | 3 | Mehdi Abaakouk | deb http://security.debian.org/ squeeze/updates main |
578 | 4 | Mehdi Abaakouk | deb-src http://security.debian.org/ squeeze/updates main |
579 | 3 | Mehdi Abaakouk | # squeeze-updates, previously known as 'volatile' |
580 | 1 | Mehdi Abaakouk | deb http://ftp.fr.debian.org/debian/ squeeze-updates main |
581 | 8 | Mehdi Abaakouk | deb-src http://ftp.fr.debian.org/debian/ squeeze-updates main |
582 | 8 | Mehdi Abaakouk | </pre> |
583 | 8 | Mehdi Abaakouk | |
584 | 8 | Mehdi Abaakouk | * Allouer un port avec 3131, 3175, 3195 tagged sur le procurve |
585 | 7 | Mehdi Abaakouk | * Monter le reseau manuellement IP X |
586 | 8 | Mehdi Abaakouk | |
587 | 7 | Mehdi Abaakouk | <pre> |
588 | 8 | Mehdi Abaakouk | ip link add link eth0 name eth0.3131 type vlan id 3131 |
589 | 7 | Mehdi Abaakouk | ip link set eth0.3131 up |
590 | 8 | Mehdi Abaakouk | ip addr add 91.224.149.15X/25 dev eth0.3131 |
591 | 8 | Mehdi Abaakouk | </pre> |
592 | 8 | Mehdi Abaakouk | |
593 | 7 | Mehdi Abaakouk | * Creer /etc/rc.local.conf avec X et Y |
594 | 5 | Mehdi Abaakouk | |
595 | 5 | Mehdi Abaakouk | <pre> |
596 | 6 | Mehdi Abaakouk | IP_3131="91.224.149.15X/25" |
597 | 5 | Mehdi Abaakouk | GW_3131="91.224.149.254" |
598 | 1 | Mehdi Abaakouk | IP_3175="192.168.3.Y/24" |
599 | 5 | Mehdi Abaakouk | KVM_DISKS="sdb" |
600 | 1 | Mehdi Abaakouk | </pre> |
601 | 1 | Mehdi Abaakouk | |
602 | 1 | Mehdi Abaakouk | * Installer les packages |
603 | 1 | Mehdi Abaakouk | |
604 | 1 | Mehdi Abaakouk | <pre> |
605 | 1 | Mehdi Abaakouk | #TODO liste en fichier commit qqpart |
606 | 1 | Mehdi Abaakouk | #TODO: passer a une version compilée en local de ganeti pour eviter les update de version wheezy |
607 | 1 | Mehdi Abaakouk | dpkg --get-selections | ssh root@h48 dpkg --set-selections |
608 | 5 | Mehdi Abaakouk | ssh root@h48 apt-get dselect-upgrade |
609 | 5 | Mehdi Abaakouk | </pre> |
610 | 6 | Mehdi Abaakouk | |
611 | 6 | Mehdi Abaakouk | |
612 | 5 | Mehdi Abaakouk | |
613 | 5 | Mehdi Abaakouk | * munin: |
614 | 5 | Mehdi Abaakouk | dans /etc/munin/munin-node.conf ajouter: allow ^91\.224\.149\.194$ |
615 | 1 | Mehdi Abaakouk | * TODO patch munin Loic |
616 | 5 | Mehdi Abaakouk | http://trac.fsffrance.org/wiki/PatchInventory#Munin |
617 | 1 | Mehdi Abaakouk | * reboot |
618 | 5 | Mehdi Abaakouk | * Installer le node dans le cluster ganeti apres s'etre assure que la version de ganeti est bien la meme |
619 | 1 | Mehdi Abaakouk | |
620 | 1 | Mehdi Abaakouk | <pre> |
621 | 5 | Mehdi Abaakouk | dpkg -l|grep -i ganeti |
622 | 5 | Mehdi Abaakouk | gnt-node add h48 |
623 | 5 | Mehdi Abaakouk | /etc/ganeti/pushconf.sh |
624 | 5 | Mehdi Abaakouk | </pre> |
625 | 5 | Mehdi Abaakouk | |
626 | 5 | Mehdi Abaakouk | Appliquer ce patch à ganeti-instance-debootstrap: |
627 | 5 | Mehdi Abaakouk | |
628 | 5 | Mehdi Abaakouk | <pre> |
629 | 5 | Mehdi Abaakouk | --- /usr/share/ganeti/os/debootstrap/common.sh.ori 2010-09-15 22:34:12.000000000 +0200 |
630 | 5 | Mehdi Abaakouk | +++ /usr/share/ganeti/os/debootstrap/common.sh 2011-07-27 12:33:55.695617766 +0200 |
631 | 5 | Mehdi Abaakouk | @@ -91,7 +91,7 @@ |
632 | 1 | Mehdi Abaakouk | # some versions of sfdisk need manual specification of |
633 | 5 | Mehdi Abaakouk | # head/sectors for devices such as drbd which don't |
634 | 5 | Mehdi Abaakouk | # report geometry |
635 | 5 | Mehdi Abaakouk | - sfdisk -H 255 -S 63 --quiet --Linux "$1" <<EOF |
636 | 6 | Mehdi Abaakouk | + sfdisk -H 255 -S 63 -D --quiet --Linux "$1" <<EOF |
637 | 5 | Mehdi Abaakouk | 0,,L,* |
638 | 3 | Mehdi Abaakouk | EOF |
639 | 1 | Mehdi Abaakouk | } |
640 | 1 | Mehdi Abaakouk | </pre> |
641 | 11 | Mehdi Abaakouk | |
642 | 3 | Mehdi Abaakouk | Ci dessous ajouter dkms et r8168 si nécessaire. |
643 | 15 | Mehdi Abaakouk | |
644 | 1 | Mehdi Abaakouk | h3. Pilotes additionnel |
645 | 1 | Mehdi Abaakouk | |
646 | 1 | Mehdi Abaakouk | Sur h1,h2,h4,h5 et h6, le pilote (r8169.ko) de la carte réseau (r8168/8111) provoque des kernels panic, il a été remplacé la version du constructeur (r8168.ko). |
647 | 1 | Mehdi Abaakouk | Pilote dispo ici: (http://www.realtek.com/downloads/downloadsView.aspx?Langid=1&PNid=13&PFid=5&Level=5&Conn=4&DownTypeID=3&GetDown=false) |
648 | 1 | Mehdi Abaakouk | |
649 | 1 | Mehdi Abaakouk | <pre> |
650 | 1 | Mehdi Abaakouk | apt-get install gcc dkms |
651 | 1 | Mehdi Abaakouk | cd /usr/src |
652 | 1 | Mehdi Abaakouk | wget http://url_to_pilot/r8168-8.024.00.tar.bz2 |
653 | 1 | Mehdi Abaakouk | tar -xjf r8168-8.024.00.tar.bz2 |
654 | 1 | Mehdi Abaakouk | cd r8168-8.024.00 |
655 | 1 | Mehdi Abaakouk | cat > dkms.conf << EOF |
656 | 1 | Mehdi Abaakouk | PACKAGE_NAME=r8168 |
657 | 1 | Mehdi Abaakouk | PACKAGE_VERSION=8.024.00 |
658 | 1 | Mehdi Abaakouk | MAKE[0]="make" |
659 | 1 | Mehdi Abaakouk | BUILT_MODULE_NAME[0]=r8168 |
660 | 1 | Mehdi Abaakouk | BUILT_MODULE_LOCATION[0]="src/" |
661 | 1 | Mehdi Abaakouk | DEST_MODULE_LOCATION[0]="/kernel/updates/dkms" |
662 | 1 | Mehdi Abaakouk | AUTOINSTALL="YES" |
663 | 1 | Mehdi Abaakouk | EOF |
664 | 1 | Mehdi Abaakouk | dkms add -m r8168 -v 8.024.00 |
665 | 1 | Mehdi Abaakouk | dkms build -m r8168 -v 8.024.00 |
666 | 1 | Mehdi Abaakouk | dkms install -m r8168 -v 8.024.00 |
667 | 1 | Mehdi Abaakouk | echo "r8168" >> /etc/modules |
668 | 1 | Mehdi Abaakouk | echo "blacklist r8169" >> /etc/modprobe.d/blacklist-network.conf |
669 | 1 | Mehdi Abaakouk | update-initramfs -u |
670 | 1 | Mehdi Abaakouk | reboot |
671 | 1 | Mehdi Abaakouk | </pre> |
672 | 1 | Mehdi Abaakouk | |
673 | 1 | Mehdi Abaakouk | Pour les machines a base de e1000e: |
674 | 1 | Mehdi Abaakouk | |
675 | 1 | Mehdi Abaakouk | <pre> |
676 | 1 | Mehdi Abaakouk | apt-get install gcc dkms |
677 | 1 | Mehdi Abaakouk | cd /usr/src |
678 | 1 | Mehdi Abaakouk | wget http://downloadmirror.intel.com/15817/eng/e1000e-1.3.17.tar.gz |
679 | 1 | Mehdi Abaakouk | tar -xzf e1000e-1.3.17.tar.gz |
680 | 1 | Mehdi Abaakouk | cd e1000e-1.3.17 |
681 | 1 | Mehdi Abaakouk | cat > dkms.conf << EOF |
682 | 1 | Mehdi Abaakouk | PACKAGE_NAME=e1000e |
683 | 1 | Mehdi Abaakouk | PACKAGE_VERSION=1.3.17 |
684 | 1 | Mehdi Abaakouk | CLEAN="make -C src/ clean" |
685 | 1 | Mehdi Abaakouk | MAKE[0]="make -C src/" |
686 | 1 | Mehdi Abaakouk | BUILT_MODULE_NAME[0]=e1000e |
687 | 1 | Mehdi Abaakouk | BUILT_MODULE_LOCATION[0]="src/" |
688 | 1 | Mehdi Abaakouk | DEST_MODULE_LOCATION[0]="/kernel/updates/dkms" |
689 | 1 | Mehdi Abaakouk | AUTOINSTALL="YES" |
690 | 1 | Mehdi Abaakouk | EOF |
691 | 1 | Mehdi Abaakouk | dkms add -m e1000e -v 1.3.17 |
692 | 1 | Mehdi Abaakouk | dkms build -m e1000e -v 1.3.17 |
693 | 1 | Mehdi Abaakouk | dkms install -m e1000e -v 1.3.17 |
694 | 1 | Mehdi Abaakouk | reboot |
695 | 1 | Mehdi Abaakouk | </pre> |
696 | 1 | Mehdi Abaakouk | |
697 | 1 | Mehdi Abaakouk | |
698 | 13 | Mehdi Abaakouk | h2. Annexe |
699 | 13 | Mehdi Abaakouk | |
700 | 13 | Mehdi Abaakouk | h3. Configuration réseau |
701 | 13 | Mehdi Abaakouk | |
702 | 13 | Mehdi Abaakouk | le script /etc/rc.local, qui s'occupe de préparer la configuration réseaux pour ganeti (avec les vlan, bridge and co) |
703 | 1 | Mehdi Abaakouk | le script /etc/rc.local.conf, contient les adresses IP de la machine et les gw |
704 | 11 | Mehdi Abaakouk | |
705 | 11 | Mehdi Abaakouk | h3. Protection VNC |
706 | 11 | Mehdi Abaakouk | |
707 | 11 | Mehdi Abaakouk | Le VNC de kvm est utiliser sur chaque MV. |
708 | 11 | Mehdi Abaakouk | Des règles de firewall sont automatiquement mise en place par le script /etc/ganeti/vnc-firewall pour que seul la machine gntwebmgr.tetaneutral.net soit autoriser a s'y connecter |
709 | 11 | Mehdi Abaakouk | Ce script est appelé par les hooks ganeti. |
710 | 11 | Mehdi Abaakouk | |
711 | 11 | Mehdi Abaakouk | h3. Mac spoofing configuration (Actuellement désactivé) |
712 | 1 | Mehdi Abaakouk | |
713 | 1 | Mehdi Abaakouk | Le script ifup de ganeti pour kvm a été modifier (ie: /etc/ganeti/kvm-vif-bridge) pour écrire la relation entre la vm, le numero de ces interfaces réseaux et ces tap. |
714 | 1 | Mehdi Abaakouk | Le fichier prends la forme suivante: |
715 | 1 | Mehdi Abaakouk | munin.tetaneutral.net:0:tap3 |
716 | 1 | Mehdi Abaakouk | trac.tetaneutral.net:0:tap5 |
717 | 1 | Mehdi Abaakouk | munin.tetaneutral.net:1:tap5 |
718 | 1 | Mehdi Abaakouk | Les règles ebtables sont écrites par le script /etc/ganeti/spoofing/spoofing-protection avec les informations de ce fichier. |
719 | 1 | Mehdi Abaakouk | Les scripts de hook de ganeti (ie:/etc/ganeti/hook/) utilise ce script, pour lancer ou arreter le spoofing. |
720 | 11 | Mehdi Abaakouk | |
721 | 33 | Mehdi Abaakouk | h3. Debootstrap du nouvelle ubuntu >= oneiric: |
722 | 33 | Mehdi Abaakouk | |
723 | 33 | Mehdi Abaakouk | pour les ubuntu oneiric, precise et supérieur il faut créer des liens symbolique pour debootstrap: |
724 | 33 | Mehdi Abaakouk | |
725 | 33 | Mehdi Abaakouk | <pre> |
726 | 33 | Mehdi Abaakouk | cd /usr/share/debootstrap/scripts |
727 | 33 | Mehdi Abaakouk | ln -s gutsy oneiric |
728 | 33 | Mehdi Abaakouk | ln -s gutsy precise |
729 | 33 | Mehdi Abaakouk | </pre> |
730 | 33 | Mehdi Abaakouk | |
731 | 33 | Mehdi Abaakouk | ensuite la variante peux être ajouter à ganeti-instace-debootstrap dans /etc/ganeti/instace-debootstrap/variants/... |
732 | 33 | Mehdi Abaakouk | |
733 | 1 | Mehdi Abaakouk | h3. Patch maison pour ganeti |
734 | 11 | Mehdi Abaakouk | |
735 | 11 | Mehdi Abaakouk | Ajout de l'option -D à sfdisk au script /usr/share/ganeti/os/debootstrap/common.sh ligne 84 pour créer des partitions avec assez d'espace pour grub |
736 | 1 | Mehdi Abaakouk | Celui-ci est décrit dans l'installation d'une node aussi. |
737 | 11 | Mehdi Abaakouk | |
738 | 1 | Mehdi Abaakouk | h3. J'ai n'est pas trouvé mon bonheur, comment je vais faire ?! |
739 | 11 | Mehdi Abaakouk | |
740 | 11 | Mehdi Abaakouk | Voici quelques ressources: |
741 | 11 | Mehdi Abaakouk | * http://docs.ganeti.org/ganeti/current/html/ |
742 | 11 | Mehdi Abaakouk | * http://docs.ganeti.org/ganeti/2.1/man/ |
743 | 11 | Mehdi Abaakouk | * http://wiki.osuosl.org/public/ganeti/ |
744 | 1 | Mehdi Abaakouk | Ou bien je demande à sileht d'écrire le use case qui me manque s'il à le temps |