Host : node01-zookeeper

• Disque /dev/sda: 32 Go
• IP : 172.17.186.20
• RAM :2Go
• vCPU : 2
• OS : RockyLinux 8

Host : node02-zookeeper

• Disque /dev/sda: 32 Go
• IP : 172.17.186.21
• RAM :2Go
• vCPU : 2
• OS : RockyLinux 8

Host : node03-zookeeper

• Disque /dev/sda: 32 Go
• IP : 172.17.186.22
• RAM :2Go
• vCPU : 2
• OS : RockyLinux 8

Le pool du Cluster

Mise à jour de la machine (3 noeuds)

[root@node0X-zookeeper ~]# yum update -y

Désactiver SELinux (3 noeuds)

[root@node0X-zookeeper ~]# vi /etc/selinux/config

Installation JAVA (3 noeuds)

[root@node0X-zookeeper ~]# yum -y install java-1.8.0-openjdk

User zooKeeper (3 noeuds)

[root@node0X-zookeeper ~]# useradd zk -m
[root@node0X-zookeeper ~]# passwd zk
[root@node0X-zookeeper ~]# usermod -aG wheel zk

Installation Apache-zookeeper (3 noeuds)

[root@node0X-zookeeper ~]# dnf install wget nc -y

[root@node0X-zookeeper ~]# cd /tmp
[root@node0x-zookeeper tmp]# wget https://dlcdn.apache.org/zookeeper/zookeeper-3.8.0/apache-zookeeper-3.8.0-bin.tar.gz
[root@node0x-zookeeper tmp]# tar -xvf apache-zookeeper-3.8.0-bin.tar.gz -C /opt
[root@node0x-zookeeper tmp]# cd /opt
[root@node0x-zookeeper opt]# mv apache-zookeeper-3.8.0-bin zookeeper

Installation Firewalld (3 noeuds)

[root@node0X-zookeeper ~]# firewall-cmd --add-port={2181,2888,3888}/tcp --permanent --zone=public
[root@node0X-zookeeper ~]# firewall-cmd --reload
[root@node0X-zookeeper ~]# firewall-cmd --list-all

Configuration standalone zookeeper (node01)

[root@node01-zookeeper opt]# cd zookeeper/conf

[root@node01-zookeeper conf]# vi zoo.cfg
tickTime=2000
dataDir=/var/lib/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.1=172.17.186.20:2888:3888

[root@node01-zookeeper opt]# chown -R zk.zk /opt/zookeeper

Création de ID Machine (node01)

[root@node01-zookeeper conf]# mkdir /var/lib/zookeeper
[root@node01-zookeeper conf]# touch /var/lib/zookeeper/myid
[root@node01-zookeeper conf]# echo '1' > /var/lib/zookeeper/myid
[root@node01-zookeeper conf]# chown -R zk.zk /var/lib/zookeeper

CHECK Fonctionnement Standalone NODE 01 – CLI

Start Service (node01)

[root@node01-zookeeper conf]# cd ../bin
[root@node01-zookeeper bin]# ./zkServer.sh start

Check port Open (node01)

[root@node01-zookeeper bin]# netstat -antp

Check Status (node01)

[root@node01-zookeeper bin]# ./zkServer.sh status

Check Connect server Standalone (node01)

[root@node01-zookeeper bin]# ./zkCli.sh -server 127.0.0.1:2181

[root@node01-zookeeper bin]# ./zkServer.sh stop

Création du service pour ZooKeeper ( 3 noeuds)

[root@node0x-zookeeper bin]# cd ~
[root@node0x-zookeeper ~]# vi /etc/systemd/system/zk.service

[Unit]
Description=Zookeeper Daemon
Documentation=http://zookeeper.apache.org
Requires=network.target
After=network.target

[Service] 
Type=forking
WorkingDirectory=/opt/zookeeper
ExecStart=/opt/zookeeper/bin/zkServer.sh start /opt/zookeeper/conf/zoo.cfg
ExecStop=/opt/zookeeper/bin/zkServer.sh stop /opt/zookeeper/conf/zoo.cfg
ExecReload=/opt/zookeeper/bin/zkServer.sh restart /opt/zookeeper/conf/zoo.cfg
TimeoutSec=30
Restart=on-failure

[Install]
WantedBy=default.target

[root@node0x-zookeeper ~]# systemctl daemon-reload

Démarrage du Service (node01)

[root@node01-zookeeper ~]# systemctl start zk.service
[root@node01-zookeeper ~]# systemctl status zk.service

[root@node01-zookeeper ~]# systemctl stop zk.service

Installation Zookeeper mode Cluster ( 3 noeuds)

Création fichier du fichier zoo.conf cluster ( 3 noeuds)

[root@node0x-zookeeper ~]# vi /opt/zookeeper/conf/zoo.cfg

tickTime=2000
dataDir=/var/lib/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.1=172.17.186.20:2888:3888
server.2=172.17.186.21:2888:3888
server.3=172.17.186.22:2888:3888

[root@node0x-zookeeper ~]# chown -R zk.zk /opt/zookeeper/conf/zoo.cfg

Création de ID Machine ( 3 noeuds)

[root@node0x-zookeeper ~]# mkdir /var/lib/zookeeper
[root@node0x-zookeeper ~]# touch /var/lib/zookeeper/myid

Node1
[root@node01-zookeeper ~]# echo '1' > /var/lib/zookeeper/myid

Node2
[root@node02-zookeeper ~]# echo '2' > /var/lib/zookeeper/myid

Node3
[root@node03-zookeeper ~]# echo '3' > /var/lib/zookeeper/myid

[root@node0x-zookeeper ~]# chown -R zk.zk /var/lib/zookeeper

Démarrage du Service ( 3 noeuds)

[root@node0x-zookeeper ~]# systemctl start zk.service
[root@node0x-zookeeper ~]# systemctl status zk.service

Node01

Node02

Node03

[root@node0x-zookeeper ~]# systemctl enable zk.service

Check Cluster

Côté logs

[root@node01-zookeeper ~]#tail –f /opt/zookeeper/logs/zookeeper--server-node01-zookeeper.out

Côté statut

[root@node01-zookeeper ~]# /opt/zookeeper/bin/zkServer.sh status

[root@node02-zookeeper ~]# /opt/zookeeper/bin/zkServer.sh status

[root@node03-zookeeper ~]# /opt/zookeeper/bin/zkServer.sh status

Check avec module

[root@node0x-zookeeper ~]# systemctl stop zk.service
[root@node0x-zookeeper ~]# echo "4lw.commands.whitelist=stat, ruok, conf, isroi, mntr" >> /opt/zookeeper/conf/zoo.cfg

[root@node0x-zookeeper ~]# systemctl start zk.service
[root@node01-zookeeper ~]# echo stat | nc localhost 2181

[root@node01-zookeeper ~]# echo conf | nc localhost 2181

[root@node01-zookeeper ~]# echo mntr | nc localhost 2181

[root@node01-zookeeper ~]# /opt/zookeeper/bin/zkCli.sh -server 172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181

Views: 9

L’article MODOP – QEMU HA – Partie 1 – Installation Cluster ZooKeeper est apparu en premier sur CoffeeBreak Info.

• node04-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.23
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

• node05-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.24
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

• node06-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.25
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

• node07-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.26
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

• node08-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.27
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

• node09-sheepdog

  • Disque /dev/sda: 8 Go
  • Disque /dev/sdb : 45Go (Sheepdog)
  • IP : 172.17.186.28
  • RAM : 2Go
  • vCPU : 2
  • OS : Centos7

Mise à jour (6 machines)

[root@node0x-sheepdog ~]# yum update -y

Désactiver SELinux (6 machines)

[root@node0x-sheepdog ~]# vi /etc/selinux/config
SELINUX=disabled

Installation des dépendances nécessaire (6 machines)

Récupération package nécessaire (6 machines)

[root@node0x-sheepdog ~]# yum -y install epel-release
[root@node0x-sheepdog ~]# yum -y install wget git ninja-build corosynclib-devel
[root@node0x-sheepdog ~]# yum -y install glib2 glib2-devel pixman-devel
[root@node0x-sheepdog ~]# yum -y install yasm maven zlib-devel
[root@node0x-sheepdog ~]# yum -y install ant install cppunit cppunit-devel
[root@node0x-sheepdog ~]# yum -y install yasm fuse fuse-devel

Installation liburcu (6 machines)

[root@node0x-sheepdog ~]# cd /home
[root@node0x-sheepdog ~]# git clone https://github.com/flatzo/liburcu.git
[root@node0x-sheepdog ~]# cd liburcu/
[root@node0x-sheepdog ~]#./bootstrap
[root@node0x-sheepdog ~]#./configure
[root@node0x-sheepdog ~]# make && make install
[root@node0x-sheepdog ~]# ldconfig

Installation maven 3.8 (6 machines)

[root@node0x-sheepdog ~]# cd /home
[root@node0x-sheepdog home]# wget https://dlcdn.apache.org/maven/maven-3/3.8.6/binaries/apache-maven-3.8.6-bin.tar.gz
[root@node0x-sheepdog home]# tar xzvf apache-maven-3.8.6-bin.tar.gz -C /opt
[root@node0x-sheepdog home]# ln -s /opt/apache-maven-3.8.6 /opt/maven

[root@node0x-sheepdog home]# vi ~/.bashrc
export JAVA_HOME=/usr/lib/jvm/jre-openjdk
export M2_HOME=/opt/maven
export MAVEN_HOME=/opt/maven
export PATH=${M2_HOME}/bin:${PATH}

[root@node0x-sheepdog home]# source ~/.bashrc

[root@node0x-sheepdog home]# mvn -version

Installation sheepdog avec zooKeeper (6 machines)

Installation Client zookeeper (6 machines)

[root@node0x-sheepdog ~]# cd /home
[root@node0x-sheepdog ~]# wget https://dlcdn.apache.org/zookeeper/zookeeper-3.8.0/apache-zookeeper-3.8.0.tar.gz
[root@node0x-sheepdog ~]# tar xzvf apache-zookeeper-3.8.0.tar.gz
[root@node0x-sheepdog ~]# cd /home/apache-zookeeper-3.8.0/zookeeper-jute

[root@node0x-sheepdog zookeeper-jute]# mvn clean

[root@node0x-sheepdog zookeeper-jute]# mvn install

[root@node0x-sheepdog zookeeper-jute]# cd /home/apache-zookeeper-3.8.0/zookeeper-client/zookeeper-client-c
[root@node0x-sheepdog zookeeper-client-c]# autoreconf -vfi
[root@node0x-sheepdog zookeeper-client-c]# automake
[root@node0x-sheepdog zookeeper-client-c]# autoconf
[root@node0x-sheepdog zookeeper-client-c]# ./configure
[root@node0x-sheepdog zookeeper-client-c]# make && make install

[root@node0x-sheepdog zookeeper-client-c]# ls /usr/local/lib |grep libzookeeper

Set variable d’environnement (6 machines)

[root@node0x-sheepdog zookeeper-client-c]# vi ~/.bashrc

Export LD_LIBRARY_PATH=/usr/local/lib

[root@node0x-sheepdog zookeeper-client-c]# source ~/.bashrc
[root@node0x-sheepdog zookeeper-client-c]# echo $LD_LIBRARY_PATH
/usr/local/lib

Installation sheedog (6 machines)

[root@node0x-sheepdog zookeeper-client-c]# cd /home
[root@node0x-sheepdog home]# git clone https://github.com/sheepdog/sheepdog.git
[root@node0x-sheepdog home]# cd sheepdog
[root@node0x-sheepdog sheepdog]# ./autogen.sh
[root@node0x-sheepdog sheepdog]# ./configure --enable-zookeeper --enable-sheepfs --disable-corosync

Correction BUG (6 machines)

[root@node0x-sheepdog sheepdog]# vi /home/sheepdog/sheep/cluster/zookeeper.c
Ajouter
#define ZOO_MAJOR_VERSION "3.8.0"
#define ZOO_MINOR_VERSION "3.8.0"
#define ZOO_PATCH_VERSION "3.8.0"

[root@node0x-sheepdog sheepdog]# make && make install

Chargement module KVM (6 machines)

[root@node0x-sheepdog home]# modprobe kvm
[root@node0x-sheepdog home]# lsmod | grep kvm
[root@node0x-sheepdog home]# echo "modprobe kvm" >> /etc/rc.local

Configuration Disque sheepFS (6 machines)

Installation paquets nécessaires

[root@node0x-sheepdog ~]# yum install python3-attrs libattr

Préparation et installation disque sheepdog

[root@node0x-sheepdog ~]# parted -s /dev/sdb mklabel msdos
[root@node0x-sheepdog ~]# parted -s /dev/sdb mkpart primary 1MiB 100%
[root@node0x-sheepdog ~]# mkfs.ext4 /dev/sdb

[root@node0x-sheepdog ~]# lsblk

[root@node0x-sheepdog ~]# pvcreate /dev/sdb
[root@node0x-sheepdog ~]# vgcreate sheepdog /dev/sdb
[root@node0x-sheepdog ~]# lvcreate -n sheep0 -l 100%FREE sheepdog

[root@node0x-sheepdog ~]# ls /dev/mapper/

[root@node0x-sheepdog ~]# mkfs.ext4 /dev/mapper/sheepdog-sheep0
[root@node0x-sheepdog ~]# tune2fs -l /dev/mapper/sheepdog-sheep0

[root@node0x-sheepdog ~]# mkdir -p /mnt/sheep/0
[root@node0x-sheepdog ~]# echo "/dev/mapper/sheepdog-sheep0 /mnt/sheep/0 ext4 user_xattr 0 1" >> /etc/fstab
[root@node0x-sheepdog ~]# mount /mnt/sheep/0
[root@node0x-sheepdog ~]# df –Th

Installation Qemu pour sheepdog (6 machines)

[root@node0x-sheepdog ~]# cd /home
[root@node0x-sheepdog ~]# git clone https://github.com/sheepdog/qemu.git
[root@node0x-sheepdog ~]# cd qemu
[root@node0x-sheepdog ~]#./configure --disable-werror

[root@node0x-sheepdog ~]# git submodule update --init dtc

[root@node0x-sheepdog ~]#./configure --disable-werror
[root@node0x-sheepdog ~]# make && make install

Règles firewall (6 machines)

[root@node-temp-sheep ~]# firewall-cmd --add-port={2181,7000}/tcp --permanent --zone=public && firewall-cmd --reload
[root@node-temp-sheep ~]# firewall-cmd --zone=public --permanent --add-service=vnc-server && firewall-cmd --reload
[root@node-temp-sheep ~]# firewall-cmd --list-all

Lancement de sheepdog (6 machines)

Load sheepdog node04

[root@node04-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node04-sheepdog ~]# chmod +x /etc/rc.local
[root@node04-sheepdog ~]# source /etc/rc.local

[root@node04-sheepdog ~]# dog node list

Load sheepdog node05

[root@node05-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node05-sheepdog ~]# chmod +x /etc/rc.local
[root@node05-sheepdog ~]# source /etc/rc.local

[root@node05-sheepdog ~]# dog node list

Load sheepdog node06

[root@node06-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node06-sheepdog ~]# chmod +x /etc/rc.local
[root@node06-sheepdog ~]# source /etc/rc.local

[root@node06-sheepdog ~]# dog node list

Load sheepdog node07

[root@node07-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node07-sheepdog ~]# chmod +x /etc/rc.local
[root@node07-sheepdog ~]# source /etc/rc.local

[root@node07-sheepdog ~]# dog node list

Load sheepdog node08

[root@node08-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node08-sheepdog ~]# chmod +x /etc/rc.local
[root@node08-sheepdog ~]# source /etc/rc.local

[root@node08-sheepdog ~]# dog node list

Load sheepdog node09

[root@node09-sheepdog ~]# echo "sheep --cluster zookeeper:172.17.186.20:2181,172.17.186.21:2181,172.17.186.22:2181 -n /var/lib/sheepdog,/mnt/sheep/0 -p 7000" >> /etc/rc.local
[root@node09-sheepdog ~]# chmod +x /etc/rc.local
[root@node09-sheepdog ~]# source /etc/rc.local

[root@node09-sheepdog ~]# dog node list

Vérifier les informations Cluster (node04)

[root@node04-sheepdog sheepdog]# dog cluster info
Cluster status: Waiting for cluster to be formatted

Création d’un cluster avec une « policy » de « random default reduncy » (node04)

Nous allons définir une redondance de 4

[root@node04-sheepdog sheepdog]# dog cluster format -c 4
using backend plain store

Vérifier les informations Cluster (node04)

[root@node04-sheepdog sheepdog]# dog cluster info

[root@node04-sheepdog sheepdog]# dog cluster info -v

Vérifier les informations du pool Disque /mnt/sheep/0 (node04)

[root@node04-sheepdog ~]# dog node info

Liste des machines Virtuelle – format vdi (node04)

[root@node04-sheepdog ~]# dog vdi list

Check d’écriture sur le Pool Sheepdog

Test création machine VM vide (node04)

[root@node04-sheepdog ~]# qemu-img create sheepdog:chris 4G

[root@node04-sheepdog ~]# dog vdi list

[root@node04-sheepdog home]# dog vdi delete chris
[root@node04-sheepdog home]# dog vdi list

Views: 3

L’article MODOP – QEMU HA – Partie 2 – Installation Cluster sheepdog est apparu en premier sur CoffeeBreak Info.

Récupère une image iso (node04)

[root@node04-sheepdog ~]# cd /home
[root@node04-sheepdog home]# wget http://mirror.centos.plus.hr/centos/7.9.2009/isos/x86_64/CentOS-7-x86_64-Minimal-2009.iso

[root@node04-sheepdog home]# ls |grep iso
CentOS-7-x86_64-Minimal-2009.iso

Injection de l’image iso au « datastore distribué » sheepdog (node04)

[root@node-temp-sheep ~]# cd /home
[root@node04-sheepdog home]# qemu-img convert -f raw /home/CentOS-7-x86_64-Minimal-2009.iso sheepdog:centOS7.iso

[root@node-temp-sheep home]# dog vdi list

Création d’une machine Cliente (node04)

[root@node04-sheepdog home]# dog vdi create client01 8G

[root@node04-sheepdog home]# dog vdi list

[root@node04-sheepdog home]# dog node info

Installation de la machine client01

Lancement de la machine

[root@node04-sheepdog home]# qemu-system-x86_64 \
-name client01 \
-enable-kvm \
-drive file=sheepdog:client01,if=virtio \
-cdrom sheepdog:centOS7.iso \
-m 1024 \
-smp 2 \
-k fr \
-vga std \
-vnc :1 \
-usbdevice tablet \
-boot order=d \
-daemonize

[root@node04-sheepdog home]# ps -aux |grep client01

Lancer VNC sur une machine sur réseau (node04)

Vue sur la machine Centos7 de Qemu via VNC

Faire une installation basique de la machine Centos7.

Redémarrons la machine (node04)

[root@node04-sheepdog home]# VAL=`ps -aux|grep client01 |head -1 | awk '{print $2}'` && kill -9 ${VAL}

[root@node04-sheepdog home]# qemu-system-x86_64 \
-name client01 \
-enable-kvm \
-drive file=sheepdog:client01,if=virtio \
-m 1024 \
-smp 2 \
-k fr \
-vga std \
-vnc :1 \
-usbdevice tablet \
-boot order=c \
-daemonize

Test de résilience de donnée via Sheepdog

Création d’un fichier sur la machine client01 sur node04-sheepdog

Réalisons un Recovery en live

Stoppons sheep node04

[root@node04-sheepdog home]# dog node kill 0

Check des informations recovery sheepdog node05

[root@node05-sheepdog ~]# watch -n 1 dog node recovery

[root@node04-sheepdog home]# pgrep sheep
[root@node04-sheepdog home]# ps -aux |grep sheep

[root@node05-sheepdog ~]# dog node list

[root@node05-sheepdog ~]# dog node info

Le disque du node04-sheep n’est plus disponible dans le Pool sheepFS

Stoppons Client01 sur node04 et démarrons le sur node05

Node04

[root@node04-sheepdog home]# VAL=`ps -aux|grep client01 |head -1 | awk '{print $2}'` && kill -9 ${VAL}

Démarrons la machine client01 sur node05

Connexion VNC sur node05

Le fichier est bien préservé avec son contenu et disponible sur un autre nœud.

Views: 0

L’article MODOP – QEMU HA – Partie 3 – Test HA Disque Distribué sheepdog est apparu en premier sur CoffeeBreak Info.

Suppression IPv6 et Forward ipv4(6 machines)

[root@node0x-sheepdog home]# echo "net.ipv4.ip_forward = 1" >> /etc/sysctl.conf
[root@node0x-sheepdog home]# echo "net.ipv6.conf.all.disable_ipv6 = 1" >> /etc/sysctl.conf
[root@node0x-sheepdog home]# echo "net.ipv6.conf.all.autoconf = 0" >> /etc/sysctl.conf
[root@node0x-sheepdog home]# echo "net.ipv6.conf.default.disable_ipv6 = 1" >> /etc/sysctl.conf
[root@node0x-sheepdog home]# echo "net.ipv6.conf.default.autoconf = 0" >> /etc/sysctl.conf
[root@node0x-sheepdog home]# sysctl -p

Inventaire des besoins (6 machines)

[root@node0x-sheepdog home]# ip a

Carte Réseau eth1 présente pour le réseau des VM

[root@node0x-sheepdog ~]# modinfo bridge

Module « Bridge » chargé

Installation du paquet nécessaire (6 machines)

[root@node0x-sheepdog ~]# yum -y install bridge-utils

Création du Bridge vmbr0 (6 machines)

[root@node0x-sheepdog ~]# vi /etc/sysconfig/network-scripts/ifcfg-vmbr0

DEVICE="vmbr0"
BOOTPROTO="static"
IPADDR="192.168.1.21x"
NETMASK="255.255.255.0"
GATEWAY="192.168.1.1"
DNS1=192.168.1.1
ONBOOT="yes"
TYPE="Bridge"
NM_CONTROLLED="no"

Connecter eth1 sur vmbr0 (6 machines)

[root@node0x-sheepdog ~]# vi /etc/sysconfig/network-scripts/ifcfg-eth1

DEVICE=eth1
TYPE=Ethernet
BOOTPROTO=none
ONBOOT=yes
NM_CONTROLLED=no
BRIDGE=vmbr0

Démarrrer le bridge et eth1 (6 machines)

[root@node0x-sheepdog ~]# ifup vmbr0
[root@node0x-sheepdog ~]# ifup eth1

Configuration le Bridge avec Qemu (6 machines)

[root@node0x-sheepdog ~]# echo "allow vmbr0" >> /usr/local/etc/qemu/bridge.conf
[root@node0x-sheepdog ~]# chown root:root /usr/local/etc/qemu/bridge.conf
[root@node0x-sheepdog ~]# chmod 0640 /usr/local/etc/qemu/bridge.conf

Mise en place de la machine web sur sheepdog et Qemu

Création de web01 via Clone client07 (node04)

[root@node0x-sheepdog ~]# dog vdi snapshot client01

[root@node0x-sheepdog ~]# dog vdi clone -s1 -r -v client01 web01
[root@node0x-sheepdog ~]# dog vdi list

Installation KeepAlive (6 machines)

MAP des IP LAN VM et KeepAlive

• node04-sheepdog
  • vmbr0 : 192.168.1.210
• node05-sheepdog
  • vmbr0 : 192.168.1.211
• node06-sheepdog
  • vmbr0 : 192.168.1.212
• node07-sheepdog
  • vmbr0 : 192.168.1.213
• node08-sheepdog
  • vmbr0 : 192.168.1.214
• node09-sheepdog
  • vmbr0 : 192.168.1.215

VIP KeepAlive : 172.17.186.40

Installation des paquets nécessaires (6 machines)

[root@node04-sheepdog vm]# yum install -y keepalived
[root@node04-sheepdog vm]# yum -y install ipvsadm

Chargement du module ip_vs (6 machines)

[root@node04-sheepdog vm ~]# modprobe ip_vs
[root@node04-sheepdog vm ~]# echo ip_vs >> /etc/module

Configuration KeepAlive (6 machines)

[root@node04-sheepdog vm]# cp /etc/keepalived/keepalived.conf{,-old}
[root@node04-sheepdog vm]# sh -c '> /etc/keepalived/keepalived.conf'

Node04 (Master)

[root@node04-sheepdog vm]# vi /etc/keepalived/keepalived.conf

! /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
 notification_email {
 chris@en-images.info
 }

 notification_email_from chris@en-images.info
 smtp_server localhost
 smtp_connect_timeout 30
 }

vrrp_instance VI_1 {
 state MASTER
 interface eth0
 virtual_router_id 100
 priority 200
 authentication {
 auth_type PASS
 auth_pass droopy2021
 }

 virtual_ipaddress {
 172.17.186.40/24 dev eth0
 }
}

[root@node04-sheepdog ~]# systemctl enable --now keepalived

[root@node04-sheepdog ~]# systemctl status keepalived

[root@node04-sheepdog ~]# ip a

Node05 à Node09 (Backup)

[root@node0x-sheepdog vm]# vi /etc/keepalived/keepalived.conf

• node05 : priority 199
• node06 : priority 198
• node07 : priority 197
• node08 : priority 196
• node09 : priority 195

! /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
notification_email {
chris@en-images.info
}
 notification_email_from chris@en-images.info
 smtp_server localhost
 smtp_connect_timeout 30
}

vrrp_instance VI_1 {
 state BACKUP
 interface eth0
 virtual_router_id 100
 priority 19X

authentication {
 auth_type PASS
 auth_pass droopy2021
}

virtual_ipaddress {
172.17.186.40/24 dev eth0
}
}

[root@node0x-sheepdog ~]# systemctl enable --now keepalived

[root@node0x-sheepdog ~]# systemctl status keepalived

Configuration spécification réseaux (6 machines)

[root@node0x-sheepdog vm]# echo "net.ipv4.ip_nonlocal_bind = 1" >> /etc/sysctl.conf
[root@node0x-sheepdog vm]# sysctl -p

Règles firewall (6 machines)

[root@node0x-sheepdog vm]# firewall-cmd --add-rich-rule='rule protocol value="vrrp" accept' --permanent --zone=public
[root@node0x-sheepdog ~]# firewall-cmd --add-service=vnc-server --permanent --zone=public
[root@node0x-sheepdog vm]# firewall-cmd --reload

Script HA web01 sur Machine Portant la VIP (node04)

Si la VIP n’est pas présente, on considère que la machine est dysfonctionnelle.

Script BASH

[root@node0x-sheepdog vm]# vi web.sh

#!/bin/bash
VIP=172.17.186.40
LOG=/var/log/webVM.log

while true
do
sleep 1
CHECK_VIP=`ip a show eth0 |grep ${VIP}|wc -c`
APP_VM=`ps -aux|grep web01 |grep -v grep |head -1 | awk '{print $2}'|wc -c`

if [[ ${CHECK_VIP} == 0 ]]
then
 if [[ ${APP_VM} != 0 ]]
 then
 echo "PID présent et perte de la VIP - On kill le PID de la machine" >> $LOG
 KILL_VM=`ps -aux|grep web01 |grep -v grep |head -1 | awk '{print $2}'`
 kill -9 ${KILL_VM}
 fi

else

 if [[ ${APP_VM} == 0 ]]
 then
 echo "On démarre la machine car VIP existe pas de PID Machine" >> $LOG
 qemu-system-x86_64 \
 -name web01 \
 -enable-kvm \
 -drive file=sheepdog:web01,if=virtio \
 -net nic -net bridge,br=vmbr0 \
 -m 1024 \
 -smp 2 -k fr \
 -vga std \
 -vnc :1 \
 -usbdevice tablet \
 -boot order=c \
 -daemonize
 fi

fi

done

Déployer le script sur les autres nodes (node04)

[root@node0x-sheepdog vm]# scp /home/vm/web.sh root@172.17.186.24:/home/vm/web.sh
[root@node0x-sheepdog vm]# scp /home/vm/web.sh root@172.17.186.25:/home/vm/web.sh
[root@node0x-sheepdog vm]# scp /home/vm/web.sh root@172.17.186.26:/home/vm/web.sh
[root@node0x-sheepdog vm]# scp /home/vm/web.sh root@172.17.186.27:/home/vm/web.sh
[root@node0x-sheepdog vm]# scp /home/vm/web.sh root@172.17.186.28:/home/vm/web.sh

Démarrer le service de la machine web(6 machines)

[root@node0x-sheepdog vm]# /home/vm/web.sh &

Bascule HA – VM web01

Machine Maitre Node04 (KeepAlive ON)

[root@node04-sheepdog vm]# ip a show eth0 |grep inet

[root@node04-sheepdog vm]# ps -aux |grep "sheepdog:web01" |grep -v grep

[root@node04-sheepdog vm]# ping -c 4 192.168.1.202

Installation http sur la VM web hébergée sur Qemu

[root@node04-sheepdog ~]# ssh -l root 192.168.1.202

Installation package

[root@web ~]# yum -y install httpd php qemu-guest-agent

Règle firewall

[root@web ~]# firewall-cmd --zone=public --permanent --add-service=http && firewall-cmd --reload

Création site

[root@web ~]# mkdir /home/www
[root@web ~]# chown apache.apache -R /home/www
[root@web ~]# chmod -R 755 /home/www

[root@web ~]# vi /home/www/index.php

<center><h1><b> Serveur Web - QEMU - Sheepdog - Zookeeper </b></h1></center>
<?php

// afficher le nom du fichier de script éxécuté
echo $_SERVER['PHP_SELF'];
echo "<br>";

// afficher l'adresse IP du serveur où le script est éxécuté
echo $_SERVER['SERVER_ADDR'];
echo "<br>";

// afficher le nom d'hôte du serveur
echo $_SERVER['SERVER_NAME'];
echo "<br>";

// afficher la méthode de requête ('GET', 'HEAD', 'POST', 'PUT')
echo $_SERVER['REQUEST_METHOD'];
echo "<br>";

// afficher les paramètres de l'URL
echo $_SERVER['QUERY_STRING'];
echo "<br>";

// afficher le nom du répertoire racine du script
echo $_SERVER['DOCUMENT_ROOT'];
echo "<br>";

// afficher le nom d'hôte de la machine cliente
echo $_SERVER['HTTP_HOST'];
echo "<br>";

// afficher les informations sur le navigateur utilisé
echo $_SERVER['HTTP_USER_AGENT'];
echo "<br>";

// afficher l'adresse IP du client
echo $_SERVER['REMOTE_ADDR'];
echo "<br>";

?>

Configuration Apache

[root@web ~]# vi /etc/httpd/conf.d/web.conf

<VirtualHost *:80>

 ServerName web.house.cpb
 ServerAlias house.cpb
 DocumentRoot /home/www
 DirectoryIndex index.php

<Directory /home/www>
 Options Indexes FollowSymLinks
 AllowOverride None
 Require all granted
</Directory>

</VirtualHost>

[root@web ~]# systemctl enable --now httpd

Url de la machine web : http://192.168.1.202

Check Bascule de la VM de Node04 => Node05

Modifions le fichier d’index index.php

[root@web ~]# sed -i 's/Serveur Web - QEMU - Sheepdog - Zookeeper/Serveur Web - QEMU - Sheepdog - Zookeeper => Node05/'g /home/www/index.php && exit

Simulons Down Machine Node04

[root@node04-sheepdog vm]# systemctl stop keepalived
[root@node04-sheepdog vm]# ps -aux |grep "sheepdog:web01" |grep -v grep
Aucun processus, La machine n’est plus démarrée sur node04

Check sur la machine node05

[root@node05-sheepdog ~]# ps -aux |grep "sheepdog:web01" |grep -v grep

La machine est bien présente et démarrée sur node05

[root@node05-sheepdog ~]# ip a show eth0 |grep inet

La VIP a basculé sur node05, node04 est « down »

Check Url site Web : http://192.168.1.202

La modification réalisée sur le node04 est bien présente sur la machine web01 démarrée sur Node05

Bascule de la VM de Node05 => Node06

Modifions le fichier d’index index.php

[root@node05-sheepdog ~]# ssh -l root 192.168.1.202
[root@web ~]# sed -i 's/Serveur Web - QEMU - Sheepdog - Zookeeper => Node05/Serveur Web - QEMU - Sheepdog - Zookeeper => Node06/g' /home/www/index.php && exit

Simulons Down Machine Node05

[root@node05-sheepdog ~]# systemctl stop keepalived
[root@node05-sheepdog ~]# ps -aux |grep "sheepdog:web01" |grep -v grep
Aucun processus, La machine web01n’est plus démarrée sur node05

Check sur la machine node06

[root@node06-sheepdog ~]# ps -aux |grep "sheepdog:web01" |grep -v grep

La machine est bien présente et démarrée sur node06

[root@node06-sheepdog ~]# ip a show eth0 |grep inet

La VIP a basculé sur node06 , node04 et node05 sont « down »

Check Url site Web : http://192.168.1.202

La modification réalisée sur node05 est bien préservée grâce au stockage distribué « mode block » par sheepdog

Views: 4

L’article MODOP – QEMU HA – Partie 4 – Installation HA Web Machine Sheepdog est apparu en premier sur CoffeeBreak Info.