LN-kvm-setup

OpenSuse11.4 で KVM

 いつもの事ながらパッケージが嫌なので make してみる。。
 ( 手抜き版 .. 基本のパッケージは opensuse を使う .. )
 参考:
 http://www.howtoforge.com/virtualization-with-kvm-on-an-opensuse-11.4-server
 http://www.atmarkit.co.jp/flinux/rensai/kvm01/kvm01b.html

kernel の確認

yast2 で kernel の種類を確認
kernel-desktop では動かないので（後述）kernel-default が入っていることを確認。。

##  egrep '(vmx|svm)' --color=always /proc/cpuinfo
##  にて  // flags		: fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe syscall nx rdtscp lm constant_tsc arch_perfmon pebs bts rep_good nopl xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx smx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm dts tpr_shadow vnmi flexpriority ept vpid
## と言うような行がでることを確認　(複数でる場合がある。。）

kvm モジュールのロード

> lsmod | grep kvm
kvm_intel              52582  3 
kvm                   368118  1 kvm_intel

kvm のモジュールがカーネルに読み込まれている事を確認。。
  ( kernel-desktop では kvm_intelが読み込まない。。ので kernel-default を使う事 )
## kvm_intel の 読み込ませ方
# (AMDの場合には kvm_amd )
#modprobe kvm_intel 
#modprobe kvm_amd 

kvm のコンパイル

最新もしくは目的のファイルをダウンロードする。
http://www.linux-kvm.org/page/Main_Page
http://sourceforge.net/projects/kvm/files/
kernel-devel 
zlib-devel
pciutils-devel
libcap-devel
libattr-devel
libvirt-devel
bridge-utils
libvirt
# Source
## git clone git://git.kernel.org/pub/scm/virt/kvm/kvm.git
## git clone git://git.qemu-project.org/qemu.git
## git clone git://git.kernel.org/pub/scm/virt/kvm/qemu-kvm.git
# QEMU source
# https://github.com/qemu/qemu

# yast2 -i kernel-devel
# yast2 -i zlib-devel
# yast2 -i pciutils-devel
# yast2 -i bridge-utils 

> tar xvfz ./qemu-kvm-1.2.0-rc2.tar.gz
> cd qemu-kvm-1.2.0-rc2
> configure --prefix=/usr/opt
   ( --enable-virtfs )
: メッセージがでる。。
> make
> make install

kvm のパスを作る。。

make の際に /usr/opt にインストールしたので。。
kvm の起動用の shell のパスを追加したいので
> vi setenv_kvm
LD_LIBRARY_PATH=/usr/opt/lib:$LD_LIBRARY_PATH
export LD_LIBRARY_PATH
PATH=/usr/opt/bin:/usr/opt/libexec:$HOME/opt/sbin:$PATH
export PATH
を作成

ネットワーク起動用の

yast2 で bridge-utils をインストール
# yast2 -i bridge-utils 
bridge 接続にする為

eth0 の変更
# ifcfg-eth0
BOOTPROTO='static'
BROADCAST=''
ETHTOOL_OPTIONS=''
#  IPADDR='172.16.70.99/24'
IPADDR='0.0.0.0'
MTU=''
NAME='NetXtreme GREEN 10G Ethernet PCIe'
NETMASK=''
NETWORK=''
REMOTE_IPADDR=''
STARTMODE='nfsroot'
USERCONTROL='no'

BR0 の作成
# ifcfg-br0
STARTMODE='auto'
BOOTPROTO='static'
IPADDR='172.16.70.99/24'
MTU=''
NETMASK=''
NETWORK=''
BROADCAST=''
USERCONTROL=no
NAME='Bridge 0'
NM_CONTROLLED=no
BRIDGE='yes'
BRIDGE_PORTS='eth0'
BRIDGE_AGEINGTIME='300'
BRIDGE_FORWARDDELAY='0'
BRIDGE_HELLOTIME='2'
BRIDGE_MAXAGE='20'
BRIDGE_PATHCOSTS='19'
BRIDGE_PORTPRIORITIES=
BRIDGE_PRIORITY=
BRIDGE_STP='on'

# qemu-ifup を作っておく
#!/bin/sh
/sbin/ifconfig $1 up
/sbin/brctl addif br0 $1
# cmmod 755 qemu-ifup
# cp qemu-ifup /etc /usr/opt /usr/opt/etc

ゲストOSのインストール

ディスクスペースの確保
# qemu-img create -f raw vm00.img 10G
    ただし：：次の方法も確認する。。qcow2 フォーマット
       。。どちらがアクセスが早いか確認の事。。
    > qemu-img create -f qcow2 vm00.img 10G
 
    スナップショットでバックアップ
    > qemu-img snapshot -c backup001 ./vm00.img
    ## 5番目に ロールバック
    > qemu-img snapshot -a 5 ./vm00.img

インストール時の 起動シェル
#!/bin/sh
qemu-system-x86_64 vm00.img -m 512 \
	-monitor telnet::8444,server,nowait -vnc :0 \
       -daemonize \
	-net nic,macaddr=xx:xx:xx:xx:xx:xx  \
	-net tap,ifname=tap0 \
#	-cdrom FreeBSD-9.1-RELEASE-i386-dvd1.iso -boot d
# 1st ## -monitor telnet::8445,server,nowait -vnc :1 -daemonize \
#        -net nic,macaddr=yy:yy:yy:yy:yy:yy  \
#        -net tap,ifname=tap1 \
# 2nd ## -monitor telnet::8446,server,nowait -vnc :2 -daemonize \
#        -net nic,macaddr=zz:zz:zz:zz:zz:zz  \
#        -net tap,ifname=tap2 \
# 3rd ## -monitor telnet::8447,server,nowait -vnc :3 -daemonize \
#        -net nic,macaddr=ii:ii:ii:ii:ii:ii  \
#        -net tap,ifname=tap3 \
# 4th ## -monitor telnet::8448,server,nowait -vnc :4 -daemonize \
#        -net nic,macaddr=jj:jj:jj:jj:jj:jj  \
#        -net tap,ifname=tap4 \

## ※ MACアドレスは設定する事。。外部から接続時にネットワークが混乱する。。
##    MACアドレスは 52:54:XXXXXXXX でないと上手く動作しない。。
##    http://www.atmarkit.co.jp/flinux/rensai/kvm02/kvm02b.html

アクセス方法

> vncviewer 172.16.70.2 :0

停止方法

> telnet localhost 8444
[qemu] system_powerdown

Diskの追加

## # qemu-img create -f qcow2 vm02.img 300G
## でディスクイメージを作る
> /sbin/gpart create -s MBR vtbd1
> /sbin/gpart add -t freebsd -s 30G vtbd1
> /sbin/gpart set -a active -i 1 vtbd1
> /sbin/gpart create -s BSD -n 20 vtbd1s1 
> /sbin/gpart add -t freebsd-ufs -s 25G vtbd1s1
> /sbin/gpart add -t freebsd-swap -s 4G vtbd1s1
##
## /sbin/gpart add -s 512M -t freebsd-ufs da0
## /sbin/gpart add -s 15G -t freebsd-ufs -a 4k da0
##
## /sbin/gpart show vtbd1
## /sbin/gpart show vtbd1s1
## /sbin/gpart delete -i 2 vtbd1s1
>
> newfs vtbd1s1a
## Edit /etc/fstab 

ディスクの追加２

## # qemu-img create -f qcow2 vm02.img 300G
## でディスクイメージを作る
root@foo:~ # gpart create -s GPT /dev/vtbd1 
vtbd1 created
root@foo:~ # gpart show /dev/vtbd1
=>       40  629145520  vtbd1  GPT  (300G)
        40  629145520         - free -  (300G)

root@foo:~ # gpart add -t freebsd-ufs /dev/vtbd1 
vtbd1p1 added
root@foo:~ # gpart show /dev/vtbd1
=>       40  629145520  vtbd1  GPT  (300G)
        40  629145520      1  freebsd-ufs  (300G)
> newfs vtbd1p1
## Edit /etc/fstab

make world の時間

FreeBSD の make world が 約2時間かかる。。
実機では 25分程度だったはずだ。。VMだと 124分と言う事は。。約5倍のコスト。。と言う事だ。。設定を見直すか??

virtio が良いようだ。。( GUEST 側には /usr/ports/emulators/virtio-kmod が必要）

http://d.hatena.ne.jp/kakurasan/20080512/p1
## 参考
http://kaworu.jpn.org/kaworu/2012-04-09-1.php
## 結論
## buildworld は ディスクの早さよりCPUの個数とメモリの多さ！！

ディスクのパフォーマンス

テスト1 (方法)
> bonnie++ -d ./ddd -s 3096 -r 256 -u hoge

PORT のアップデート

###/etc/make.conf を変更 ###
NO_PROFILE=true
USA_RESIDENT=NO

PORTSNAP_UPDATE=yes
DEPENDS_TARGET="package"
PACKAGE_BUILDING="YES"

NO_GAMES=true
NO_DOCS=true

MASTER_SITE_BACKUP?=http://ftp.FreeBSD.org/pub/FreeBSD/distfiles/${DIST_SUBDIR}/
MASTER_SITE_OVERRIDE?=http://ftp.FreeBSD.org/pub/FreeBSD/distfiles/${DIST_SUBDIR}/

.if ${.CURDIR:M/usr/src*} != ""
SUP_UPDATE?= yes
# SUP= /usr/local/bin/cvsup
SUP= /usr/bin/csup
SUPFLAGS?= -g -L 2

SUPHOST?= cvsup.jp.FreeBSD.org
SUPFILE?= /usr/share/examples/cvsup/stable-supfile
.endif

PORTSSUPFILE= /usr/share/examples/cvsup/ports-supfile
DOCSUPFILE= /usr/share/examples/cvsup/doc-supfile

###

# DHCP を使うhttp://d.hatena.ne.jp/mopemope/20120823から

#!/bin/sh

/sbin/brctl addbr br0
/usr/sbin/tunctl -t tap0
/sbin/brctl addif br0 tap0
/sbin/ip addr add 192.168.2.200 dev br0
/sbin/ip link set br0 up

/bin/echo 1 > /proc/sys/net/ipv4/conf/wlan0/proxy_arp
/bin/echo 1 > /proc/sys/net/ipv4/conf/br0/proxy_arp
/bin/echo 1 > /proc/sys/net/ipv4/conf/tap0/proxy_arp

/usr/sbin/parprouted wlan0 br0
/usr/sbin/bcrelay -d -i br0 -o wlan0

TIPs

• http://research.sakura.ad.jp/tag/kvm/
• https://portal.nutanix.com/page/documents/details?targetId=Nutanix-Community-Edition-Getting-Started:Nutanix-Community-Edition-Getting-Started
• https://www.nutanix.com/jp/blog/what-is-nutanix-ahv-hypervisor