softdog / CONFIG_WATCHDOG_NOWAYOUT

いつも唐突。

Documentation/watchdog/src/watchdog-simple.c の抜粋

int fd = open("/dev/watchdog", O_WRONLY);
while (1) {
        ret = write(fd, "\0", 1);
        if (ret != 1) {
                ret = -1;
                break;
        }
        ret = fsync(fd);
        if (ret)
                break;
        sleep(10);
}
close(fd);

定期的に書き込みがあればカーネルが大丈夫、問題ないよ。と判断。書き込みがないと...リブート。じゃクローズは? が次

Documentation/watchdog/watchdog-api.txt の抜粋意訳

モジュールパラメタ nowayout (CONFIG_WATCHDOG_NOWAYOUT)

"Magic Close" がサポートされていなければデバイスを close すると watchdog も (何もせず) 終了。watchdog デーモンにバグがあってクラッシュした場合なんか考えるとちょっとマズい。この挙動のためいくつかのドライバでは "Disable watchdog shutdown on close", CONFIG_WATCHDOG_NOWAYOUT
というオプション設定ができる。これを Y としてコンパイルすると一度 watchdog が開始した後に watchdog を無効にする方法がなくなる。つまりは watchdog デーモンがクラッシュするとシステムが指定のタイムアウト後にリブートする

Magic Close

ドライバが Magic Close をサポートしていると close 直前に特定の文字 'V' が /dev/watchdog に送られないと (書き込まれないと) watchdog が無効にならない。ユーザスペースのデーモンが、この特定の文字を送らずに close するとドライバはデーモンが watchdog を無効にする前に亡くなったと見なす。で、時間内に再度 open しないとリブート。softdog も

if (c == 'V')
        expect_close = 42;
...
static long softdog_ioctl(struct file *file, unsigned int cmd,
                          unsigned long arg)
...
        static const struct watchdog_info ident = {
                .options =              WDIOF_SETTIMEOUT |
                                        WDIOF_KEEPALIVEPING |
                                        WDIOF_MAGICCLOSE,
...

なんてあったりする

ha.cf のサンプルコメントから

ソフトウェア watchdog を使っているならモジュールロードのパラメタに nowayout=0 あるいは CONFIG_WATCHDOG_NOWAYOUT を無効にしてコンパイルするんじゃないかな。さもないと heartbeat をマトモに終了させたとしてもリブートしてしまうって挙動はお望みじゃないと思う

うーん... heartbeat の watchdog か、別立て watchdog デーモンか...

TIPS: squeeze on raw format KVM

さっき作ったイメージ drbd1.img は最初に / 用の sda1 次が何も手を加えていない sda2。最後が swap の sda3。これをホスト側で見るには qcow2 の場合 nbd として扱えるらしけど -f raw でイメージを作成したので...要 root

# file drbd1.img 
drbd1.img: x86 boot sector; partition 1: ID=0x83, active, starthead 32, startsector 2048, 11716608 sectors; partition 2: ID=0x83, starthead 115, startsector 11718656, 3905536 sectors; partition 3: ID=0x82, starthead 143, startsector 15624192, 1150976 sectors, code offset 0x63
# losetup -o $((512 * 2048)) /dev/loop1 drbd1.img 
# mkdir mnt_drbd1
# mount /dev/loop1 mnt_drbd1/
# ls mnt_drbd1/
bin  boot  dev etc  home  initrd.img  lib  lib32  lib64  lost+found  media  mnt  opt  proc  root  sbin  selinux  srv  sys  tmp  usr  var  vmlinuz
# chroot mnt_drbd1/
root@parent:/# ls
bin  boot  dev etc  home  initrd.img  lib  lib32  lib64  lost+found  media  mnt  opt  proc  root  sbin  selinux  srv  sys  tmp  usr  var  vmlinuz
root@parent:/# cat /etc/hostname
drbd1
root@parent:/# exit
exit
# umount mnt_drbd1
# losetup -d /dev/loop1 

とまぁ、ホスト側でも操作可能。なので /etc/inittab 書き換え忘れたとか、/etc/default/grub 書き換えたけど update-grub 忘れたとかも後になってでもできる

他ネットワーク周りは...現況は tap 使うが良さげ。ホスト側で適当にブリッジ作っておいて...毎度手は面倒なので /etc/network/interface に

auto br0
iface br0 inet static
    address 192.168.1.254
    netmask 255.255.255.0
    network 192.168.1.0
    broadcast 192.168.1.255

    bridge_ports none
    bridge_fd 0
    bridge_stp off

とか書いといて、KVM (に限らず、仮想ゲストマシン全て) 最初のブリッジに足のばすとすると /etc/kvm/kvm-ifup はこんな感じ

#! /bin/sh
BRCTL=/usr/sbin/brctl

uplinks=$(ip link ls | awk -F: '/^[1-9].*UP> / { print $2; }')
for switch in $uplinks; do
    if [ -d /sys/class/net/$switch/bridge/. ]; then
 $BRCTL addif $switch $1
 break
    fi
done

ip link set $1 up

でホスト側で isc-dhcp-server を動かすとゆー... 面倒だね

ターミナルで kvm, debian squeeze

obs600 休憩。間違いもあるので、後日直すコト > 自分

で、唐突めいているけど、あちこち調べながら X なしで squeeze を KVM にてインストールする方法。あちこち調べたのは良いけど、ポロポロ忘れるので...

目的としては DRBD や heartbeat 試したく lxc 使おうとしたけど、今々は lxc 上で DRBD 動かず。ちょっと挑戦した けど、8.4 で connector 止めて genetlink 使う予定だそうなので、素直に? 挫折、待たせてもらうことに。d-i をイジる手もあるそうだけど、素の netinst.iso で何度か試してみて忘れがちなコト

• 真っ黒画面でスペース & linux test
• /etc/default/grub の編集 & update-grub
• /etc/inittab の編集

イメージの作成

$ kvm-img create -f raw drbd1.img 8G
Formatting 'drbd1.img', fmt=raw size=8589934592
$ ls
debian-6.0.0-amd64-netinst.iso  drbd1.img

-f qcow2 が正統? なのだろうけど、後々ホスト側からイジるにあたって
kvm-nbd とか面倒なので...で起動

$ kvm -cdrom debian-6.0.0-amd64-netinst.iso -hda drbd1.img -boot d -curses

真っ黒画面の真ん中に

    640x480

で、何も表示されないけどスペース一回押した後に (ここ何押下するかよく忘れる)

    linux text

とすると...

                           Welcome to Debian GNU/Linux!                                F1

                                                                                             
         This is a Debian 6.0 (squeeze) installation CD-ROM.                             
         It was built 20110205-14:31; d-i 20110106+b1.                                   
                                                                                         
         HELP INDEX                                                                      
                                                                                         
         KEY    TOPIC                                                                    
                                                                                         
         <F1>   This page, the help index.                                               
         <F2>   Prerequisites for installing Debian.                                     
         <F3>   Boot methods for special ways of using this CD-ROM                       
         <F4>   Additional boot methods; rescue mode.                                    
         <F5>   Special boot parameters, overview.                                       
         <F6>   Special boot parameters for special machines.                            
         <F7>   Special boot parameters for selected disk controllers.                   
         <F8>   Special boot parameters for the install system.                          
         <F9>   How to get help.                                                         
         <F10>  Copyrights and warranties.                                               
                                                                                         
                                                                                         
                                                                                         
         Press F2 through F10 for details, or ENTER to boot:

こんな画面。ここで F8

            SPECIAL BOOT PARAMETERS - INSTALLATION SYSTEM                                 F8
                                                                                                                               
                                                                                                                               
         You can use the following boot parameters at the boot: prompt,                  
         in combination with the boot method (see <F3>). These parameters                
         control how the installer works.                                                
                                                                                         
         RESULT                                  PARAMETER                               
         Disable framebuffer                     vga=normal fb=false                     
         Don't start PCMCIA                      hw-detect/start_pcmcia=false            
         Force static network config             netcfg/disable_dhcp=true                
         Set keyboard map                        bootkbd=es                              
         Select the kde or xfce desktops         desktop=kde                             
                                                                                         
         Accessibility options (last 2 options not available for all images):            
           Use high contrast theme               theme=dark                              
           Use Braille tty                       brltty=driver,device,texttable          
           Use Speakup                           speakup.synth=driver                    
                                                                                                                            
                                                                                                                            
         For example:                                                                    
          boot: install vga=normal fb=false                                             
                                                                                           
         Press F1 for the help index, or ENTER to boot: 

For example そのまま

    install vga=normal fb=false

で進む。イメージファイル名の通り DRBD を試したかったのでパーティションは 6G を / に 2G は何もせず残りを swap として。Software Selection では Standard と SSH。GRUB のインストールまで終ってリブートするから CD 外してね。になったところ

               [!!] Finish the installation
                                                                  
                        Installation complete                        
         Installation is complete, so it is time to boot into your new system.
         Make sure to remove the installation media (CD-ROM, floppies), so    
         that you boot into the new system rather than restarting the         
         installation.                                                        
                                                                  
            <Go Back>                                          <Continue>

で Go Back。Execute Shell を選択して、ちょっと面倒だけど

BusyBox v1.17.1 (Debian 1:1.17.1-8) built-in shell (ash)
Enter 'help' for a list of built-in commands.                                   

~ # mount                                                                       
rootfs on / type rootfs (rw)                                                    
none on /proc type proc (rw,relatime)                                           
none on /sys type sysfs (rw,relatime)                                           
tmpfs on /dev type tmpfs (rw,relatime,mode=755)                                 
none on /dev/pts type devpts (rw,relatime,gid=5,mode=620,ptmxmode=000)          
none on /sys/kernel/debug type debugfs (rw,relatime)                            
/dev/sda1 on /target type ext3 (rw,relatime,errors=remount-ro,data=ordered)     
/dev/sda1 on /dev/.static/dev type ext3 (rw,relatime,errors=remount-ro,data=orde
red)                                                                            
tmpfs on /target/dev type tmpfs (rw,relatime,mode=755)                          
~ # chroot /target                                                              
# cd /etc/default                                                               
# cp grub grub.dpkg-dist                                                        
# vi grub
....
# diff -uw grub.dpkg-dist grub                                                  
--- grub.dpkg-dist      2011-03-28 11:49:36.000000000 +0900                     
+++ grub        2011-03-28 11:45:39.000000000 +0900                             
@@ -4,8 +4,8 @@                                                                 
 GRUB_DEFAULT=0                                                                 
 GRUB_TIMEOUT=5                                                                 
 GRUB_DISTRIBUTOR=`lsb_release -i -s 2> /dev/null || echo Debian`               
-GRUB_CMDLINE_LINUX_DEFAULT="quiet"                                             
-GRUB_CMDLINE_LINUX=""                                                          
+GRUB_CMDLINE_LINUX="console=tty0 console=ttyS0,115200n8r"                      
+GRUB_SERIAL_COMMAND="serial --unit=0 --speed=115200 --word=8 --parity=no --stop
=1"                                                                             
                                                                                
 # Uncomment to enable BadRAM filtering, modify to suit your needs              
 # This works with Linux (no patch required) and with any kernel that obtains   
@@ -13,7 +13,7 @@                                                               
 #GRUB_BADRAM="0x01234567,0xfefefefe,0x89abcdef,0xefefefef"                     
                                                                                
 # Uncomment to disable graphical terminal (grub-pc only)                       
-#GRUB_TERMINAL=console                                                         
+GRUB_TERMINAL="serial console"                                                 
                                                                                
 # The resolution used on graphical terminal                                    
 # note that you can use only modes which your graphic card supports via VBE    
# update-grub
Generating grub.cfg ...
Found linux image: /boot/vmlinuz-2.6.32-5-amd64
Found initrd image: /boot/initrd.img-2.6.32-5-amd64
done

もう一つ /etc/inittab も

# cd /etc                                                                       
# cp inittab inittab.dpkg-dist                                                  
# vi inittab
...

# diff -uw inittab.dpkg-dist inittab | head                                     
--- inittab.dpkg-dist   2011-03-28 11:52:02.000000000 +0900                     
+++ inittab     2011-03-28 11:53:16.000000000 +0900                             
@@ -52,15 +52,15 @@                                                             
 # so if you want to add more getty's go ahead but skip tty7 if you run X.      
 #                                                                              
 1:2345:respawn:/sbin/getty 38400 tty1                                          
-2:23:respawn:/sbin/getty 38400 tty2                                            
-3:23:respawn:/sbin/getty 38400 tty3                                            
-4:23:respawn:/sbin/getty 38400 tty4                                            
-5:23:respawn:/sbin/getty 38400 tty5                                            
-6:23:respawn:/sbin/getty 38400 tty6                                            
+#2:23:respawn:/sbin/getty 38400 tty2                                           
+#3:23:respawn:/sbin/getty 38400 tty3                                           
+#4:23:respawn:/sbin/getty 38400 tty4                                           
+#5:23:respawn:/sbin/getty 38400 tty5                                           
+#6:23:respawn:/sbin/getty 38400 tty6                                           
                                                                                
 # Example how to put a getty on a serial line (for a terminal)                 
 #                                                                              
-#T0:23:respawn:/sbin/getty -L ttyS0 9600 vt100                                 
+T0:23:respawn:/sbin/getty -L ttyS0 115200 vt100                                
 #T1:23:respawn:/sbin/getty -L ttyS1 9600 vt100                                 
                                                                                
 # Example how to put a getty on a modem line.                                  
# sync
# exit                                                                          
~ # sync                                                                        
~ # exit

でメニューの Finish the Inistallation & Continue... で再起動しないので、他コンソールから kill して再起動。今度は -curses じゃなくて -nographic で

    kvm -nographic drbd1.img

でクライアントとして使う分にはソレナリ。