系統管理:nbd_網絡塊設備_的使用 


一.NBD簡介

NBD(Network Block Device)讓你可以將一個遠程主機的磁盤空間,當作一個塊設備來使用.就像一塊硬盤一樣. 
使用它,你可以很方便的將另一台服務器的硬盤空間,增加到本地服務器上. 
NBD與NFS有所不同.NFS只是提供一個掛載點供客戶端使用,客戶端無法改變這個掛載點的分區格式. 
而NBD提供的是一個塊設備,客戶端可以把這個塊設備格式化成各種類型的分區.更便於用戶的使用. 
NBD是一個內核模塊,大部分Linux發行版都已包含它.


二.NBD安裝方法

在Turbolinux的10以上的版本中,NBD已被編譯成模塊.保存在
/lib/modules/$version/kernel/driver/block/下. 
你還需要在服務器端和客戶端上安裝nbd-server和nbd -client工具. 
你可以從官方網站上下載源碼包,並分別在服務器端和客戶端服務器上進行安裝:
http://sourceforge.net/projects/nbd
我們這裡下載nbd-2.8.8.tar.bz2 
下載後,執行下列步驟進行安裝:
# tar jxf nbd-2.8.8.tar.bz2
# cd nbd-2.8.8
# ./configure
# make
# make install



三.NBD使用方法

1.示例1: 服務器端提供單個映像文件到客戶端


你需要先建立一個磁盤映像文件,作為提供給客戶端使用的塊設備.我們製作一個300MB的文件當做塊設備.
# cd /var/tmp
# dd if=/dev/zero of=nbd-disk0 bs=104857600 count=3 

啟動nbd-server,監聽1234端口,使用nbd-disk0映像文件.
# nbd-server 1234 /var/tmp/nbd-disk0

查看nbd進程.
# ps -ef | grep nbd
root 11292 1 0 15:02 ? 00:00:00 nbd-server 1234 /var/tmp/nbd-disk0

nbd-server用法:
nbd-server port file [size][kKmM] [-l authorize_file] [-r] [-m] [-c] [-a timeout_sec]
        port nbd-server監聽端口.
        file 綁定的映像文件.
        size 在客戶端所見的塊設備大小(單位可以是: k,K,m,M).
 -r|--read-only 只讀模式,客戶端無法在塊設備上進行寫操作.
 -m|--multi-file 多個文件,可以將多個映像文件作為一個塊設備提供給客戶端.
 -c|--copy-on-write 所有客戶端的寫操作被會另存為一個文件,連接斷開後,這個文件會被刪除. 
                                       可以保證映像文件內容不會被修改.
 -l|--authorize-file file 一個允許訪問此nbd的主機列表文件.
 -a|--idle-time 服務器斷開與客戶端連接前的最大空閒時間.


b.客戶端配置方法(IP為192.168.1.2)


加載nbd模塊.
# modprobe nbd
# lsmod | grep nbd
nbd 26400 0

查看nbd設備是否建立.
# ls /dev/nbd* -hl
brw-r----- 1 root disk 43, 0 Jul 27 06:40 /dev/nbd0
brw-r----- 1 root disk 43, 1 Jul 27 06:40 /dev/nbd1
brw-r----- 1 root disk 43, 2 Jul 27 06:40 /dev/nbd2
brw-r----- 1 root disk 43, 3 Jul 27 06:40 /dev/nbd3
brw-r----- 1 root disk 43, 4 Jul 27 06:40 /dev/nbd4
brw-r----- 1 root disk 43, 5 Jul 27 06:40 /dev/nbd5
brw-r----- 1 root disk 43, 6 Jul 27 06:40 /dev/nbd6
brw-r----- 1 root disk 43, 7 Jul 27 06:40 /dev/nbd7
brw-r----- 1 root disk 43, 8 Jul 27 06:40 /dev/nbd8
brw-r----- 1 root disk 43, 9 Jul 27 06:40 /dev/nbd9

將/dev/nbd0設備與主機連接.
# nbd-client 192.168.1.1 1234 /dev/nbd0 
Negotiation: ..size = 307200KB
bs=1024, sz=307200

nbd-client用法:
nbd-client [bs=blocksize] host port nbd_device [-swap]
    bs 用於設置塊大小,默認是1024,可以是512,1024.2048,4096
    host 服務器的主機名或IP
    port 服務器的監聽端口
    nbd_device 映射到本地的哪個nbd設備(如: /dev/nbd0)
    -swap 指定nbd設備將用做swap空間

nbd-client -d nbd_device 用於斷開連接
連接成功後,可以查看到nbd-client進程.
# ps -ef | grep nbd
root 3156 1 0 06:44 pts/0 00:00:00 nbd-client 192.168.1.1 1234 /dev/nbd0

使用前,需要格式化這個塊設備.
# mkfs.ext3 /dev/nbd0 
mke2fs 1.39 (29-May-2006)
Filesystem label=
OS type: Linux
Block size=1024 (log=0)
Fragment size=1024 (log=0)
76912 inodes, 307200 blocks
15360 blocks (5.00%) reserved for the super user
First data block=1
Maximum filesystem blocks=67633152
38 block groups
8192 blocks per group, 8192 fragments per group
2024 inodes per group
Superblock backups stored on blocks: 
        8193, 24577, 40961, 57345, 73729, 204801, 221185

Writing inode tables: done                            
Creating journal (8192 blocks): done
Writing superblocks and filesystem accounting information: done

This filesystem will be automatically checked every 39 mounts or
180 days, whichever comes first. Use tune2fs -c or -i to override.

掛載這個塊設備.
# mkdir /mnt/nbd0
# mount /dev/nbd0 /mnt/nbd0 
# cd /mnt/nbd0
# ls
lost+found

複製/root目錄到這個目錄中.
# cp /root . -rf 
# ls
lost+found root

斷開這個塊設備.
# umount /mnt/nbd0/

# nbd-client -d /dev/nbd0 
Disconnecting: que, disconnect, sock, done
Kernel call returned: Broken pipeClosing: que, sock, done


2.示例2: 服務器端提供多個映像文件到客戶端

a.服務器端配置

# cd /var/tmp
# dd if=/dev/zero of=nbd-disk1 bs=104857600 count=3 
記錄了3+0 的讀入
記錄了3+0 的寫出
314572800 字節(315 MB) 已復制，0.584027 秒，539 MB/秒
# dd if=/dev/zero of=nbd-disk2 bs=104857600 count=3 
記錄了3+0 的讀入
記錄了3+0 的寫出
314572800 字節(315 MB) 已復制，1.5128 秒，208 MB/秒

# nbd-server 1234 /var/tmp/nbd-disk1 
# nbd-server 1235 /var/tmp/nbd-disk1 
# nbd-server 1236 /var/tmp/nbd-disk2

# ps -ef | grep nbd
root 11292 1 0 15:02 ? 00:00:00 nbd-server 1234 /var/tmp/nbd-disk0
root 11599 1 0 15:14 ? 00:00:00 nbd-server 1235 /var/tmp/nbd-disk1
root 11606 1 0 15:14 ? 00:00:00 nbd-server 1236 /var/tmp/nbd-disk2

b.客戶端配置

# lsmod | grep nbd
nbd 24736 0 
# ls /dev/nbd*
/dev/nbd0 /dev/nbd11 /dev/nbd14 /dev/nbd3 /dev/nbd6 /dev/nbd9
/dev/nbd1 /dev/nbd12 /dev/nbd15 /dev/nbd4 /dev/nbd7
/dev/nbd10 /dev/nbd13 /dev/nbd2 /dev/nbd5 /dev/nbd8

# nbd-client 192.168.1.1 1234 /dev/nbd0
Negotiation: ..size = 307200KB
bs=1024, sz=307200

# nbd-client 192.168.1.1 1235 /dev/nbd1
Negotiation: ..size = 307200KB
bs=1024, sz=307200

# nbd-client 192.168.1.1 1236 /dev/nbd2
Negotiation: ..size = 307200KB
bs=1024, sz=307200

將nbd1格式化為vfat格式.
# mkfs.vfat /dev/nbd1 
mkfs.vfat 2.11 (12 Mar 2005)
unable to get drive geometry, using default 255/63

將nbd2格式化為ext2格式.
# mkfs.ext2 /dev/nbd2 
mke2fs 1.39 (29-May-2006)
Filesystem label=
OS type: Linux
Block size=1024 (log=0)
Fragment size=1024 (log=0)
76912 inodes, 307200 blocks
15360 blocks (5.00%) reserved for the super user
First data block=1
Maximum filesystem blocks=67633152
38 block groups
8192 blocks per group, 8192 fragments per group
2024 inodes per group
Superblock backups stored on blocks: 
        8193, 24577, 40961, 57345, 73729, 204801, 221185

Writing inode tables: done                            
Writing superblocks and filesystem accounting information: done

This filesystem will be automatically checked every 21 mounts or
180 days, whichever comes first. Use tune2fs -c or -i to override.

掛載這3個塊設備
# cd /mnt
# mkdir nbd1 nbd2
# mount /dev/nbd0 nbd0
# mount /dev/nbd1 nbd1
# mount /dev/nbd2 nbd2

# df -h 
Filesystem Size Used Avail Use% Mounted on
/dev/nbd0 291M 11M 265M 4% /mnt/nbd0
/dev/nbd1 300M 0 300M 0% /mnt/nbd1
/dev/nbd2 291M 2.1M 274M 1% /mnt/nbd2

# mount
/dev/nbd0 on /mnt/nbd0 type ext3 (rw)
/dev/nbd1 on /mnt/nbd1 type vfat (rw)
/dev/nbd2 on /mnt/nbd2 type ext2 (rw)

留言

張貼留言

這個網誌中的熱門文章

Json概述以及python對json的相關操作

圖片
什麼是json： JSON(JavaScript Object Notation) 是一種輕量級的數據交換格式。易於人閱讀和編寫。同時也易於機器解析和生成。它基於JavaScript Programming Language, Standard ECMA-262 3rd Edition - December 1999的一個子集。JSON採用完全獨立於語言的文本格式，但是也使用了類似於C語言家族的習慣（包括C, C++, C#, Java, JavaScript, Perl, Python等）。這些特性使JSON成為理想的數據交換語言。 JSON建構於兩種結構： “名稱/值”對的集合（A collection of name/value pairs）。不同的語言中，它被理解為對象（object），紀錄（record），結構（struct），字典（dictionary），哈希表（hash table），有鍵列表（keyed list），或者關聯數組（associative array）。 值的有序列表（An ordered list of values）。在大部分語言中，它被理解為數組（array）。 這些都是常見的數據結構。事實上大部分現代計算機語言都以某種形式支持它們。這使得一種數據格式在同樣基於這些結構的編程語言之間交換成為可能。 jso官方說 ​​明參見：http://json.org/ Python操作json的標準api庫參考：http://docs.python.org/library/json.html 對簡單數據類型的encoding 和decoding： 使用簡單的json.dumps方法對簡單數據類型進行編碼，例如： import json obj = [[ 1 , 2 , 3 ], 123 , 123.123 , 'abc' ,{ 'key1' :( 1 , 2 , 3 ), 'key2' :( 4 , 5 , 6 )}] encodedjson = json.dumps(obj) print repr (obj) print encodedjson 輸出： [[1, 2, 3], 123, 123.123, 'abc', {'ke...
閱讀完整內容

Docker容器日誌查看與清理

1. 問題 docker容器日誌導致主機磁盤空間滿了。 docker logs -f container_name 劈裡啪啦一大堆，很佔用空間，不用的日誌可以清理掉了。  2. 解決方法 2.1 找出Docker容器日誌 在linux上，容器日誌一般存放在 /var/lib/docker/containers/container_id/ 下面，查看各個日誌文件大小的腳本docker_log_size.sh，內容如下： #!/bin/sh echo "======== docker containers logs file size ========" logs=$(find /var/lib/docker/containers/ -name *-json.log) for log in $logs do ls -lh $log done # chmod +x docker_log_size.sh # ./docker_log_size.sh 2.2 清理Docker容器日誌（治標） 如果docker容器正在運行，那麼使用 rm -rf 方式刪除日誌後，通過 df -h 會發現磁盤空間並沒有釋放。 原因是在Linux或者Unix系統中，通過 rm -rf 或者文件管理器刪除文件，將會從文件系統的目錄結構上解除鏈接（unlink）。 如果文件是被打開的（有一個進程正在使用），那麼進程將仍然可以讀取該文件，磁盤空間也一直被佔用。 正確姿勢是 cat /dev/null > *-json.log ，當然你也可以通過 rm -rf 刪除後重啟docker。 接下來，提供一個日誌清理腳本 clean_docker_log.sh ，內容如下： #!/bin/sh echo "======== start clean docker containers logs ========" logs=$(find /var/lib/docker/containers/ -name *-json.log) for log in $logs d...
閱讀完整內容

利用 Keepalived 提供 VIP

Keepalived 是一種基於 VRRP 協定實現的高可靠 Web 服務方案，用於防止單點故障問題。因此一個 Web 服務運作至少會擁有兩台伺服器執行 Keepalived，一台作為 master，一台作為 backup，並提供一個虛擬 IP（VIP），master 會定期發送特定訊息給 backup 伺服器，當 backup 沒收到 master 訊息時，表示 master 已故障，這時候 backup 會接管 VIP，繼續提供服務，來確保服務的高可靠性。 VRRP VRRP（Virtual Router Redundancy Protocol，虛擬路由器備援協定），是一個提供備援路由器來解決單點故障問題的協定，該協定有兩個重要概念： * VRRP 路由器與虛擬路由器：VRRP 路由器是表示運作 VRRP 的路由器，是一個實體裝置，而虛擬路由器是指由 VRRP 建立的邏輯路由器。一組 VRRP 路由器協同運作，並一起構成一台虛擬路由器，該虛擬路由對外提供一個唯一固定的 IP 與 MAC 位址的邏輯路由器。 * 主控制路由器（master）與備援路由器（backup）：主要是在一組 VRRP 中的兩種互斥角色。一個 VRRP 群組中只能擁有一台是 master，但可以有多個 backup 路由器。 VRRP 協定使用選擇策略從路由器群組挑選一台作為 master 來負責 ARP 與轉送 IP 封包，群組中其他路由器則作為 backup 的角色處理等待狀態。當由於某種原因造成 master 故障時，backup 會在幾秒內成為 master 繼續提供服務，該階段不用改變任何 IP 與 MAC 位址。 Keepalived 節點配置 IP ADDRESS ROLE 172.16.1.101 vip 172.16.1.102 master 172.16.1.103 backup 安裝與設定 這 ubuntu 14.04 LTS Server 中已經內建了 Keepalived 可以透過 apt-get 來安裝： $ sudo apt-get install -y keepalived 也可以透過 source code 進行安裝，流程如下： $ sudo apt-get install build-essential libssl-dev $ wge...
閱讀完整內容