首頁  >  文章  >  後端開發  >  python fabric實作遠端操作和部署範例

python fabric實作遠端操作和部署範例

高洛峰
高洛峰原創
2017-01-07 16:46:061011瀏覽

近期接手越來越多的東西,發布和運維的工作相當機械,加上頻率還蠻高,導致時間浪費還是優點多。修復bug什麼的,測試,提交版本庫(2分鐘),ssh到測試環境pull部署(2分鐘),rsync到線上機器A,B,C,D,E(1分鐘),分別ssh到ABCDE五台機器,逐一重啟(8-10分鐘) = 13-15分鐘其中鬱悶的是,每次操作都是相同的,命令一樣,要命的是在多個機器上,很難在本機一個腳本搞定,主要時間都浪費在ssh,敲命令上了,寫成腳本,完全可以一鍵執行,花兩分鐘看下執行結果

直到,發現了fabric可以將自動化部署或者多機操作的命令固化到一個腳本裡和某些維運工具很像,用它主要是因為,簡單好用易上手,當然,shell各種命令組合起來也可以,上古神器和現代兵器的區別

環境配置

在本機和目標機器安裝對應套件(注意,都要有)

sudo easy_install fabric

目前是1.6版本(或者用pip install,一樣的)

安裝完後,可以查看是否安裝成功

[ken@~$] which fab
/usr/local/bin/fab

裝完之後,可以安裝成功

裝完瀏覽下官方文件

然後,可以動手了


hello world

先進行本機簡單操作,有一個初步認識,例子來源與官網

新建一個py腳本: fabfile.py

def hello():
    print("Hello world!")

命令列執行:

命令行執行:

[ken@~/tmp/fab$] fab hello
Hello world!

Done.

注意,這裡可以不用fabfile當檔名,但執行時需指定檔

[ken@~/tmp/fab$] mv fabfile.py test.py
fabfile.py -> test.py
[ken@~/tmp/fab$] fab hello
Fatal error: Couldn't find any fabfiles!
Remember that -f can be used to specify fabfile path, and use -h for help.
Aborting.
[ken@~/tmp/fab$] fab -f test.py hello
Hello world!

Done.

帶參數:

修改fabfile.pycle

def hello(name, value):
    print("%s = %s!" % (name, value))

執行本機操作
簡單的本地操作:

[ken@~/tmp/fab$] fab hello:name=age,value=20
age = 20!
Done.
[ken@~/tmp/fab$] fab hello:age,20
age = 20!

結果:

from fabric.api import local
def lsfab():
    local('cd ~/tmp/fab')
    local('ls')

Done.

實戰開始:

假設,你每天要提交一份配置文件settings.py到版本庫(這裡沒有考慮衝突的情況)

如果是手工操作:

[ken@~/tmp/fab$] pwd;ls
/Users/ken/tmp/fab
fabfile.py   fabfile.pyc  test.py      test.pyc
[ken@~/tmp/fab$] fab -f test.py lsfab
[localhost] local: cd ~/tmp/fab
[localhost] local: ls
fabfile.py  fabfile.pyc test.py     test.pyc

也就是說,這幾個命令你每天都要手動敲一次,所謂daily job,就是每天都要重複的,機械化的工作,讓我們看看用fabric怎麼實現一鍵搞定:(其實用shell腳本可以直接搞定,但是fab的優勢不是在這裡,這裡主要位後面本地+遠端操作做準備,畢竟兩個地方的操作寫一種腳本便於維護)

cd /home/project/test/conf/
git add settings.py
git commit -m 'daily update settings.py'
git pull origin
git push origin

混搭整合遠端操作

這時候,假設,你要到機器A的/home/ken/project對應專案目錄把設定檔更新下來

from fabric.api import local
def setting_ci():
    local("cd /home/project/test/conf/")
    local("git add settings.py")
    #后面你懂的,懒得敲了…..

然後,執行之:

#!/usr/bin/env python
# encoding: utf-8
from fabric.api import local,cd,run
env.hosts=['user@ip:port',] #ssh要用到的参数
env.password = 'pwd'
def setting_ci():
    local('echo "add and commit settings in local"')
    #刚才的操作换到这里,你懂的
def update_setting_remote():
    print "remote update"
    with cd('~/temp'):   #cd用于进入某个目录
        run('ls -l | wc -l')  #远程操作用run
def update():
    setting_ci()
    update_setting_remote()

Done.

注意,如果不聲明env.password ,執行到對應機器時會跳出要求輸入密碼的互動

多伺服器混搭

操作多個伺服器,需要設定多個host

[ken@~/tmp/fab$] fab -f deploy.py update
[user@ip:port] Executing task 'update'
[localhost] local: echo "add and commit settings in local"
add and commit settings in local
remote update
[user@ip:port] run: ls -l | wc -l
[user@ip:port] out: 12
[user@ip:port] out:

結果:

#!/usr/bin/env python
# encoding: utf-8
from fabric.api import *
#操作一致的服务器可以放在一组,同一组的执行同一套操作
env.roledefs = {
            'testserver': ['user1@host1:port1',],  
            'realserver': ['user2@host2:port2', ]
            }
#env.password = '这里不要用这种配置了,不可能要求密码都一致的,明文编写也不合适。打通所有ssh就行了'
@roles('testserver')
def task1():
    run('ls -l | wc -l')
@roles('realserver')
def task2():
    run('ls ~/temp/ | wc -l')
def dotask():
    execute(task1)
    execute(task2)

Done.

顏色擴充
1. ,在查看操作結果資訊的時候更為醒目和方便

[ken@~/tmp/fab$] fab -f mult.py dotask
[user1@host1:port1] Executing task 'task1'
[user1@host1:port1] run: ls -l | wc -l
[user1@host1:port1] out: 9
[user1@host1:port1] out:
[user2@host2:port2] Executing task 'task2'
[user2@host2:port2] run: ls ~/temp/ | wc -l
[user2@host2:port2] out: 11
[user2@host2:port2] out:

2.錯誤和異常

關於錯誤處理

默認,一組命令,上一個命令執行失敗後,不會接著往下執行

失敗後也可以進行不一樣的處理, 文檔

目前沒用到,後續用到再看了

3.密碼管理

看文檔

更好的密碼管理方式,哥比較土,沒打通,主要是伺服器列表變化頻繁,我的處理方式是:

1.host,user,port,password配置列表,所有的都寫在一個文件

或者直接搞到腳本裡,當然這個更..... ...

from fabric.colors import *
def show():
    print green('success')
    print red('fail')
    print yellow('yellow')
#fab -f color.py show

 或

env.hosts = [
'host1',
'host2'

]
env.passwords = { 
'host1': "pwdofhost1",
'host2': "pwdofhost2",
}

2.根據key解析成map嵌套,放到deploy中

另外指令其實也可以固化成一個cmds列表的…..

另外指令其實也可以固化成一個cmds列表的…..

更多python fabric實現遠端操作和部署範例相關文章請關注PHP中文網!


陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn