不一樣環境下Jenkins調用shell腳本管理docker容器腳本兩則

防僞碼:桃李春風一杯酒,江湖夜雨十年燈。html

1、生產環境Jenkins使用ssh-copy-id實現SSH無密碼登陸,實現方式以下:python

ssh-keygen  產生公鑰與私鑰對.mysql

ssh-copy-id 將本機的公鑰複製到遠程機器的authorized_keys文件中,ssh-copy-id也能讓你有到遠程機器的home, ~./ssh , 和 ~/.ssh/authorized_keys的權利sql


第一步:在本地機器上使用ssh-keygen產生公鑰私鑰對docker

$ ssh-keygen


第二步:用ssh-copy-id將公鑰複製到遠程機器中shell

$  ssh-copy-id -i .ssh/id_rsa.pub  用戶名字@192.168.x.xxx

注意: ssh-copy-id 將key寫到遠程機器的 ~/ .ssh/authorized_key.文件中
數據庫


第三步: 登陸到遠程機器不用輸入密碼瀏覽器

$  ssh 用戶名字@192.168.x.xxx
Last login: Sun Nov 16 17:22:33 2008 from 192.168.1.2


常見問題:安全

ssh-copy-id -u eucalyptus -i ~eucalyptus/.ssh/id_rsa.pub ssh 用戶名字@192.168.x.xxx


第一次須要密碼登陸bash

上述是給eucalyptus用戶賦予無密碼登錄的權利


/usr/bin/ssh-copy-id: ERROR: No identities found


使用選項 -i ,當沒有值傳遞的時候或者 若是 ~/.ssh/identity.pub 文件不可訪問(不存在), ssh-copy-id 將顯示上述的錯誤信息  ( -i選項會優先使用將ssh-add -L的內容)



ssh命令


一、複製SSH密鑰到目標主機,開啓無密碼SSH登陸


ssh-copy-id user@host


若是尚未密鑰,請使用ssh-keygen命令生成。


二、從某主機的80端口開啓到本地主機2001端口的隧道


ssh -N -L2001:localhost:80 somemachine


如今你能夠直接在瀏覽器中輸入http://localhost:2001訪問這個網站。


三、將你的麥克風輸出到遠程計算機的揚聲器


dd if=/dev/dsp | ssh -c arcfour -C username@host dd of=/dev/dsp


這樣來自你麥克風端口的聲音將在SSH目標計算機的揚聲器端口輸出,但遺憾的是,聲音質量不好,你會聽到不少嘶嘶聲。


四、比較遠程和本地文件


ssh user@host cat /path/to/remotefile | diff /path/to/localfile –


在比較本地文件和遠程文件是否有差別時這個命令很管用。


五、經過SSH掛載目錄/文件系統


sshfs name@server:/path/to/folder /path/to/mount/point
從http://fuse.sourceforge.net/sshfs.html下載sshfs,它容許你跨網絡安全掛載一個目錄。

六、經過中間主機創建SSH鏈接


ssh -t reachable_host ssh unreachable_host
Unreachable_host表示從本地網絡沒法直接訪問的主機,但能夠從reachable_host所在網絡訪問,這個命令經過到reachable_host的「隱藏」鏈接,建立起到unreachable_host的鏈接。



七、將你的SSH公鑰複製到遠程主機,開啓無密碼登陸 – 簡單的方法


ssh-copy-id username@hostname


八、直接鏈接到只能經過主機B鏈接的主機A


ssh -t hostA ssh hostB


固然,你要能訪問主機A才行。


九、建立到目標主機的持久化鏈接


ssh -MNf <user>@<host>


在後臺建立到目標主機的持久化鏈接,將這個命令和你~/.ssh/config中的配置結合使用:


Host host
ControlPath ~/.ssh/master-%r@%h:%p
ControlMaster no


全部到目標主機的SSH鏈接都將使用持久化SSH套接字,若是你使用SSH按期同步文件(使用rsync/sftp/cvs/svn),這個命令將很是有用,由於每次打開一個SSH鏈接時不會建立新的套接字。


十、經過SSH鏈接屏幕


ssh -t remote_host screen –r


直接鏈接到遠程屏幕會話(節省了無用的父bash進程)。


十一、端口檢測(敲門)


knock <host> 3000 4000 5000 && ssh -p <port> user@host && knock <host> 5000 4000 3000

在一個端口上敲一下打開某個服務的端口(如SSH),再敲一下關閉該端口,須要先安裝knockd,下面是一個配置文件示例。


[options]
logfile = /var/log/knockd.log
[openSSH]
sequence = 3000,4000,5000
seq_timeout = 5
command = /sbin/iptables -A INPUT -i eth0 -s %IP% -p tcp –dport 22 -j ACCEPT
tcpflags = syn
[closeSSH]
sequence = 5000,4000,3000
seq_timeout = 5
command = /sbin/iptables -D INPUT -i eth0 -s %IP% -p tcp –dport 22 -j ACCEPT
tcpflags = syn


十二、刪除文本文件中的一行內容,有用的修復


ssh-keygen -R <the_offending_host>


在這種狀況下,最好使用專業的工具。


1三、經過SSH運行復雜的遠程shell命令


ssh host -l user $(<cmd.txt)


更具移植性的版本:


ssh host -l user 「`cat cmd.txt`」


1四、經過SSH將MySQL數據庫複製到新服務器


mysqldump –add-drop-table –extended-insert –force –log-error=error.log -uUSER -pPASS OLD_DB_NAME | ssh -C user@newhost 「mysql -uUSER -pPASS NEW_DB_NAME」
經過壓縮的SSH隧道Dump一個MySQL數據庫,將其做爲輸入傳遞給mysql命令,我認爲這是遷移數據庫到新服務器最快最好的方法。



1五、刪除文本文件中的一行,修復「SSH主機密鑰更改」的警告


sed -i 8d ~/.ssh/known_hosts


1六、從一臺沒有SSH-COPY-ID命令的主機將你的SSH公鑰複製到服務器


cat ~/.ssh/id_rsa.pub | ssh user@machine 「mkdir ~/.ssh; cat >> ~/.ssh/authorized_keys」


若是你使用Mac OS X或其它沒有ssh-copy-id命令的*nix變種,這個命令能夠將你的公鑰複製到遠程主機,所以你照樣能夠實現無密碼SSH登陸。


1七、實時SSH網絡吞吐量測試


yes | pv | ssh $host 「cat > /dev/null」


經過SSH鏈接到主機,顯示實時的傳輸速度,將全部傳輸數據指向/dev/null,須要先安裝pv。


若是是Debian:


apt-get install pv


若是是Fedora:


yum install pv


(可能須要啓用額外的軟件倉庫)。


1八、若是創建一個能夠從新鏈接的遠程GNU screen


ssh -t user@some.domain.com /usr/bin/screen –xRR


人們老是喜歡在一個文本終端中打開許多shell,若是會話忽然中斷,或你按下了「Ctrl-a d」,遠程主機上的shell不會受到絲毫影響,你能夠從新鏈接,其它有用的screen命令有「Ctrl-a c」(打開新的shell)和「Ctrl-a a」(在shell之間來回切換),請訪問http://aperiodic.net/screen/quick_reference閱讀更多關於screen命令的快速參考。


1九、繼續SCP大文件


rsync –partial –progress –rsh=ssh $file_source $user@$host:$destination_file


它能夠恢復失敗的rsync命令,當你經過***傳輸大文件,如備份的數據庫時這個命令很是有用,須要在兩邊的主機上安裝rsync。


rsync –partial –progress –rsh=ssh $file_source $user@$host:$destination_file local -> remote



rsync –partial –progress –rsh=ssh $user@$host:$remote_file $destination_file remote -> local


20、經過SSH W/ WIRESHARK分析流量


ssh root@server.com ‘tshark -f 「port !22″ -w -' | wireshark -k -i –


使用tshark捕捉遠程主機上的網絡通訊,經過SSH鏈接發送原始pcap數據,並在wireshark中顯示,按下Ctrl+C將中止捕捉,但也會關閉wireshark窗口,能夠傳遞一個「-c #」參數給tshark,讓它只捕捉「#」指定的數據包類型,或經過命名管道重定向數據,而不是直接經過SSH傳輸給wireshark,我建議你過濾數據包,以節約帶寬,tshark可使用tcpdump替代:


ssh root@example.com tcpdump -w – ‘port !22′ | wireshark -k -i –


2一、保持SSH會話永久打開


autossh -M50000 -t server.example.com ‘screen -raAd mysession’


打開一個SSH會話後,讓其保持永久打開,對於使用筆記本電腦的用戶,若是須要在Wi-Fi熱點之間切換,能夠保證切換後不會丟失鏈接。


2二、更穩定,更快,更強的SSH客戶端


ssh -4 -C -c blowfish-cbc


強制使用IPv4,壓縮數據流,使用Blowfish加密。


2三、使用cstream控制帶寬


tar -cj /backup | cstream -t 777k | ssh host ‘tar -xj -C /backup’


使用bzip壓縮文件夾,而後以777k bit/s速率向遠程主機傳輸。Cstream還有更多的功能,請訪問http://www.cons.org/cracauer/cstream.html#usage瞭解詳情,例如:


echo w00t, i’m 733+ | cstream -b1 -t2


2四、一步將SSH公鑰傳輸到另外一臺機器


ssh-keygen; ssh-copy-id user@host; ssh user@host


這個命令組合容許你無密碼SSH登陸,注意,若是在本地機器的~/.ssh目錄下已經有一個SSH密鑰對,ssh-keygen命令生成的新密鑰可能會覆蓋它們,ssh-copy-id將密鑰複製到遠程主機,並追加到遠程帳號的~/.ssh/authorized_keys文件中,使用SSH鏈接時,若是你沒有使用密鑰口令,調用ssh user@host後不久就會顯示遠程shell。


2五、將標準輸入(stdin)複製到你的X11緩衝區


ssh user@host cat /path/to/some/file | xclip


你是否使用scp將文件複製到工做用電腦上,以便複製其內容到電子郵件中?xclip能夠幫到你,它能夠將標準輸入複製到X11緩衝區,你須要作的就是點擊鼠標中鍵粘貼緩衝區中的內容。



2、Linux環境和Jenkins環境2則腳本,僅供參考

一、Jenkins構建調用shell腳本管理容器(Linux環境)腳本:


#!/bin/bash
#操做/項目路徑(Dockerfile存放的路勁)
BASE_PATH=/work/project
# 源jar路徑
SOURCE_PATH=/root/.jenkins/workspace
#docker 鏡像/容器名字或者jar名字 這裏都命名爲這個
SERVER_NAME=docker-test
#容器id
CID=$(docker ps | grep "$SERVER_NAME" | awk '{print $1}')
#鏡像id
IID=$(docker images | grep "$SERVER_NAME" | awk '{print $3}')
DATE=`date +%Y%m%d%H%M`
# 備份
PATH=$(pwd)
cd /opt/docker_data/nlp_drgs_zhikong/
/usr/bin/tar zcf ICD_code_qc_${DATE}.tar.gz ICD_code_qc
/usr/bin/mv ICD_code_qc_${DATE}.tar.gz /opt/bak/
cd $PATH
echo "備份 $ 完成
# 構建docker鏡像
function build(){
if [ -n "$IID" ]; then
echo "存在$SERVER_NAME鏡像,IID=$IID"
else
echo "不存在$SERVER_NAME鏡像,開始構建鏡像"
cd $BASE_PATH
docker build -t $SERVER_NAME .
fi
}
docker container run --name 容器名 --restart=always --detach --network nlp-drgs -v /opt/qq:/opt/yy -w /opt -p 本機端口(65534個):容器裏端口 鏡像名 /usr/bin/python test.py
# 運行docker容器
function run(){
#backup
#transfer
build
if [ -n "$CID" ]; then
echo "存在$SERVER_NAME容器,CID=$CID,重啓docker容器 ..."
$docker restart $SERVER_NAME
echo "$SERVER_NAME容器重啓完成"
else
echo "不存在$SERVER_NAME容器,docker run建立容器..."
docker run --name $SERVER_NAME -v $BASE_PATH:$BASE_PATH -d -p 3636:3636 $SERVER_NAME
echo "$SERVER_NAME容器建立完成"
fi
}
#入口
run



二、Jenkins構建調用shell腳本管理容器(Jenkins環境)腳本:


#!/bin/bash
#操做/項目路徑(Dockerfile存放的路勁)
BASE_PATH=/work/project
# 源jar路徑
SOURCE_PATH=/root/.jenkins/workspace
#docker 鏡像/容器名字或者jar名字 這裏都命名爲這個
SERVER_NAME=docker-test
#容器id
CID=$(docker ps | grep "$SERVER_NAME" | awk '{print $1}')
#鏡像id
IID=$(docker images | grep "$SERVER_NAME" | awk '{print $3}')
DATE=`date +%Y%m%d%H%M`
# 備份
PATH=$(pwd)
cd /opt/docker_data/nlp_drgs_zhikong/
tar zcf ICD_code_qc_${DATE}.tar.gz ICD_code_qc
mv ICD_code_qc_${DATE}.tar.gz /opt/bak/
cd $PATH
echo "備份 $ 完成
# 構建docker鏡像
function build(){
if [ -n "$IID" ]; then
echo "存在$SERVER_NAME鏡像,IID=$IID"
else
echo "不存在$SERVER_NAME鏡像,開始構建鏡像"
cd $BASE_PATH
docker build -t $SERVER_NAME .
fi
}
docker container run --name 容器名 --restart=always --detach --network nlp-drgs -v /opt/new:/opt/old -w /opt -p 本機端口(65534個):容器裏端口 鏡像名 /usr/bin/python test.py
# 運行docker容器
function run(){
#backup
#transfer
build
if [ -n "$CID" ]; then
echo "存在$SERVER_NAME容器,CID=$CID,重啓docker容器 ..."
docker restart $SERVER_NAME
echo "$SERVER_NAME容器重啓完成"
else
echo "不存在$SERVER_NAME容器,docker run建立容器..."
docker run --name $SERVER_NAME -v $BASE_PATH:$BASE_PATH -d -p 3636:3636 $SERVER_NAME
echo "$SERVER_NAME容器建立完成"
fi
}
#入口
run