|
技術(shù)交流 找楊工 Q1075349026
首先,我想告訴大家,在Unix/Linux下,最有效率技巧的不是操作圖形界面,而是命令行操作,因為命令行意味著(zhù)自動(dòng)化。如果你看過(guò)《你可能不知
道的Shell》以及《28個(gè)Unix/Linux的命令行神器》你就會(huì )知道Linux有多強大,這個(gè)強大完全來(lái)自于命令行,于是,就算你不知道怎么去做一個(gè)環(huán)保
主義的程序員
,至少他們可以讓你少熬點(diǎn)夜,從而有利于你的身體健康。下面是一個(gè)有點(diǎn)長(cháng)的列表,正如作者所說(shuō),你并不需要知道所有的這些東西,但是如果
你還在很沉重地在使用Linux的話(huà),這些東西都值得你看一看。
(注:如果你想知道下面涉及到的命令的更多的用法,你一定要man一點(diǎn)。對于一些命令,你可能需要先yum或apt-get來(lái)安裝一下,如果有什么問(wèn)題
,別忘了Google。)
基礎
學(xué)習 Bash 。你可以man bash來(lái)看看bash的東西,并不復雜也并不長(cháng)。你用別的shell也行,但是bash是很強大的并且也是系統默認的。(學(xué)習zsh
或tsch只會(huì )讓你在很多情況下受到限制)
學(xué)習 vim 。在Linux下,基本沒(méi)有什么可與之競爭的編輯器(就算你是一個(gè)Emacs或Eclipse的重度用戶(hù))。你可以看看《簡(jiǎn)明vim攻略》和 《Vim的
冒險游戲》以及《給程序員的Vim速查卡》還有《把Vim變成一個(gè)編程的IDE》等等。
了解 ssh。明白不需要口令的用戶(hù)認證(通過(guò)ssh-agent, ssh-add),學(xué)會(huì )用ssh翻 墻,用scp而不是ftp傳文件,等等。你知道嗎?scp 遠端的
時(shí)候,你可以按tab鍵來(lái)查看遠端的目錄和文件(當然,需要無(wú)口令的用戶(hù)認證),這都是bash的功勞。
熟悉bash的作業(yè)管理,如: &, Ctrl-Z, Ctrl-C, jobs, fg, bg, kill, 等等。當然,你也要知道Ctrl+\(SIGQUIT)和Ctrl+C (SIGINT)的區別。
簡(jiǎn)單的文件管理 : ls 和 ls -l (你最好知道 “l(fā)s -l” 的每一列的意思), less, head, tail 和 tail -f, ln 和 ln -s (你知道明白hard
link和soft link的不同和優(yōu)缺點(diǎn)), chown, chmod, du (如果你想看看磁盤(pán)的大小 du -sk *), df, mount。當然,原作者忘了find命令。
基礎的網(wǎng)絡(luò )管理: ip 或 ifconfig, dig。當然,原作者還忘了如netstat, ping, traceroute, 等
理解正則表達式,還有g(shù)rep/egrep的各種選項。比如: -o, -A, 和 -B 這些選項是很值得了解的。
學(xué)習使用 apt-get 和 yum 來(lái)查找和安裝軟件(前者的經(jīng)典分發(fā)包是Ubuntu,后者的經(jīng)典分發(fā)包是Redhat),我還建議你試著(zhù)從源碼編譯安裝軟件。
日常
在 bash 里,使用 Ctrl-R 而不是上下光標鍵來(lái)查找歷史命令。
在 bash里,使用 Ctrl-W 來(lái)刪除最后一個(gè)單詞,使用 Ctrl-U 來(lái)刪除一行。請man bash后查找Readline Key Bindings一節來(lái)看看bash的默認
熱鍵,比如:Alt-. 把上一次命令的最后一個(gè)參數打出來(lái),而Alt-* 則列出你可以輸入的命令。
回到上一次的工作目錄: cd – (回到home是 cd ~)
使用 xargs。這是一個(gè)很強大的命令。你可以使用-L來(lái)限定有多少個(gè)命令,也可以用-P來(lái)指定并行的進(jìn)程數。如果你不知道你的命令會(huì )變成什么樣,
你可以使用xargs echo來(lái)看看會(huì )是什么樣。當然, -I{} 也很好用。示例:
代碼
find . -name \*.py | xargs grep some_function
cat hosts | xargs -I{} ssh root@{} hostname
pstree -p 可以幫你顯示進(jìn)程樹(shù)。(讀過(guò)我的那篇《一個(gè)fork的面試題》的人應該都不陌生)
使用 pgrep 和 pkill 來(lái)找到或是kill 某個(gè)名字的進(jìn)程。 (-f 選項很有用).
了解可以發(fā)給進(jìn)程的信號。例如:要掛起一個(gè)進(jìn)程,使用 kill -STOP [pid]. 使用 man 7 signal 來(lái)查看各種信號,使用kill -l 來(lái)查看數字和
信號的對應表
使用 nohup 或 disown 如果你要讓某個(gè)進(jìn)程運行在后臺。
使用netstat -lntp來(lái)看看有偵聽(tīng)在網(wǎng)絡(luò )某端口的進(jìn)程。當然,也可以使用 lsof。
在bash的腳本中,你可以使用 set -x 來(lái)debug輸出。使用 set -e 來(lái)當有錯誤發(fā)生的時(shí)候abort執行?紤]使用 set -o pipefail 來(lái)限制錯誤。
還可以使用trap來(lái)截獲信號(如截獲ctrl+c)。
在bash 腳本中,subshells (寫(xiě)在圓括號里的) 是一個(gè)很方便的方式來(lái)組合一些命令。一個(gè)常用的例子是臨時(shí)地到另一個(gè)目錄中,例如:
代碼
# do something in current dir
(cd /some/other/dir; other-command)
# continue in original dir
在 bash 中,注意那里有很多的變量展開(kāi)。如:檢查一個(gè)變量是否存在: ${name:?error message}。如果一個(gè)bash的腳本需要一個(gè)參數,也許就是
這樣一個(gè)表達式 input_file=${1:?usage: $0 input_file}。一個(gè)計算表達式: i=$(( (i + 1) % 5 ))。一個(gè)序列: {1..10}。 截斷一個(gè)字符串
: ${var%suffix} 和 ${var#prefix}。 示例: if var=foo.pdf, then echo ${var%.pdf}.txt prints “foo.txt”.
通過(guò) <(some command) 可以把某命令當成一個(gè)文件。示例:比較一個(gè)本地文件和遠程文件 /etc/hosts: diff /etc/hosts <(ssh somehost cat
/etc/hosts)
了解什么叫 “here documents” ,就是諸如 cat <
在 bash中,使用重定向到標準輸出和標準錯誤。如: some-command >logfile 2>&1。另外,要確認某命令沒(méi)有把某個(gè)打開(kāi)了的文件句柄重定向給
標準輸入,最佳實(shí)踐是加上 “
使用 man ascii 來(lái)查看 ASCII 表。
在遠端的 ssh 會(huì )話(huà)里,使用 screen 或 dtach 來(lái)保存你的會(huì )話(huà)。(參看《28個(gè)Unix/Linux的命令行神器》)
要來(lái)debug Web,試試curl 和 curl -I 或是 wget 。我覺(jué)得debug Web的利器是firebug,curl和wget是用來(lái)抓網(wǎng)頁(yè)的,呵呵。
把 HTML 轉成文本: lynx -dump -stdin
如果你要處理XML,使用 xmlstarlet
對于 Amazon S3, s3cmd 是一個(gè)很方便的命令(還有點(diǎn)不成熟)
在 ssh中,知道怎么來(lái)使用ssh隧道。通過(guò) -L or -D (還有-R) ,翻 墻神器。
你還可以對你的ssh 做點(diǎn)優(yōu)化。比如,.ssh/config 包含著(zhù)一些配置:避免鏈接被丟棄,鏈接新的host時(shí)不需要確認,轉發(fā)認證,以前使用壓縮
(如果你要使用scp轉文件):
代碼
TCPKeepAlive=yes
ServerAliveInterval=15
ServerAliveCountMax=6
StrictHostKeyChecking=no
Compression=yes
ForwardAgent=yes
如果你有輸了個(gè)命令行,但是你改變注意了,但你又不想刪除它,因為你要在歷史命令中找到它,但你也不想執行它。那么,你可以按下 Alt-# ,
于是這個(gè)命令關(guān)就被加了一個(gè)#字符,于是就被注釋掉了。
數據處理
了解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 選項).
了解用 cut, paste, 和 join 命令來(lái)操作文本文件。很多人忘了在cut前使用join。
如果你知道怎么用sort/uniq來(lái)做集合交集、并集、差集能很大地促進(jìn)你的工作效率。假設有兩個(gè)文本文件a和b已解被 uniq了,那么,用sort/uniq
會(huì )是最快的方式,無(wú)論這兩個(gè)文件有多大(sort不會(huì )被內存所限,你甚至可以使用-T選項,如果你的/tmp目錄很。
代碼
cat a b | sort | uniq > c # c is a union b 并集
cat a b | sort | uniq -d > c # c is a intersect b 交集
cat a b b | sort | uniq -u > c # c is set difference a - b 差集
了解和字符集相關(guān)的命令行工具,包括排序和性能。很多的Linux安裝程序都會(huì )設置LANG 或是其它和字符集相關(guān)的環(huán)境變量。這些東西可能會(huì )讓
一些命令(如:sort)的執行性能慢N多倍(注:就算是你用UTF-8編碼文本文件,你也可以很安全地使用ASCII來(lái)對其排序)。如果你想Disable那個(gè)
i18n 并使用傳統的基于byte的排序方法,那就設置export LC_ALL=C (實(shí)際上,你可以把其放在 .bashrc)。如果這設置這個(gè)變量,你的sort命令
很有可能會(huì )是錯的。
了解 awk 和 sed,并用他們來(lái)做一些簡(jiǎn)單的數據修改操作。例如:求第三列的數字之和: awk ‘{ x += $3 } END { print x }’。這可能會(huì )比
Python快3倍,并比Python的代碼少三倍。
使用 shuf 來(lái)打亂一個(gè)文件中的行或是選擇文件中一個(gè)隨機的行。
了解sort命令的選項。了解key是什么(-t和-k)。具體說(shuō)來(lái),你可以使用-k1,1來(lái)對第一列排序,-k1來(lái)對全行排序。
Stable sort (sort -s) 會(huì )很有用。例如:如果你要想對兩例排序,先是以第二列,然后再以第一列,那么你可以這樣: sort -k1,1 | sort -s -k
2,2
我們知道,在bash命令行下,Tab鍵是用來(lái)做目錄文件自動(dòng)完成的事的。但是如果你想輸入一個(gè)Tab字符(比如:你想在sort -t選項后輸入
字符),你可以先按Ctrl-V,然后再按Tab鍵,就可以輸入字符了。當然,你也可以使用$’\t’。
如果你想查看二進(jìn)制文件,你可以使用hd命令(在CentOS下是hexdump命令),如果你想編譯二進(jìn)制文件,你可以使用bvi命令(深圳專(zhuān)業(yè)嵌入式
實(shí)訓QQ1075349026)
另外,對于二進(jìn)制文件,你可以使用strings(配合grep等)來(lái)查看二進(jìn)制中的文本。
對于文本文件轉碼,你可以試一下 iconv;蚴窃囋嚫鼜姷 uconv 命令(這個(gè)命令支持更高級的Unicode編碼)
如果你要分隔一個(gè)大文件,你可以使用split命令(split by size)和csplit命令(split by a pattern)。
系統調試
如果你想知道磁盤(pán)、CPU、或網(wǎng)絡(luò )狀態(tài),你可以使用 iostat, netstat, top (或更好的 htop), 還有 dstat 命令。你可以很快地知道你的系統
發(fā)生了什么事。關(guān)于這方面的命令,還有iftop, iotop等(參看《28個(gè)Unix/Linux的命令行神器》)
要了解內存的狀態(tài),你可以使用free和vmstat命令。具體來(lái)說(shuō),你需要注意 “cached” 的值,這個(gè)值是Linux內核占用的內存。還有free的值。
Java 系統監控有一個(gè)小的技巧是,你可以使用kill -3 發(fā)一個(gè)SIGQUIT的信號給JVM,可以把堆棧信息(包括垃圾回收的信息)dump到
stderr/logs。
使用 mtr 會(huì )比使用 traceroute 要更容易定位一個(gè)網(wǎng)絡(luò )問(wèn)題。
如果你要找到哪個(gè)socket或進(jìn)程在使用網(wǎng)絡(luò )帶寬,你可以使用 iftop 或 nethogs。
Apache的一個(gè)叫 ab 的工具是一個(gè)很有用的,用quick-and-dirty的方式來(lái)測試網(wǎng)站服務(wù)器的性能負載的工作。如果你需要更為復雜的測試,你可以
試試 siege。
如果你要抓網(wǎng)絡(luò )包的話(huà),試試 wireshark 或 tshark。
了解 strace 和 ltrace。這兩個(gè)命令可以讓你查看進(jìn)程的系統調用,這有助于你分析進(jìn)程的hang在哪了,怎么crash和failed的。你還可以用其來(lái)
做性能profile,使用 -c 選項,你可以使用-p選項來(lái)attach上任意一個(gè)進(jìn)程。
了解用ldd命令來(lái)檢查相關(guān)的動(dòng)態(tài)鏈接庫。注意:ldd的安全問(wèn)題
使用gdb來(lái)調試一個(gè)正在運行的進(jìn)程或分析core dump文件。參看我寫(xiě)的《GDB中應該知道的幾個(gè)調試方法》
學(xué)會(huì )到 /proc 目錄中查看信息。這是一個(gè)Linux內核運行時(shí)記錄的整個(gè)操作系統的運行統計和信息,比如: /proc/cpuinfo, /proc/xxx/cwd,
/proc/xxx/exe, /proc/xxx/fd/, /proc/xxx/smaps.
如果你調試某個(gè)東西為什么出錯時(shí),sar命令會(huì )有用。它可以讓你看看 CPU, 內存, 網(wǎng)絡(luò ), 等的統計信息。深圳信盈達專(zhuān)業(yè)嵌入式實(shí)訓QQ1075349026
使用 dmesg 來(lái)查看一些硬件或驅動(dòng)程序的信息或問(wèn)題。
技術(shù)咨詢(xún):楊老師13724236349 QQ1075349026
|
|