你可能不知道的Shell
Shell也叫做命令行界面,它是*nix操作系统下用户和计算机的交互界面。Shell这个词是指操作系统中提供访问内核服务的程序。
这篇文章向大家介绍Shell一些非广为人知、但却实用有趣的知识,权当品尝shell主食后的甜点吧。
科普
先科普几个你可能不知道的事实:
- Shell几乎是和Unix操作系统一起诞生,第一个Unix Shell是肯·汤普逊(Ken Thompson)以Multics上的Shell为模范在1971年改写而成,并命名Thompson sh。即便是后来流行的bash(shell的一种变体),它的年龄实际上比当前流行的所有的Linux kernel都大,可谓在Linux系统上是先有Shell再有Kernel。
- 当前绝大部分*nix和MacOS操作系统里的默认的Shell都是bash,bash由Brian Fox在1987年创造,全称Bourne Again shell ( bash)。
- 你或许听说除了bash之外,还有Bourne shell ( sh),Korn shell ( ksh),C shell (包括 csh and tcsh),但是你知道这个星球上一共存在着大约50多种不同的shell么?想了解他们,请参考 http://www.freebsd.org/ports/shells.html。
- 每个月tiobe上都会给一个编程语言的排名,来显示各种语言的流行度。排名指数综合了全球范围内使用该语言的工程师人数、教学的课程数和第三方供应商数。截止至2012年11月份,tiobe公布的编程语言排行榜里,bash的指数是0.56%排名22位。如果算上它旗下的awk 0.21%和tcl 0.146%,大概就能排到14名。注意这里还不包括bash的同源的兄弟姐妹csh、ksh等,算上它们,shell家族有望接近前十。值得一提的是一直以来shell的排名就很稳定,不像某些“暴发户”语言,比如objective-c,这些语言的流行完全是因为当前Apple系的崛起,但这种热潮极有可能来得快去得更快。
全球最大的源代码仓库Github里,shell相关的项目数占到了8%,跻身前5和Java相当,可见在实战工程里,shell可谓宝刀不老。图片来源,参见这里
一些强大的命令
再分享一些可能你不知道的shell用法和脚本,简单&强大!
在阅读以下部分前,强烈建议读者打开一个shell实验,这些都不是shell教科书里的大路货哦:)
!$
!$
是一个特殊的环境变量,它代表了上一个命令的最后一个字符串。如:你可能会这样:$mkdir mydir $mv mydir yourdir $cd yourdir
可以改成:
$mkdir mydir $mv !$ yourdir $cd !$
sudo !!
以root的身份执行上一条命令 。
场景举例:比如Ubuntu里用apt-get
安装软件包的时候是需要root身份的,我们经常会忘记在apt-get
前加sudo
。每次不得不加上sudo
再重新键入这行命令,这时可以很方便的用sudo !!
完事。
(陈皓注:在shell下,有时候你会输入很长的命令,你可以使用!xxx来重复最近的一次命令,比如,你以前输入过,vi /where/the/file/is, 下次你可以使用 !vi 重得上次最近一次的vi命令。)
cd –
回到上一次的目录 。
场景举例:当前目录为/home/a
,用cd ../b
切换到/home/b
。这时可以通过反复执行cd –
命令在/home/a
和/home/b
之间来回方便的切换。
(陈皓注:cd ~ 是回到自己的Home目录,cd ~user,是进入某个用户的Home目录)
'ALT+.' or '<ESC> .'
热建alt+. 或 esc+. 可以把上次命令行的参数给重复出来。
^old^new
替换前一条命令里的部分字符串。
场景:echo "wanderful"
,其实是想输出echo "wonderful"
。只需要^a^o
就行了,对很长的命令的错误拼写有很大的帮助。(陈皓注:也可以使用 !!:gs/old/new)
du -s * | sort -n | tail
列出当前目录里最大的10个文件。
:w !sudo tee %
在vi中保存一个只有root可以写的文件
date [email protected]
时间截转时间
-
> file.txt
创建一个空文件,比touch短。
mtr coolshell.cn
mtr命令比traceroute要好。
- 在命令行前加空格,该命令不会进入history里。
echo "ls -l" | at midnight
在某个时间运行某个命令。
curl -u user:pass -d status="Tweeting from the shell" http://twitter.com/statuses/update.xml
命令行的方式更新twitter。
curl -u username --silent "https://mail.google.com/mail/feed/atom" | perl -ne 'print "\t" if /<name>/; print "$2\n" if /<(title|name)>(.*)<\/\1>/;'
检查你的gmail未读邮件
ps aux | sort -nk +4 | tail
列出头十个最耗内存的进程
man ascii
显示ascii码表。
场景:忘记ascii码表的时候还需要google么?尤其在天朝网络如此“顺畅”的情况下,就更麻烦在GWF多应用一次规则了,直接用本地的man ascii
吧。
ctrl-x e
快速启动你的默认编辑器(由变量$EDITOR设置)。
netstat –tlnp
列出本机进程监听的端口号。(陈皓注:netstat -anop 可以显示侦听在这个端口号的进程)
tail -f /path/to/file.log | sed '/^Finished: SUCCESS$/ q'
当file.log里出现Finished: SUCCESS时候就退出tail,这个命令用于实时监控并过滤log是否出现了某条记录。
ssh [email protected] bash < /path/to/local/script.sh
在远程机器上运行一段脚本。这条命令最大的好处就是不用把脚本拷到远程机器上。
ssh [email protected] cat /path/to/remotefile | diff /path/to/localfile -
比较一个远程文件和一个本地文件
-
net rpc shutdown -I ipAddressOfWindowsPC -U username%password
远程关闭一台Windows的机器
screen -d -m -S some_name ping my_router
后台运行一段不终止的程序,并可以随时查看它的状态。-d -m
参数启动“分离”模式,-S
指定了一个session的标识。可以通过-R
命令来重新“挂载”一个标识的session。更多细节请参考screen用法man screen
。
wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com
下载整个www.example.com网站。(注:别太过分,大部分网站都有防爬功能了:))
curl ifconfig.me
当你的机器在内网的时候,可以通过这个命令查看外网的IP。
convert input.png -gravity NorthWest -background transparent -extent 720x200 output.png
改一下图片的大小尺寸
lsof –i
实时查看本机网络服务的活动状态。
vim scp://[email protected]//path/to/somefile
vim一个远程文件
python -m SimpleHTTPServer
一句话实现一个HTTP服务,把当前目录设为HTTP服务目录,可以通过http://localhost:8000
访问 这也许是这个星球上最简单的HTTP服务器的实现了。
history | awk '{CMD[$2]++;count++;} END { for (a in CMD )print CMD[a] " " CMD[a]/count*100 "% " a }' | grep -v "./" | column -c3 -s " " -t | sort -nr | nl | head -n10
(陈皓注:有点复杂了,history|awk ‘{print $2}’|awk ‘BEGIN {FS=”|”} {print $1}’|sort|uniq -c|sort -rn|head -10)
这行脚本能输出你最常用的十条命令,由此甚至可以洞察你是一个什么类型的程序员。
-
tr -c "[:digit:]" " " < /dev/urandom | dd cbs=$COLUMNS conv=unblock | GREP_COLOR="1;32" grep --color "[^ ]"
想看看Marix的屏幕效果吗?(不是很像,但也很Cool!)
看不懂行代码?没关系,系统的学习一下*nix shell脚本吧,力荐《Linux命令行与Shell脚本编程大全》。
参考文献:
- Unix Shell Wiki
- Github language ranking
- An introduction of Unix Shell history
- Tiobe Software
- http://www.commandlinefu.com/
(转载本站文章请注明作者和出处 酷 壳 – CoolShell ,请勿用于任何商业用途)
《你可能不知道的Shell》的相关评论
引号都是坏的+最后一个grep的选项应该是–color….
错了, 小字的引号是坏的…
跟图灵社区那篇一样啊
Where there is a shell,there is a way!经典
还有一条好玩的:不用wget下载网页
bash-4.2$ exec 3/dev/tcp/www.w3.org/80
bash-4.2$ echo -e “GET / HTTP/1.0\n\n” >&3
bash-4.2$ cat <&3
http://wangcong.org/blog/archives/2099
“在命令行前加空格,该命令不会进入history里。”测试有误。
最后一个修改引号以后最后应该是这样才对:
tr -c “[:digit:]” ” ” < /dev/urandom | dd cbs=$COLUMNS conv=unblock | GREP_COLOR="1;32" grep –color -e "[^ ]" –
百分之七十的命令是我第一次遇到,汗颜这些年对Shell的掌握一直没有长进
我会说很多也都是大路货么……
[email protected]:$ history | awk ‘{CMD[$2]++;count++;} END { for (a in CMD )print CMD[a] ” ” CMD[a]/count*100 “% ” a }’ | grep -v “./” | column -c3 -s ” ” -t | sort -nr | nl | head -n10
1 311 31.1% hg
2 111 11.1% vi
3 108 10.8% ls
4 66 6.6% cd
5 43 4.3% gcc
6 39 3.9% asc
7 35 3.5% sudo
8 29 2.9% find
9 25 2.5% gdb
10 15 1.5% php
dos/cmd的输前几个字母按F8找回它开头的最近用过的完整命令,*nix里好像没对应的做法
另外,一直迷惑:
如果a产生一个大文本的标准输出,b压缩标准输入的文本
a | b > 压缩后的文件
a和b会不会并行进行?
列出最大文件的ls -lSh | head, 我喜欢这个。呵呵
很常用。看来以后要多用> file了 . 另外如果有php 5.4的话。类似于python -m SimpleHTTPServer的是: php -S localhost:80
>file 比touch小?
我机器上ls -l 显示都是0字节,求解释
最大值
date [email protected]
Tue Jan 19 11:14:07 CST 2038
排序可以试试ps的–sort选项 比如ps –sort=vsz
原文是 “比touch短”,意思是你输入的命令行的字符要短。
试了一下,部分命令和部分命令的参数在osx下没有
有许多所谓Shell的强大之处其实Dos Batch也做得到,但是一般被人忽略,本文中许多例子也是。
有些是所谓的外部命令实现,在Win环境下也有相应版本,但这是否也可归功于某个命令行的强大?
杯子很漂亮,打算入手一个!
目前用zsh Tab补全很强大
fish shell 不更新了吗?
这个…… 是我蛋疼了
测试了打开编辑器的命令,应该是 C-x C-e
touch当然不是清空文件。(在已存在时候)
Shell对于系统管理员或系统集成方案开发人员才会经常打交道,我现在几乎每天都和Shell接触,其实Shell只是为了方便维护操作的便利而已。
对了,Shell脚本要写得好的话,你还得学好sed,awk…
命令行那些…还是最喜欢set -o vi
这呀的80%是抄hacker news上那个最受欢迎命令页面的吧
@haitao
当然可以。C-r 可以搜索历史命令
cd的话不用cd ~直接什么参数都不用就会回到家目录了……这个比较方便。
所有Linux Kernel是什么意思?Linux Kernel不就那一个吗
一个小问题,history|awk那句注释里的单/双引号都是中文的,复制到shell里直接出错。换成英文的吧,history|awk ‘{print $2}’|awk ‘BEGIN {FS=”|”} {print $1}’|sort|uniq -c|sort -rn|head -10
正在学习shell,加油
while [ $? -eq 0 ];do nc -vlp 8888 -c'(r=read;e=echo;$r a b c;z=$r;while [ ${#z} -gt 2 ];do $r
z;done;f=`$e $b|sed “s/[^a-z0-9_.-]//gi”`;h=”HTTP/1.1″;o=”$h 200 OK”;c=”Content”;hd=”$c-Type: text/html;
charset=utf-8″;if [ -z $f ];then($e “$o”;$e $hd;$e;ls|(while $r n;do if [ -f “$n” ]; then $e “`ls
-gh $n`
“;fi;done););elif [[ $f =~ eggs ]];then($e “$o”;$e $hd;$e;curl
http://labs.douban.com/doublo/eggs?k=`$e $f|sed “s/eggs//gi”` 2>/dev/null;);elif [ -f $f ];then $e “$o”;$e
“$c-Type: `file -ib $f`”;$e “$c-Length: `stat -c%s $f`”;$e;cat $f;else $e -e “$h 404 Not
Found\n\n404\n”;fi)’;done
豆瓣的一个菜单shell脚本
+ “.”其实表示上一个命令的最后一个参数
有几条非常赞,比如远程执行脚本,vim打开远程文件,还有查看本机公网ip
查看gmail 发twitter 真是牛x
1 1639 16.3916% sudo
2 1066 10.6611% git
3 584 5.84058% ls
4 545 5.45055% less
5 527 5.27053% cd
6 493 4.93049% vi
7 280 2.80028% rm
8 250 2.50025% ps
9 220 2.20022% ll
10 210 2.10021% echo
哈哈,晒晒
:w !sudo tee %
在vi中保存一个只有root可以写的文件
———————————————-
小白求解释一下这条命令 sudo 后面的部分…不胜感激.
@yuan
建议你先看看vim的help, :h :w_c。
:[range]w !cmd
range指定的范围作为cmd的标准输入,默认range为1,$,即所有行。
:w !sudo tee %
将所有行的内容作为sudo tee %命令的标准输入,相当于
echo current_buffer_lines | sudo tee %
在VIM中%号有特殊的含义,在这个语境下它的意思是当前文件名,所以上面的意思是所有行写到当前文件中:
echo current_buffer_lines | sudo tee current_file
你家的杯子好贵。码农买不起呀。
我想问一下:
tr -c “[:digit:]” ” ” < /dev/urandom | dd cbs=$COLUMNS conv=unblock | GREP_COLOR="1;32" grep –color "[^ ]" 这样可以
为什么不可以这样:
tr -c "[:digit:]" " " < /dev/urandom | GREP_COLOR="1;32" grep –color "[^ ]"
或者:
echo "test" | GREP_COLOR="01;32" grep –color "[^ ]" 这样可以,
cat /dev/urandom 这样也可以,
为什么不可以这样:
cat /dev/urandom | GREP_COLOR="01;32" grep –color "[^ ]"
太cool了,以前都不知道
代码中有一些中文字符,不是很方便拷贝。:)
#bin/bash
#touchall.sh
find . -exec touch {} \;
最喜歡在VI中保存只有ROOT權限的那個。。。試了一下還真很好用。。
记忆中无数次漫步在赤水河畔,享受着独有的宁静,久久徘徊着不肯离去,就算聆听涛声的吟唱也觉得是种妙韵天成,它仿佛不知疲倦的对我叙说着一个久远的故事。 栖逐于崇山峻岭间匍匐蜿蜒的赤水河
乡情 乡情是酒,日久而醇,醇而香浓。 题记 (一) 走过青青芳草地,飘过幽香季节,一树红艳欲滴的三月泡挂满浓浓的乡情,甜在三月,醉在三月。 那诱人的小果,是我们孩提时的渴望。呼朋引伴,…