Linux的经典shell命令整理
- 删除0字节文件
1
find -type f -size 0 -exec rm -rf {} \\;
- 查看进程
按内存从大到小排列
1 | ps -e -o “%C : %p : %z : %a”|sort -k5 -nr |
- 按cpu利用率从大到小排列
1
ps -e -o “%C : %p : %z : %a”|sort -nr
- 打印说cache里的URL
1
grep -r -a jpg /data/cache/* | strings | grep “http:” | awk -F’http:’ ‘{print “http:”$2;}’
- 查看http的并发请求数及其TCP连接状态:
1
netstat -n | awk ‘/^tcp/ {++S\[$NF\]} END {for(a in S) print a, S\[a\]}’
- 修改sshd
1
sed -i ‘/Root/s/no/yes/’ /etc/ssh/sshd_config sed在这个文里Root的一行,匹配Root一行,将no替换成yes.
- 如何杀掉mysql进程:
1
ps aux|grep mysql|grep -v grep|awk ‘{print $2}’|xargs kill -9
(从中了解到awk的用途)
1 | pgrep mysql |xargs kill -9 |
1 | killall -TERM mysqld |
1 | kill -9 \`cat /usr/local/apache2/logs/httpd.pid\` |
试试查杀进程PID
- 显示运行3级别开启的服务:
1
ls /etc/rc3.d/S* |cut -c 15-
(从中了解到cut的用途,截取数据)
如何在编写SHELL显示多个信息,用EOF
1
cat << EOF +--------------------------------------------------------------+ | === Welcome to Tunoff services === | +--------------------------------------------------------------+ EOF
for 的巧用(如给mysql建软链接)
1
cd /usr/local/mysql/bin for i in * do ln /usr/local/mysql/bin/$i /usr/bin/$i done
取IP地址:
1
ifconfig eth0|sed -n '2p'|awk '{print $2}'|cut -c 6-30 或者: ifconfig eth0 |grep "inet addr:" |awk '{print $2}'|cut -c 6- 或者 ifconfig | grep 'inet addr:'| grep -v '127.0.0.1' | cut -d: -f2 | awk '{ print $1}' 或者: ifconfig eth0 | sed -n '/inet /{s/.\*addr://;s/ .\*//;p}'
Perl实现获取IP的方法:
1 | ifconfig -a | perl -ne 'if ( m/^\\s\*inet (?:addr:)?(\[\\d.\]+).\*?cast/ ) { print qq($1\\n); exit 0; }' |
内存的大小:
1
free -m |grep "Mem" | awk '{print $2}'
获取nginx的连接IP
1
netstat -an -t | grep ":80" | grep ESTABLISHED | awk '{printf "%s %s\\n",$5,$6}' | sort
查看Apache的并发请求数及其TCP连接状态
1
netstat -n | awk '/^tcp/ {++S\[$NF\]} END {for(a in S) print a, S\[a\]}'
因为同事要统计一下服务器下面所有的jpg的文件的大小,写了个shell给他来统计.原来用xargs实现,但他一次处理一部分,搞的有多个总和….,下面的命令就能解决啦.
1
find / -name *.jpg -exec wc -c {} \\;|awk '{print $1}'|awk '{a+=$1}END{print a}'
CPU的数量(多核算多个CPU, cat /proc/cpuinfo |grep -c processor )越多,系统负载越低,每秒能处理的请求数也越多。
--------------------------------------------------------------------------------------------------------------------
CPU负载 # cat /proc/loadavg 检查前三个输出值是否超过了系统逻辑CPU的4倍。
CPU负载 # mpstat 1 1 检查%idle是否过低(比如小于5%)
内存空间 # free 检查free值是否过低 也可以用 # cat /proc/meminfo
swap空间 # free 检查swap used值是否过高 如果swap used值过高,进一步检查swap动作是否频繁: # vmstat 1 5 观察si和so值是否较大
磁盘空间 # df -h 检查是否有分区使用率(Use%)过高(比如超过90%) 如发现某个分区空间接近用尽,可以进入该分区的挂载点,用以下命令找出占用空间最多的文件或目录: # du -cks * | sort -rn | head -n 10
磁盘I/O负载 # iostat -x 1 2 检查I/O使用率(%util)是否超过100%
网络负载 # sar -n DEV 检查网络流量(rxbyt/s, txbyt/s)是否过高
网络错误 # netstat -i 检查是否有网络错误(drop fifo colls carrier) 也可以用命令:# cat /proc/net/dev
网络连接数目 # netstat -an | grep -E “^(tcp)” | cut -c 68- | sort | uniq -c | sort -n
进程总数 # ps aux | wc -l 检查进程个数是否正常 (比如超过250)
可运行进程数目 # vmwtat 1 5 列给出的是可运行进程的数目,检查其是否超过系统逻辑CPU的4倍
进程 # top -id 1 观察是否有异常进程出现
网络状态 检查DNS, 网关等是否可以正常连通
1
ping traceroute nslookup dig
用户 # who | wc -l 检查登录用户是否过多 (比如超过50个) 也可以用命令:# uptime
系统日志 # cat /var/log/rflogview/*errors
检查是否有异常错误记录 也可以搜寻一些异常关键字,例如:
1 | # grep -i error /var/log/messages |
dmesg 检查是否有异常错误记录
- 系统时间 # date 检查系统时间是否正确
当前时间: date +"%Y-%m-%d %H:%M:%S"
打开文件数目 # lsof | wc -l 检查打开文件总数是否过多
日志 # logwatch ?print 配置/etc/log.d/logwatch.conf,将 Mailto 设置为自己的email 地址,启动mail服务 (sendmail或者postfix),这样就可以每天收到日志报告了。
缺省logwatch只报告昨天的日志,可以用# logwatch ?print ?range all 获得所有的日志分析结果。
可以用# logwatch ?print ?detail high 获得更具体的日志分析结果(而不仅仅是出错日志)。
杀掉80端口相关的进程
1
lsof -i :80|grep -v "PID"|awk '{print "kill -9",$2}'|sh
清除僵死进程
1
ps -eal | awk '{ if ($2 == "Z") {print $4}}' | kill -9
tcpdump 抓包 ,用来防止80端口被人攻击时可以分析数据
1
# tcpdump -c 10000 -i eth0 -n dst port 80 > /root/pkts
然后检查IP的重复数 并从小到大排序 注意 “-t\ +0″ 中间是两个空格
1
# less pkts | awk {'printf $3"\\n"'} | cut -d. -f 1-4 | sort | uniq -c | awk {'printf $1" "$2"\\n"'} | sort -n -t\ +0
查看有多少个活动的php-cgi进程
1
netstat -anp | grep php-cgi | grep ^tcp | wc -l
利用iptables对应简单攻击
1
netstat -an | grep -v LISTEN | awk ‘{print $5}’ |grep -v 127.0.0.1|grep -v 本机ip|sed “s/::ffff://g”|awk ‘BEGIN { FS=”:” } { Num\[$1\]++ } END { for(i in Num) if(Num>8) { print i} }’ |grep ‘\[0-9\]\\{1,3\\}\\.\[0-9\]\\{1,3\\}\\.\[0-9\]\\{1,3\\}\\.\[0-9\]\\{1,3\\}’| xargs -i\[\] iptables -I INPUT -s \[\] -j DROP
Num>8部分设定值为阀值,这条句子会自动将netstat -an 中查到的来自同一IP的超过一定量的连接的列入禁止范围。 基中本机ip改成你的服务器的ip地址
怎样知道某个进程在哪个CPU上运行?
1
# ps -eo pid,args,psr
查看硬件制造商
1
dmidecode -s system-product-name
perl如何编译成字节码,这样在处理复杂项目的时候会更快一点?
1
perlcc -B -o webseek webseek.pl
统计var目录下文件以M为大小,以列表形式列出来。
1
find /var -type f | xargs ls -s | sort -rn | awk ‘{size=$1/1024; printf(“%dMb %s\\n”, size,$2);}’ | head
查找var目录下文件大于100M的文件,并统计文件的个数
1
find /var -size +100M -type f | tee file_list | wc -l
sed 查找并替换内容
1
sed -i “s/varnish/LTCache/g” \`grep “Via” -rl /usr/local/src/varnish-2.0.4\`
1
sed -i “s/X-Varnish/X-LTCache/g” \`grep “X-Varnish” -rl /usr/local/src/varnish-2.0.4\`
查看服务器制造商
1
dmidecode -s system-product-name
wget 模拟user-agent抓取网页
1
wget -m -e robots=off -U “Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6” http://www.example.com/
统计目录下文件的大小(按M打印显示)
1
du $1 –max-depth=1 | sort -n|awk ‘{printf “%7.2fM —-> %s\\n”,$1/1024,$2}’|sed ‘s:/.*/\\(\[^/\]\\{1,\\}\\)$:\\1:g’
关于CND实施几个相关的统计
1
2统计一个目录中的目录个数
ls -l | awk ‘/^d/’ | wc -l
统计一个目录中的文件个数
1 | ls -l | awk ‘/^-/’ | wc -l |
统计一个目录中的全部文件数
1 | find ./ -type f -print | wc -l |
统计一个目录中的全部子目录数
1 | find ./ -type d -print | wc -l |
统计某类文件的大小:
1 | find ./ -name “*.jpg” -exec wc -c {} \\;|awk ‘{print $1}’|awk ‘{a+=$1}END{print a}’ |
查找占用磁盘IO最多的进程
1
2
3wget -c http://linux.web.psi.ch/dist/scientific/5/gfa/all/dstat-0.6.7-1.rf.noarch.rpm
dstat -M topio -d -M topbio去掉第一列(如行号代码)
1
awk ‘{for(i=2;i<=NF;i++) if(i!=NF){printf $i" "}else{print $i} }' list
输出256中色彩
1
for i in {0..255}; do echo -e "\\e\[38;05;${i}m${i}"; done | column -c 80 -s ' '; echo -e "\\e\[m"
查看机器支持内存 机器插内存情况:
1
dmidecode |grep -P "Maximum\\s+Capacity"
机器最大支持内存:
1 | dmidecode |grep -P "Maximum\\s+Capacity" |
查看PHP-CGI占用的内存总数:
1
total=0; for i in \`ps -C php-cgi -o rss=\`; do total=$(($total+$i)); done; echo "PHP-CGI Memory usage: $total kb"
查看主板型号
1
# dmidecode |grep -A 8 "System Information"System Information
查看cpu型号,主频
1
# cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c
查看内存
1
# free -m
查看内存条数
1
[root@localhost ~\]# dmidecode -t memory|grep Size
查看硬盘大小,分区
1
2[root@localhost ~\]# df -hFilesystem Size Used Avail Use% Mounted on/dev/sda3 119G 17G 96G 15% /
[root@localhost ~\]# dmesg |grep -i raid查看网卡
1
[root@localhost ~\]# lspci | grep -i 'eth'05:00.0 Ethernet controller: Intel Corporation 82576 Gigabit Network Connection (rev 01)05:00.1 Ethernet controller: Intel Corporation 82576 Gigabit Network Connection (rev 01)
查看2号网络流量
1
# sar -n DEV -f /var/log/sa/sa2 |grep eth|less
查看板载显示信息
1
[root@localhost ~\]# dmidecode |grep -A 5 "On Board Device Information"On Board Device
作者:NetSeek 来源:http://bbs.linuxtone.org/thread-16-1-1.html