linux命令进阶小记
2015-09-03 20:21
435 查看
vim批量删除注释
:g/^#/d
vim删除空行
:g/^$/d
shell执行php脚本
count='ps -ef | grep script.php | grep -v grep | wc -l'
baseDirForScriptSelf=$(cd "$(dirname "$0")"; pwd)
cd $baseDirForScriptSelf
if [ $count -eq 0 ]; then
nohup php script.php >>/dev/null 2>&1 &
fi
shell 查找
find dirname -type f -name "*.php"|xargs grep "sql"
find ./ -mmin +2 -type f -exec ls -l {} \;
find ./ -type f -name "ad*_2012-03*.log" |xargs grep '4f5ff7a0d7a98_b.jpg' -l
查找替换
find dirname/ -name "*.m3u8" |xargs sed -i 's/#EXT-X-ENDLIST/#EXT-X-ENDLIST\n/g'
删除两分钟之前的文件
find /var/www -type f -mmin 2 -exec rm {} \;
redis 批量删除
redis-cli keys "prefix*" | xargs redis-cli del
查看linux当前连接数
netstat -an|awk '/tcp/ {print $6}'|sort| uniq -c
或
netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'
或
netstat -antp | grep 80 | grep ESTABLISHED -c
统计nginx日志访问ip数
awk '{print $1}' access.log |uniq -c |wc -l
通过SSH将MySQL数据库复制到新服务器
mysqldump –add-drop-table –extended-insert –force –log-error=error.log -uroot -p'password' cms | ssh -C ``root@192.168.2.30 "mysql -uUSER -pPASS NEW_DB_NAME"
通过压缩的 SSH 隧道 Dump 一个 MySQL 数据库,将其作为输入传递给 mysql 命令,我认为这是迁移数据库到新服务器最快最好的方法。
数据库
CREATE DATABASE cms default charset utf8 COLLATE utf8_general_ci;
导入数据
mysql -u root -puse cms;
source /home/lhb/data/cms.sql
备份数据库
mysqldump -uroot -p cms –ignore-table=cms.history –ignore-table=cms.statistics > cms.sql
/usr/bin/mysqldump -u root -p cms > /home/lhb/data/cms.sql
mysqldump –all-databases –lock-all-tables –lock-all-tables –flush-logs –master-data=2 > all.sql
把文件上传到远程服务器,把文件从远程服务器copy到本地
scp /home/lhb/data/cms.sql lhb@192.168.1.30:/home/lhb/data
scp root@172.17.1.17:/home/lhb/data/cms.sql /home/lhb/data
mysql给root启用远程登录
GRANT all privileges ON *.* TO 'root'@'%' IDENTIFIED BY '123';
flush privileges;
GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123' WITH GRANT OPTION;
GRANT REPLICATION SLAVE,REPLICATION CLIENT ON . TO ‘test’@’172.16.%.%’ IDENTIFIED BY ‘test’
给表添加索引
ALTER TABLE ad_event ADD INDEX ind_order(order_id)
执行定时任务
0 2 * * * /home/lhb/cli/chk_nginx.sh >> /dev/null &
查看满查询日志
show variables like '%slow%';
在线开启mysql慢查询
set global slow_query_log=1;
set global long_query_time=2;
set global slow_query_log_file=’mysql-slow.log’;
关闭慢查询
set global slow_query_log=0;查看二进制事件信息
show binlog events in ‘mysql-bin.000001’;show binlog events in ‘mysql-bin.000001’ from 107;
查看所有二进制文件
show binary logs;
删除二进制文件
purge binary logs to ‘指定的二进制文件’
分析nginx log
cat cms_access.log.1 |grep -v "templates" | awk '{split($7,bbb,"?");print bbb[1]}' |sed 's/[0-9].*/num/g' | sort | uniq -c | sort -n -k 1 -r | head -n 100
分析广告nginx log
cat ad_access.log.1 |grep -Po "a=[0-9a-zA-Z]*[&|[:space:]]" |awk -F '[=&]' '{print $2}' | sort |uniq -c |sort -n -k 1 -r |head -n 100
统计 par 的IP,被多少个其它IP地址访问前20条
grep par access.log | awk '{print $7" "$1}' |awk -F "par=" '{print $2}'|sort|uniq|awk '{print $1}'|uniq -c|sort -n|tail -n 20
kill进程
ps -ef |grep nginx |grep -v grep |awk '{print $2}' |xargs kill -9
查看nginx进程数
watch -n 1 -d “grep nginx|wc -l”查看mysql进程链接数
ps axef | grep mysqld -c查看端口是否占用
lsof -i:80或者
netstat -an |grep 80
查看系统调用的参数,返回值,耗时
strace -p查看进程pid打开的文件描述符
lsof -p pid查询mysql 表信息-建立时间 更新时间 行数 版本等等
show table status;show table status like ‘%tablename%’;
UPDATE video_link SET location = replace( location, ‘\t’, ” )
SELECT
video_idFROM
video_linkwhere left(
location,1) = ‘\t’
delete from video where starttime<(unix_timestamp()-3600*24+7);
select count(*) from video where starttime<(unix_timestamp()-3600*24+7);
在内存中建立一个文件夹
ln -s /dev/shm/checkfile /var/www/checkfilelinux 下 取进程占用 cpu 最高的前10个进程
ps aux|head -1;ps aux|grep -v PID|sort -rn -k +10|headlinux 下 取进程占用内存(MEM)最高的前10个进程
ps aux|head -1;ps aux|grep -v PID|sort -rn -k +10|headps aux|head -1;ps aux|grep -v PID|sort -rn -k +4|head
查看网络流量
watch more /proc/net/devwatch ifconfig
查看文件夹的大小
du -h –max-depth=1 work/testingdu -h –max-depth=1 work/testing/*
du -h –max-depth=1 work/testing/logs/
du -h –max-depth=1 work/testing/logs/*
查看linux文件目录的大小和文件夹包含的文件数 统计总数大小
du -sh xmldb/du -sm * | sort -n //统计当前目录大小 并安大小 排序
du -sk * | sort -n
du -sk * | grep guojf //看一个人的大小
du -m | cut -d “/” -f 2 //看第二个/ 字符前的文字
查看此文件夹有多少文件 ///* 有多少文件
du xmldb/du xmldb///* |wc -l
解释:
wc [-lmw]
参数说明:
-l :多少行
-m:多少字符
-w:多少字
wget模拟浏览器下载文件
wget -x --header="User-Agent: Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)" -O tess.mp4 'http://f.youku.com/player/getFlvPath/sid/00_00/st/flv/fileid/03000201004B68D8A10C3B02E28CA60F302730-0349-CBF3-D0CF-B3E30E8C08AA?K=1c5738eed4f0012b2828aa27'
tomcat 启动把8080->80端口映射
iptables -t nat -A PREROUTING -p tcp –dport 80 -j REDIRECT –to-port 8080查看清除mysql状态该信息
show global status like ‘Max_used_connections’;flush status
select @@max_user_connections;
查看设置mysql 最大连接数
show variables like ‘max_connections’;set GLOBAL max_connections=2000;
更新数据库多表相同字段数据
cat sn.txt10000015 35084355
10000039 35084356
user=”root”
pass=’1234’
db=”test”
tnames=(“table1” “table2” “table3”)
for table in ${tnames[@]};do
echo $table
cat sn.txt | awk '{print "update '$table' set user_id = "$2 " where user_id = " $1 ";"}' >> update.sql
done
mysql -u "$user" -p"$pass" "$db" < update.sql;
生成随机字符:
dd if=/dev/random count=1 bs=512 |md5sum
系统性能优化 常用命令:
top -ab -n 1top -ab -n 1 |grep nginx
vmstats
查看cpu队列,以及负载情况
sar -q -f sa08runq-sz:等待执行的任务队列长度。越长阻塞越严重
plist-sz:队列中的任务总数
cpu占用率
sar -p -f sa08
查看内存:
sar -r -f sa08sar -B -f sa08
查看sawp的交换的频繁程度
sar -W -f sa08查看IO
sar -b -f sa08sar -d -f sa08
查看网络
sar -n DEV -f sa08评估磁盘读写性能极限
fio -filename=/data/test -direct=1 -iodepth 1 -thread -rw=randrw -ioengine=psync -bs=16k -size 2G -numjobs=10 -runtie=30 -group_reporting -name=mytest13创建账户和密码
useradd lhbecho “lhb” | passwd –stdin lhbpwd
抓包命令
tcpdump -i eth0 -nn -X -vv tcp port 21 and ip host 172.17.10.13tcpdump -i eth0 -s0 -nn -XX tcp dst port 3306 and dst host 172.17.10.13
tcpdump -iany udp port 53
删除指定数据库的表
mysql -h'127.0.0.1' -utest -p'123456' -nse 'show tables' test_db|while read table;do mysql -h127.0.0.1' -utest -123456' -e "drop table $table" test_db;done
bash命令行编辑
Ctrl+a:跳转到命令行首。 Ctrl+e:跳转到命令行尾 Ctrl+u:删除光标至命令行首的内容 Ctrl+k:删除光标至命令行委的内容 Ctrl+l:清屏
命令历史的使用技巧:
!n:执行命令历史中的第N条命令!-n:执行命令历史中的倒数第N条命令
!!:执行上一条命令
!string:执行命令历史中最近一个以指定字符串开头的命令
!$:引用前一个命令的最后一个参数
本文出自 “宅鸟乐园” 博客,请务必保留此出处http://birdinroom.blog.51cto.com/7740375/1399418
相关文章推荐
- 什么是Shell?Shell脚本基础知识详细介绍
- 学习shell脚本之前的基础知识[图文]
- 用内置变量调试shell脚本的方法
- 自己常用的一些shell脚本分享
- 用Shell脚本快速搭建Ubuntu下的Nodejs开发环境
- MAC中用Shell脚本批量裁剪各种尺寸的App图标
- Shell实现系统时间和BIOS时间同步校准脚本分享
- Linux下实现SNMP一键安装的Shell脚本
- PHP教程之PHP中shell脚本的使用方法分享
- 实现MySQL定时批量检查表repair和优化表optimize table的shell脚本
- Ubuntu、Linux Mint一键安装Chrome浏览器的Shell脚本分享
- shell脚本监控系统负载、CPU和内存使用情况
- windows下写的shell脚本在linux执行出错的解决办法
- 写出健壮Bash Shell脚本的一些技巧总结
- shell脚本中执行时提示“没有那个文件或目录”的解决办法
- shell脚本实现随机生成10个8位密码
- 把mysql查询结果保存到文件的shell脚本
- 一个测试下载速度的shell脚本
- Shell脚本实现的基于SVN的代码提交量统计工具
- CentOS下redis自启动shell脚本