shell脚本定时统计Nginx下access.log的PV并发送给API保存到数据库
2018-09-18 14:11
260 查看
1,统计PV和IP
统计当天的PV(Page View)
cat access.log | sed -n /`date "+%d\/%b\/%Y"`/p |wc -l
统计某一天的PV
cat access.log | sed -n '/20\/Sep\/2018/p' | wc -l
查看日志中访问次数最多的前10个IP
cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{print $0 }' | head -n 10
查看日志中访问次数超过1000次的前10个IP
cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{if($1>1000) print $0 }' | head -n 10
2,curl发送数据
使用curl发送GET请求
curl http://127.0.0.1:8080/login?admin&passwd=12345678
使用curl发送POST请求
curl -d "user=admin&passwd=12345678" http://127.0.0.1:8080/login
使用curl发送POST的JSON数据
curl -H "Content-Type:application/json" -X POST -d '{"user": "admin", "passwd":"12345678"}' http://127.0.0.1:8000/login
使用curl发送动态参数POST请求
curl -i -X POST -H "'Content-type':'application/json'" -d '{"ATime":"'$atime'","BTime":"'$btime'"}' $url curl -i -X POST -H "'Content-type':'application/json'" -d '{"ATime":"'${atime}'","BTime":"'{$btime}'"}' ${url}
3,shell脚本统计并发送
#!/bin/bash log_path=/var/log/nginx/access.log domain="http://127.0.0.1:8080/data/count" log_date=`date "+%d/%b/%Y"` echo ${log_date} total_visit=`cat ${log_path} | grep $log_date|wc -l` curl -d "count=${total_visit}" ${domain} echo $total_visit
4,服务器端接受并保存到数据库
@RequestMapping(value = "/count") public void count(String count){ //业务代码 }
总结
以上所述是小编给大家介绍的shell脚本定时统计Nginx下access.log的PV并发送给API保存到数据库,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!
您可能感兴趣的文章:
相关文章推荐
- shell脚本对apache日志分割并统计保存到数据库
- 并发数据库压力测试的shell脚本代码
- 使用Shell编写定时向指定API获取数据的脚本
- shell脚本统计信息插到数据库中去
- shell脚本定时操作数据库
- 服务自动拉起,定时日志清理,数据统计的shell脚本
- 使用shell脚本和系统日志来统计并发数
- shell脚本采用crontab定时备份数据库日志
- 定时统计目录大小shell脚本
- 使用shell脚本分析网站日志统计PV、404、500等数据
- linux下使用shell脚本定时备份数据库
- 使用shell脚本分析网站日志统计PV、404、500等数据
- 并发数据库压力测试的shell脚本代码
- vbs wscript.shell objShell.Run 字符串 脚本 定时监控链路质量并保存
- nodejs 定时调用shell脚本来备份数据库和日志文件并发送到邮箱
- Linux下模拟多线程的并发shell脚本写法
- shell脚本定时任务 ( linux系统)
- Shell脚本统计文件行数的8种方法
- oracle导入导出命令详解(附数据库每天定时备份脚本)
- 监控数据库锁阻塞_机器连接数_警报日志的shell脚本 分享