shell版Nginx日志蜘蛛爬取查看脚本 shell版Nginx日志蜘蛛爬取查看脚本

时间:2021-03-21 人气:0

想了解shell版Nginx日志蜘蛛爬取查看脚本的相关内容吗，在本文为您仔细讲解shell版Nginx日志蜘蛛爬取查看脚本的相关知识和一些Code实例，欢迎阅读和指正，我们先划重点：shell,Nginx日志,蜘蛛爬取，下面大家一起来学习吧。

shell版Nginx日志蜘蛛爬取查看脚本

用之前改一下nginx日志的路径即可
如果更多的蜘蛛自己在代码蜘蛛UA数组里加即可

#!/bin/bash
 
m="$(date +%m)"
case $m in
  "01") m='Jan';;
  "02") m='Feb';;
  "03") m='Mar';;
  "04") m='Apr';;
  "05") m='May';;
  "06") m='June';;
  "07") m='July';;
  "08") m='Aug';;
  "09") m='Sept';;
  "10") m='Oct';;
  "11") m='Nov';;
  "12") m='Dec';;
esac
d="$(date +%d)"
 
spider=(
  Googlebot
  Baiduspider
  Sogou
  YisouSpider
  360Spider
)
for i in ${spider[*]}; do
  echo -e "$i \t" `cat 此处修改为nginx访问log |grep $d/$m|grep $i|wc -l`
done

以上所述就是本文的全部内容了，希望能对大家熟悉shell脚本有所帮助。

加载全部内容