python 获取关键字 用python获取txt文件中关键字的数量

缘起：

　　开发人员需要tomcat中一个项目在一个月的访问请求量，因其他原因只剩下查找tomcat请求日志的方法获取，刚好最近在学习python，于是就用python摸索了下；

大体思路：

                  1.把相应tomcat的日志文件拷到有python环境的机器

　　　　　2.用os.listdir()获取到目录下所有文件名称的列表，再用for循环遍历列表加上字符串拼接得到已文件名的具体路径

　　　　　3.用open()读取文件，下面代码中for line in f:是按行读取txt文件的内容(一行一行的读，不会加载全部文件内容)

　　　　　4.用count()方法统计以项目为名的关键字(字符串)

知识点：

文件的读取和count()方法

　　Python count() 方法用于统计字符串里某个字符出现的次数。可选参数为在字符串搜索的开始与结束位置。

　　count()方法语法：str.count(sub, start= 0,end=len(string))

　　参数：

• sub -- 搜索的子字符串
• start -- 字符串开始搜索的位置。默认为第一个字符,第一个字符索引值为0。
• end -- 字符串中结束搜索的位置。字符中第一个字符的索引为 0。默认为字符串的最后一个位置。

代码如下

(如果文件过多可以加工作队列（gevent库）)：

import os

# 打開日誌文件并计数
def read_log(url,keyword):
  count = 0
  with open(url,'r',encoding='utf-8') as f:  # 打开文件
  for line in f:                  # 按行读取txt文件
    count += line.count(keyword,53,64)  # count()方法计数,keyword为传入的关键字(字符串)
return count

path= 'E:\\python\\vscode\\工作\\log\\80\\'
dirlist = os.listdir(path)  # 获取path路径下的所有txt文件名

sum = 0
for name in dirlist: 　　　　　　# 遍历获取txt文件名
  url = path + name
  num = read_log(url,keyword)
  print(str(name) + ' 文件中个数为: ' + str(num))
  sum += num
print('关键字总个数： ' + str(sum))