分析nginx ip地址来源
接上一篇的日志格式，我们已经筛选出了所有的IP地址、做法稍有不同。nginx正则把IP写进文件里、还是那句话数据太大我们不能写进列表里边：
def getIP():
f = open(log,'r')
IPdic={}
for logline in f.readlines():
matchs = p.match(logline)
if matchs !=None:
allGroups =matchs.groups()
IP=allGroups[0]
f1 = open('/tmp/ip.txt','a')
f1.write("%s\n"%(IP))
f1.close()
f.close()2、调用IP模块进行，操作。可以用Pip安装。模块介绍：https://github.com/lxyu/17monip：
pip install 17monip
3、模块使用。
[root@monitor python]# cat query.py
#!/usr/bin/env python
#-*- coding: utf-8 -*-
import IP
def CheckIP():
outip = open('/tmp/ip.txt','r')
output = open('/tmp/output.txt','w')
for line in outip:
listIP=line.strip('\n')
local = IP.find(listIP).strip(" ")
if local != "" :
output.write(local.encode('utf-8'))
output.write('\n')
output.close()
outip.close()
if __name__=="__main__":
CheckIP()4、在生成文件，用中文写入字典，标记出来，有个地方需要注意的是，当我们字典使用中文的适合，要用json的方式导出数据：
[root@monitor python]# cat queryadd.py
#!/usr/bin/env python
#coding=utf-8
import json
def GetAddress():
pvdic={}
f = open('/tmp/output.txt','r')
n = 0
for line in f:
add = line.split()
address=add[1]
pvdic[address]=pvdic.get(address,0) +1
pvdic=sorted(pvdic.iteritems(),key=lambda c:c[1],reverse=True)
return json.dumps(pvdic,encoding="utf-8",ensure_ascii=False)
f.close()
if __name__=='__main__':
print GetAddress()5、生成效果：
[root@monitor python]# python queryadd.py
[["广东", 86], ["河北", 81], ["河南", 78], ["山东", 43], ["浙江", 43], ["福建", 31], ["北京", 30], ["江苏", 26], ["广西", 26], ["湖南", 23], ["四川", 21], ["上海", 20], ["天津", 16], ["安徽", 14], ["黑龙江", 13], ["陕西", 11], ["湖北", 8], ["江西", 5], ["云南", 3], ["吉林", 3], ["山西", 3], ["贵州", 2], ["辽宁", 2], ["甘肃", 1], ["内蒙古", 1], ["重庆", 1], ["香港", 1]]