小学时候学过的一篇文章,主要讲的是偷懒使人进步,在某些情况下,这可能是真的!
前些天看了一下服务器的访问日志,我截取其中几条数据,大致如下:
想不到尽然也有一些访问者,但是貌似大部分是想要搞事的。。
不过我很好奇那些ip地址的来源,于是我打开了某度。。输入关键字“ip地址查询”,出现了下图内容:
然后开始复制上图所示的IP地址并将它们粘贴到红丝标识的文本框中,但是查了几次后就开始感觉有点烦了。。
本着能偷懒就偷懒的原则,我尝试用一些简单的快捷的方法来做这件事情,没错,就是用代码解决。
还是上图那个界面,在浏览器中按下F12,会出现如下界面:
不同的浏览器可能会有所不同,但是差别不是很大。然后点击红色举行标识区域
然后再查询一次数据,下半部分的界面会有一些显示数据上的变化,如下图:
这时候再点击一下黑色标识部分,会有如下变化:
上图黑色标识部分其实就是我们想要查询的ip地址,待会儿我们会将指定的ip插入到黑色标识中
这时候我们可以尝试将红色部分的链接粘贴到浏览器的地址栏中并回车查看结果,会发现浏览器会显示如下数据:
这是访问那个链接后给我们返回的结果,注意红色标识部分,这个字符串其实就是经过查询后我们最关注的内容了(也就是ip地址的来源)
大概的过程:我们将ip地址输入到浏览器中,浏览器会将我们输入的ip当做一个请求的属性并将请求发送至服务器,最终服务器返回了上图那段数据,这种数据格式被称为json(原理就不扯太多了。。)。
最终利用程序将我日志中所有的IP地址都查询一次
大概的思路:
准备工作
- 先将日志文件下载至我的电脑中
- 准备好解析json数据要用到的包(我用的是gson)
实现过程
- 先将日志文件中所有的IP地址提取到一个list集合中
- 再遍历集合中所有的IP地址,将ip插入到上上图中的黑色标识部分,获得链接
- 利用链接发起请求,服务器会返回一段json数据,因为返回的json数据首尾部分增加了一些内容,所以gson不能正确解析,在解析之前我们需要先简单的处理
- json数据处理完成之后我们就要开始解析了,解析之前我们先利用格式化工具看下这段json数据的格式:
- 可以看到在大括号里面还有一对大括号,在Java中可以理解为类中还包含一个类。
- 针对我们想要的数据,可以简单的写两个这段json数据对应的POJO类。
- POJO类写完之后就可以开心的解析啦
下面就是代码:
//这个类对应json数据中里面那对大括号的内容
public class IP {
public String location;
}
//这个类对应外面大括号里的内容,他是包含上面那个类的
public class Json {
public IP[] data;
}
由于我们只需要地区属性的值,所以对应的POJO类就不用定义太多的属性,取我们需要的即可。
下面是主程序的代码:
package decode;
import com.google.gson.Gson;
import org.junit.Test;
import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.InputStreamReader;
import java.net.URL;
import java.net.URLConnection;
import java.util.ArrayList;
import java.util.List;
public class CheckIp {
/**
* 根据传入的ip返回请求获得的json值
*
* @param ip ip
* @return json数据
* @throws Exception
*/
//@Test
public String getJson(String ip) throws Exception {
//用来存放请求的返回数据
StringBuffer sb = new StringBuffer();
//利用ip拼接链接发送请求,简单直接粗暴的使用它的原始链接
URL url = new URL("https://sp0.baidu.com/8aQDcjqpAAV3otqbppnN2DJv/api.php?query=" +
ip +
"&co=&resource_id=6006&t=1494253752260&ie=utf8&oe=gbk&cb=op_aladdin_callback&format=json&tn=baidu&cb=jQuery110204935657823502546_1494253741148&_=1494253741151");
URLConnection urlConnection = url.openConnection();
BufferedReader br = new BufferedReader(new InputStreamReader(urlConnection.getInputStream(), "gbk"));
//将请求返回的字节输入流使用字符输入流包装最后再包装成BufferedReader
//将流中的数据读出并添加到字符串缓存中
String line;
while ((line = br.readLine()) != null) {
sb.append(line);
}
//因为请求返回的json值的首尾部分有一些其他内容,所以要进行简单的处理
String s = sb.substring(sb.indexOf("(") + 1, sb.indexOf(")"));
//最终返回正确的json数据
return s;
}
/**
* 将访问日志文件加载到内存中
*
* @return 返回List集合,包含了每一条访问的ip
*/
//@Test
public List<String> loadFile() throws Exception {
List<String> list = new ArrayList<>();
BufferedReader br = new BufferedReader(new InputStreamReader(new FileInputStream(new File("src/ips"))));
String line;
while ((line = br.readLine()) != null) {
//每次循环读取一行,并将每行的ip分割出来存入List
list.add(line.substring(0, line.indexOf(" ")));
}
return list;
}
/**
* 根据json获取地区值
*
* @param json 需要解析的json数据
* @return 直接返回地区值
*/
//@Test
public String getArea(String json) {
Gson gson = new Gson();
//传入json数据以及自定义的POJO类,会返回一个创建的Json实例
Json json1 = gson.fromJson(json, Json.class);
//这里我们直接将实例中的地区属性返回
return json1.data[0].location;
}
/**
* 主要的执行类
*/
@Test
public void control() throws Exception {
List<String> list = loadFile();
for (String s : list) {
String json = getJson(s);
String area = getArea(json);
System.out.print(s + ":");
System.out.print(area);
System.out.println();
}
}
}
最终效果:
这都是些什么鬼IP。。。。