java实现html网页的gzip解压
?
在对网页抓包中发现,返回的很多网页是经过压缩的,比如访问谷歌首页,返回的头文件中包含Content-Encoding gzip
使用gzip可以省下很多网页流量,在网速一定的情况下,可以提高访问效率,我们用java访问时如何可以得到gzip的返回,并且我们如何解析返回的gzip呢?
我们以访问http://www.baidu.com/为例
我们用URL的openStream方法直接访问时并不返回gzip压缩数据,这是因为时候返回gzip需要判断浏览器是否支持gzip压缩,所以我们请求数据的时候在http请求头中添加支持gzip的请求头就可以
添加conn.setRequestProperty(“Accept-Encoding”, “gzip,deflate”);就告诉服务器你的浏览器支持gzip解压了
?
URL url = new URL("http://www.baidu.com/");HttpURLConnection conn = (HttpURLConnection) url.openConnection();conn.setRequestProperty("Accept-Encoding", "gzip,deflate");conn.connect();InputStream in = conn.getInputStream();BufferedReader bin = new BufferedReader(new InputStreamReader(in, "GB2312"));String s = null;while((s=bin.readLine())!=null){System.out.println(s);}bin.close();?没有conn.setRequestProperty(“Accept-Encoding”, “gzip,deflate”);不会出现乱码
加上conn.setRequestProperty(“Accept-Encoding”, “gzip,deflate”);就是乱码,这事因为服务器对返回内容进行了gzip压缩的缘故,我们只要判断返回头是否包含Content-Encodinggzip,就可以判断是不是压缩过的数据,对待压缩后的数据我们只需进行gzip解压就好了
只需将上面的代码加上GZIPInputStream gzin = new GZIPInputStream(in);并将BufferedReader bin = new BufferedReader(new InputStreamReader(in, "GB2312"));改为BufferedReader bin = new BufferedReader(new InputStreamReader(gzin, "GB2312"));?
当然是否需要gzip解压,只判断返回数据头是否包含Content-Encodinggzip就可以了
转自：http://www.codeif.com/topic/446
?