请高人指点一下.
-
等级
本版专家分：1734结帖率 77.27% -
我是用HttpWebResponse的GetResponseStream()取得的返回流,但此流是经过gzip编码的,我该如何解开.下了ICSharpCode.SharpZipLib.dll不行.
请高人指点一下.展开阅读全文
-
等级
本版专家分：3053 -
发送HTTP请求的时候不要发送
Accept-Encoding: gzip
这样服务器就不会gzip给你了吧？
--------
.NET 2.0 里面有个 System.IO.Compression 命名空间，据说就是处理gzip压缩的，但是我没研究过
-
等级
本版专家分：1734
-
不发送也一样的,服务器指定用gzip返回.我现在用的是VS2003.
用不到那个类呀!
-
等级
本版专家分：3053
-
哪个服务器这么恶心……
ICSharpCode.SharpZipLib.dll 怎么不行？
它是我找到的第一个支持GZip加解压的库啊
-
等级
本版专家分：61248勋章
-
- 银牌 2006年1月 总版技术专家分月排行榜第二
-
- 铜牌 2006年2月 总版技术专家分月排行榜第三
-
-
红花
2005年9月 软件工程/管理大版内专家分月排行榜第一
2006年2月 .NET技术大版内专家分月排行榜第一
2006年1月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2005年8月 软件工程/管理大版内专家分月排行榜第二
2006年3月 .NET技术大版内专家分月排行榜第二
-
-
试试这个
http://dev.csdn.net/develop/article/67/article/63/63929.shtm
-
等级
本版专家分：1734
-
我看了一下,他返回的消息中有汉字差不多的字样.而ICSharpCode.SharpZipLib.dll压缩后的是没有这样的字符.
-
等级
本版专家分：1734
-
TO:singlepine(小山)
你的是文件打开,我的是返回流,用不上呀.
-
等级
本版专家分：3053
-
给我看看你是怎么用 SharpZipLib 的
-
等级
本版专家分：1734
-
static public string DeCompress(string comppressedString)
{
int size = 0;
string uncompressString = string.Empty;
StringBuilder sb = new StringBuilder(40960);
int totalLength = 0;
byte[] byteInput = System.Convert.FromBase64String(comppressedString);
byte[] writeData = new byte[4096];
Stream s = new GZipInputStream(new MemoryStream(byteInput));
while(true)
{
size = s.Read(writeData,0,writeData.Length);
if(size > 0)
{
totalLength += size;
sb.Append(System.Text.Encoding.UTF8.GetString(writeData,0,size));
}
else
{
break;
}
}
s.Flush();
s.Close();
return sb.ToString();
}
调用:
部份:
Stream ReceiveStream = res.GetResponseStream();
if(res.ContentEncoding=="gzip")
{
StreamReader sr = new StreamReader( ReceiveStream);
Char[] read = new Char[256];
int count = sr.Read( read, 0, 256 );
while (count > 0)
{
String str = new String(read, 0, count);
strResult += str;
count = sr.Read(read, 0, 256);
}
using(StreamWriter sw = new StreamWriter("ata.txt",true))
{
sw.WriteLine(DateTime.Now.ToLongTimeString());
sw.WriteLine(strResult);
}
strResult=DeCompress(strResult);
-
等级
本版专家分：3053
-
你应该直接将 res.GetResponseStream() 传入 GZipInputStream 进行解压缩
或者中间通过 MemoryStream 作缓冲，但是绝对不能通过 string 作缓冲
因为转换成 string 就已经变形了（因为字符编码的问题），然后你还把它当成 Base64 来转成 byte[]，绝对乱套了
-
等级
本版专家分：3053
-
HttpWebResponse 里面有个 ContentLength 属性（可能后面有个64，不记得，懒得查资料），以这个为准，直接从 ReceiveStream 里读取字节数组、写入 MemoryStream，写够 ContentLength 个字节之后，MemoryStream.Seek(0, SeekOrigin.Begin) 倒回开头，然后用 GZipInputStream 包装，再解压
不要经过string，不要经过char，只能以byte[]为中介
- 获取http的gzip内容并解压
08年在csdn上面写了一个帖子关于解压http的gzip内容的，一直以来有不少的程序员前仆后继，持续的遇到同样的...------------------------------寻找gzip 获取一个网页数据返回的编码类型是gzip，我该怎么解压缩 ？HTTP
- 过滤器通过HttpServletResponseWrapper包装HttpServletResponse实现获取response中的返回数据，以及对数据...
前几天我们项目总监给了我一个任务，就是将请求的接口数据进行压缩，以达到节省流量的目的。对于实现该功能，有以下思路：1.获取到response中的值， 2.对数据进行gzip压缩(因为要求前端不变，所以只能选在这个...
- Linux 命令面试题
Linux面试题： 1.Linux常用系统安全命令 sudo // 超级用户 su // 用于切换当前用户身份到其他身份，变更时需... chmod // 用来变更文件或目录的权限 setfacl // 设置文件访问控制列表 2.Linux常用进程管理命令 ... top ...
- 前端面试题
一、HTML和CSS 21 你做的页面在哪些流览器测试过？这些浏览器的内核分别是什么? 21 每个HTML文件里开头都有个很重要的东西，Doctype，知道这是干什么的吗？ 21 Quirks模式是什么？它和Standards模式有什么区别 21 ...
- JAVA面试笔记
JAVA面试笔记Java基础面试1、HashMap源码？5、Set的实现？6、讲解线程execute？8、讲解Runable和Callnable的区别？9、使用泛型的好处？10、JDK动态代理和Cglib的区别？Spring面试题Spirng基础面试1、什么是Spring？...
- php curl采集，服务器gzip压缩返回数据怎么办
一般服务器不会胡乱返回gzip压缩的数据，一般是客户端请求的头部里包含你浏览器能接受的压缩方式， ...有些服务器强制返回gzip压缩的数据，我们采集的时候，返回的是乱码，根本无法读取使用，这个时候马
- php file_get_contents获取网页内容gzip编码导致的乱码问题
碰到该类问题，先抓下包，看服务器返回的数据是什么编码类型的，如下，很明显是: gzip HTTP/1.1 200 OK ... Content-Encoding: gzip ... 解决方法： 使用PHP自带的zlib库即可,代码如下: $data = ...
- C# 利用HttpWebRequest模拟登陆获取数据设置Accept-Encoding为gzip,deflate后返回的网页是乱码处理
原由：在解决模拟登陆抓取数据的时候post一个地址时老是获取的内容是乱码。 经过检查最终应该是编码是HttpWebRequest.Headers.Add("Accept-Encoding", "gzip,deflate"); 导致的，其中此行代码完全按照抓包工具...
- 利用JAVA API函数实现数据的压缩与解压缩
综述 许多信息资料都或多或少的包含一些多余的数据。通常会导致在客户端与服务器之间，应用程序与计算机之间极大的数据传输量。...这篇文章简要的介绍了数据的压缩与解压缩，并展示了用java.util.zip包来实
- tomcat配置gzip压缩与解压缩
最近的做的项目中，遇到这么一个问题：服务器返回给客户端的xml报文数据量太大，费时耗流量，于是要求服务端添加gzip支持，现在把整个流程写下来，以供以后有需要是参考。gzip是一种文件压缩算法，http服务器端添加...
- android解压缩GZIP格式的网页数据
GZIP就是现有的一种网站压缩格式，只要网站支持，我们就可以从网站上下载压缩过的数据包。 GZIP的介绍请看百度百科：http://baike.baidu.com/view/966625.htm 启用GZIP： 启用GZIP通信需要服务器和客户端双方的
- Pandas的read_csv和 to_csv函数参数分析详解 ，pandas的read_csv和to_csv使用方法
Pandas的read_csv和 to_csv函数参数分析详解 1. read_csv read_csv方法定义 ...pd.read_csv(filepath_or_buffer, sep=',', delimiter=None, header='infer', names=None, index_col=None, usecols=None, ...
- 浅析HTTP协议
HTTP协议
- 给Python中通过urlopen/urlretrieve获取网页的过程中，添加gzip的解压缩支持
之前已经实现了用python获取网页的内容，相关已实现代码为：try: html = urlopen(req) except HTTPError, e: print 'HTTPErrorerr' print e.code print e.read() return None except BadStatu
- 最简单易懂的Gzip压缩实现，最清晰的OkHttp的Gzip压缩详解
后来OkHttp开始流行，后来听说OkHttp会自动处理Gzip压缩的数据，不需要我们使用GZIPInputStream来处理，于是我想验证一下是否真的是这样的，这时我就需要写个服务器端Demo了，发现行不通，会报错，找不到原因，老...
- 爬虫（一）：爬虫原理与数据抓取
主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份 聚焦爬虫 聚焦爬虫，是"面向特定主题需求"的一种网络爬虫程序，它与通用搜索引擎爬虫的区别在于： 聚焦爬虫在实施网页抓取时会对...
- python读取gzip格式及普通格式网页的方法
一般情况下，我们读取网页分析去返回内容时是这样子的： #!/usr/bin/python #coding:utf-8 import urllib2 headers = {"User-Agent": 'Opera/9.25 (Windows NT 5.1; U; en)'} request = urllib2.Request(url='...
- HTTP协议压缩格式和URL编码介绍
HTTP压缩是指web服务器和浏览器之间压缩传输请求响应结果的方法，通过采用通用的压缩算法，将数据包压缩后进行传输，从而提升页面加载速度，给用户一个更好的体验。1 HTTP压缩过程数据...
- Nginx 之七 服务器的Gzip压缩
Gzip压缩可以在http块，server块和location块中配置 Nginx服务器是通过ngx_http_gzip_module模块、ngx_http_gzip_static_module模块、ngx_... 该指令用于开启或者关闭Gzip功能，默认情况下该指令设...
- Python3 压缩与解压缩(zlib / gzip / bz2 / lzma / zipfile / tarfile)
Python3 压缩与解压缩(zlib / gzip / bz2 / lzma / zipfile / tarfile) 文件的归档 (各种格式的压缩 / 解压缩) 实际使用中仅需要使用shutil模块的压缩和解压函数就可以了, 如果想尝试其他功能, zipfile(暴力破解), ...
- pako.js对数据进行gzip压缩传递到后台解析，解决数据量大的请求问题
相信很多人在开发中都不可避免会遇到数据...2、使用gzip对数据进行压缩，再将数据请求发回后台，后台获取并对数据进行解压（这个实现比较简单，而且对数据进行压缩传递，可以优化网络性能，不过如果数据量过大，压缩后
- 通过网络获取页面返回的数据流
从网络中获取网页数据时，网页有可能使用GZIP压缩技术对页面进行压缩，这样就会减小通过网络传输的数据量，提高浏览的速度。因此在获取网络数据时要对其进行判断，对GZIP格式的数据使用GZIPInputStream对其特殊处理...
- python--爬虫--获取和解析存储网页内容--以薄荷网为例
如需转载请注明出处:python–爬虫–获取和解析存储网页内容–以薄荷网为例 我们在之前的文章中已经学习了如何进行数据抓包和截取 以及分析 访问网页。 例如: 抓取app数据教程–fiddler抓包数据截取-薄荷app为例 本章...
- 使用libcurl获取经过gzip压缩的网页文件
有些网页是经过gzip压缩的，如果直接从web获取网页的源代码后，得到的是一些乱码，比如“http://www.fenzhi.com/”这个网站的 你就是保存到本地，得到的数据，也是一个乱码的，当然用cout输出的也会是乱码； ...
- Linux实用教程(第三版)
第一章 Linux系统初步了解 本章内容 1.1 Linux系统简介 1.2 Linux系统的特点和组成 1.3 Linux版本介绍 1.4 Red Hat Linux系统概述 1.1 Linux系统简介 1.1.1 什么是Linux 1.1.2 Linux系统的产生 1.1.3 Linux...
- Python3 压缩与解压缩
Python3 压缩与解压缩(zlib / gzip / bz2 / lzma / zipfile / tarfile) 本文由 Luzhuo 编写,转发请保留该信息. 原文: http://blog.csdn.net/Rozol/article/details/72672703 以下代码以Py...
- HttpURLConnection get请求解压gzip格式的数据
最近项目在使用 http://wthrcdn.etouch.cn/weather_mini获取天气预报数据，但此接口只能用get方法请求，而且返回数据一直是乱码，原来返回数据用gzip格式压缩了，所以我的方法中增加了判断是否为gzip并解压public ...
- SecureCRT中文破解版
SecureCRT中文破解版欢迎大家下载，非最新版本！！！
- Xshell-7.0个人免费版.zip
Xshell-7.0个人免费版 ，供个人免费使用。 Xshell 是一个强大的安全终端模拟软件，它支持SSH1, SSH2, 以及Microsoft Windows 平台的TELNET 协议。Xshell 通过互联网到远程主机的安全连接以及它创新性的设计和特色帮助用户在复杂的网络环境中享受他们的工作。Xshell可以在Windows界面下用来访问远端不同系统下的服务器，从而比较好的达到远程控制终端的目的。除此之外，其还有丰富的外观配色方案以及样式选择。
- Office2016专业增强版中文免费正式版(附安装教程)64位
Microsoft office 2016专业增强版是一款由官方发布的Microsoft office办公软件，而且免费开放给所有Windows用户免费使用，其中Excel、word、PPT都非常智能化，界面最新加入暗黑主题，并且按钮的设计风格开始向Windows10靠拢。本平台提供Office 2016专业增强版，需要的朋友可下载试试！ Office 2016 专业增强版安装教程 1. 下载