zlib库压缩和解压字符串STL string的实例详解
更新时间:2020年4月25日 17:29 点击:2314
zlib库压缩和解压字符串STL string的实例详解
场景
1.一般在使用文本json传输数据, 数据量特别大时,传输的过程就特别耗时, 因为带宽或者socket的缓存是有限制的, 数据量越大, 传输时间就越长. 网站一般使用gzip来压缩成二进制.
说明
1.zlib库可以实现gzip和zip方式的压缩, 这里只介绍zip方式的二进制压缩, 压缩比还是比较可观的, 一般写客户端程序已足够.
2.修改了一下zpipe.c的实现, 其实就是把读文件改为读字符串, 写文件改为写字符串即可.
例子
// test_zlib.cpp : 定义控制台应用程序的入口点。 // #include "stdafx.h" #include <string> #include <iostream> #include <memory> #include <assert.h> #include "zlib.h" // E:\software\Lib\compress\zlib-1.2.5\src\examples // zpipe.c #define CHUNK 16384 /* Compress from file source to file dest until EOF on source. def() returns Z_OK on success, Z_MEM_ERROR if memory could not be allocated for processing, Z_STREAM_ERROR if an invalid compression level is supplied, Z_VERSION_ERROR if the version of zlib.h and the version of the library linked do not match, or Z_ERRNO if there is an error reading or writing the files. */ int CompressString(const char* in_str,size_t in_len, std::string& out_str, int level) { if(!in_str) return Z_DATA_ERROR; int ret, flush; unsigned have; z_stream strm; unsigned char out[CHUNK]; /* allocate deflate state */ strm.zalloc = Z_NULL; strm.zfree = Z_NULL; strm.opaque = Z_NULL; ret = deflateInit(&strm, level); if (ret != Z_OK) return ret; std::shared_ptr<z_stream> sp_strm(&strm,[](z_stream* strm){ (void)deflateEnd(strm); }); const char* end = in_str+in_len; size_t pos_index = 0; size_t distance = 0; /* compress until end of file */ do { distance = end - in_str; strm.avail_in = (distance>=CHUNK)?CHUNK:distance; strm.next_in = (Bytef*)in_str; // next pos in_str+= strm.avail_in; flush = (in_str == end) ? Z_FINISH : Z_NO_FLUSH; /* run deflate() on input until output buffer not full, finish compression if all of source has been read in */ do { strm.avail_out = CHUNK; strm.next_out = out; ret = deflate(&strm, flush); /* no bad return value */ if(ret == Z_STREAM_ERROR) break; have = CHUNK - strm.avail_out; out_str.append((const char*)out,have); } while (strm.avail_out == 0); if(strm.avail_in != 0); /* all input will be used */ break; /* done when last data in file processed */ } while (flush != Z_FINISH); if(ret != Z_STREAM_END) /* stream will be complete */ return Z_STREAM_ERROR; /* clean up and return */ return Z_OK; } /* Decompress from file source to file dest until stream ends or EOF. inf() returns Z_OK on success, Z_MEM_ERROR if memory could not be allocated for processing, Z_DATA_ERROR if the deflate data is invalid or incomplete, Z_VERSION_ERROR if the version of zlib.h and the version of the library linked do not match, or Z_ERRNO if there is an error reading or writing the files. */ int DecompressString(const char* in_str,size_t in_len, std::string& out_str) { if(!in_str) return Z_DATA_ERROR; int ret; unsigned have; z_stream strm; unsigned char out[CHUNK]; /* allocate inflate state */ strm.zalloc = Z_NULL; strm.zfree = Z_NULL; strm.opaque = Z_NULL; strm.avail_in = 0; strm.next_in = Z_NULL; ret = inflateInit(&strm); if (ret != Z_OK) return ret; std::shared_ptr<z_stream> sp_strm(&strm,[](z_stream* strm){ (void)inflateEnd(strm); }); const char* end = in_str+in_len; size_t pos_index = 0; size_t distance = 0; int flush = 0; /* decompress until deflate stream ends or end of file */ do { distance = end - in_str; strm.avail_in = (distance>=CHUNK)?CHUNK:distance; strm.next_in = (Bytef*)in_str; // next pos in_str+= strm.avail_in; flush = (in_str == end) ? Z_FINISH : Z_NO_FLUSH; /* run inflate() on input until output buffer not full */ do { strm.avail_out = CHUNK; strm.next_out = out; ret = inflate(&strm, Z_NO_FLUSH); if(ret == Z_STREAM_ERROR) /* state not clobbered */ break; switch (ret) { case Z_NEED_DICT: ret = Z_DATA_ERROR; /* and fall through */ case Z_DATA_ERROR: case Z_MEM_ERROR: return ret; } have = CHUNK - strm.avail_out; out_str.append((const char*)out,have); } while (strm.avail_out == 0); /* done when inflate() says it's done */ } while (flush != Z_FINISH); /* clean up and return */ return ret == Z_STREAM_END ? Z_OK : Z_DATA_ERROR; } int _tmain(int argc, _TCHAR* argv[]) { const char* buf = "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "01010101010101010101010000000000000000000000000000011111111111111" "qwertyuiop[]"; std::cout << "========= CompressString ===========" << std::endl; std::cout << "Source Buffer Size: " << strlen(buf) << std::endl; std::string out_compress; assert(CompressString(buf,strlen(buf),out_compress,Z_DEFAULT_COMPRESSION) == Z_OK); std::cout << "Compress Buffer Size: " << out_compress.size() << std::endl; std::cout << "========= DecompressString ===========" << std::endl; std::string out_decompress; assert(DecompressString(out_compress.c_str(),out_compress.size(),out_decompress) == Z_OK); std::cout << "Decompress Buffer Size: " << out_decompress.size() << std::endl; assert(!out_decompress.compare(buf)); return 0; }
输出:
========= CompressString =========== Source Buffer Size: 662 Compress Buffer Size: 38 ========= DecompressString =========== Decompress Buffer Size: 662
参考
zlib\src\examples\zpipe.c
C++ Code Snippet - Compressing STL Strings with zlib
如有疑问请留言或者到本站社区交流讨论,感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!
上一篇: C语言数据结构之串插入操作
下一篇: C语言数据结构递归之斐波那契数列
相关文章
- vector是表示可以改变大小的数组的序列容器,本文主要介绍了C++STL标准库std::vector的使用详解,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2022-03-06
- 这篇文章主要介绍了C++ string常用截取字符串方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧...2020-04-25
mybatis 返回Integer,Double,String等类型的数据操作
这篇文章主要介绍了mybatis 返回Integer,Double,String等类型的数据操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2020-11-25- 本篇文章小编并不是为大家讲解string类型的用法,而是讲解我个人比较好奇的问题,就是string 类型占几个字节...2020-04-25
- 这篇文章主要介绍了Substring截取字符串方法小结,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧...2020-06-25
- 下面小编就为大家带来一篇java中String类型变量的赋值问题介绍。小编觉得挺不错的。现在分享给大家,给大家一个参考。...2016-03-28
- 本文给大家分享了C# 中string.split用法的相关知识,非常不错,具有参考借鉴价值,需要的朋友参考下吧...2020-06-25
- 很多类都重写了ToString方法, 导致很多类的tostring到底执行了什么,有哪些参数,都不清楚...2020-06-25
- string与[]byte经常需要互相转化,普通转化会发生底层数据的复制,下面这篇文章主要给大家介绍了关于Go中string与[]byte高效互转的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考下...2021-09-20
- 这篇文章主要介绍了在C#的类或结构中重写ToString方法的用法简介,需要的朋友可以参考下...2020-06-25
Javascript实现Array和String互转换的方法
这篇文章主要介绍了Javascript实现Array和String互转换的方法,涉及JavaScript中toString方法与split方法的使用技巧,需要的朋友可以参考下...2015-12-24- 这篇文章主要介绍了C#中enum和string的相互转换的相关资料,需要的朋友可以参考下...2020-06-25
- 这篇文章主要介绍了C++ 字符串string和整数int的互相转化操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2020-12-10
C# 字符串string和内存流MemoryStream及比特数组byte[]之间相互转换
本文主要介绍字符串string和内存流MemoryStream及比特数组byte[]之间相互转换的方法,需要的小伙伴可以参考一下。...2020-06-25- 很多朋友不清楚如何在Byte[]和String之间进行转换?下面小编给大家带来了byte与string转换的方法,感兴趣的朋友参考下吧...2020-06-25
- 这篇文章主要给大家介绍了关于C++ string替换指定字符的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用C++具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧...2020-04-25
Mysql中关于Incorrect string value的解决方案
在对mysql数据库中插入数据的时候,直接插入中文是没有问题的!但是用预编译语句时,用流对数据进行处理总报incorrect string value这个异常。本篇文章教给你解决方法...2021-09-20- String.format无论是在C#中还是在java中应用都非常广泛,今天小编抽个时间把有关string.format知识总结分享给大家,需要的朋友可以参考下...2020-06-25
- 这篇文章主要给大家介绍了关于c#中string的特性介绍及注意事项的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用c#具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧...2020-06-25
C#中图片.BYTE[]和base64string的转换方法
下面小编就为大家带来一篇C#中图片.BYTE[]和base64string的转换方法。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧...2020-06-25