而存储后在进行读取时会由于该表的存储量很大，这个值会导致加大IO
我们在JAVA中能否使用一个比较高压缩的方式或进行编码、加密也可，或者某种手段将这个字符串的长度进行压缩
比如一个字符串的长度为300，在进行压缩后会变为150或更少
试了ZIP压缩不太理想，使用BASE64反而会增大，3DES的方式也不太好
想请教各位，有关这方面可用的技巧或思路！
-
由于需要将一个较大的参数值 进行数据库存储，
而存储后在进行读取时会由于该表的存储量很大，这个值会导致加大IO
我们在JAVA中能否使用一个比较高压缩的方式或进行编码、加密也可，或者某种手段将这个字符串的长度进行压缩
比如一个字符串的长度为300，在进行压缩后会变为150或更少
试了ZIP压缩不太理想，使用BASE64反而会增大，3DES的方式也不太好
想请教各位，有关这方面可用的技巧或思路！展开阅读全文
-
等级
本版专家分：688 -
http://topic.csdn.net/t/20060214/14/4555387.html
不知这个帖子对lz有没有帮助
-
等级
本版专家分：8406勋章
-
- 黄花 2009年10月 Java大版内专家分月排行榜第二
-
-
那个是 .net 的
-
等级
本版专家分：688
-
小弟从网上找了个，觉得还是不错的...
main{
try
{
String str = "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中"
+ "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中"
+ "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中"
+ "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中"
+ "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中"
+ "中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中中国中国中";
String comp = compress(str);
System.out.println(str.length());
System.out.println(comp.length());
String umComp = uncompress(comp);
System.out.println(umComp);
}
catch (IOException e)
{
e.printStackTrace();
}
}
// 压缩
public static String compress(String str) throws IOException {
if (str == null || str.length() == 0) {
return str;
}
ByteArrayOutputStream out = new ByteArrayOutputStream();
GZIPOutputStream gzip = new GZIPOutputStream(out);
gzip.write(str.getBytes());
gzip.close();
return out.toString("ISO-8859-1");
}
// 解压缩
public static String uncompress(String str) throws IOException {
if (str == null || str.length() == 0) {
return str;
}
ByteArrayOutputStream out = new ByteArrayOutputStream();
ByteArrayInputStream in = new ByteArrayInputStream(str
.getBytes("ISO-8859-1"));
GZIPInputStream gunzip = new GZIPInputStream(in);
byte[] buffer = new byte[256];
int n;
while ((n = gunzip.read(buffer)) >= 0) {
out.write(buffer, 0, n);
}
// toString()使用平台默认编码，也可以显式的指定如toString("GBK")
return out.toString();
}
结果:
300
38
中国中国中中国中国中中国中国中中国中国中中国...
-
等级
本版专家分：175 -
如果字符串比较大，是否考虑把字符串存储到文件中，在数据库中存储该文件的路径！
-
等级
本版专家分：8406勋章
-
- 黄花 2009年10月 Java大版内专家分月排行榜第二
-
-
压缩的本身就是对一些重复字符串处理
你可以试一下，不是这么规律的压缩的效果 。。
-
等级
本版专家分：8406勋章
-
- 黄花 2009年10月 Java大版内专家分月排行榜第二
-
-
谢谢，这个没有大到那个程度，而且需求上不能这么做～
-
等级
本版专家分：104780勋章
-
- 探花 2012年 总版技术专家分年内排行榜第一
-
-
铜牌
2012年8月 总版技术专家分月排行榜第三
2012年7月 总版技术专家分月排行榜第三
-
-
红花
2014年8月 高性能开发大版内专家分月排行榜第一
2013年11月 高性能开发大版内专家分月排行榜第一
2012年12月 Java大版内专家分月排行榜第一
2012年11月 Java大版内专家分月排行榜第一
2012年10月 Java大版内专家分月排行榜第一
2012年9月 Java大版内专家分月排行榜第一
2012年8月 Java大版内专家分月排行榜第一
2012年7月 Java大版内专家分月排行榜第一
2012年6月 Java大版内专家分月排行榜第一
2012年5月 Java大版内专家分月排行榜第一
2012年4月 Java大版内专家分月排行榜第一
2012年3月 Java大版内专家分月排行榜第一
2012年2月 Java大版内专家分月排行榜第一
2012年1月 Java大版内专家分月排行榜第一
-
-
比如一个字符串的长度为300，在进行压缩后会变为150或更少
——规模太小了，压缩时生成的头信息都会消耗不少空间
试了ZIP压缩不太理想，使用BASE64反而会增大，3DES的方式也不太好
——BASE64根本就不是压缩，必然要增大；3DES是加密，不增大就算你运气很好了。
由于需要将一个较大的参数值 进行数据库存储
——如果可以，给出该参数值的形式，也许可以通过研究该参数值的规律来进行压缩。
不过说句心里话，才300字节，不要纠结了，这个IO简直可以忽略不计，实在不值得去压缩。。。。。
如果你很希望保证数据块内尽可能多存放数据行以提升list查询性能的话，可以将值用扩展表存储。
-
等级
本版专家分：51058勋章
-
-
蓝花
2013年3月 Java大版内专家分月排行榜第三
2013年2月 Java大版内专家分月排行榜第三
2012年11月 Java大版内专家分月排行榜第三
2008年3月 Java大版内专家分月排行榜第三
-
-
zip压缩是大于150吗
不是很确定，可能还真的得看被压缩对象的内容而定
比如用16进制字符串代替2进制字符串存储，就更省空间
进制差越大，压缩率越高
可能这也是压缩的其中一种方法吧
-
等级
本版专家分：8406勋章
-
- 黄花 2009年10月 Java大版内专家分月排行榜第二
-
-
多谢～
-
等级
本版专家分：8406勋章
-
- 黄花 2009年10月 Java大版内专家分月排行榜第二
-
-
现在正在看一看有关于7-zip的压缩方式lzma～
- Java中关于超长字符串压缩，解压缩问题
问题：数据库中varchar类型的长度设置为5000，通过一个富文本编辑器编辑了通知内容，接收到了...代码案例如下所示：（一个字符串长度为一万以上，通过压缩后，长度仅为800左右，完全满足存库条件） package vaadin...
- Java 压缩字符串
本节主要来简单介绍一下在系统交互之间遇到大容量的字符串数据交互时，采用一端压缩，另一端再解压的方式来发送和接收数据。 关于此次的压缩和解压用到的主要就是GZIPOutputStream和GZIPInputStream类，此类的相关...
- 【java】字符串的压缩转码base64
然后如果传送大型的字符串的时候就会出现缓慢的问题。 比如我们测试了。在2w条数据。大概60多m的字符串传输的时候要花费7--8秒时间。 所以就考虑到使用压缩和转码的方式进行传输。 对方接受到数据先反转码，然后...
- 一道java笔试题------字符串压缩算法
题目是这样的："请用JAVA实现字符串压缩算法。将字符串 aaabcdda 编程实现将其转换为 3a1b1c2d1a " 我这个方法主要利用了递归算法。 代码实现： public class StringCompression { ...
- Java对数据库的字符串字段进行压缩保存
核心提示：数据字段一般都是保存原文的，一来方便在数据库修改和维护，而来有一些查询要用到它。但是在有些时候，我们无需保存原文了，比如在论坛，博客等数据里的内容字段，一般使用Clob类型，其很少参与搜索，而且...
- MySQL数据库面试题（2020最新版）
数据类型mysql有哪些数据类型引擎MySQL存储引擎MyISAM与InnoDB区别MyISAM索引与InnoDB索引的区别？InnoDB引擎的4大特性存储引擎选择索引什么是索引？索引有哪些优缺点？索引使用场景（重点）...
- 史上最全面Java面试汇总（面试题+答案）
JAVA面试精选【Java基础第一部分】 JAVA面试精选【Java基础第二部分】 JAVA面试精选【Java基础第三部分】 JAVA面试精选【Java算法与编程一】 JAVA面试精选【Java算法与编程二】 Java高级工程师—面试(1) ...
- Java对数据库的字符串字段进行压缩保存【当字符串大于4000字符】
核心提示：数据字段一般都是保存原文的，一来方便在数据库修改和维护，而来有一些查询要用到它。但是在有些时候，我们无需保存原文了，比如在论坛，博客等数据里的内容字段，一般使用Clob类型，其很少参与搜索...
- 谈谈java点字符集，编码方式
经常涉及到编码，字符集，unicode,
- Java面试题全集（上）
2013年年底的时候，我看到了网上流传的一个叫做《Java面试题大全》的东西，认真的阅读了以后发现里面的很多题目是重复且没有价值的题目，还有不少的参考答案也是错误的，于是我花了半个月时间对这个所谓的《Java面试...
- Java对数据库的字符串字段进行压缩保存的尝试
数据字段一般都是保存原文的，一来方便在数据库修改和维护，而来有一些查询要用到它。但是在有些时候，我们无需保存原文了，比如在论坛，... 这类数据都是大量的文本数据，有很大的可压缩性。由于一些原因，我的数据库
- 数据结构与算法练习---霍夫曼编码进行字符串和文件的压缩和解压
使用霍夫曼编码进行字符串和文件的压缩和解压实验 解压文件时出现错误 未解决 package huffmancoding; import jdk.internal.org.objectweb.asm.tree.TryCatchBlockNode; import sun.misc.OSEnvironment; import ...
- 高效的数据压缩编码方式 Protobuf
Protocol buffers 是一种语言中立，平台无关，可扩展的序列化数据的格式，可用于通信协议，数据存储等。 Protocol buffers 在序列化数据方面，它是灵活的，高效的。相比于 XML 来说，Protocol buffers 更加小巧，...
- 前端面试题
前端面试题汇总 ... 你做的页面在哪些流览器测试过？这些浏览器的内核分别是什么? 21 ... 21 Quirks模式是什么？它和Standards模式有什么区别 21 div+css的布局较table布局有什么优点？...img的alt与title有何异同？...
- 一文弄懂字符串编码
1. 基本概念 字符(character) 在计算机和电信领域中，字符（Character）是一个信息单位...字符的例子有：字母、数字系统或标点符号。比如‘a’，‘人’，‘の’，‘*’等都是字符； 抽象字符(abstract character)...
- js面试题
JavaScript 的组成 JavaScript 由以下三部分组成： ECMAScript（核心）：JavaScript 语言基础 ...BOM（浏览器对象模型）：提供了浏览器窗口之间进行交互的对象和方法 JS 的基本数据类型和引用数据类型 ...
- 2020JAVA面试题附答案(持续更新版)
JAVA基础 JAVA中的几种基本类型，各占用多少字节？ 下图单位是bit,非字节 1B=8bit String能被继承吗？为什么？ 不可以，因为String类有final修饰符，而final修饰的类是不能被继承的，实现细节不允许改变。平常我们...
- JAVA 对 URL 进行 编码与解码
转自http://blog.csdn.net/zgmzyr/article/details/6095336 因为在做链接来源统计的时候需要把 ... 这类的URL编码还原成明文
- LZW字典压缩
如果一个字符串“ab”出现的频次很高，若采用直接用字符的方式去存储（字符的编码范围是0~65536，两个字节）需要4个字节，那么它出现10次就要占用40个字节；如果我们规定一个数来表示“ab”，比如256,256需要占用两...
- Unicode字符编码标准
Unicode ...如何解释这些整数是由字符集（character set）、编码（encoding）决定的。 文 本主要是由字符（character）组成。在格式文本（fancy text, or rich text）中包括显示属性，如颜色、斜...
- Java中文编码及各种编码互转和Java判断文件编码
Unicode UTF-8 GBK 及一点Java代码 Unicode UTF-8 GBK这些不同的编码，我们可以想象为不同的字典。同一个汉字，在不同的字典里面，我们用不同的编号保存。比如汉字"陈"在Unicode里编号为9648,在GBK里面是0xB3C2,...
- Java字符编码系列文章摘抄
很久很久以前，有一群人，他们决定用8个可以开合的晶体管来组合成不同的状态，以表示世界上的万物。他们看到8个开关状态是好的，于是他们把这称为"字节"。 再后来，他们又做了一些可以处理这些字节的机器，机器开动
- 12. JAVA IO Part 3 (数据操作流、合并流、压缩流、回退流、字符编码) ----- 学习笔记
12.11 数据操作流 12.11.1 DataOutputs
- 数字图像处理12：Huffman 编码器和解码器，二进制存储
图像压缩是为了节省存储空间，增加传输速度。图像压缩的理想标准是信息丢失的最少，压缩比例的最大。 实验思想 在无损编码（不损失图像的质量的压缩）中，有一种编码很常见，被称作 Huffman 编码。哈夫曼编码是一种...
- 字符，字节和编码三者的关系
1.1 字符与编码的发展 从计算机对多国语言的支持角度看，大致可以分为三个阶段： 系统内码 说明 系统 阶段一 ASCII 计算机刚开始只支持英语，其它语言不能够在计算机上存储和显示。 英文 DOS 阶段二 ANSI...
- 深入理解Python中的字符编码、文件处理和函数
博客核心内容：1、Python基础之字符编码的介绍 2、Python中文件处理的介绍 3、Python中函数的介绍一、Python基础之字符编码的介绍在Python当中，字符编码的问题贯穿整个学习的始终，下面详细的介绍一下字符编码的...
- 使用Java API压缩和解压缩数据-Java基础-Java-编程开发
google_ad_client = "pub-8800625213955058";/* 336x280, 创建于 07-11-21 */google_ad_slot = "0989131976";google_ad_width = 336;google_ad_height = 280;//<script type="text/javascript"
- 字符集与编码方式解惑
【locale】指一个程序或者操作系统所处的国家、字符集、时间显示的格式、货币符号等。 在C标准库的locale.h文件中定义了常量LC_ALL（全部locale项）、LC_COLLATE（排序）、LC_CTYPE（语言符号）、LC_MESSAGES、LC_...
- Python基础语法 编码,字符集
读后感：对于编码的发展，Unicode，gbk，utf-8有了更多的了解。 Python基础语法 ...学习一门编程语言，通常是学习该语言的以下几个部分的内容： ...数据类型：通常都为 数字、字符串、布尔值、数组、