在数据库管理中,往往需要用到blob字段,该字段可以存储大量二进制数据,例如图片、视频、音频等等。但是,由于文件大小不断增长,管理blob字段大小变得愈加困难。不当的管理方法可能会导致性能问题以及存储问题,所以,在数据库中管理blob字段大小显得尤为重要。
创新互联公司专业为企业提供忻府网站建设、忻府做网站、忻府网站设计、忻府网站制作等企业网站建设、网页设计与制作、忻府企业网站模板建站服务,十载忻府做网站经验,不只是建网站,更提供有价值的思路和整体网络服务。
在本文中,我们将向您介绍一些在数据库中管理blob字段大小的技术,让您的数据库管理变得更加专业和高效。
1. 预估大小
为了避免大规模的空间浪费以及性能问题,在使用blob字段之前,我们首先需要掌握我们需要存储的数据量的大小。该方法对于基础数据类型(例如,int和varchar类型)非常有用,而对于blob类型也同样适用。
通过估算blob字段的大小,我们可以预测数据库的空间需求。在此基础上,我们可以更好的预测数据库的性能瓶颈,提前为之做好准备工作。
2. 数据的规范化
当使用blob类型的数据存储大量图片或者视频时,我们可能需要规范化数据。该技术将blob数据从原始表中提取出来,存储到新的表中,进而可以将数据库的性能和空间放大到更优状态。
规范化数据还可以降低系统维护的成本,通过拆分数据视图,我们可以逐步优化数据库操作,实现更加精细化的管理方式。
3. 使用压缩算法
当我们需要保存特别大的图片和视频时,可以使用压缩算法将数据压缩,并以二进制格式存储在blob字段中。压缩算法广泛应用于音频和视频文件的存储,常用的算法包括LZW、LZO、gzip等等。
压缩算法可以使数据占用的存储空间减少,同时还可以减少网络中数据的传输量,加速数据的传输速度。但是,压缩算法可能导致一定的性能损失,尤其是在解压缩操作的过程中。
4. 使用数据库管理工具
当我们需要管理blob字段大小时,还可以使用数据库管理工具进行优化。例如,在MySQL中,可以使用存储过程和触发器来应用诸如压缩算法等优化技术。
还可以使用数据迁移工具来将数据从磁盘放入Blob字段中,以节省磁盘存储等方面的资源。在使用数据库工具时,我们还需要了解存储过程和优化表的知识,以保证操作的顺利执行和数据的稳定性。
5. 使用云存储
在处理大规模数据存储时,我们还可以使用云存储技术。云存储是一种分布式系统,可以在多个不同设备上进行数据的存储和传输,进而减少单个设备的负担。
云存储可以保证数据的安全性和稳定性,同时还可以提升系统的可用性和灵活性。现在,许多大型网站和企业也已经开始采用云存储技术,以缓解数据存储和管理的压力。
在数据库管理中,blob字段是一种重要的数据类型,可以存储大量二进制数据,例如图片、视频等等。然而,随着数据大小不断增长,管理blob字段大小变得更加困难。
本文介绍一些在数据库中管理blob字段大小的技术,包括预估大小、规范化数据、使用压缩算法、使用数据库管理工具和云存储等等。当您使用这些技术时,有机会使数据库管理更加专业和高效,进而实现更高的性能和空间管理。
成都网站建设公司-创新互联,建站经验丰富以策略为先导10多年以来专注数字化网站建设,提供企业网站建设,高端网站设计,响应式网站制作,设计师量身打造品牌风格,热线:028-869222201.使用jdk中的方法进行传输。在ResultSet 中有getBlob()方法,在PreparedStatement中有setBlob()方法,所以大多数人都会尝试setBlob
(),getBlob() 进行读写,或者两个数据库之间BLOB的传输。这种方法实际上是行不通的,据网上的一些资料介绍,说sun官方的文档有些方法
都是错误的。
2.使用ResultSet.getBinaryStream 和PreparedStatement.setBinaryStream对BLOB进行读写或两个数据库间的传输。这种方法我自己尝试过,
发现,如果BLOB中存储的是文本文件的话,就没问题,如果是二进制文件,传输就会有问题。
根据自己的经验,以及查阅了Oracle的官方文档,都是使用如下处理方法:
1.新建记录,插入BLOB数据
1.1首先新建记录的时候,使用oracle的函数插入一个空的BLOB,假设字段A是BLOB类型的:
insert xxxtable(A,B,C) values(empty_blob(),’xxx’,’yyyy’)
1.2后面再查询刚才插入的记录,然后更新BLOB,在查询前,注意设置Connection的一个属性:
conn.setAutoCommit(false);如果缺少这一步,可能导致fetch out of sequence等异常.
1.3 查询刚才插入的记录,后面要加“ for update ”,如下:
select A from xxxtable where xxx=999 for update ,如果缺少for update,可能出现row containing the LOB value is not locked
的异常
1.4 从查询到的 BLOB字段中,获取blob并进行更新,代码如下:
BLOB blob = (BLOB) rs.getBlob(“A”);
OutputStream os = blob.getBinaryOutputStream();
BufferedOutputStream output = new BufferedOutputStream(os);
后面再使用output.write方法将需要写入的内容写到output中就可以了。例如我们将一个文件写入这个字段中:
BufferedInputStream input = new BufferedInputStream(new File(“
byte buff = new byte; //用做文件写入的缓冲
int bytesRead;
while(-1 != (bytesRead = input.read(buff, 0, buff.length))) {
output.write(buff, 0, bytesRead);
System.out.println(bytesRead);
}
上面的代码就是从input里2k地读取,然后写入到output中。
1.5上面执行完毕后,记得关闭output,input,以及关闭查询到的ResultSet
1.6最后执行conn.commit();将更新的内容提交,以及执行conn.setAutoCommit(true); 改回Connction的属性
2.修改记录,方法与上面的方法类似,
2.1首先更新BLOB以外的其他字段
2.2 使用1.3中类似的方法获取记录
2.3 修改的过程中,注意以下:a 需要更新的记录中,BLOB有可能为NULL,这样在执行blob.getBinaryOutputStream()获取的值可能为
null,那么就关闭刚才select的记录,再执行一次update xxxtable set A = empty_blob() where xxx, 这样就先写入了一个空的BLOB(不是null),然后再
使用1.3,1.4中的方法执行更新记录.b 注意别忘了先执行setAutoCommit(false),以及”for update”,以及后面的conn.commit();等。
3.读取BLOB字段中的数据.
3.1 读取记录不需要setAutoCommit(),以及 select ….for update.
3.2 使用普通的select 方法查询出记录
3.3 从ResultSet中获取BLOB并读取,如下:
BLOB b_to = (BLOB) rs.getBlob(“A”);
InputStream is = b_from.getBinaryStream();
BufferedInputStream input = new BufferedInputStream(is);
byte buff = new byte;
while(-1 != (bytesRead = input.read(buff, 0, buff.length))) {
//在这里执行写入,如写入到文件的BufferedOutputStream里
System.out.println(bytesRead);
}
通过循环取出blob中的数据,写到buff里,再将buff的内容写入到需要的地方
4.两个数据库间blob字段的传输
类似上面1和3的方法,一边获取BufferedOutputStream,另外一边获取BufferedInputStream,然后读出写入,需要注意的是写入所用的
Connection要执行conn.setAutoCommit(false);以及获取记录时添加“ for update ”以及最后的commit();
总结以上方法,其根本就是先创建空的BLOB,再获取其BufferedOutputStream进行写入,或获取BufferedInputStream进行读取
Java语言操作Oracle数据库中的CLOB数据类型字段类型:blob,clob,nclob
说明:三种大型对象(LOB),用来保存较大的图形文件或带格式的文本文件,如Miceosoft Word文档,以及音频、视频等非文本文件,更大长度是4GB。LOB有几种类型,取决于你使用的字节的类型,Oracle 8i实实在在地将这些数据存储在数据库内部保存。可以执行读取、存储、写入等特殊操作。
我们所操作的clobtest_table中属性是(字符型id,CLOB型picstr),目前我们假设一个大的字符对象str已经包含了我们需要存入picstr字段的数据。而且connection对象conn已经建立。以下的例子程序也因为不想占用太多的空间,所以对抛出异常没有写。大家参考一下api doc。就可以知道该抛出什么异常了,此处仅仅告诉大家如何去写。
代码:
(1)对数据库clob型执行插入操作
*************************************************
java.sql.PreparedStatement pstmt = null;
ResultSet rs = null;
String query = “”;
conn.setAutoCommit(false);
query = “insert into clobtest_table(id,picstr) values(?,empty_clob())”;
java.sql.PreparedStatement pstmt = conn.prepareStatement(query);
pstmt.setString(1,”001″);
pstmt.executeUpdate();
pstmt = null
query = “select picstr from clobtest_table where id = ‘001’ for update”;
pstmt = con.prepareStatement(query)
rs= pstmt.executeQuery();
oracle.sql.CLOB clobtt = null;
if(rs.next()){
clobtt = (oracle.sql.CLOB)rs.getClob(1);
}
Writer wr = clobtt.getCharacterOutputStream();
wr.write(strtmp);
wr.flush();
wr.close();
rs.close();
con.commit();
(2)通过sql/plus查询是否已经成功插入数据库
*************************************************
PL/SQL的包DBMS_LOB来处理LOB数据。察看刚才的插入是否成功。使用DBMS_LOB包的getlength这个procedure来检测是否已经将str存入到picstr字段中了。如:
SQL> select dbms_lob.getlength(picstr) from clobtest_table;
(3)对数据库clob型执行读取操作
*************************************************
读取相对插入就很简单了。基本步骤和一半的取数据库数据没有太大的差别。
String description = “”
query = “select picstr from clobtest_table where id = ‘001’”;
pstmt = con.prepareStatement(query);
ResultSet result = pstmt.executeQuery();
if(result.next()){
oracle.jdbc.driver.OracleResultSet ors =
(oracle.jdbc.driver.OracleResultSet)result;
oracle.sql.CLOB clobtmp = (oracle.sql.CLOB) ors.getClob(1);
if(clobtmp==null || clobtmp.length()==0){
System.out.println(“======CLOB对象为空 “);
description = “”;
}else{
description=clobtmp.getSubString((long)1,(int)clobtmp.length());
System.out.println(“======字符串形式 “+description);
}
添加不了,你可以尝试将这个字段给个默认值,或缓链磨者允许唤模为null
看你的情况应该是数据库表在设计的时候可能就有扰斗问题
数据库中blob字段大小的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于数据库中blob字段大小,【技术分享】如何在数据库中管理blob字段大小,blob插入oracle 长度为0,数据库字段太多,修改字段就会卡,添加也添加不了,提示字段大小大于多少,要把类型改成text或blob的信息别忘了在本站进行查找喔。
创新互联是成都专业网站建设、网站制作、网页设计、SEO优化、手机网站、小程序开发、APP开发公司等,多年经验沉淀,立志成为成都网站建设第一品牌!
分享名称:【技术分享】如何在数据库中管理blob字段大小(数据库中blob字段大小)
文章URL:http://www.shufengxianlan.com/qtweb/news20/499670.html
网站建设、网络推广公司-创新互联,是专注品牌与效果的网站制作,网络营销seo公司;服务项目有等
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联