向MYSql的数据表中存入文件，这看似没有什么大问题，只要把文件存入longblob字段就行了。但是最近的实践发现看似简单的背后其实有很多陷阱。下面就来分享一下我遇到的问题及我的解决办法。
先介绍一下我的应用，只有两个页面upload.jsp和download.jsp。upload.jsp使用common file upload来上传文件，并将文件存入mysql的数据表的longblob字段。download.jsp则是从数据库中取出该longblob字段的内容，并写到浏览器客户端。数据库的连接我选用tomcat的连接池，url为jdbc:mysql://localhost:3306/test?characterEncoding=gbk。jsp页面的编码都为gbk。数据表的结构如下
CREATE TABLE `file` ( `id` int(11) NOT NULL AUTO_INCREMENT, `filename` varchar(255) CHARACTER SET utf8 NOT NULL, `content` longblob, `filetype` varchar(255) CHARACTER SET utf8 NOT NULL, `size` int(11) DEFAULT NULL, `ip` varchar(255) CHARACTER SET utf8 NOT NULL, `date` timestamp NOT NULL DEFAULT '0000-00-00 00:00:00' ON UPDATE CURRENT_TIMESTAMP, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=15 DEFAULT CHARSET=gbk
上传文件的java代码如下
request.setCharacterEncoding("gbk");
if("POST".equalsIgnoreCase(request.getMethod())){
DiskFileUpload upload = new DiskFileUpload();
upload.setHeaderEncoding("gbk");
List<FileItem> list = upload.parseRequest(request);
for(FileItem fileItem : list){
if(!fileItem.isFormField()){
String filename = fileItem.getName().replace("\\", "/");
filename = filename.substring(filename.lastIndexOf("/") + 1);
Context envContext = (Context)new InitialContext().lookup("java:/comp/env");
DataSource ds = (DataSource) envContext.lookup("mysqlTest");
Connection conn = ds.getConnection();
PreparedStatement preStmt = conn.prepareStatement("insert into file (filename, filetype, size, content, ip, date) values (?,?,?,?,?,?)");
preStmt.setString(1, filename);
preStmt.setString(2, fileItem.getContentType());
preStmt.setInt(3, (int)fileItem.getSize());
preStmt.setString(5, request.getRemoteAddr());
preStmt.setTimestamp(6, new Timestamp(System.currentTimeMillis()));
preStmt.setBinaryStream(4, fileItem.getInputStream(),(int)fileItem.getSize());
preStmt.executeUpdate();
preStmt.close();
conn.close();
}
}
}
下载文件的代码如下
Context envContext = (Context)new InitialContext().lookup("java:/comp/env");
DataSource ds = (DataSource) envContext.lookup("mysqlTest");
conn = ds.getConnection();
preStmt = conn.prepareStatement("select * from file where id = ?");
preStmt.setInt(1, id);
rs = preStmt.executeQuery();
if(rs.next()){
response.reset();
response.setContentType(rs.getString("filetype"));
response.setContentLength(rs.getInt("size"));
InputStream ins = null;
OutputStream ous = null;
try{
ins = rs.getBinaryStream("content");
ous = response.getOutputStream();
byte[] b = new byte[1024];
int len = 0;
while((len = ins.read(b))!= -1){
ous.write(b, 0, len);
}
}finally{
if(ous != null) ous.close();
if(ins != null) ins.close();
}
开始上传一些文本文件没问题，但是当上传的文件大于1M时就报出如下异常
com.mysql.jdbc.PacketTooBigException: Packet for query is too large (5553258 > 1048576). You can change this value on the server by setting the max_allowed_packet' variable. com.mysql.jdbc.MysqlIO.send(MysqlIO.java:3279) com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:1971) com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2151) com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2625) com.mysql.jdbc.PreparedStatement.executeInternal(PreparedStatement.java:2119) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2415) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2333) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2318) org.apache.tomcat.dbcp.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) org.apache.tomcat.dbcp.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) org.apache.jsp.saveFile2Mysql_jsp._jspService(saveFile2Mysql_jsp.java:111) org.apache.jasper.runtime.HttpJspBase.service(HttpJspBase.java:70) javax.servlet.http.HttpServlet.service(HttpServlet.java:717) org.apache.jasper.servlet.JspServletWrapper.service(JspServletWrapper.java:388) org.apache.jasper.servlet.JspServlet.serviceJspFile(JspServlet.java:313) org.apache.jasper.servlet.JspServlet.service(JspServlet.java:260) javax.servlet.http.HttpServlet.service(HttpServlet.java:717)
为了解决这个问题，没少废了周折。在网上看到一些解决办法，但是在我这都不起作用。在Mysql的安装装目录的my.ini文件的【mysqld】节点下添加max_allowed_packet=100M，重启mysql服务后（可用net stop/start mysql），在mysql客户端查看时show variables llike “%packet%”，显示max_allowed_packet 的大小依然是1M。用mysqld --max_allowed_packet=100M结果依然如此。经过不断尝试发现了一个问题mysqld启动后会成为一个后台运行的进程，当已经有一个mysqld进程在运行时，再次调用mysqld将会被忽略。所以正确的做法是，首先关闭mysql服务，然后查看windows的任务管理器，关闭正在运行的mysqld进程（如果存在），然后再用mysqld --max_allowed_packet=100M来启动就没有问题了。然而这个办法在机器重启之后就没有效果了，开机启动所使用的max_allowed_packet如何改没有找到解决办法。
解决了上个问题，在上传MP3文件时又遇到了一个异常，同样让人头痛，异常信息如下
com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near '焲拲è¬�?鞱覑?Y:r8閧釥\"R㈧?^薇覆皟箧统廜矻å‰æ„¦;äº é‚ªè¶‘t>' at line 1 sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:39) sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:27) java.lang.reflect.Constructor.newInstance(Constructor.java:513) com.mysql.jdbc.Util.handleNewInstance(Util.java:411) com.mysql.jdbc.Util.getInstance(Util.java:386) com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1052) com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3597) com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3529) com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:1990) com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2151) com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2625) com.mysql.jdbc.PreparedStatement.executeInternal(PreparedStatement.java:2119) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2415) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2333) com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2318) org.apache.tomcat.dbcp.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) org.apache.tomcat.dbcp.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) org.apache.jsp.saveFile2Mysql_jsp._jspService(saveFile2Mysql_jsp.java:111) org.apache.jasper.runtime.HttpJspBase.service(HttpJspBase.java:70) javax.servlet.http.HttpServlet.service(HttpServlet.java:717) org.apache.jasper.servlet.JspServletWrapper.service(JspServletWrapper.java:388) org.apache.jasper.servlet.JspServlet.serviceJspFile(JspServlet.java:313) org.apache.jasper.servlet.JspServlet.service(JspServlet.java:260) javax.servlet.http.HttpServlet.service(HttpServlet.java:717)
查资料发现问题的根源在连接数据库时使用的字符编码，将url由 jdbc:mysql://localhost:3306/test?characterEncoding=gbk改成url为jdbc:mysql://localhost:3306/test?characterEncoding=utf8问题就解决了。
相关推荐
基于存储过程的MySQL数据库BLOB字段访问.pdf
jsp操作mysql数据库的blob字段，实现： 1、将磁盘文件存入mysql数据库； 2、将mysql数据库中存入的文件，读出来，输出给浏览器。
Delphi 如何将二维数组数据 以Blob 存入数据库中 并读取 。先将二维数组转换维流文件，以内存流 Blob 形式存入到数据库中。 读取时以流获取 然后读出到数组中
首先，在数据库中创建一个表，用于存放图片：复制代码 代码如下:CREATE TABLE Images(Id INT PRIMARY KEY AUTO_INCREMENT, Data MEDIUMBLOB);然后运行如下PYTHON代码进行： 复制代码 代码如下:# -*- coding: UTF-8 -...
实际上，写完多文件上传和下载文章的...1. 如何上传图片，并把图片存入数据库（Mysql）中； 2. 从数据库中读取图片并显示在页面中 注：本文使用的是单纯的Struts2 + Spring + Hibernate，图片操作并没有使用Servlet。
首先是数据库建立要准备的： 我们要把放置二进制字段设置为Blob类型，根据文件的大小选择合适的Blob类型，一下是各个Blob类型所能容纳二进制文件的大小 MySQL的四种BLOB类型 类型 大小(单位：字节) TinyBlob 最大 ...
MYBLOB_DEMO - 演示 MYBLOB 工具包的使用MYBLOB_OPEN - 打开与 MySQL 数据库的连接MYBLOB_COMMAND - 将 SQL 语句发送到 MySQL 数据库MYBLOB_FROM_DB - 从 MySQL 数据库中检索 blob（二进制大对象） MYBLOB_TO_DB - ...
图片BASE64加密保存到数据库Blob类型中（放入数据库，并取出生成图片），完整的demo例子，可运行。
首先，介绍下关于MySQL InnoDB引擎存储格式的几个要点： 1、InnoDB可以选择使用共享表空间或者是独立表空间方式，建议使用独立表空间，便于管理、维护。启用 innodb_file_per_table 选项，5.5以后可以在线动态修改...
php把图片存入mysql教程数据库教程中并在网页上显示，一般情况下并不需要将突破保存到数据库中，不论是异地备份还是什么的，都很麻烦，特殊需要的除外。
20.4 示例：把图像文件存入和读出一个BLOB数据列 第五部分 参考资料 第21章 SQL语法指南 21.1 语法 21.2 操作符 21.3 变量和常数 21.4 MySQL数据类型 21.5 SQL命令汇总表（按功能分类） ...
在使用mysql的过程中，有个问题就是mysql的优化，mysql中longblob字段在5.5版本中默认的为1M。 想改变这个问题，需要注意几点： com.mysql.jdbc.PacketTooBigException: Packet for query is too large (2054817 > ...
20.4 示例：把图像文件存入和读出一个BLOB数据列 第五部分 参考资料 第21章 SQL语法指南 21.1 语法 21.2 操作符 21.3 变量和常数 21.4 MySQL数据类型 21.5 SQL命令汇总表（按功能分类） 21.6 SQL...
一开发此工具的缘由由于本人在游戏公司做java游戏服务端protosbuf ，使用的是MySQL数据库，采用protosbuf序列化之后存入数据库，玩家上线的时候读取数据然后反序列化。因此造成了一个问题，因为数据都是二进制的，...
网上现有例子大都是上传本地文件到数据库，该例子可以jsp上传文件并保存到数据库，读取显示；但是最后需要用户自己删除服务器端文件。
一般网站在处理用户上传图片时通常采用两种策略：一是直接把图片存入数据库中的Blob字段；二是数据库中只存储图片的在服务器上的路径信息 ，图片存放在分门别类的文件中，使用的时候从数据库读取路径信息到页面img...
数据分布特点，决定了空间压缩的效率，如果存入的数据的重复率较高，其压缩率就会较高；通常情况下字符类型数据(CHAR, VARCHAR, TEXT or BLOB )具有较高的压缩率，而一些二进制数据或者一些已经压缩过的数据的压缩率...