Oracle中利用BLOB字段存储4GB以下视频数据

很长时间没亲自写写东西了，只是收集转载了一些好资料，其实，真正静下心总结一下，可以写的知识点很多。与困难做斗争，挑战技术难关，总会有些感受心得的。

今天想和网友分享一下“Oracle中BLOB大字段如何读写视频数据”，这个话题起因是我在使用ORACLE备份数据时，误删了数据库实例的控制文件，导致项目数据需要重新入库。也就是我在弥补这个错误时，发现之前的数据入库功能，都没有把200M以上的视频数据导入ORACLE的BLOB字段里，也就是之前的写入BLOB字段数据的方法失效了。这是个惊人的发现，我发现因为这个程序BUG我遗漏掉近300G的视频数据，某些单个视频文件数据量达到3.6G。

我研究基于ORACLE Text的全文检索功能，开始接触ORACLE的BLOB字段，3年多了，自认为已经熟知BLOB字段的操作。但这次的难题迫使我更深入的认识ORACLE的BLOB字段。

BLOB字段能以二进制形式存放4G数据，200M的视频数据当然应该没问题，可以出错了？！原来的方法会报“Out of memory”错误，PLSQL Developer工具导入大视频数据，同样会报“Out of memory”错误。3.6G的视频数据又该如何导入？原来写入大字段的方法,导入一般的图片和文档一点问题没有。

 
 
 
    
  
  
  
  1. ///   
    2. 
  
  
  
  2. /// 写大字段内容  
    3. 
  
  
  
  3. /// （新方法，2010.2.4）  
    4. 
  
  
  
  4. ///   
    5. 
  
  
  
  5. ///   
    6. 
  
  
  
  6. ///   
    7. 
  
  
  
  7. ///   
    8. 
  
  
  
  8. ///   
    9. 
  
  
  
  9. ///   
    10. 
  
  
  
  10. ///   
    11. 
  
  
  
  11. public bool WriteBlobField(System.Data.OleDb.OleDbConnection pDbConn,  
    12. 
  
  
  
  12.     string strTable,  
    13. 
  
  
  
  13.     string strBlobField,  
    14. 
  
  
  
  14.     string strFile,  
    15. 
  
  
  
  15.     string strWhereClause)  
    16. 
  
  
  
  16. {  
    17. 
  
  
  
  17.     if (strWhereClause == "")  
    18. 
  
  
  
  18.     {  
    19. 
  
  
  
  19.         return false;  
    20. 
  
  
  
  20.     }  
    21. 
  
  
  
  21.     try 
    22. 
  
  
  
  22.     {  
    23. 
  
  
  
  23.         string strSQL = "UPDATE " + strTable + " SET " + strBlobField + " =:blob WHERE " + strWhereClause;  
    24. 
  
  
  
  24.  
    25. 
  
  
  
  25.         OleDbCommand cmd = new OleDbCommand(strSQL, pDbConn);  
    26. 
  
  
  
  26.         //无需说明类型  
    27. 
  
  
  
  27.         //cmd.Parameters.Add(new OleDbParameter("blob", SqlDbType.VarBinary));  
    28. 
  
  
  
  28.         // cmd.Parameters.AddWithValue("blob", SqlDbType.Binary);  
    29. 
  
  
  
  29.         FileInfo fileInfo = new FileInfo(strFile);  
    30. 
  
  
  
  30.  
    31. 
  
  
  
  31.         FileStream fsBlob = fileInfo.OpenRead();// new FileStream(strFile, FileMode.Open,FileAccess.Read);  
    32. 
  
  
  
  32.         byte[] dataBlob = new byte[fsBlob.Length];//问题1所在  
    33. 
  
  
  
  33.         fsBlob.Read(dataBlob, 0, System.Convert.ToInt32(fsBlob.Length));//问题2所在  
    34. 
  
  
  
  34.         fsBlob.Close();  
    35. 
  
  
  
  35.         //采用新的方法，AddWithValue();  
    36. 
  
  
  
  36.         cmd.Parameters.AddWithValue("blob", dataBlob);  
    37. 
  
  
  
  37.         //cmd.Parameters["blob"].Value = dataBlob;  
    38. 
  
  
  
  38.         int result = cmd.ExecuteNonQuery();  
    39. 
  
  
  
  39.         if (result < 1)  
    40. 
  
  
  
  40.         {  
    41. 
  
  
  
  41.             return false;  
    42. 
  
  
  
  42.         }  
    43. 
  
  
  
  43.     }  
    44. 
  
  
  
  44.     catch (Exception ex)  
    45. 
  
  
  
  45.     {  
    46. 
  
  
  
  46.         //   MessageBox.Show(ex.Message, "写数据", MessageBoxButtons.OK);  
    47. 
  
  
  
  47.         return false;  
    48. 
  
  
  
  48.     }  
    49. 
  
  
  
  49.  
    50. 
  
  
  
  50.     return true;  
    51. 
  
  
  
  51. }  
    52. 
  
  
  
  52.  
    53. 
  
  
  
  53.     ///   
    54. 
  
  
  
  54.     /// 将字符串写成大字段内容  
    55. 
  
  
  
  55.        /// (2010.2.4 修改)  
    56. 
  
  
  
  56.     ///   
    57. 
  
  
  
  57.     ///   
    58. 
  
  
  
  58.     ///   
    59. 
  
  
  
  59.     ///   
    60. 
  
  
  
  60.     ///   
    61. 
  
  
  
  61.     ///   
    62. 
  
  
  
  62.     ///   
    63. 
  
  
  
  63.     public bool WriteBlobField2(System.Data.OleDb.OleDbConnection pDbConn,  
    64. 
  
  
  
  64.                   string strTable,  
    65. 
  
  
  
  65.                  string strBlobField,  
    66. 
  
  
  
  66.                  string strBlobContent,  
    67. 
  
  
  
  67.                  string strWhereClause)  
    68. 
  
  
  
  68.     {  
    69. 
  
  
  
  69.         if (strWhereClause == "")  
    70. 
  
  
  
  70.         {  
    71. 
  
  
  
  71.             return false;  
    72. 
  
  
  
  72.         }  
    73. 
  
  
  
  73.  
    74. 
  
  
  
  74.         try 
    75. 
  
  
  
  75.         {  
    76. 
  
  
  
  76.             string strSQL = "UPDATE " + strTable + " SET " + strBlobField + " =:blob " +  
    77. 
  
  
  
  77.                 "WHERE " + strWhereClause;  
    78. 
  
  
  
  78.  
    79. 
  
  
  
  79.             OleDbCommand cmd = new OleDbCommand(strSQL, pDbConn);  
    80. 
  
  
  
  80.             cmd.Parameters.Add(strBlobField, SqlDbType.Binary);  
    81. 
  
  
  
  81.             //    byte[] dataBlob = new byte[strBlobContent.Length];  
    82. 
  
  
  
  82.             byte[] dataBlob = System.Text.Encoding.Default.GetBytes(strBlobContent);  
    83. 
  
  
  
  83.             cmd.Parameters["blob"].Value = dataBlob;  
    84. 
  
  
  
  84.             int result = cmd.ExecuteNonQuery();  
    85. 
  
  
  
  85.             if (result < 1)  
    86. 
  
  
  
  86.             {  
    87. 
  
  
  
  87.                 return false;  
    88. 
  
  
  
  88.             }  
    89. 
  
  
  
  89.         }  
    90. 
  
  
  
  90.         catch (Exception ex)  
    91. 
  
  
  
  91.         {  
    92. 
  
  
  
  92.             MessageBox.Show(ex.Message, "写数据", MessageBoxButtons.OK);  
    93. 
  
  
  
  93.             return false;  
    94. 
  
  
  
  94.         }  
    95. 
  
  
  
  95.  
    96. 
  
  
  
  96.         return true;  
    97. 
  
  
  
  97.     } 
    98.

问题1:无法一次性开辟足够大空间（如1G），写入大视频时，会导致报内存不足。

问题2:System.Convert.ToInt32()会使3G的视频时，会报类型转换失败，数值值过大。

上面两个问题在网络中所有的方法中都普遍存在的，都会导致无法导入700M以上的视频数据。

OLEDB方法对ORCLE 8以后的大字段操作不在支持，我在解决问题的过程中转向了OracleClient命名空间下的方法来操作BLOB大字段，主要参考微软官方http://msdn.microsoft.com/zh-cn/library/cydxhzhz(v=VS.90).aspx和博客园中的http://www.cnblogs.com/zhengmaoch/archive/2005/08/10/212014.html。这两份资料对我解决500M以下数据量的视频很有帮助，但是1G甚至是3G以上视频数据是无法解决的。上面两处使用了事务处理在导500M以上数据时，会报“ORA-22297: warning: Open LOBs exist at transaction commit time ”错误，主要因为提交事务时数据文件没有读完。

经过试验和参考http://msdn.microsoft.com/en-us/library/system.io.filestream.read.aspx方法，终于完全解决上面两个问题，实现大视频量数据导入BLOB字段。

 
 
 
    
  
  
  
  1. ///   
    2. 
  
  
  
  2. /// 2010.10.22  
    3. 
  
  
  
  3. /// 读取视频数据进入ORACLE大字段中  
    4. 
  
  
  
  4. ///   
    5. 
  
  
  
  5. ///   
    6. 
  
  
  
  6. ///   
    7. 
  
  
  
  7. ///   
    8. 
  
  
  
  8. public bool OracleUpload(string fileToUpload, string uploadSQL)  
    9. 
  
  
  
  9. {  
    10. 
  
  
  
  10.     /*  
    11. 
  
  
  
  11.      * Get Connected  
    12. 
  
  
  
  12.      */ 
    13. 
  
  
  
  13.     string connection = strConn;  
    14. 
  
  
  
  14.     OracleConnection conn;  
    15. 
  
  
  
  15.     conn = new OracleConnection(connection);  
    16. 
  
  
  
  16.     conn.Open();  
    17. 
  
  
  
  17.     OracleCommand cmd = new OracleCommand(uploadSQL, conn);  
    18. 
  
  
  
  18.     OracleTransaction transaction = conn.BeginTransaction();  
    19. 
  
  
  
  19.     cmd.Transaction = transaction;  
    20. 
  
  
  
  20.     OracleDataReader reader = cmd.ExecuteReader();  
    21. 
  
  
  
  21.     using (reader)  
    22. 
  
  
  
  22.     {  
    23. 
  
  
  
  23.         try 
    24. 
  
  
  
  24.         {  
    25. 
  
  
  
  25.             reader.Read();  
    26. 
  
  
  
  26.             OracleLob tmpBlob = reader.GetOracleLob(4);  
    27. 
  
  
  
  27.             reader.Close();  
    28. 
  
  
  
  28.             FileStream fsBlob = new FileStream(fileToUpload, FileMode.OpenOrCreate, FileAccess.Read);  
    29. 
  
  
  
  29.             //BinaryReader br = new BinaryReader(fs);  
    30. 
  
  
  
  30.             tmpBlob.BeginBatch(OracleLobOpenMode.ReadWrite);  
    31. 
  
  
  
  31.             long length = fsBlob.Length;  
    32. 
  
  
  
  32.  
    33. 
  
  
  
  33.             int numBytesToRead = System.Convert.ToInt32(length / 10);//解决问题2  
    34. 
  
  
  
  34.             int numBytesRead = 0;  
    35. 
  
  
  
  35.             int n;  
    36. 
  
  
  
  36.             byte[] Buffer = new byte[numBytesToRead];  
    37. 
  
  
  
  37.             //2010.10.25  修改加 将文件分为10块 防止文件为3.3G以上  
    38. 
  
  
  
  38.              //解决问题1  
    39. 
  
  
  
  39.             for (int i = 0; i < 9; i++)   
    40. 
  
  
  
  40.             {  
    41. 
  
  
  
  41.                   
    42. 
  
  
  
  42.                 n = 0;  
    43. 
  
  
  
  43.                // numBytesToRead = length / 5;  
    44. 
  
  
  
  44.                 Buffer = new byte[numBytesToRead];   
    45. 
  
  
  
  45.                 numBytesRead = 0;  
    46. 
  
  
  
  46.                 while ((n = fsBlob.Read(Buffer, numBytesRead, numBytesToRead)) > 0)  
    47. 
  
  
  
  47.                 {  
    48. 
  
  
  
  48.                     numBytesRead += n;  
    49. 
  
  
  
  49.                     numBytesToRead -= n;  
    50. 
  
  
  
  50.                 }  
    51. 
  
  
  
  51.                 numBytesToRead = System.Convert.ToInt32(length / 10);  
    52. 
  
  
  
  52.                 tmpBlob.Write(Buffer, 0, numBytesToRead);  
    53. 
  
  
  
  53.             }  
    54. 
  
  
  
  54.  
    55. 
  
  
  
  55.  
    56. 
  
  
  
  56.             numBytesToRead = System.Convert.ToInt32(length / 10+ length % 10);  
    57. 
  
  
  
  57.             numBytesRead = 0;  
    58. 
  
  
  
  58.             n = 0;  
    59. 
  
  
  
  59.             int tmpLength = numBytesToRead;  
    60. 
  
  
  
  60.             byte[] Buffer2 = new byte[tmpLength];  
    61. 
  
  
  
  61.             while ((n = fsBlob.Read(Buffer2, numBytesRead, numBytesToRead)) > 0)  
    62. 
  
  
  
  62.             {  
    63. 
  
  
  
  63.                 numBytesRead += n;  
    64. 
  
  
  
  64.                 numBytesToRead -= n;  
    65. 
  
  
  
  65.             }  
    66. 
  
  
  
  66.             //numBytesToRead = tmpLength;  
    67. 
  
  
  
  67.             tmpBlob.Write(Buffer2, 0, tmpLength);  
    68. 
  
  
  
  68.  
    69. 
  
  
  
  69.             fsBlob.Close();  
    70. 
  
  
  
  70.             tmpBlob.EndBatch();  
    71. 
  
  
  
  71.             cmd.Parameters.Clear();  
    72. 
  
  
  
  72.             Buffer = null;      
    73. 
  
  
  
  73.         }  
    74. 
  
  
  
  74.         catch(Exception ex)  
    75. 
  
  
  
  75.         {  
    76. 
  
  
  
  76.             MessageBox.Show("出错："+ex.Message);  
    77. 
  
  
  
  77.             //关闭  
    78. 
  
  
  
  78.             reader.Close();  
    79. 
  
  
  
  79.             transaction.Commit();  
    80. 
  
  
  
  80.             conn.Close();  
    81. 
  
  
  
  81.             return false;  
    82. 
  
  
  
  82.         }  
    83. 
  
  
  
  83.     }  
    84. 
  
  
  
  84.  
    85. 
  
  
  
  85.     reader.Close();  
    86. 
  
  
  
  86.     transaction.Commit();  
    87. 
  
  
  
  87.     conn.Close();  
    88. 
  
  
  
  88.     return true;  
    89. 
  
  
  
  89. } 
    90.

上面的方法完全能处理4G以下的视频数据的导入问题，已经经过验证的。PLSQL Developer工具同样无法读取BLOB字段中的大数据量的视频，如需读取请详细参照http://www.cnblogs.com/wuhenke/archive/2010/10/25/1860752.html

 
 
 
    
  
  
  
  1. ///   
    2. 
  
  
  
  2. /// 从数据库中读出大字段到文件中  
    3. 
  
  
  
  3. ///   
    4. 
  
  
  
  4. ///   
    5. 
  
  
  
  5. ///   
    6. 
  
  
  
  6. public bool OracleRead(string uploadSQL)  
    7. 
  
  
  
  7. {  
    8. 
  
  
  
  8.     string connection = strConn;  
    9. 
  
  
  
  9.     OracleConnection conn;  
    10. 
  
  
  
  10.     conn = new OracleConnection(connection);  
    11. 
  
  
  
  11.     conn.Open();  
    12. 
  
  
  
  12.  
    13. 
  
  
  
  13.  
    14. 
  
  
  
  14.     OracleCommand cmd = new OracleCommand(uploadSQL, conn);  
    15. 
  
  
  
  15.     long readStartByte = 0;//从BLOB数据体的何处开始读取数据  
    16. 
  
  
  
  16.     int hopeReadSize = 1024; //希望每次从BLOB数据体中读取数据的大小  
    17. 
  
  
  
  17.     long realReadSize = 0;//每次实际从BLOB数据体中读取数据的大小  
    18. 
  
  
  
  18.     //CommandBehavior.SequentialAccess将使OracleDataReader以流的方式加载BLOB数据  
    19. 
  
  
  
  19.     string filename = "F:\\Test"+DateTime.Now.Day+DateTime.Now.Minute+DateTime.Now.Second+".avi";  
    20. 
  
  
  
  20.     OracleDataReader dr = cmd.ExecuteReader(CommandBehavior.SequentialAccess);  
    21. 
  
  
  
  21.     while (dr.Read())  
    22. 
  
  
  
  22.     {  
    23. 
  
  
  
  23.         FileStream fs = new FileStream(filename, FileMode.Create);  
    24. 
  
  
  
  24.         byte[] buffer = new byte[hopeReadSize];  
    25. 
  
  
  
  25.         realReadSize = dr.GetBytes(0, readStartByte, buffer, 0, hopeReadSize);  
    26. 
  
  
  
  26.         //循环，每次读取1024byte大小，并将这些字节写入流中  
    27. 
  
  
  
  27.         while ((int)realReadSize == hopeReadSize)  
    28. 
  
  
  
  28.         {  
    29. 
  
  
  
  29.             fs.Write(buffer, 0, hopeReadSize);  
    30. 
  
  
  
  30.             readStartByte += realReadSize;  
    31. 
  
  
  
  31.             realReadSize = dr.GetBytes(0, readStartByte, buffer, 0, hopeReadSize);  
    32. 
  
  
  
  32.         }  
    33. 
  
  
  
  33.         //读取BLOB数据体最后剩余的小于1024byte大小的数据，并将这些字节写入流中  
    34. 
  
  
  
  34.         realReadSize = dr.GetBytes(0, readStartByte, buffer, 0, hopeReadSize);  
    35. 
  
  
  
  35.         fs.Write(buffer, 0, (int)realReadSize);  
    36. 
  
  
  
  36.     }             
    37. 
  
  
  
  37.     //transaction.Commit();  
    38. 
  
  
  
  38.     conn.Close();  
    39. 
  
  
  
  39.         return true;  
    40. 
  
  
  
  40. } 
    41.

名称栏目：Oracle中利用BLOB字段存储4GB以下视频数据
路径分享：http://www.shufengxianlan.com/qtweb/news22/425372.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联

猜你还喜欢下面的内容

网站设计知识

行业网站建设

成都高电机柜租用　　 　成都网站建设　　 　全网营销　　 　成都网站设计　　 　SSL认证　　 　成都联通服务器托管　　 　青羊总部基地　　 　LOGO设计　　 　高端网站设计　　 　app网站建设　　 　成都网站维护　　 　成都网站制作　　 　温江服务器租用　　 　营销型网站建设　　 　成都免费建站　　 　腾讯免备案空间　　 　app制作　　 　LED亮化工程　　 　达州博佩科技　　 　乐山主机托管