posts - 31,  comments - 31,  trackbacks - 0
                  到一個這東西都寫到3了,針對上回說到30000條數據的批量插入工作。30000條數據的批量插入在一個事務里處理固然是快,但是這只是測試環境,30000條數據在數據庫的緩存里必然對數數據庫的緩存和鎖數量都是一個大的挑戰,固在新的程序中我們使用了分批事務提交的方式,這樣為了保持數據的正確行就只能人為控制數據庫中已被插入的數據是否delete掉。另外,使用Batch塊提交會引發一個問題就是,如果batch塊中發生了異常,我們得不到異常數據的行號即任何信息,所以只能是魚和熊掌不可兼得(我已關注過insert方法中返回pk的方法了,但好像在batch中他反回不了出錯的行號,也許是我沒有找到方法,如有人有好方法請共享一下,在這里表示感謝),大家酌情考慮吧,只能到到自己需要的平衡點了。
                建議:如果對數據的準確性毋庸置疑的話就是用batch處理。如果不能確定準確性的話,如果對那條數據出錯無所謂的話就也可以用batch,但是非要返回出錯行號的話就不要用batch了,直接在外面套用一個事務,然后try catch一下,處理一下行號。
          posted on 2007-06-28 21:32 小平 閱讀(3291) 評論(4)  編輯  收藏


          FeedBack:
          # re: Spring+ibatis批量處理心得3[未登錄]
          2007-09-05 13:34 | Jeffrey
          hi,你好,我最近也在做數據抽取方面的項目,也是用Spring+iBatis,想和你共同學習探討一下心得體會,不知道你怎么聯系?我的mail是:lettoo@163.com  回復  更多評論
            
          # re: Spring+ibatis批量處理心得3
          2007-09-23 19:19 | 小平
          @Jeffrey
          不好意思最近工作比較忙
          一直沒有時間維護blog,沒有看到你的留言  回復  更多評論
            
          # re: Spring+ibatis批量處理心得3
          2009-12-17 21:54 | 團派家園
          spring和ibaits 3.0都出來了。  回復  更多評論
            
          # re: Spring+ibatis批量處理心得3
          2011-12-20 17:02 | 孫繼超
          @小平
          你好我的郵箱是 sunjichao@jiuqi.com.cn,對于這個我遇到一個問題 報錯信息為: SQLCODE=-1476, SQLSTATE=40506, SQLERRMC=-911,但是具體是什么情況沒法定位,請問你是否遇到過,如果方便直接回復我郵箱吧,萬分感謝  回復  更多評論
            

          只有注冊用戶登錄后才能發表評論。


          網站導航:
           
          <2007年6月>
          272829303112
          3456789
          10111213141516
          17181920212223
          24252627282930
          1234567

          常用鏈接

          留言簿(2)

          隨筆分類

          隨筆檔案

          framework

          j2me

          java

          linux

          web

          其他

          友情鏈接

          素材

          最新評論

          閱讀排行榜

          評論排行榜

          主站蜘蛛池模板: 玉龙| 南阳市| 昌乐县| 威远县| 贵定县| 洮南市| 增城市| 泰安市| 鹿邑县| 贵德县| 个旧市| 饶平县| 安义县| 沛县| 专栏| 美姑县| 上蔡县| 巩留县| 米林县| 阜城县| 兴宁市| 平潭县| 双桥区| 宝应县| 洪江市| 深泽县| 佳木斯市| 监利县| 雅江县| 琼结县| 涞水县| 呼伦贝尔市| 高要市| 巴南区| 屏东市| 垣曲县| 正宁县| 罗定市| 敦化市| 裕民县| 威海市|