百万数据如何高效率导入数据库 公司有这么个需求,有一些TXT文本文件,每个文件里至少有100万行以上的数据(50M以上)。要求用JAVA写一个程序把TXT里的数据读取出来插入到数据库中的表中去。设计成B/S结构。要求性能足够的高。请大家给个建议。 解决方案 » 免费领取超大流量手机卡,每月29元包185G流量+100分钟通话, 中国电信官方发货 此回复为自动发出,仅用于显示而已,并无任何其他特殊作用楼主【dlq_skj】截止到2008-07-09 19:11:34的历史汇总数据(不包括此帖):发帖的总数量:0 发帖的总分数:0 每贴平均分数:0 回帖的总数量:0 得分贴总数量:0 回帖的得分率:0% 结贴的总数量:0 结贴的总分数:0 无满意结贴数:0 无满意结贴分:0 未结的帖子数:0 未结的总分数:0 结贴的百分比:---------------------结分的百分比:---------------------无满意结贴率:---------------------无满意结分率:---------------------如何结贴请参考这里:http://topic.csdn.net/u/20080501/09/ef7ba1b3-6466-49f6-9d92-36fe6d471dd1.html 1 多线程操作,使用生产者消费者模式2 使用batchUpdate操作,批量提交,大约2k-10k提交一次就行。3 启用事务 不能了,在写就成我替你写一个了!1 你会启动线程吗?2 你会逐行读取文件吗?让他做生产者。不说了,给你几个代码看看吧!http://www.java2000.net/viewthread.jsp?tid=370 Struts2问题,急需各位纠正错误 帮看下这段代码,怎实现不了,没有任何输出 连接数据库的问题 tomact +hibernate +struts jdbc error jsp页面调用问题 解决就给分 字符串比较==和equals有什么区别? 关于textfile 的问题!急。。。。。。 关于java.util.Properties的问题? 问个很菜的问题!这个BEAN对吗? 请问谁有关于解析HTML元素的网站的资料??? 搜索的时候, 复选框那的hql语句怎么写 JSTL很简单的用题刚在学习呵呵
楼主【dlq_skj】截止到2008-07-09 19:11:34的历史汇总数据(不包括此帖):
发帖的总数量:0 发帖的总分数:0 每贴平均分数:0
回帖的总数量:0 得分贴总数量:0 回帖的得分率:0%
结贴的总数量:0 结贴的总分数:0
无满意结贴数:0 无满意结贴分:0
未结的帖子数:0 未结的总分数:0
结贴的百分比:---------------------结分的百分比:---------------------
无满意结贴率:---------------------无满意结分率:---------------------
如何结贴请参考这里:http://topic.csdn.net/u/20080501/09/ef7ba1b3-6466-49f6-9d92-36fe6d471dd1.html
2 使用batchUpdate操作,批量提交,大约2k-10k提交一次就行。
3 启用事务
1 你会启动线程吗?
2 你会逐行读取文件吗?让他做生产者
。不说了,给你几个代码看看吧!
http://www.java2000.net/viewthread.jsp?tid=370