怎样把大量的数据通过txt文件直接导入到数据库中

Question

求解

Answer 1

你可以用import工具导入大量数据。

Answer 2

plsql developer工具中有专门的 数据导入工具，好用的很。

Answer 3

Sqlldr工具很方便，寫一個控制文件比較煩，不過可以從文本文件格式決定如何導入數據庫。

Answer 4

#!/bin/sh
################################################################################
# 模块: load_data.sh
#
# 修改记录
# 日期        修改人      修改描述
# 20120703    ken    新建脚本
#################################################################################set -xif [ $# -ne 6 ];then
      echo "Usage: `basename $0` <userid><tablename><filename><character:0 default;1 UTF-8><space><errors>"
      exit -1
fi#数据库连接字符串
userid=$1#目标表名
table_name=`echo ${2}|tr [a-z] [A_Z]`
#文件名
load_data=$3
#文件字符集
charset=`echo ${4}|sed 's/0//g'|sed 's/1/CHARACTERSET '\'UTF8\''/g'`
#文件分隔符
space=$5
#允许出错行数
errors=$6logdate=`date +'%Y%m%d'`
if [ ! -d $BIPROG_ROOT/log/load/$logdate ]
then
    mkdir -p $BIPROG_ROOT/log/load/$logdate
fi#日志路径
logfile=/home/etl/log/load/${logdate}/${table_name}".log"
collect_dt=$load_data$logdate"000000"
file_time=`echo $collect_dt|awk '{print substr($0,index($0,20),14)}'|sed 's/[^0-9]//g'`#获取采集日期
collect_dt=`echo $file_time|awk '{print substr($0,1,8)}'`
file_time=`echo $file_time|awk '{print substr($0,1,4)"-"substr($0,5,2)"-"substr($0,7,2)" "substr($0,9,2)":"substr($0,11,2)":"substr($0,13,2)}'`echo "sqlplus $userid <<EOF">$logfile
echo "spool $table_name".sql"
      desc $table_name
      " >>$logfile
echo "EOF" >>$logfile
. $logfiletmpctl=$table_name".ctl"
tmpctl2=$table_name"tmp2.ctl"
tmpctl3=$table_name"tmp3.ctl"echo "Load data $charset infile '"$load_data"' Append into table $table_name fields terminated by '"$space"' OPTIONALLY ENCLOSED BY '\'' TRAILING NULLCOLS (">$tmpctl#cat $table_name".sql"|sed '1,3d'|sed '/^$/d'|grep -v "SQL\>"|sed 's/NOT NULL//g'|sed 's/NUMBER([0-9]*)//g'|sed 's/NUMBER//g'|sed 's/VARCHAR2(2[0-5][0-5])//g'|sed 's/VARCHAR2(1[0-9][0-9])//g'|sed 's/VARCHAR2([0-9])//g'|sed 's/VARCHAR2([0-9][0-9])//g'|sed 's/VARCHAR2/CHAR/g'|awk '{print $1"\t"$2","}'>$tmpctl2
cat $table_name".sql"|sed '1,3d'|sed '/^$/d'|grep -v "SQL\>"|sed 's/NOT NULL//g'|awk '{print $1"\t"$2","}'>$tmpctl2loops=1
while [ $loops -le `cat ${tmpctl2}|wc -l` ]
do
if [ `cat ${tmpctl2}|sed -n $loops'p'|awk '{print substr($2,1,3)}'` = 'VAR' ]
then
len=`cat ${tmpctl2}|sed -n $loops'p'|awk '{print $2}'|sed 's/VARCHAR2(//g'|sed 's/)//g'|sed 's/,//g'`
if [ $len -gt 255 ]
then
cat ${tmpctl2}|sed -n $loops'p'|sed 's/VARCHAR2/CHAR/g'>>$tmpctl3
else
cat ${tmpctl2}|sed -n $loops'p'|awk '{print $1","}'>>$tmpctl3
fi
else
cat ${tmpctl2}|sed -n $loops'p'|awk '{print $1","}'>>$tmpctl3
fi
loops=`expr $loops + 1`
donecat $tmpctl3|sed '$d'>>$tmpctlcat $tmpctl3|sed -n '$p'|sed 's/,/)/g'>>$tmpctlsqlldr userid=$userid control=$table_name".ctl" log=$logfile errors=$errorsrm $tmpctl
rm $tmpctl2
rm $tmpctl3
rm $table_name".sql"
--自己改改吧 自动生成控制文件入库的

Answer 5

文件名：jphk.ctl
文件內容：
LOAD DATA
infile 'C:\Users\xyz\Documents\jphk.txt'
badfile 'C:\Users\xyz\Documents\jphk.bad'
discardfile 'C:\Users\xyz\Documents\jphk.dis'
append into table user_name.JPHK
fields terminated by ' '
(no,hunic,hsu,kunic,ksu,gbks char(2000))導入命令: sqlldr user_name/password@orcl control=jphk.ctl log=jphk.log

Answer 6

除sqlldr外，也可以借助第三方工具，比如toad，plsqldev等，都可以