文档章节

oracle 数据批量导入工具

一贱书生
 一贱书生
发布于 2016/06/16 20:37
字数 1006
阅读 11
收藏 0

#!/bin/ksh---- 如果文件的第一个字符不是#说明使用的是Bsh,如果第一个字符是#则使用Csh,
如果第一个字符#后面跟!/bin/ksh,说明该脚本使用指定的shell 执行,即为/bin目录下的ksh解释执行. ‘#’是注释符,‘!’紧跟着‘#’一起表示在执行这个脚本时
使用其后的“/bin/ksh”解释器执行脚本文件中后面的内容。
同时“/bin/ksh”表示解释器所在的路径

basedir是一般工作目录。

homedir是登录后的目录(终端)。

 

 

 

/bin 二进制可执行命令

/dev 设备特殊文件
/etc 系统管理和配置文件
/etc/rc.d 启动的配置文件和脚本
/home 用户主目录的基点,比如用户user的主目录就是/home/user,可以用~user表示
/lib 标准程序设计库,又叫动态链接共享库,作用类似windows里的.dll文件
/sbin 超级管理命令,这里存放的是系统管理员使用的管理程序
/tmp 公共的临时文件存储点
/root 系统管理员的主目录
/mnt 系统提供这个目录是让用户临时挂载其他的文件系统
/lost+found这个目录平时是空的,系统非正常关机而留下“无家可归”的文件(windows下叫什么.chk)就在这里
/proc 虚拟的目录,是系统内存的映射。可直接访问这个目录来获取系统信息。
/var 某些大文件的溢出区,比方说各种服务的日志文件
/usr 最庞大的目录,要用到的应用程序和文件几乎都在这个目录,其中包含:

/usr/x11R6 存放x window的目录
/usr/bin 众多的应用程序
/usr/sbin 超级用户的一些管理程序
/usr/doc linux文档
/usr/include linux下开发和编译应用程序所需要的头文件
/usr/lib 常用的动态链接库和软件包的配置文件
/usr/man 帮助文档
/usr/src 源代码,linux内核的源代码就放在/usr/src/linux里
/usr/local/bin 本地增加的命令
/usr/local/lib 本地增加的库根文件系统

 

#表数据导入

HOMEDIR=$PWD--当前目录

THISNAME=`basename $0`

usage(){
        echo
        echo "Oracle库表数据导入"
        echo "========================="
        echo
        echo "Usage:"
        echo "  $THISNAME -Uuser -Ffilename -Ttblname "
        echo
        echo "Parameter:"
        echo "  -U  用户名/密码@服务名"
        echo "  -F  数据文件名"
        echo "  -T  表名"
        echo
        exit 1
}

# 参数分析
#echo "入参个数[$#]"
if [ $# -ne 3 -a $# -ne 6 ] ;then
    usage ;
fi

while getopts U:P:F:T: OPTION
do
        case $OPTION in
                U)      DBUSR=$OPTARG
                                #echo "用户名:[${DBUSR}]"
                        ;;
                F)      DATAFILE=$OPTARG
                                #echo "导入文件名:[${DATAFILE}]"
                        ;;
                T)      TBLNAME1=$OPTARG
                            TBLNAME=${TBLNAME1};
                                #echo "导入文件名:[${TBLNAME1}]"
                        ;;
                ?)      usage ;;
                *)      usage ;;
        esac
done

rm ${TBLNAME}.ctl
#下载表数据
#    if [ -z "$DBUSR" ] || [-z "$DATAFILE"] || [-z "$TBLNAME1"]; then
#        echo "Usage:load -U 用户名/密码@服务名 -F  数据文件名 -T  表名\n"
#        exit
#    fi
    
    
    
    echo "表[$TBLNAME]开始导入\n"
    SQLFILD="COLUMN_NAME ||decode(sign(DATA_LENGTH-255),1,concat(concat('   char(', DATA_LENGTH), ')')) "
    sqlwhere="table_name=upper('$TBLNAME')"
        
    SQLS="select ${SQLFILD}  from user_tab_columns where ${sqlwhere} order  by table_name,column_id;"
        
    #echo $SQLS
    
    sqlplus -S ${DBUSR} <<-!!! >/dev/null
        set colsep '|'
        set heading off
        set feedback off
        set pagesize 0
        set linesize 3000
        set echo off
        set termout off
        set verify off
        set numwidth 16
        set trimspool on
    
        spool ${TBLNAME}.a
    
        ${SQLS}
        spool off
    !!!
    HEAD="load data infile '${DATAFILE}' append into
 table ${TBLNAME} FIELDS TERMINATED BY \"|\" TRAILING NULLCOLS ("
        cat ${TBLNAME}.a | sed 's/$/,/g' | sed 's/ *//g'|sed -n '1,$p' > ${TBLNAME}.b
        cat ${TBLNAME}.b | sed '$s/,//'|sed -n '1,$p' > ${TBLNAME}.a
       
       #echo "控制文件头:[${HEAD}]"
        echo $HEAD>${TBLNAME}.txt
        echo ")">tail.txt
    cat ${TBLNAME}.txt ${TBLNAME}.a tail.txt>${TBLNAME}.c
cat ${TBLNAME}.c | sed 's/char(/  char(/g'|sed -n '1,$p'>${TBLNAME}.ctl
             
        rm ${TBLNAME}.txt
        rm tail.txt
        rm ${TBLNAME}.a
        rm ${TBLNAME}.b
        rm ${TBLNAME}.c
         
    if [ $? -ne 0 ]; then
        echo "生成表[$TBLNAME]控制文件失败\n"
    fi
    echo "生成表[$TBLNAME]控制文件完成,导入数据,请查看结果\n"

sqlldr ${DBUSR} control=${TBLNAME}.ctl log=${TBLNAME}.log bad=${TBLNAME}.bad  errors=10000
retcode=`echo $?`
case "$retcode" in
0) echo "\nSQL*Loader execution successful" ;;
1) echo "\nSQL*Loader execution exited with EX_FAIL, see logfile" ;;
2) echo "\nSQL*Loader execution exited with EX_WARN, see logfile" ;;
3) echo "\nSQL*Loader execution encountered a fatal error" ;;
*) echo "unknown return code";;
esac
echo "表[$TBLNAME]导入结束\n"

 

© 著作权归作者所有

共有 人打赏支持
一贱书生
粉丝 19
博文 724
码字总数 600123
作品 0
天下数据支招大批量数据导入数据库,dbf导入oracle,csv导入oracle

   Excel 07-2003一个工作表最多可有65536,行最多可有256列;Excel 2007及以后版本,一个工作表最多可有1048576行,16384列。   一、小批量数据处理:   方法一:用excel可以直接打开...

冬眠的包子
2016/03/23
34
0
Oracle数据转移Mysql中遇到的问题以及解决办法

前几天因工作需要我得将Oracle数据库中几十张表转移到Mysql中,由于之前没有相关经验,上网简单百度后选用Navcat Premium软件工作。 Navcat Premium进行数据转移有三种办法:1、复制表 2、导...

littleant2
2015/07/30
0
0
oracle 导入数据无法终止

oracle导入数据时,表和数据完全导入,导入命令不提示导入成功,在等待,这样我就无法进行批量导入,请问是什么原因导致的啊?

南北024
2011/08/24
758
4
CYQ.DBImport 数据库反向工程及批量导数据库工具 V1.0 发布

[Tip:2011-05-19 14:55左右修正个别Bug后重新上传了一下,之前下载的新重新下载。] 杂七几句: 自从购买VPS之后,打算将 秋色园QBlog 搬迁,也想把目前的Access数据库换成其它数据库。 由于...

晨曦之光
2012/03/09
0
0
在Go中如何批量提交数据?

在项目中,经常有批量提交数据,因为数据的产生比较快,每秒大概有2500条记录,外网数据库用了阿里云的DRDS(MySQL),内网数据库是Oracle 11g,后台开发用Go,因为业务模型的需要,需要把这...

洋和尚耶稣
2016/03/14
321
0

没有更多内容

加载失败,请刷新页面

加载更多

Shell编程(expect同步文件、指定host和同步文件、构建文件分发系统、批量执行命令)

expect脚本同步文件 需求:自动同步文件 实验准备: A机器:192.168.248.130 B机器:192.168.248.129 实现: 1.A机器编写4.expect脚本文件,内容如下所示: #!/usr/bin/expectset passwd "...

蛋黄_Yolks
23分钟前
2
0
ppwjs之bootstrap颜色:背景颜色

<!DOCTYPT html><html><head><meta http-equiv="content-type" content="text/html; charset=utf-8" /><title>ppwjs欢迎您</title><link rel="icon" href="/favicon.ico" ......

ppwjs
24分钟前
1
0
Ubuntu与 Fedora之对比

大家好。今天我将重点介绍两个流行的Linux发行版之间的一些特性和差异; Ubuntu 18.04和Fedora 28。它们都有自己的包管理; Ubuntu使用DEB,而Fedora使用RPM,但它们都具有相同的桌面环境(GNO...

linuxprobe16
27分钟前
2
0
线性代数入门

线性代数的概念对于理解机器学习背后的原理非常重要,尤其是在深度学习领域中。它可以帮助我们更好地理解算法内部到底是怎么运行的,借此,我们就能够更好的做出决策。所以,如果你真的希望了...

牛奋Debug
昨天
3
0
开发5分钟,调试2小时 - 该如何debug?

几年来我在答疑群、论坛、公众号、知乎回答的各种问题,没有一万也有八千。其中有三分之二以上都是在帮人看报错,帮人 debug(调试代码)。 可以说,会不会 debug,有没有 debug 的意识,懂不...

crossin
昨天
4
1

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部