当前位置:首页 > 开发 > 系统架构 > shell > 正文

用spool+unixshell生成文本文件的方法

发表于: 2012-07-13   作者:aijuans   来源:转载   浏览:
摘要: 例如我们把scott.dept表生成文本文件的语句写成dept.sql,内容如下:   set pages 50000;   set lines 200;   set trims on;   set heading off;   spool /oracle_backup/log/test/dept.lst;   select deptno||','||dname||','||loc

例如我们把scott.dept表生成文本文件的语句写成dept.sql,内容如下:

  set pages 50000;

  set lines 200;

  set trims on;

  set heading off;

  spool /oracle_backup/log/test/dept.lst;

  select deptno||','||dname||','||loc from scott.dept;

  spool off;

  但是生成的文本文件头和尾里含有不需要的空行和提示信息(虚线里面是生成文本文件的详细内容):

  10,ACCOUNTING,NEW YORK

  20,RESEARCH,DALLAS

  30,SALES,CHICAGO

  40,OPERATIONS,BOSTON

  50,MARKETING,FOTTH WORTH

  60,HEAD,Amercia

  6 rows selected.

  我请教了kane,他写出来的del_head_tail_line.sh可以把文件头尾的行去掉,并生成新文件:

  #!/bin/sh

  #第一个参数是要处理的文件名

  #第二个参数是文件头要去掉的行数

  #第三个参数是文件尾要去掉的行数

  #第四个参数是要输出的文件名

  #created by kane@geeyo.com

  lines=`wc -l $1 | awk '{print $1}'`

  taillines=`expr $lines - $2`

  tail -$taillines $1 > $1.tmp

  headlines=`expr $taillines - $3`

  head -$headlines $1.tmp > $4

  rm $1.tmp

  我们执行下面命令,就可以把不符合要求的行去掉,生成新文件1.txt

  $./del_head_tail_line.sh dept.lst 1 3 1.txt

  这样就解决了文本文件格式的问题.

  具体应用举例:

  因为工作需要,我经常要把一个小时或者一个星期变动过的数据生成文本文件上传到各个地区.

  借用上面的方法, 我只需要写几个sql语句+ unix shell程序,配合OS定时就可以自动来完成这些工作:

  第一步: 写好用来生成文本文件的SQL语句(假设是/oracle_backup/bin/test.sql)

  提示1: 如果有几个不同的查询条件,可以把两个查询结果用union all合并起来生成一个结果集

  提示2: Tab键的ascii码是char(9)

  第二步: 写好UNIX OS调用test.sql的脚本gen_test.sh

  su - oracle-c "sqlplus username/password"<

  @/oracle_backup/bin/test.sql;

  exit

  第三步: 删除文本文件头和尾的空行, 生成符合要求的文本文件gen_test_file.sh

  提示1: 我生成的结果文本文件的头和尾增加了有效记录的行数

  提示2: 生成的文本文件名含有年月日小时的信息

  cd /oracle_backup/log/test

  rm 1.txt 2.txt

  /oracle_backup/bin/del_head_tail_line.sh dept.lst 1 3 1.txt

  CDAY=`date +%Y%m%d%H`;export CDAY

  cat 1.txt|wc|awk '{print $1}'>2.txt

  cat 2.txt>english_companyname_$CDAY.txt

  cat 1.txt>>english_companyname_$CDAY.txt

  cat 2.txt>>english_companyname_$CDAY.txt

  第四步: 生成FTP传文件的脚本ftp_test.sh

  提示1: /oracle_backup/log/test/log/目录下记录了上传文件前后的时间差,是上传日志

  提示2: 下面例子里FTP服务器目的地址为默认的/目录,如果要传到子目录,可以在/后添加子目录名

  CDAY=`date +%Y%m%d%H`;export CDAY

  cd /oracle_backup/log/test/

  chmod 777 *.txt

  date>/oracle_backup/log/test/log/ftp_test_$CDAY.log

  ftp -i -n 192.168.0.253 <

  user username password

  bin

  put /oracle_backup/log/test/english_companyname_$CDAY.txt /english_companyname_$CDAY.txt

  quit

  FTPIT

  date>>/oracle_backup/log/test/log/ftp_test_$CDAY.log

  第五步: 设定unix root用户的定时操作

  Sun Solaris 文件 /var/spool/cron/crontabs/root

  Linux 文件 /var/spool/cron/root

  例如每小时执行一次:

  3 0-23 * * * /oracle_backup/bin/gen_test.sh

  5 0-23 * * * /oracle_backup/bin/gen_test_file.sh

  8 0-23 * * * /oracle_backup/bin/ftp_test.sh

  重新启动unix OS的定时服务,使新添加的任务生效 Sun Solaris

  #/etc/rc2.d/S75cron stop

  #/etc/rc2.d/S75cron start

  Linux

  #/etc/rc.d/init.d/crond restart

  注意事项:

  unix shell脚本都应该有755的可执行权限.

  超过50000行的文件,会在每50000行的分隔处多出一个空行;

  如果这样的格式不合要求,可以再写一个unix shell重写文件,遇到空行时去掉空行.

  结束语:

  这里看似简单的方法却能实现很多复杂的功能, 希望对大家有所启发.

 

更多详细信息请查看  java基础知识 http://www.itchm.com/cainiao/java_basic/

用spool+unixshell生成文本文件的方法

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
代码如下: import java.io.*; public class ReadTxt { public static void execute() throws IOExc
原创作品,出自 “深蓝的blog” 博客,深蓝的blog:http://blog.csdn.net/huangyanlong/article/det
第一步:先建一个数据库,然后点击myEclipse 的右边的>>如下的图案, 就可以将myEclipse转到
转载自“极客范”,不得不夸夸强大的Bash啊!!! ========================== 本文由 极客范 - 小
自从在一家创业小公司当了客户端主程以后,就忙的没有时间写博客了,整个公司没有一个人有完整的项
MySQL写入数据通常用insert语句,如 复制代码代码如下: insert into person values(张三,20),(李
KETTLE思路是,把一个有特定格式的的文本文件,写入ORACLE数据库表, 具体方法见如下操作: 首先来
KETTLE做调度的思路是,把一个有特定格式的的文本文件,写入ORACLE数据库表, 具体方法见如下操作:
直接用JAVA将结构化文本文件导入数据库时,需要手工拼凑SQL语句,还需要处理各种麻烦情况,比如:表
直接用JAVA将结构化文本文件导入数据库时,需要手工拼凑SQL语句,还需要处理各种麻烦情况,比如:表
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号