spool命令参数 Oraclespool用法小结
一、trimspool在oracle中是什么命令
SQL>set colsep'';//-域输出分隔符
SQL>set echo off;//显示start启动的脚本中的每个sql命令,缺省为on
SQL> set echo on//设置运行命令是是否显示语句
SQL> set feedback on;//设置显示“已选择XX行”
SQL>set feedback off;//回显本次sql命令处理的记录条数,缺省为on
SQL>set heading off;//输出域标题,缺省为on
SQL>set pagesize 0;//输出每页行数,缺省为24,为了避免分页,可设定为0。
SQL>set linesize 80;//输出一行字符个数,缺省为80
SQL>set numwidth 12;//输出number类型域长度,缺省为10
SQL>set termout off;//显示脚本中的命令的执行结果,缺省为on
二、linux lsof命令详解
lsof(list open files)是一个列出当前系统打开文件的工具。在linux环境下,任何事物都以文件的形式存在,通过文件不仅仅可以访问常规数据,还可以访问网络连接和硬件。所以如传输控制协议(TCP)和用户数据报协议(UDP)套接字等,系统在后台都为该应用程序分配了一个文件描述符,无论这个文件的本质如何,该文件描述符为应用程序与基础*作系统之间的交互提供了通用接口。因为应用程序打开文件的描述符列表提供了大量关于这个应用程序本身的信息,因此通过lsof工具能够查看这个列表对系统监测以及排错将是很有帮助的。
在终端下输入lsof即可显示系统打开的文件,因为 lsof需要访问核心内存和各种文件,所以必须以 root用户的身份运行它才能够充分地发挥其功能。
直接输入lsof部分输出为:
每行显示一个打开的文件,若不指定条件默认将显示所有进程打开的所有文件。
lsof输出各列信息的意义如下:
COMMAND:进程的名称 PID:进程标识符
USER:进程所有者
FD:文件描述符,应用程序通过文件描述符识别该文件。如cwd、txt等 TYPE:文件类型,如DIR、REG等
DEVICE:指定磁盘的名称
SIZE:文件的大小
NODE:索引节点(文件在磁盘上的标识)
NAME:打开文件的确切名称
FD列中的文件描述符cwd值表示应用程序的当前工作目录,这是该应用程序启动的目录,除非它本身对这个目录进行更改,txt类型的文件是程序代码,如应用程序二进制文件本身或共享库,如上列表中显示的/s**n/init程序。
其次数值表示应用程序的文件描述符,这是打开该文件时返回的一个整数。如上的后一行文件/dev/initctl,其文件描述符为 10。u表示该文件被打开并处于读取/写入模式,而不是只读或只写(w)模式。同时还有大写的W表示该应用程序具有对整个文件的写锁。该文件描述符用于确保每次只能打开一个应用程序实例。初始打开每个应用程序时,都具有三个文件描述符,从 0到 2,分别表示标准输入、输出和错误流。所以大多数应用程序所打开的文件的 FD都是从 3开始。
与 FD列相比,Type列则比较直观。文件和目录分别称为 REG和 DIR。而CHR和 BLK,分别表示字符和块设备;或者 UNIX、FIFO和 IPv4,分别表示 UNIX域套接字、先进先出(FIFO)队列和网际协议(IP)套接字。
lsof语法格式是: lsof[options] filename
查找谁在使用文件系统
在卸载文件系统时,如果该文件系统中有任何打开的文件,*作通常将会失败。那么通过lsof可以找出那些进程在使用当前要卸载的文件系统,如下:# lsof/GTES11/ COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME bash 4208 root cwd DIR 3,1 4096 2/GTES11/ vim 4230 root cwd DIR 3,1 4096 2/GTES11/在这个示例中,用户root正在其/GTES11目录中进行一些*作。一个 bash是实例正在运行,并且它当前的目录为/GTES11,另一个则显示的是vim正在编辑/GTES11下的文件。要成功地卸载/GTES11,应该在通知用户以确保情况正常之后,中止这些进程。这个示例说明了应用程序的当前工作目录非常重要,因为它仍保持着文件资源,并且可以防止文件系统被卸载。这就是为什么大部分守护进程(后台进程)将它们的目录更改为根目录、或服务特定的目录(如 sendmail示例中的/var/spool/mqueue)的原因,以避免该守护进程阻止卸载不相关的文件系统。
恢复删除的文件
当Linux计算机受到入侵时,常见的情况是日志文件被删除,以掩盖攻击者的踪迹。管理错误也可能导致意外删除重要的文件,比如在清理旧日志时,意外地删除了数据库的活动事务日志。有时可以通过lsof来恢复这些文件。当进程打开了某个文件时,只要该进程保持打开该文件,即使将其删除,它依然存在于磁盘中。这意味着,进程并不知道文件已经被删除,它仍然可以向打开该文件时提供给它的文件描述符进行读取和写入。除了该进程之外,这个文件是不可见的,因为已经删除了其相应的目录索引节点。在/proc目录下,其中包含了反映内核和进程树的各种文件。/proc目录挂载的是在内存中所映射的一块区域,所以这些文件和目录并不存在于磁盘中,因此当我们对这些文件进行读取和写入时,实际上是在从内存中获取相关信息。大多数与 lsof相关的信息都存储于以进程的 PID命名的目录中,即/proc/1234中包含的是 PID为 1234的进程的信息。每个进程目录中存在着各种文件,它们可以使得应用程序简单地了解进程的内存空间、文件描述符列表、指向磁盘上的文件的符号链接和其他系统信息。lsof程序使用该信息和其他关于内核内部状态的信息来产生其输出。所以lsof可以显示进程的文件描述符和相关的文件名等信息。也就是我们通过访问进程的文件描述符可以找到该文件的相关信息。当系统中的某个文件被意外地删除了,只要这个时候系统中还有进程正在访问该文件,那么我们就可以通过lsof从/proc目录下恢复该文件的内容。假如由于误*作将/var/log/messages文件删除掉了,那么这时要将/var/log/messages文件恢复的方法如下:首先使用lsof来查看当前是否有进程打开/var/logmessages文件,如下:# lsof|grep/var/log/messages syslogd 1283 root 2w REG 3,3 5381017 1773647/var/log/messages(deleted)从上面的信息可以看到 PID 1283(syslogd)打开文件的文件描述符为 2。同时还可以看到/var/log/messages已经标记被删除了。因此我们可以在/proc/1283/fd/2(fd下的每个以数字命名的文件表示进程对应的文件描述符)中查看相应的信息,如下:# head-n 10/proc/1283/fd/2 Aug 4 13:50:15 holmes86 syslogd 1.4.1: restart. Aug 4 13:50:15 holmes86 kernel: klogd 1.4.1, log source=/proc/kmsg started. Aug 4 13:50:15 holmes86 kernel: Linux version 2.6.22.1-8(root@everestbuilder.linux-ren.org)(gcc version 4.2.0)#1 SMP Wed Jul 18 11:18:32 EDT 2007 Aug 4 13:50:15 holmes86 kernel: BIOS-provided physical RAM map: Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 0000000000000000- 000000000009f000(usable) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 000000000009f000- 00000000000a0000(reserved) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 0000000000100000- 000000001f7d3800(usable) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 000000001f7d3800- 0000000020000000(reserved) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 00000000e0000000- 00000000f0007000(reserved) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 00000000f0008000- 00000000f000c000(reserved)从上面的信息可以看出,查看/proc/8663/fd/15就可以得到所要恢复的数据。如果可以通过文件描述符查看相应的数据,那么就可以使用 I/O重定向将其**到文件中,如: cat/proc/1283/fd/2>/var/log/messages对于许多应用程序,尤其是日志文件和数据库,这种恢复删除文件的方法非常有用。
可以列出被进程所打开的文件的信息。被打开的文件可以是
1.普通的文件,2.目录 3.网络文件系统的文件,4.字符设备文件 5.(函数)共享库 6.管道,命名管道 7.符号链接
8.底层的socket字流,网络socket, unix域名socket
9.在 linux里面,大部分的东西都是被当做文件的…..还有其他很多
怎样使用lsof
这里主要用案例的形式来介绍lsof命令的使用
1.列出所有打开的文件:
lsof
备注:如果不加任何参数,就会打开所有被打开的文件,建议加上一下参数来具体定位
2.查看谁正在使用某个文件
lsof/filepath/file
3.递归查看某个目录的文件信息
lsof+D/filepath/filepath2/
备注:使用了+D,对应目录下的所有子目录和文件都会被列出
4.比使用+D选项,遍历查看某个目录的所有文件信息的方法
lsof| grep‘/filepath/filepath2/’
5.列出某个用户打开的文件信息
lsof-u username
备注:-u选项,u其实是user的缩写
6.列出某个程序所打开的文件信息
lsof-c mysql
备注:-c选项将会列出所有以mysql开头的程序的文件,其实你也可以写成 lsof| grep mysql,但是第一种方法明显比第二种方法要少打几个字符了
7.列出多个程序多打开的文件信息
lsof-c mysql-c apache
8.列出某个用户以及某个程序所打开的文件信息
lsof-u test-c mysql
9.列出除了某个用户外的被打开的文件信息
lsof-u ^root
备注:^这个符号在用户名之前,将会把是root用户打开的进程不让显示
10.通过某个进程号显示该进行打开的文件
lsof-p 1
11.列出多个进程号对应的文件信息
lsof-p 123,456,789
12.列出除了某个进程号,其他进程号所打开的文件信息
lsof-p ^1
13.列出所有的网络连接
lsof-i
14.列出所有tcp网络连接信息
lsof-i tcp
15.列出所有udp网络连接信息
lsof-i udp
16.列出谁在使用某个端口
lsof-i:3306
17.列出谁在使用某个特定的udp端口
lsof-i udp:55
特定的tcp端口
lsof-i tcp:80
18.列出某个用户的所有活跃的网络端口
lsof-a-u test-i
19.列出所有网络文件系统
lsof-N
20.域名socket文件
lsof-u
21.某个用户组所打开的文件信息
lsof-g 5555
22.根据文件描述列出对应的文件信息
lsof-d description(like 2)
23.根据文件描述范围列出文件信息
lsof-d 2-3
实用命令
三、什么是spool技术
详细解析SPOOL技术:
SPOOL是SQLPLUS的命令
set wrap on;//当输出的行的长度大于设置的行的长度时(用set linesizen命令设置),当set wrap on时,输出行的多于的字符会另起一行显示,否则,会将输出行的多于字符切除,不予显示。
set colsep'';//域输出分隔符
set echo off;//显示start启动的脚本中的每个sql命令,缺省为on
set feedback off;//回显本次sql命令处理的记录条数,缺省为on
set heading off;//输出域标题,缺省为on
set pagesize 0;//输出每页行数,缺省为24,为了避免分页,可设定为0。
set termout off;//显示脚本中的命令的执行结果,缺省为on
set trimout on;//去除标准输出每行的拖尾空格,缺省为off
set trimspool on;//去除重定向(spool)输出每行的拖尾空格,缺省为off
SQL*PLUS环境设置SET NEWPAGE NONE//页和页之间没有任何间隔
SET HEADING OFF//不显示每行的列名
SET SPACE 0//设置各列间的空格数
SET PAGESIZE 0//不分页显示
SET LINESIZE 2500//当输出的行的长度大于设置的行的长度
注:LINESIZE要稍微设置大些,免得数据被截断,它应和相应的TRIMSPOOL结合使用防止导出的文本有太多的尾部空格。
举例说明
四、Oraclespool用法小结
关于SPOOL(SPOOL是SQLPLUS的命令不是SQL语法里面的东西)
对于SPOOL数据的SQL好要自己定义格式以方便程序直接导入 SQL语句如 select taskindex|||||monindex|||||tasktype|||||to_number(to_char(sysdate YYYYMMDD)) from ssrv_send*** s_task;
spool常用的设置set colsep;//域输出分隔符set echo off;//显示start启动的脚本中的每个sql命令缺省为onset feedback off;//回显本次sql命令处理的记录条数缺省为onset heading off;//输出域标题缺省为onset pagesize;//输出每页行数缺省为为了避免分页可设定为 set termout off;//显示脚本中的命令的执行结果缺省为onset trimout on;//去除标准输出每行的拖尾空格缺省为offset trimspool on;//去除重定向(spool)输出每行的拖尾空格缺省为off
导出文本数据的建议格式 SQL*PLUS环境设置SET NEWPAGE NONE SET HEADING OFF SET SPACE SET PAGESIZE SET TRIMOUT ON SET TRIMSPOOL ON SET LINESIZE
注 LINESIZE要稍微设置大些免得数据被截断它应和相应的TRIMSPOOL结合使用防止导出的文本有太多的尾部空格但是如果LINESIZE设置太大会大大降低导出的速度另外在WINDOWS下导出好不要用PLSQL导出速度比较慢直接用MEND下的SQLPLUS命令小化窗口执行
对于字段内包含很多回车换行符的应该给与过滤形成比较规矩的文本文件通常情况下我们使用SPOOL方法将数据库中的表导出为文本文件的时候会采用两种方法如下述
方法一采用以下格式脚本 set colsep|设置|为列分隔符 set trimspool on set linesize set pagesize set newpage set heading off set term off set num set feedback off spool路径+文件名 select* from tablename; spool off
方法二采用以下脚本 set trimspool on set linesize set pagesize set newpage set heading off set term off spool路径+文件名 select col||||col||||col||||col|| from tablename; spool off
比较以上方法即方法一采用设定分隔符然后由sqlplus自己使用设定的分隔符对字段进行分割方法二将分隔符拼接在SELECT语句中即手工控制输出格式
在实践中发现通过方法一导出来的数据具有很大的不确定性这种方法导出来的数据再由sqlldr导入的时候出错的可能性在%以上尤其对大批量的数据表如万条记录的表更是如此而且导出的数据文件狂大
而方法二导出的数据文件格式很规整数据文件的大小可能是方法一的/左右经这种方法导出来的数据文件再由sqlldr导入时出错的可能性很小基本都可以导入成功
因此实践中我建议大家使用方法二手工去控制spool文件的格式这样可以减小出错的可能性避免走很多弯路
自测例将ssrv_send*** s_task表中的数据导出到文本(数据库Oracle i*作系统 SUSE LINUX Enterprise Server)
spool_test sh脚本如下#!/**n/shDB_USER=zxdbm_i*** p#DB USERDB_PWD=zxin_*** ap#DB PASSWORDDB_SERV=zx _ _ _#DB SERVICE NAME
send_day=`sqlplus s$DB_USER/$DB_PWD@$DB_SERV<<!# s参数屏蔽打印到屏幕上的其他信息只显示sql执行信息set trimspool onset linesize set pagesize set newpage set heading offset term offspool sp_test txtselect taskindex|||||monindex|||||tasktype|||||to_number(to_char(sysdate YYYYMMDD)) from ssrv_send*** s_task;spool off/!`
执行/spool_test sh后生成sp_test txt内容如下|||||||||||||||||||||
lishixinzhi/Article/program/Oracle/201311/16599