Oracle Nologging And Append

2023-10-14 23:08
文章标签 oracle append nologging

本文主要是介绍Oracle Nologging And Append,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

转载地址

http://gaobo424.iteye.com/blog/1330010


自己测试 如下

环境:10.2.0.4(单机,没开归档)

SQL> alter table t_dz_test nologging;

Table altered.

SQL> set timing on
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;  

11677713 rows created.

Elapsed: 00:00:10.01
SQL> rollback;

Rollback complete.

Elapsed: 00:00:00.01
SQL> set table t_dz_test logging;
SP2-0158: unknown SET option "table"
SQL> alter table t_dz_test logging;

Table altered.

Elapsed: 00:00:00.02
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;  

11677713 rows created.

Elapsed: 00:00:12.23
SQL>


环境:10.2.0.5(rac  开了归档)

开始t_dz_test是logging,第一次append耗时45秒,第二次nogging时耗时19秒,第三次改成logging时耗时17秒。。。最后一次nologging耗时45秒

我想看一下redolog大小,开了执行计划,结果报错ora-12838,关了之后不报错,,不知道这个报错之后的准不准,nologging的redolog是小了,但是最后一次耗时45秒。


下面是同事给的图片,,,貌似我测试的没有这么理想


SQL> 
SQL> 
SQL> create table t_dz_test as select * from t_user_mobile_dz where rownum<=1;Table created.SQL> set timing on
SQL> set autot trac
Usage: SET AUTOT[RACE] {OFF | ON | TRACE[ONLY]} [EXP[LAIN]] [STAT[ISTICS]]
SQL> set autot  trace
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12706742 rows created.Elapsed: 00:00:51.16Execution Plan
----------------------------------------------------------
ERROR:
ORA-12838: cannot read/modify an object after modifying it in parallelSP2-0612: Error generating AUTOTRACE EXPLAIN reportStatistics
----------------------------------------------------------1148864  recursive calls662012  db block gets1380625  consistent gets0  physical reads937864108  redo size345  bytes sent via SQL*Net to client542  bytes received via SQL*Net from client3  SQL*Net roundtrips to/from client2  sorts (memory)0  sorts (disk)12706742  rows processedSQL> 
SQL> rollback;Rollback complete.Elapsed: 00:00:00.00
SQL> 
SQL> 
SQL> 
SQL> 
SQL> insert into t_dz_test  select  * from t_user_mobile_dz;12706882 rows created.Elapsed: 00:00:51.56Execution Plan
----------------------------------------------------------
Plan hash value: 2802676981--------------------------------------------------------------------------------
------| Id  | Operation         | Name             | Rows  | Bytes | Cost (%CPU)| Time|--------------------------------------------------------------------------------
------|   0 | INSERT STATEMENT  |                  |    12M|   674M| 26304   (2)| 00:0
5:16 ||   1 |  TABLE ACCESS FULL| T_USER_MOBILE_DZ |    12M|   674M| 26304   (2)| 00:0
5:16 |--------------------------------------------------------------------------------
------Statistics
----------------------------------------------------------371  recursive calls1080626  db block gets341476  consistent gets304  physical reads918012192  redo size373  bytes sent via SQL*Net to client527  bytes received via SQL*Net from client3  SQL*Net roundtrips to/from client1  sorts (memory)0  sorts (disk)12706882  rows processedSQL> SQL> 
SQL> rollback;Rollback complete.Elapsed: 00:00:06.83
SQL> set autot off 
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12706936 rows created.Elapsed: 00:00:45.87
SQL> 
SQL> rollback;Rollback complete.Elapsed: 00:00:00.00
SQL> alter table t_dz_test nologging;Table altered.Elapsed: 00:00:00.01
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12706968 rows created.Elapsed: 00:00:19.75
SQL> rollabck;
SP2-0042: unknown command "rollabck" - rest of line ignored.
SQL> rollback;Rollback complete.Elapsed: 00:00:00.01
SQL> alter table t_dz_test logging;Table altered.Elapsed: 00:00:00.01
SQL> 
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12707115 rows created.Elapsed: 00:00:17.16
SQL> rollback;Rollback complete.Elapsed: 00:00:00.00
SQL> set autot  trace
SQL> 
SQL> 
SQL> 
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12707172 rows created.Elapsed: 00:00:18.80Execution Plan
----------------------------------------------------------
ERROR:
ORA-12838: cannot read/modify an object after modifying it in parallelSP2-0612: Error generating AUTOTRACE EXPLAIN reportStatistics
----------------------------------------------------------0  recursive calls1277659  db block gets120968  consistent gets0  physical reads903051200  redo size352  bytes sent via SQL*Net to client542  bytes received via SQL*Net from client3  SQL*Net roundtrips to/from client1  sorts (memory)0  sorts (disk)12707172  rows processedSQL> alter table t_dz_test logging;Table altered.Elapsed: 00:00:00.04
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12707206 rows created.Elapsed: 00:00:44.34Execution Plan
----------------------------------------------------------
ERROR:
ORA-12838: cannot read/modify an object after modifying it in parallelSP2-0612: Error generating AUTOTRACE EXPLAIN reportStatistics
----------------------------------------------------------1148211  recursive calls1413593  db block gets1379882  consistent gets0  physical reads937850524  redo size353  bytes sent via SQL*Net to client542  bytes received via SQL*Net from client3  SQL*Net roundtrips to/from client7  sorts (memory)0  sorts (disk)12707206  rows processedSQL> 
SQL> truncate table t_dz_test;Table truncated.Elapsed: 00:00:46.18
SQL> SQL> SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> 
SQL> alter table t_dz_test nologging;Table altered.Elapsed: 00:00:00.01
SQL> insert /*+append*/ into t_dz_test  select  * from t_user_mobile_dz;12708501 rows created.Elapsed: 00:00:47.32Execution Plan
----------------------------------------------------------
ERROR:
ORA-12838: cannot read/modify an object after modifying it in parallelSP2-0612: Error generating AUTOTRACE EXPLAIN reportStatistics
----------------------------------------------------------1149041  recursive calls662152  db block gets1380961  consistent gets2  physical reads35775004  redo size354  bytes sent via SQL*Net to client542  bytes received via SQL*Net from client3  SQL*Net roundtrips to/from client7  sorts (memory)0  sorts (disk)12708501  rows processedSQL> SQL> 
SQL> 
SQL> 
SQL> rollback;Rollback complete.Elapsed: 00:00:00.00
SQL> 





对于logging的理解总是以为表的日志设置为NO它就不会去产生日志了,其实不是的下面是对于logging的一些解释和试验。


Logging介绍

可以采用nologging模式执行以下操作:

1.索引的创建和ALTER(重建)。
2.表的批量INSERT(通过/*+append */提示使用“直接路径插入“。或采用SQL*Loader直接路径加载)。表数据生成少量redo,但是所有索引修改会生成大量redo(尽管表不生成日志,但这个表上的索引却会生成redo!)。


3.Lob操作(对大对象的更新不必生成日志)。
4.通过create table as select创建表。
5.各种alter table操作,如move和split。
在一个archivelog模式的数据库上,如果nologging使用得当,可以加快许多操作的速度,因为它能显著减少生成的重做日志量。假设你有一个表,需要从一个表空间移到另一个表空间,原先需要N小时才能完成的操作可能只需要N/2小时。要想适当地使用这个特性,需要DBA的参与,或者必须与负责数据库备份和恢复(或任何备用数据库)的人沟通。如果这个人不知道使用了这个特性,一旦出现介质失败,就可能丢失数据,或者备用数据库的完整性可能遭到破坏,对此一定要三思。

对象Logging状态查询

通过此查询SQL语句查询表的logging状态

SELECT T.TABLE_NAME, T.LOGGING
  FROM USER_TABLES T
WHERE T.TABLE_NAME LIKE '%TEST_FUTUFARES%';

Create和Insert的Logging测试
Create table …. as select ….及 insert into …..select ….测试

改变logging状态值的方法:

ALTER TABLE table_name NOLOGGING/logging;

通过以上测试其实表在Nologging与Logging状态时插入2百万的数据耗时差不多的,也就是说DML不是说不记日志而只是在特定的情况下是不记日志的,比如用SQL*Loader直接装载及INSERT /*+Append*/选项直接路径装载,也就是说不管是否是NOLOGGING状态DML操作正常情况下肯定会产生日志。

Nologging模式下数据库操作只有如下几种情况下不产成redo记录:

1、用sql*load的direct load方式时,不采用redo记录
已测试
2、用insert的direct方式,即在append方式insert
已测试

3、create table ….as select….
已测试

4、create index
create index  TEST_FUTUFARES2_log  on TEST_FUTUFARES2 (FARE_KIND,FUTUFARE_TYPE) nologging;

创建索引要想产生极少的REDO必须要按上面的那种方式创建索引,按照上面的那种方法去创建索引不管表的日志是处在nologging还是logging状态下都是一样都会产生很少的REDO日志,否则还是会产生大量的REDO日志。
5、alter table ... move partition
6、alter table ... split partition
7、alter index ... split partition
8、alter index ... rebuild
9、alter index ... rebuild partition
10、INSERT, UPDATE, and DELETE on LOBs in NOCACHE NOLOGGING mode stored out of line





Append介绍


非归档模式情况下:

1.查看当前会话所有产生的REDO总量

表处于nologging状态:

SQL> set timing on;
SQL>INSERT  INTO TEST_FUTUFARES2 SELECT * FROM TEST_FUTUFARES;
2090220 rows inserted
Executed in 36.25 seconds

SQL> SELECT A.NAME, B.VALUE FROM V$MYSTAT B, V$STATNAME A WHERE A.STATISTIC# = B.STATISTIC# AND A.NAME LIKE '%redo size%';
NAME                                                   VALUE
--------------------------------------------------------------------------
Redo size                                             113495212

SQL>INSERT /*+append*/ INTO TEST_FUTUFARES2 SELECT * FROM TEST_FUTUFARES;
2090220 rows inserted
Executed in 9.062 seconds

SQL> SELECT A.NAME, B.VALUE FROM V$MYSTAT B, V$STATNAME A WHERE A.STATISTIC# = B.STATISTIC# AND A.NAME LIKE '%redo size%';
NAME                                                      VALUE
--------------------------------------------------------------------------
Redo size                                                113560764

SQL>select 113560764-113495212 from dual;
113560764-113495212
-------------------
              65552


表处于logging状态:
   对于此测试得出的结果其实跟上面的nologging得出的测试结果几乎是一模一样的,就不贴出来了。



归档模式情况下:

表处于logging状态:

SQL> INSERT  INTO TEST_FUTUFARES2 SELECT * FROM TEST_FUTUFARES;
2090220 rows inserted
Executed in 44.031 seconds

SQL> SELECT A.NAME, B.VALUE FROM V$MYSTAT B, V$STATNAME A WHERE A.STATISTIC# = B.STATISTIC# AND A.NAME LIKE '%redo size%';
NAME                                                     VALUE
--------------------------------------------------------------------------
Redo size                                              113460280

SQL>INSERT /*+append*/  INTO TEST_FUTUFARES2 SELECT * FROM TEST_FUTUFARES;
2090220 rows inserted
Executed in 24.297 seconds

SQL> SELECT A.NAME, B.VALUE FROM V$MYSTAT B, V$STATNAME A WHERE A.STATISTIC# = B.STATISTIC# AND A.NAME LIKE '%redo size%';
NAME                                                      VALUE
--------------------------------------------------------------------------
Redo size                                               223253980

SQL> select 223253980-113460280 from dual;
223253980-113460280
-------------------
          109793700

表处于nologging状态:

SQL> INSERT /*+append*/  INTO TEST_FUTUFARES2 SELECT * FROM TEST_FUTUFARES;
2090220 rows inserted
Executed in 6.391 seconds



SQL> SELECT A.NAME, B.VALUE FROM V$MYSTAT B, V$STATNAME A WHERE A.STATISTIC# = B.STATISTIC# AND A.NAME LIKE '%redo size%';
NAME                                                      VALUE
--------------------------------------------------------------------------
redo size                                               223576712

SQL> select 223576712-223253980 from dual;
223576712-223253980
-------------------
             322732



2.查看全局数据库redo生成量,可以通过v$sysstat视图看到

SQL> select name,value  from v$sysstat where name='redo size';
NAME                                                    VALUE
--------------------------------------------------------------------------
Redo size                                               122314360


总结:
关于Nologging与append测试的一些总结,通过上面的SQL语句查看可以得出在大量数据插入过程的语句中加入/*+append*/的这个SQL语句产生的REDO日志明显示是会少同时时间节约了很多,当然这样可能会影响备份因此nologging加载数据后要做一个数据库的全备。

insert append并不是在任何时候都可以节省时间的以下是测试的一些总结:



第一种情况:

database为archivelog状态,这种情况下,就算你用insert append也是不一定提高插入效率的。但是如果你将目标表设置为nologging,然后再使用insert append就会很快。
第二种情况:

database为noarchivelog状态,如果在这种情况下直接采用insert方法而不加入append向表中插入数据,占用的redo空间的大小与archivelog状态下占用的大小是相当的,不论表是否为nologging。但是如果采用insert append方法的话,通过redo的占用值大家可以发现,不论表是否为nologging,所占用的redo的大小都是很小的。也就说明:在数据库为noarchivelog的状态下,采用insert append方法,如果表不是nologging,系统也会自动将表转换为nologging(即在执行insert append之前,先执行一个alter table arch1 nologging)。
第三种情况:

如果表上有索引,则append方式批量添加记录,不会减少索引上产生的redo数量,索引上的redo数量可能比表的redo数量还要大。用insert append可以实现直接路径加载速度是快很多,但有一点需要注意: insert append时在表上加”6”类型的锁,会阻塞表上的所有DML语句,因此在有业务运行的情况下要慎重使用。若同时执行多个insert append对同一个表并行加载数据,并不一定会提高速度,因为每一时刻只能有一个进程在加载(排它锁造成)à此观点是在网上查到的对于此疑问对于锁的问题此兄弟可能不是太理解,对于ORACLE数据库来说只要DML特别是insert操作他肯定会将表给锁住而且是独占锁除非进行commit,rollback,及其它的DDL操作来释放否则锁会一直独占导致其它的DML操作无法进行正常的操作,而跟所谓的APPEND无关。

以下是关于表模式(LOGGING/NOLOGGING),插入模式(APPEND/NOAPPEND),数据库运行模式(归档/非归档),REDO日志产生的关系
数据库模式            表模式              插入模式            REDO生成
----------------------------------------------------------------------------------
ARCHIVELOG          LOGGING          APPEND                有REDO
                                                         NO APPEND          有REDO

                               NOLOGGING     APPEND                 无REDO
                                                         NO APPEND           有REDO
----------------------------------------------------------------------------------
NOARCHIVELOG    LOGGING          APPEND                 无REDO
                                                        NO APPEND           有REDO
                              NOLOGGING     APPEND                  无REDO
                                                        NO APPEND           有REDO
----------------------------------------------------------------------------------

这篇关于Oracle Nologging And Append的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/213746

相关文章

Oracle修改端口号之后无法启动的解决方案

《Oracle修改端口号之后无法启动的解决方案》Oracle数据库更改端口后出现监听器无法启动的问题确实较为常见,但并非必然发生,这一问题通常源于​​配置错误或环境冲突​​,而非端口修改本身,以下是系... 目录一、问题根源分析​​​二、保姆级解决方案​​​​步骤1:修正监听器配置文件 (listener.

Oracle 通过 ROWID 批量更新表的方法

《Oracle通过ROWID批量更新表的方法》在Oracle数据库中,使用ROWID进行批量更新是一种高效的更新方法,因为它直接定位到物理行位置,避免了通过索引查找的开销,下面给大家介绍Orac... 目录oracle 通过 ROWID 批量更新表ROWID 基本概念性能优化建议性能UoTrFPH优化建议注

PostgreSQL 序列(Sequence) 与 Oracle 序列对比差异分析

《PostgreSQL序列(Sequence)与Oracle序列对比差异分析》PostgreSQL和Oracle都提供了序列(Sequence)功能,但在实现细节和使用方式上存在一些重要差异,... 目录PostgreSQL 序列(Sequence) 与 oracle 序列对比一 基本语法对比1.1 创建序

Oracle数据库常见字段类型大全以及超详细解析

《Oracle数据库常见字段类型大全以及超详细解析》在Oracle数据库中查询特定表的字段个数通常需要使用SQL语句来完成,:本文主要介绍Oracle数据库常见字段类型大全以及超详细解析,文中通过... 目录前言一、字符类型(Character)1、CHAR:定长字符数据类型2、VARCHAR2:变长字符数

Oracle存储过程里操作BLOB的字节数据的办法

《Oracle存储过程里操作BLOB的字节数据的办法》该篇文章介绍了如何在Oracle存储过程中操作BLOB的字节数据,作者研究了如何获取BLOB的字节长度、如何使用DBMS_LOB包进行BLOB操作... 目录一、缘由二、办法2.1 基本操作2.2 DBMS_LOB包2.3 字节级操作与RAW数据类型2.

查看Oracle数据库中UNDO表空间的使用情况(最新推荐)

《查看Oracle数据库中UNDO表空间的使用情况(最新推荐)》Oracle数据库中查看UNDO表空间使用情况的4种方法:DBA_TABLESPACES和DBA_DATA_FILES提供基本信息,V$... 目录1. 通过 DBjavascriptA_TABLESPACES 和 DBA_DATA_FILES

Oracle登录时忘记用户名或密码该如何解决

《Oracle登录时忘记用户名或密码该如何解决》:本文主要介绍如何在Oracle12c中忘记用户名和密码时找回或重置用户账户信息,文中通过代码介绍的非常详细,对同样遇到这个问题的同学具有一定的参... 目录一、忘记账户:二、忘记密码:三、详细情况情况 1:1.1. 登录到数据库1.2. 查看当前用户信息1.

oracle DBMS_SQL.PARSE的使用方法和示例

《oracleDBMS_SQL.PARSE的使用方法和示例》DBMS_SQL是Oracle数据库中的一个强大包,用于动态构建和执行SQL语句,DBMS_SQL.PARSE过程解析SQL语句或PL/S... 目录语法示例注意事项DBMS_SQL 是 oracle 数据库中的一个强大包,它允许动态地构建和执行

PLsql Oracle 下载安装图文过程详解

《PLsqlOracle下载安装图文过程详解》PL/SQLDeveloper是一款用于开发Oracle数据库的集成开发环境,可以通过官网下载安装配置,并通过配置tnsnames.ora文件及环境变... 目录一、PL/SQL Developer 简介二、PL/SQL Developer 安装及配置详解1.下

oracle如何连接登陆SYS账号

《oracle如何连接登陆SYS账号》在Navicat12中连接Oracle11g的SYS用户时,如果设置了新密码但连接失败,可能是因为需要以SYSDBA或SYSOPER角色连接,解决方法是确保在连接... 目录oracle连接登陆NmOtMSYS账号工具问题解决SYS用户总结oracle连接登陆SYS账号