10G的CSV倒入Oracle数据库会占用多少空间?

2024-02-04 12:32

本文主要是介绍10G的CSV倒入Oracle数据库会占用多少空间?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

利用Oracle示例Schema中的sh.sales表,导出为csv文件。

建立外部表sales_ext,对应此csv文件:

CREATE TABLE sales_ext ("PROD_ID"        NUMBER,"CUST_ID"        NUMBER,"TIME_ID"        DATE,"CHANNEL_ID"     NUMBER,"PROMO_ID"       NUMBER,"QUANTITY_SOLD"  NUMBER(10, 2),"AMOUNT_SOLD"    NUMBER(10, 2)
)
ORGANIZATION EXTERNAL (TYPE ORACLE_LOADERDEFAULT DIRECTORY default_dir ACCESS PARAMETERS ()LOCATION ( 'SALES_DATA_TABLE.csv' )
);

最初的csv文件只有20MB,使用类似以下脚本放大到10G:

for i in {1..6}; do cat SALES_DATA_TABLE.csv >> /u01/tmp/SALES_DATA_TABLE.csv
done

查看文件:

$ ls -l /u01/tmp/SALES_DATA_TABLE.csv
-rw-r--r-- 1 oracle oinstall 10886524012 Jul 16 06:36 /u01/tmp/SALES_DATA_TABLE.csv

查询外部表的行数:

SQL> select count(*) from sales_ext;COUNT(*)
----------334458852

从外部表创建实体表:

set timing on
create table sales nologging as select * from sales_ext;

创建表耗时:

Elapsed: 00:22:49.06

表占用的空间:

SQL> set numformat 999,999,999,999
SQL> select bytes, blocks from user_segments where segment_name = 'SALES';BYTES           BLOCKS
---------------- ----------------13,237,223,424        1,615,872

这个比CSV文件多了2G,多了20%的开销:

SQL> select 13237223424 - 10886524012 from dual;13237223424-10886524012
-----------------------2350699412SQL> select 13237223424/10886524012 from dual;13237223424/10886524012
-----------------------1.21592745

启用压缩:

SQL> set timing on
SQL> alter table sales move compress;

启用压缩耗时:

Elapsed: 00:18:57.82

只用到4G了,压缩效果不错:

SQL> set numformat 999,999,999,999
SQL> select bytes, blocks from user_segments where segment_name = 'SALES';BYTES           BLOCKS
---------------- ----------------4,429,185,024          540,672

查询性能。:

SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:23.75
SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:46.51
SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:18.04
SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:21.23
SQL>  select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:19.30
SQL>  select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:18.65

去除压缩:

alter table sales move nocompress;

空间占用:

SQL>  select bytes, blocks from user_segments where segment_name = 'SALES';BYTES           BLOCKS
---------------- ----------------11,904,483,328        1,453,184

有个奇怪的问题,就是解压后的空间和最初未压缩时的空间不一致,要小些。

查询时间:

SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:15.14
SQL> select count(*) from sales;COUNT(*)
----------334458852Elapsed: 00:02:40.84
SQL> select count(*) from sales;COUNT(*)
----------------334,458,852Elapsed: 00:02:19.90
SQL> select count(*) from sales;COUNT(*)
----------------334,458,852Elapsed: 00:02:19.68
SQL> select count(*) from sales;COUNT(*)
----------------334,458,852Elapsed: 00:02:19.38

这篇关于10G的CSV倒入Oracle数据库会占用多少空间?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/677519

相关文章

MySQL数据库中ENUM的用法是什么详解

《MySQL数据库中ENUM的用法是什么详解》ENUM是一个字符串对象,用于指定一组预定义的值,并可在创建表时使用,下面:本文主要介绍MySQL数据库中ENUM的用法是什么的相关资料,文中通过代码... 目录mysql 中 ENUM 的用法一、ENUM 的定义与语法二、ENUM 的特点三、ENUM 的用法1

Java中调用数据库存储过程的示例代码

《Java中调用数据库存储过程的示例代码》本文介绍Java通过JDBC调用数据库存储过程的方法,涵盖参数类型、执行步骤及数据库差异,需注意异常处理与资源管理,以优化性能并实现复杂业务逻辑,感兴趣的朋友... 目录一、存储过程概述二、Java调用存储过程的基本javascript步骤三、Java调用存储过程示

Go语言数据库编程GORM 的基本使用详解

《Go语言数据库编程GORM的基本使用详解》GORM是Go语言流行的ORM框架,封装database/sql,支持自动迁移、关联、事务等,提供CRUD、条件查询、钩子函数、日志等功能,简化数据库操作... 目录一、安装与初始化1. 安装 GORM 及数据库驱动2. 建立数据库连接二、定义模型结构体三、自动迁

MySQL之InnoDB存储页的独立表空间解读

《MySQL之InnoDB存储页的独立表空间解读》:本文主要介绍MySQL之InnoDB存储页的独立表空间,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、独立表空间【1】表空间大小【2】区【3】组【4】段【5】区的类型【6】XDES Entry区结构【

嵌入式数据库SQLite 3配置使用讲解

《嵌入式数据库SQLite3配置使用讲解》本文强调嵌入式项目中SQLite3数据库的重要性,因其零配置、轻量级、跨平台及事务处理特性,可保障数据溯源与责任明确,详细讲解安装配置、基础语法及SQLit... 目录0、惨痛教训1、SQLite3环境配置(1)、下载安装SQLite库(2)、解压下载的文件(3)、

MySQL数据库的内嵌函数和联合查询实例代码

《MySQL数据库的内嵌函数和联合查询实例代码》联合查询是一种将多个查询结果组合在一起的方法,通常使用UNION、UNIONALL、INTERSECT和EXCEPT关键字,下面:本文主要介绍MyS... 目录一.数据库的内嵌函数1.1聚合函数COUNT([DISTINCT] expr)SUM([DISTIN

MySQL追踪数据库表更新操作来源的全面指南

《MySQL追踪数据库表更新操作来源的全面指南》本文将以一个具体问题为例,如何监测哪个IP来源对数据库表statistics_test进行了UPDATE操作,文内探讨了多种方法,并提供了详细的代码... 目录引言1. 为什么需要监控数据库更新操作2. 方法1:启用数据库审计日志(1)mysql/mariad

postgresql数据库基本操作及命令详解

《postgresql数据库基本操作及命令详解》本文介绍了PostgreSQL数据库的基础操作,包括连接、创建、查看数据库,表的增删改查、索引管理、备份恢复及退出命令,适用于数据库管理和开发实践,感兴... 目录1. 连接 PostgreSQL 数据库2. 创建数据库3. 查看当前数据库4. 查看所有数据库

从入门到精通MySQL 数据库索引(实战案例)

《从入门到精通MySQL数据库索引(实战案例)》索引是数据库的目录,提升查询速度,主要类型包括BTree、Hash、全文、空间索引,需根据场景选择,建议用于高频查询、关联字段、排序等,避免重复率高或... 目录一、索引是什么?能干嘛?核心作用:二、索引的 4 种主要类型(附通俗例子)1. BTree 索引(

Oracle 数据库数据操作如何精通 INSERT, UPDATE, DELETE

《Oracle数据库数据操作如何精通INSERT,UPDATE,DELETE》在Oracle数据库中,对表内数据进行增加、修改和删除操作是通过数据操作语言来完成的,下面给大家介绍Oracle数... 目录思维导图一、插入数据 (INSERT)1.1 插入单行数据,指定所有列的值语法:1.2 插入单行数据,指