【Oracle云】使用 boto3 访问 OCI 对象存储 (AWS S3协议兼容)

2024-02-01 11:28

本文主要是介绍【Oracle云】使用 boto3 访问 OCI 对象存储 (AWS S3协议兼容),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在现代云计算环境中,S3(Simple Storage Service)协议已经成为云对象存储的事实标准。它提供了简单、可扩展、高度耐用的存储解决方案,得到了广泛应用。Oracle Cloud Infrastructure(OCI)秉承着开放性和灵活性的理念,为用户提供了兼容AWS S3协议的对象存储服务。

本文将介绍如何使用 boto3,AWS SDK for Python,通过S3协议访问OCI对象存储。能够在多云环境中实现高度的可移植性,利用协议的兼容性轻松构建跨云的存储方案。

OCI Compartment:

OCI compartment 是 Oracle Cloud Infrastructure(OCI)中的一个概念,它类似于 Kubernetes 中的 namespace。它们的作用主要是组织和进行资源的逻辑隔离。

在 OCI 中,compartment 用于组织和管理 OCI 资源,例如计算实例、存储卷、网络资源等。每个 compartment 都有自己的资源层次结构,可以将相关资源组织在一起,以便更好地管理和控制访问权限。

AWS AK SK:

AWS 认证的 ak,sk 是指 AWS Access Key 和 Secret Access Key。这是 AWS 身份验证过程中最常见的一种认证方式。

  • Access Key(访问密钥)是一个由 AWS 生成的唯一标识符,用于标识和验证对 AWS 资源的访问权限。它类似于用户名。
  • Secret Access Key(秘密访问密钥)是与 Access Key 相关联的机密字符串,用于对身份进行验证。它类似于密码。

Boto3: 

Boto3 是 AWS 的 Python SDK,主要用于与 AWS 服务进行交互。它提供了与 AWS 服务的集成和操作的功能。在对象存储场景中,OCI 提供 S3协议的兼容,可以使用 boto3 直接操作对象存。

1 OCI 兼容 AWS S3 的使用流程

1.1 生成 AK, SK

  • 在用户设置界面中(控制台右上),选择 User 配置
  • 找到Customer Secret Keys
  • 生成 secret key

键入生成 Key 的名称,示例为:s3test

生成 KEY

注意:生成的 SK 只显示一次

成功生成 KEY 后即可看到 AK

1.2 OCI Endpoint 命名方式参考

需要注意,在 OCI 中使用 S3 协议对象存储,Endpoint 域名区别于AWS, 示例:

可参考信息:

对象存储 namespace

Understanding Object Storage Namespaces

region信息

Regions and Availability Domains

# 配置中 region 和 namespace_name {bucketnamespace}.compat.objectstorage.{region}.oraclecloud.com

1.3 兼容测试

可使用 AWS cli 操作 OCI 对象存储,验证核心功能

export AWS_ACCESS_KEY_ID=507dee8xxxxxxxxxxxxxxxxxxxxxxx
export AWS_SECRET_ACCESS_KEY=vIrC+BaYxxxxxxxxxxxxxxxxxxxno=
export AWS_DEFAULT_REGION=eu-frankfurt-1# 通过s3协议调用预签名功能
aws s3 presign  s3://bucket-20230516-1236/1213.txt  --endpoint-url  https://xxxx.compat.objectstorage.eu-frankfurt-1.oraclecloud.com

2 修改对象存储的 Namespace

注意:AWS没有 Compartment 的概念,所有使用兼容 AWS 的 SDK,默认访问根 compartment (root) 的对象存储桶。

具体修改的位置在 用户配置 --> 租户 --> edit object storage settings 中进行设置,如下操作截图:

3 Demo

通过 boto3 查看 eu-frankfurt-1 区域 所有 s3 存储桶的名称,示例如下:

import boto3s3 = boto3.resource('s3',aws_access_key_id="507dee8d01xxxxxxxxxxxxxxxxxxx4", # AKaws_secret_access_key="vIrC+xxxxxxxxxxxxxxxxxxxxxxxno=", # SKregion_name="eu-frankfurt-1", # Region 信息endpoint_url="https://cnmxxxxxxxhxmt.compat.objectstorage.eu-frankfurt-1.oraclecloud.com" # 兼容域名
)# Print out the bucket names
for bucket in s3.buckets.all():print(bucket.name)

4 参考

对象存储 namespace

Understanding Object Storage Namespaces

region信息

Regions and Availability Domains

安装 AWS cli

Install or update the latest version of the AWS CLI - AWS Command Line Interface

🚀 炸鸡物料库 🚀

🔍 内容定位: IT技术领域,云计算、云原生、DevOps 和 AI 等相关的技术资讯、实践和经验分享。面向开发、系统和云计算,提供实用的技术内容。

🎯 目标受众: 面向开发者、系统管理员和云计算从业者,提供实用的技术内容。

🗓️ 更新频率:每周更新,每次分享都为您带来有价值的技术内容。

🤝 互动与反馈: 鼓励读者留言、评论,有问题随时提问,我们将积极互动并提供帮助。

💌 订阅方式: 扫描二维码或搜索“炸鸡物料库”关注,不错过每一篇精彩内容。

🌐 合作与分享: 如果您有技术分享或合作计划,欢迎联系我们,共同成长!

​​​​​​​

这篇关于【Oracle云】使用 boto3 访问 OCI 对象存储 (AWS S3协议兼容)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/667140

相关文章

SpringBoot使用ffmpeg实现视频压缩

《SpringBoot使用ffmpeg实现视频压缩》FFmpeg是一个开源的跨平台多媒体处理工具集,用于录制,转换,编辑和流式传输音频和视频,本文将使用ffmpeg实现视频压缩功能,有需要的可以参考... 目录核心功能1.格式转换2.编解码3.音视频处理4.流媒体支持5.滤镜(Filter)安装配置linu

Redis中的Lettuce使用详解

《Redis中的Lettuce使用详解》Lettuce是一个高级的、线程安全的Redis客户端,用于与Redis数据库交互,Lettuce是一个功能强大、使用方便的Redis客户端,适用于各种规模的J... 目录简介特点连接池连接池特点连接池管理连接池优势连接池配置参数监控常用监控工具通过JMX监控通过Pr

apache的commons-pool2原理与使用实践记录

《apache的commons-pool2原理与使用实践记录》ApacheCommonsPool2是一个高效的对象池化框架,通过复用昂贵资源(如数据库连接、线程、网络连接)优化系统性能,这篇文章主... 目录一、核心原理与组件二、使用步骤详解(以数据库连接池为例)三、高级配置与优化四、典型应用场景五、注意事

使用Python实现Windows系统垃圾清理

《使用Python实现Windows系统垃圾清理》Windows自带的磁盘清理工具功能有限,无法深度清理各类垃圾文件,所以本文为大家介绍了如何使用Python+PyQt5开发一个Windows系统垃圾... 目录一、开发背景与工具概述1.1 为什么需要专业清理工具1.2 工具设计理念二、工具核心功能解析2.

Linux系统之stress-ng测压工具的使用

《Linux系统之stress-ng测压工具的使用》:本文主要介绍Linux系统之stress-ng测压工具的使用,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、理论1.stress工具简介与安装2.语法及参数3.具体安装二、实验1.运行8 cpu, 4 fo

Java使用MethodHandle来替代反射,提高性能问题

《Java使用MethodHandle来替代反射,提高性能问题》:本文主要介绍Java使用MethodHandle来替代反射,提高性能问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑... 目录一、认识MethodHandle1、简介2、使用方式3、与反射的区别二、示例1、基本使用2、(重要)

MySQL 存储引擎 MyISAM详解(最新推荐)

《MySQL存储引擎MyISAM详解(最新推荐)》使用MyISAM存储引擎的表占用空间很小,但是由于使用表级锁定,所以限制了读/写操作的性能,通常用于中小型的Web应用和数据仓库配置中的只读或主要... 目录mysql 5.5 之前默认的存储引擎️‍一、MyISAM 存储引擎的特性️‍二、MyISAM 的主

使用C#删除Excel表格中的重复行数据的代码详解

《使用C#删除Excel表格中的重复行数据的代码详解》重复行是指在Excel表格中完全相同的多行数据,删除这些重复行至关重要,因为它们不仅会干扰数据分析,还可能导致错误的决策和结论,所以本文给大家介绍... 目录简介使用工具C# 删除Excel工作表中的重复行语法工作原理实现代码C# 删除指定Excel单元

Linux lvm实例之如何创建一个专用于MySQL数据存储的LVM卷组

《Linuxlvm实例之如何创建一个专用于MySQL数据存储的LVM卷组》:本文主要介绍使用Linux创建一个专用于MySQL数据存储的LVM卷组的实例,具有很好的参考价值,希望对大家有所帮助,... 目录在Centos 7上创建卷China编程组并配置mysql数据目录1. 检查现有磁盘2. 创建物理卷3. 创

MySQL 事务的概念及ACID属性和使用详解

《MySQL事务的概念及ACID属性和使用详解》MySQL通过多线程实现存储工作,因此在并发访问场景中,事务确保了数据操作的一致性和可靠性,下面通过本文给大家介绍MySQL事务的概念及ACID属性和... 目录一、什么是事务二、事务的属性及使用2.1 事务的 ACID 属性2.2 为什么存在事务2.3 事务