Neutron重试操作

2023-12-19 10:18
文章标签 操作 重试 neutron

本文主要是介绍Neutron重试操作,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在neutron.db.api模块内部有一个修饰符叫做“retry_if_session_inactive”。其应用于保护所有执行DB操作的方法。此修饰符将获取它所保护的方法抛出的任何的死锁错误、RetryRequests、连接错误和单一限制破坏。

如果应用的方法在活动会话中调用,此修饰符不会重试操作。这是因为它捕获的大多数异常将会话部分的转到回滚状态,以至于其不再可用。重要的是保证有一个处于事务开始之外的修饰符。如果方法在另外一个事务中被调用,此修饰符可进行嵌套。

如果被包含的方法,没有使用上下文作为参数,“retry_db_errors”描述符方法可被使用。其重试相同的异常,并且与“retry_if_session_active”具有相同的反嵌套行为,但是其不检查会话是否连接了任何上下文关键字(“retry_if_session_active”在检查完会话之后,内部只是使用“retry_db_errors”)。

失败时的等幂性 Idempotency on Failures

当遇到异常时,被修饰的方法应当总是执行清空,以便可安全的重试操作。所以如果一个方法创建DB对象、提交、之后创建另一个对象,如果第二个失败,方法必须清除第一个创建的DB对象。假设任何DB操作都可抛出可重试的错误。

你也许能看到Neutron内的API 层的重试修饰符。尽管如此,我们试着消除它们,因为每个API操作有着许多独立的步骤,是的保证在部分失败上的等幂性非常困难。

参数突变 Argument Mutation

一个修饰的函数不应改变传入的复杂参数。如果改变,应由异常处理函数可反转此改变,以便可安全的进行重试操作。

修饰符将自动的创建通过它传入的sets、lists和dicts的深度拷贝,但是它不处理其它的参数。

尝试处理竞争条件 Race Conditions

检测带有单个限制来创建DB记录的竞争条件的困难之一是,要决定在哪里放置异常处理函数,因为限制违规可能在flush时立即发生,或者直到在会话上下文管理器退出时事务被提交之后才发生。所以最终我们实现的代码类似与如下:

  def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)try:with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objexcept DBDuplicateEntry as e:# code to parse columnsif 'mac' in e.columns:raise MacInUse(mac_address)if 'ip' in e.columns:raise IPAddressInUse(ip)def _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

所以,我们实现的异常处理函数,需要理解事情出错在哪里,并将其转为对最终用户而言合适的异常。这明显偏离了创建端口的主要目的。

既然重试修饰符将自动为我们捕获并重试DB重复错误,我们可允许它在竞争条件上重试,其将授予原始的验证逻辑去重新执行,并触发合适的错误。这将保持验证逻辑处于一个地方,是代码更简洁。

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objdef _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

嵌套

一旦修饰符尝试某个操作到了最大次数,它将关联一个标记到此其触发的异常,后续可避免此调用方法修饰符再次尝试错误。此阻止了重试次数的指数级增长,如果它们是分层结构的。

用法

这里有一些使用示例:

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_elephant(context, elephant_details):....@db_api.retry_if_session_inactive()def atomic_bulk_create_elephants(context, elephants):with context.session.begin():for elephant in elephants:# note that if create_elephant throws a retriable# exception, the decorator around it will not retry# because the session is active. The decorator around# atomic_bulk_create_elephants will be responsible for# retrying the entire operation.create_elephant(context, elephant)# sample usage when session is attached to a var other than 'context'@db_api.retry_if_session_inactive(context_var_name='ctx')def some_function(ctx):

这篇关于Neutron重试操作的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/511823

相关文章

python panda库从基础到高级操作分析

《pythonpanda库从基础到高级操作分析》本文介绍了Pandas库的核心功能,包括处理结构化数据的Series和DataFrame数据结构,数据读取、清洗、分组聚合、合并、时间序列分析及大数据... 目录1. Pandas 概述2. 基本操作:数据读取与查看3. 索引操作:精准定位数据4. Group

Python使用Tenacity一行代码实现自动重试详解

《Python使用Tenacity一行代码实现自动重试详解》tenacity是一个专为Python设计的通用重试库,它的核心理念就是用简单、清晰的方式,为任何可能失败的操作添加重试能力,下面我们就来看... 目录一切始于一个简单的 API 调用Tenacity 入门:一行代码实现优雅重试精细控制:让重试按我

Python操作PDF文档的主流库使用指南

《Python操作PDF文档的主流库使用指南》PDF因其跨平台、格式固定的特性成为文档交换的标准,然而,由于其复杂的内部结构,程序化操作PDF一直是个挑战,本文主要为大家整理了Python操作PD... 目录一、 基础操作1.PyPDF2 (及其继任者 pypdf)2.PyMuPDF / fitz3.Fre

Python对接支付宝支付之使用AliPay实现的详细操作指南

《Python对接支付宝支付之使用AliPay实现的详细操作指南》支付宝没有提供PythonSDK,但是强大的github就有提供python-alipay-sdk,封装里很多复杂操作,使用这个我们就... 目录一、引言二、准备工作2.1 支付宝开放平台入驻与应用创建2.2 密钥生成与配置2.3 安装ali

MySQL 强制使用特定索引的操作

《MySQL强制使用特定索引的操作》MySQL可通过FORCEINDEX、USEINDEX等语法强制查询使用特定索引,但优化器可能不采纳,需结合EXPLAIN分析执行计划,避免性能下降,注意版本差异... 目录1. 使用FORCE INDEX语法2. 使用USE INDEX语法3. 使用IGNORE IND

Python使用openpyxl读取Excel的操作详解

《Python使用openpyxl读取Excel的操作详解》本文介绍了使用Python的openpyxl库进行Excel文件的创建、读写、数据操作、工作簿与工作表管理,包括创建工作簿、加载工作簿、操作... 目录1 概述1.1 图示1.2 安装第三方库2 工作簿 workbook2.1 创建:Workboo

Ubuntu 24.04启用root图形登录的操作流程

《Ubuntu24.04启用root图形登录的操作流程》Ubuntu默认禁用root账户的图形与SSH登录,这是为了安全,但在某些场景你可能需要直接用root登录GNOME桌面,本文以Ubuntu2... 目录一、前言二、准备工作三、设置 root 密码四、启用图形界面 root 登录1. 修改 GDM 配

JSONArray在Java中的应用操作实例

《JSONArray在Java中的应用操作实例》JSONArray是org.json库用于处理JSON数组的类,可将Java对象(Map/List)转换为JSON格式,提供增删改查等操作,适用于前后端... 目录1. jsONArray定义与功能1.1 JSONArray概念阐释1.1.1 什么是JSONA

Java操作Word文档的全面指南

《Java操作Word文档的全面指南》在Java开发中,操作Word文档是常见的业务需求,广泛应用于合同生成、报表输出、通知发布、法律文书生成、病历模板填写等场景,本文将全面介绍Java操作Word文... 目录简介段落页头与页脚页码表格图片批注文本框目录图表简介Word编程最重要的类是org.apach

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os