Neutron重试操作

2023-12-19 10:18
文章标签 操作 重试 neutron

本文主要是介绍Neutron重试操作,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在neutron.db.api模块内部有一个修饰符叫做“retry_if_session_inactive”。其应用于保护所有执行DB操作的方法。此修饰符将获取它所保护的方法抛出的任何的死锁错误、RetryRequests、连接错误和单一限制破坏。

如果应用的方法在活动会话中调用,此修饰符不会重试操作。这是因为它捕获的大多数异常将会话部分的转到回滚状态,以至于其不再可用。重要的是保证有一个处于事务开始之外的修饰符。如果方法在另外一个事务中被调用,此修饰符可进行嵌套。

如果被包含的方法,没有使用上下文作为参数,“retry_db_errors”描述符方法可被使用。其重试相同的异常,并且与“retry_if_session_active”具有相同的反嵌套行为,但是其不检查会话是否连接了任何上下文关键字(“retry_if_session_active”在检查完会话之后,内部只是使用“retry_db_errors”)。

失败时的等幂性 Idempotency on Failures

当遇到异常时,被修饰的方法应当总是执行清空,以便可安全的重试操作。所以如果一个方法创建DB对象、提交、之后创建另一个对象,如果第二个失败,方法必须清除第一个创建的DB对象。假设任何DB操作都可抛出可重试的错误。

你也许能看到Neutron内的API 层的重试修饰符。尽管如此,我们试着消除它们,因为每个API操作有着许多独立的步骤,是的保证在部分失败上的等幂性非常困难。

参数突变 Argument Mutation

一个修饰的函数不应改变传入的复杂参数。如果改变,应由异常处理函数可反转此改变,以便可安全的进行重试操作。

修饰符将自动的创建通过它传入的sets、lists和dicts的深度拷贝,但是它不处理其它的参数。

尝试处理竞争条件 Race Conditions

检测带有单个限制来创建DB记录的竞争条件的困难之一是,要决定在哪里放置异常处理函数,因为限制违规可能在flush时立即发生,或者直到在会话上下文管理器退出时事务被提交之后才发生。所以最终我们实现的代码类似与如下:

  def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)try:with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objexcept DBDuplicateEntry as e:# code to parse columnsif 'mac' in e.columns:raise MacInUse(mac_address)if 'ip' in e.columns:raise IPAddressInUse(ip)def _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

所以,我们实现的异常处理函数,需要理解事情出错在哪里,并将其转为对最终用户而言合适的异常。这明显偏离了创建端口的主要目的。

既然重试修饰符将自动为我们捕获并重试DB重复错误,我们可允许它在竞争条件上重试,其将授予原始的验证逻辑去重新执行,并触发合适的错误。这将保持验证逻辑处于一个地方,是代码更简洁。

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objdef _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

嵌套

一旦修饰符尝试某个操作到了最大次数,它将关联一个标记到此其触发的异常,后续可避免此调用方法修饰符再次尝试错误。此阻止了重试次数的指数级增长,如果它们是分层结构的。

用法

这里有一些使用示例:

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_elephant(context, elephant_details):....@db_api.retry_if_session_inactive()def atomic_bulk_create_elephants(context, elephants):with context.session.begin():for elephant in elephants:# note that if create_elephant throws a retriable# exception, the decorator around it will not retry# because the session is active. The decorator around# atomic_bulk_create_elephants will be responsible for# retrying the entire operation.create_elephant(context, elephant)# sample usage when session is attached to a var other than 'context'@db_api.retry_if_session_inactive(context_var_name='ctx')def some_function(ctx):

这篇关于Neutron重试操作的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/511823

相关文章

SQL中JOIN操作的条件使用总结与实践

《SQL中JOIN操作的条件使用总结与实践》在SQL查询中,JOIN操作是多表关联的核心工具,本文将从原理,场景和最佳实践三个方面总结JOIN条件的使用规则,希望可以帮助开发者精准控制查询逻辑... 目录一、ON与WHERE的本质区别二、场景化条件使用规则三、最佳实践建议1.优先使用ON条件2.WHERE用

Linux链表操作方式

《Linux链表操作方式》:本文主要介绍Linux链表操作方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、链表基础概念与内核链表优势二、内核链表结构与宏解析三、内核链表的优点四、用户态链表示例五、双向循环链表在内核中的实现优势六、典型应用场景七、调试技巧与

Java Multimap实现类与操作的具体示例

《JavaMultimap实现类与操作的具体示例》Multimap出现在Google的Guava库中,它为Java提供了更加灵活的集合操作,:本文主要介绍JavaMultimap实现类与操作的... 目录一、Multimap 概述Multimap 主要特点:二、Multimap 实现类1. ListMult

Python中文件读取操作漏洞深度解析与防护指南

《Python中文件读取操作漏洞深度解析与防护指南》在Web应用开发中,文件操作是最基础也最危险的功能之一,这篇文章将全面剖析Python环境中常见的文件读取漏洞类型,成因及防护方案,感兴趣的小伙伴可... 目录引言一、静态资源处理中的路径穿越漏洞1.1 典型漏洞场景1.2 os.path.join()的陷

Python使用Code2flow将代码转化为流程图的操作教程

《Python使用Code2flow将代码转化为流程图的操作教程》Code2flow是一款开源工具,能够将代码自动转换为流程图,该工具对于代码审查、调试和理解大型代码库非常有用,在这篇博客中,我们将深... 目录引言1nVflRA、为什么选择 Code2flow?2、安装 Code2flow3、基本功能演示

Python中OpenCV与Matplotlib的图像操作入门指南

《Python中OpenCV与Matplotlib的图像操作入门指南》:本文主要介绍Python中OpenCV与Matplotlib的图像操作指南,本文通过实例代码给大家介绍的非常详细,对大家的学... 目录一、环境准备二、图像的基本操作1. 图像读取、显示与保存 使用OpenCV操作2. 像素级操作3.

python操作redis基础

《python操作redis基础》Redis(RemoteDictionaryServer)是一个开源的、基于内存的键值对(Key-Value)存储系统,它通常用作数据库、缓存和消息代理,这篇文章... 目录1. Redis 简介2. 前提条件3. 安装 python Redis 客户端库4. 连接到 Re

Java Stream.reduce()方法操作实际案例讲解

《JavaStream.reduce()方法操作实际案例讲解》reduce是JavaStreamAPI中的一个核心操作,用于将流中的元素组合起来产生单个结果,:本文主要介绍JavaStream.... 目录一、reduce的基本概念1. 什么是reduce操作2. reduce方法的三种形式二、reduce

MySQL表空间结构详解表空间到段页操作

《MySQL表空间结构详解表空间到段页操作》在MySQL架构和存储引擎专题中介绍了使用不同存储引擎创建表时生成的表空间数据文件,在本章节主要介绍使用InnoDB存储引擎创建表时生成的表空间数据文件,对... 目录️‍一、什么是表空间结构1.1 表空间与表空间文件的关系是什么?️‍二、用户数据在表空间中是怎么

Python对PDF书签进行添加,修改提取和删除操作

《Python对PDF书签进行添加,修改提取和删除操作》PDF书签是PDF文件中的导航工具,通常包含一个标题和一个跳转位置,本教程将详细介绍如何使用Python对PDF文件中的书签进行操作... 目录简介使用工具python 向 PDF 添加书签添加书签添加嵌套书签Python 修改 PDF 书签Pytho