RxJava2_4:并行处理请求和数据缓存池

2024-06-09 16:32

本文主要是介绍RxJava2_4:并行处理请求和数据缓存池,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

RxJava2_4:并行处理请求和数据缓存池

参考:

http://www.jianshu.com/p/1f4867ce3c01

https://juejin.im/user/573dba2171cfe448aa97b7b0

 

并行处理:

为了解决并行的请求和数据处理,我们可以采用zip来进行。



通过zip我们可以将管道流A和管道流B请求的数据进行1+1对应的处理。一个A请求结果和一个B请求结果构成一个完整流进行处理。如果某一管道少数据,就不会再往下执行。

数据缓存池

如果有多余的数据就会被放入缓存池里面。缓存吃一旦存满就会oom。RxJava的observable和flowable都带有缓存池。但是flowable + subscriber对于缓存请求有对应的api。

Flwoable + subscriber采用的响应式拉取,也就是下游要多少流数据,上流给多少流数据。


策略:

l  ERROR:如果缓存池溢出,就会立刻抛出MissingBackpressureException异常,ERROR即保证在异步操作中,事件累积不能超过128,超过即出现异常。

l  BUFFER:把RxJava中默认的只能存128个事件的缓存池换成一个大的缓存池,支持存很多很多的数据,不会产生OOM。

l  DROP:当消费者处理不了事件,就丢弃。

l  LATEST:消费不掉的事件就丢掉。
唯一的区别就是LATEST总能使消费者能够接收到生产者产生的最后一个事件

 

 

这里的subscription对象是下游控制请求的对象。通过request方法判断一次处理上游缓存中的多少数据。这里下游一次的最大处理量是128,超出就会有oom的错误。

在相同线程中:

在subscriptionr的rquest请求进行之后,floableEmitter都会收到request中的数量,然后每次处理的时候内部的计数器减1.



在不同线程中:

当上下游工作在不同的线程里时,每一个线程里都有一个requested,而我们调用request(1000)时,实际上改变的是下游主线程中的requested,而上游中的requested的值是由RxJava内部调用request(n)去设置的。上游内部设置的request数量总是128。

 

我们设置request=96时。上游从128开始递减,下游从0开始累加到95。

 

这篇关于RxJava2_4:并行处理请求和数据缓存池的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045703

相关文章

Java中流式并行操作parallelStream的原理和使用方法

《Java中流式并行操作parallelStream的原理和使用方法》本文详细介绍了Java中的并行流(parallelStream)的原理、正确使用方法以及在实际业务中的应用案例,并指出在使用并行流... 目录Java中流式并行操作parallelStream0. 问题的产生1. 什么是parallelS

Java中Redisson 的原理深度解析

《Java中Redisson的原理深度解析》Redisson是一个高性能的Redis客户端,它通过将Redis数据结构映射为Java对象和分布式对象,实现了在Java应用中方便地使用Redis,本文... 目录前言一、核心设计理念二、核心架构与通信层1. 基于 Netty 的异步非阻塞通信2. 编解码器三、

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

一篇文章彻底搞懂macOS如何决定java环境

《一篇文章彻底搞懂macOS如何决定java环境》MacOS作为一个功能强大的操作系统,为开发者提供了丰富的开发工具和框架,下面:本文主要介绍macOS如何决定java环境的相关资料,文中通过代码... 目录方法一:使用 which命令方法二:使用 Java_home工具(Apple 官方推荐)那问题来了,

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

Java AOP面向切面编程的概念和实现方式

《JavaAOP面向切面编程的概念和实现方式》AOP是面向切面编程,通过动态代理将横切关注点(如日志、事务)与核心业务逻辑分离,提升代码复用性和可维护性,本文给大家介绍JavaAOP面向切面编程的概... 目录一、AOP 是什么?二、AOP 的核心概念与实现方式核心概念实现方式三、Spring AOP 的关

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置

Java 虚拟线程的创建与使用深度解析

《Java虚拟线程的创建与使用深度解析》虚拟线程是Java19中以预览特性形式引入,Java21起正式发布的轻量级线程,本文给大家介绍Java虚拟线程的创建与使用,感兴趣的朋友一起看看吧... 目录一、虚拟线程简介1.1 什么是虚拟线程?1.2 为什么需要虚拟线程?二、虚拟线程与平台线程对比代码对比示例:三

MyBatis延迟加载与多级缓存全解析

《MyBatis延迟加载与多级缓存全解析》文章介绍MyBatis的延迟加载与多级缓存机制,延迟加载按需加载关联数据提升性能,一级缓存会话级默认开启,二级缓存工厂级支持跨会话共享,增删改操作会清空对应缓... 目录MyBATis延迟加载策略一对多示例一对多示例MyBatis框架的缓存一级缓存二级缓存MyBat

Java中的.close()举例详解

《Java中的.close()举例详解》.close()方法只适用于通过window.open()打开的弹出窗口,对于浏览器的主窗口,如果没有得到用户允许是不能关闭的,:本文主要介绍Java中的.... 目录当你遇到以下三种情况时,一定要记得使用 .close():用法作用举例如何判断代码中的 input