rxjava之数据分批加载

2024-03-06 13:32
文章标签 java 数据 加载 rx 分批

本文主要是介绍rxjava之数据分批加载,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

使用场景:

当从服务器请求的数据比较庞大时,这个时候,需要对数据进行分批处理,然后以当前的数据刷新界面

效果图:

image

原理分析图:

image

完整代码如下:

mDataInfo = new DataInfo();
List<Integer> objects = new ArrayList<>();
for (int i = 0; i < 4000; i++) {objects.add(i);
}
mDataInfo.l1 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 8000; i++) {objects.add(i);
}
mDataInfo.l2 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 12000; i++) {objects.add(i);
}Observable.concat(Observable.just(mDataInfo.l1), Observable.just(mDataInfo.l2), Observable.just(mDataInfo.l3)).subscribeOn(Schedulers.io()).concatMap(new Function<List<Integer>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(List<Integer> list1) throws Exception {LoggerUtils.loge("concatMap list1.size = " + list1.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = list1.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(list1);NewPageInfo newPageInfo = null;String tagStr = "";if (list1.size() == mDataInfo.l1.size()) {tagStr = "l1";} else if (list1.size() == mDataInfo.l2.size()) {tagStr = "l2";} else if (list1.size() == mDataInfo.l3.size()) {tagStr = "l3";}for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(1500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge(msg);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 800);}});

场景二

以上的操作,对象为空了,直接就会抛出空指针的异常,流程没办法往下走了。

改进后的操作如下

image

示例代码
private void initData() {MPChartInfo mpChartInfo = new MPChartInfo();mDataInfo = new DataInfo();List<Integer> objects = new ArrayList<>();for (int i = 0; i < 1000; i++) {objects.add(i);}mDataInfo.name = "l1";mDataInfo.l1 = objects;mpChartInfo.V52 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 2000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l2 = objects;mDataInfo.name = "l2";mpChartInfo.V54 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 4000; i++) {objects.add(i);}mDataInfo.l2 = objects;objects = new ArrayList<>();for (int i = 0; i < 5000; i++) {objects.add(i);}mDataInfo.name = "l3";mDataInfo.l3 = objects;mpChartInfo.V58 = mDataInfo;showUI(mpChartInfo);
} /*** 标识传递,空数据的处理*/
private void ll_02_03(MPChartInfo mpChartInfo) {mV52 = mpChartInfo.getV52();mV54 = mpChartInfo.getV54();mV54 = null;// 对象为空时就使用空的ObservableObservable empty = Observable.empty();mV58 = mpChartInfo.getV58();mV58 = null;Observable.concat(mV52 != null ? Observable.just(mV52) : empty, mV54 != null ? Observable.just(mV54) : empty, mV58 != null ? Observable.just(mV58) : empty).subscribeOn(Schedulers.io()).concatMap(new Function<DataInfo, Observable<Map<String, List<Integer>>>>() {@Overridepublic Observable<Map<String, List<Integer>>> apply(DataInfo dataInfo) throwsException {LoggerUtils.loge("concatMap apply = " + dataInfo.name);ThreadUtils.doSleep(300);List<Integer> l1 = dataInfo.l1;List<Integer> l2 = dataInfo.l2;List<Integer> l3 = dataInfo.l3;// 定义标识,标识一定要往下传递,要区分是刷新哪个控件使用 Map<String, List<Integer>> map = new LinkedHashMap<>();map.put(dataInfo.name, l1);// 对象为空或集合为空时,使用空的ObservableObservable<Map<String, List<Integer>>> source1 = l1 != null && l1.size()> 0 ?Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l2);Observable<Map<String, List<Integer>>> source2 = l2 != null && l2.size()> 0 ? Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l3);Observable<Map<String, List<Integer>>> source3 = l3 != null && l3.size()> 0 ?Observable.just(map) :empty;Observable<Map<String, List<Integer>>> concat = Observable.concat(source1, source2,source3);return concat;}}).subscribeOn(Schedulers.io()).concatMap(new Function<Map<String, List<Integer>>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(Map<String, List<Integer>> list1) throwsException {Iterator<Map.Entry<String, List<Integer>>> iterator = list1.entrySet().iterator();Map.Entry<String, List<Integer>> entry = iterator.next();List<Integer> entryValue = entry.getValue();String key = entry.getKey();LoggerUtils.loge("concatMap apply tag = " + key + " , list1.size " +"= " + entryValue.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = entryValue.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(entryValue);NewPageInfo newPageInfo = null;String tagStr = key;for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;
//                            LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge("consumer name = " + newPageInfo.tag + " , dataSize : "+ size);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {// 根据标签刷新控件if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 400);}});
}

简书文章地址

这篇关于rxjava之数据分批加载的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/780216

相关文章

Java中流式并行操作parallelStream的原理和使用方法

《Java中流式并行操作parallelStream的原理和使用方法》本文详细介绍了Java中的并行流(parallelStream)的原理、正确使用方法以及在实际业务中的应用案例,并指出在使用并行流... 目录Java中流式并行操作parallelStream0. 问题的产生1. 什么是parallelS

Java中Redisson 的原理深度解析

《Java中Redisson的原理深度解析》Redisson是一个高性能的Redis客户端,它通过将Redis数据结构映射为Java对象和分布式对象,实现了在Java应用中方便地使用Redis,本文... 目录前言一、核心设计理念二、核心架构与通信层1. 基于 Netty 的异步非阻塞通信2. 编解码器三、

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

一篇文章彻底搞懂macOS如何决定java环境

《一篇文章彻底搞懂macOS如何决定java环境》MacOS作为一个功能强大的操作系统,为开发者提供了丰富的开发工具和框架,下面:本文主要介绍macOS如何决定java环境的相关资料,文中通过代码... 目录方法一:使用 which命令方法二:使用 Java_home工具(Apple 官方推荐)那问题来了,

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

Java AOP面向切面编程的概念和实现方式

《JavaAOP面向切面编程的概念和实现方式》AOP是面向切面编程,通过动态代理将横切关注点(如日志、事务)与核心业务逻辑分离,提升代码复用性和可维护性,本文给大家介绍JavaAOP面向切面编程的概... 目录一、AOP 是什么?二、AOP 的核心概念与实现方式核心概念实现方式三、Spring AOP 的关

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置

Java 虚拟线程的创建与使用深度解析

《Java虚拟线程的创建与使用深度解析》虚拟线程是Java19中以预览特性形式引入,Java21起正式发布的轻量级线程,本文给大家介绍Java虚拟线程的创建与使用,感兴趣的朋友一起看看吧... 目录一、虚拟线程简介1.1 什么是虚拟线程?1.2 为什么需要虚拟线程?二、虚拟线程与平台线程对比代码对比示例:三

MyBatis延迟加载与多级缓存全解析

《MyBatis延迟加载与多级缓存全解析》文章介绍MyBatis的延迟加载与多级缓存机制,延迟加载按需加载关联数据提升性能,一级缓存会话级默认开启,二级缓存工厂级支持跨会话共享,增删改操作会清空对应缓... 目录MyBATis延迟加载策略一对多示例一对多示例MyBatis框架的缓存一级缓存二级缓存MyBat

Java中的.close()举例详解

《Java中的.close()举例详解》.close()方法只适用于通过window.open()打开的弹出窗口,对于浏览器的主窗口,如果没有得到用户允许是不能关闭的,:本文主要介绍Java中的.... 目录当你遇到以下三种情况时,一定要记得使用 .close():用法作用举例如何判断代码中的 input