时间戳

首页 > 解决方案 > rxjava中的重试缓冲区

rx-java - rxjava中的重试缓冲区

问题描述

一个热的 Observable 发射项目。我想将这些项目上传到服务器。有两个考虑：

  1. 由于io操作的费用，我想批量处理这些项目并作为数组上传
  2. 由于 io 操作的不可靠性，我希望将失败的批次上传添加到下一批。
Uploads succeed:
1 - 2 - 3 - 4 - 5
------------------
u(1,2,3) - u(4,5)

First upload fails:
1 - 2 - 3 - 4 - 5
------------------
u(1,2,3) - u(1,2,3,4,5)

我可以通过使用buffer运算符来处理第一个，但不知道如何满足第二个要求。

标签： rx-javarx-java2buffering

解决方案

这是我将失败存储在队列中的想法

public class StackOverflow {

    public static void main(String[] args) {
        // store any failures that may have occurred
        LinkedBlockingQueue<String> failures = new LinkedBlockingQueue<>();

        toUpload()
                // buffer however you want
                .buffer(5)
                // here is the interesting part
                .flatMap(strings -> {
                    // add any previous failures
                    List<String> prevFailures = new ArrayList<>();
                    failures.drainTo(prevFailures);
                    strings.addAll(prevFailures);

                    return Flowable.just(strings);
                })
                .flatMapCompletable(strings -> {
                    // upload the data
                    return upload(strings).doOnError(throwable -> {
                        // if its an upload failure:
                        failures.addAll(strings);
                    });
                }).subscribe();
    }

    // whatever your source flowable is
    private static Flowable<String> toUpload() {
        return Flowable.fromIterable(Arrays.asList("a", "b", "c", "d", "e", "f", "g", "h", "i"));
    }

    // some upload operation
    private static Completable upload(List<String> strings) {
        return Completable.complete();
    }
}

这里的一些边缘情况是事实，如果最后一个可流动的缓冲组失败，则不会重试。这可以通过retryWhen操作员来实现，但基本思想与使用队列相同

推荐阅读