本文转载自微信公众号「月伴飞鱼」,作者日常加油站。转载本文请联系月伴飞鱼公众号。
我们提供的服务有:成都网站设计、成都网站制作、外贸网站建设、微信公众号开发、网站优化、网站认证、韶山ssl等。为上千企事业单位解决了网站和推广的问题。提供周到的售前咨询和贴心的售后服务,是有科学管理、有技术的韶山网站制作公司
最近看公司代码,多线程编程用的比较多,其中有对CompletableFuture的使用,所以想写篇文章总结下
在日常的Java8项目开发中,CompletableFuture是很强大的并行开发工具,其语法贴近java8的语法风格,与stream一起使用也能大大增加代码的简洁性
大家可以多应用到工作中,提升接口性能,优化代码
CompletableFuture是Java 8新增的一个类,用于异步编程,继承了Future和CompletionStage
这个Future主要具备对请求结果独立处理的功能,CompletionStage用于实现流式处理,实现异步请求的各个阶段组合或链式处理,因此completableFuture能实现整个异步调用接口的扁平化和流式处理,解决原有Future处理一系列链式异步请求时的复杂编码
Future的局限性
1、Future 的结果在非阻塞的情况下,不能执行更进一步的操作
我们知道,使用Future时只能通过isDone()方法判断任务是否完成,或者通过get()方法阻塞线程等待结果返回,它不能非阻塞的情况下,执行更进一步的操作。
2、不能组合多个Future的结果
假设你有多个Future异步任务,你希望最快的任务执行完时,或者所有任务都执行完后,进行一些其他操作
3、多个Future不能组成链式调用
当异步任务之间有依赖关系时,Future不能将一个任务的结果传给另一个异步任务,多个Future无法创建链式的工作流。
4、没有异常处理
现在使用CompletableFuture能帮助我们完成上面的事情,让我们编写更强大、更优雅的异步程序
创建异步任务
通常可以使用下面几个CompletableFuture的静态方法创建一个异步任务
- public static CompletableFuture
runAsync(Runnable runnable); //创建无返回值的异步任务 - public static CompletableFuture
runAsync(Runnable runnable, Executor executor); //无返回值,可指定线程池(默认使用ForkJoinPool.commonPool) - public static CompletableFuture supplyAsync(Supplier supplier); //创建有返回值的异步任务
- public static CompletableFuture supplyAsync(Supplier supplier, Executor executor); //有返回值,可指定线程池
使用示例:
- Executor executor = Executors.newFixedThreadPool(10);
- CompletableFuture
future = CompletableFuture.runAsync(() -> { - //do something
- }, executor);
- int poiId = 111;
- CompletableFuture
future = CompletableFuture.supplyAsync(() -> { - PoiDTO poi = poiService.loadById(poiId);
- return poi.getName();
- });
- // Block and get the result of the Future
- String poiName = future.get();
使用回调方法
通过future.get()方法获取异步任务的结果,还是会阻塞的等待任务完成
CompletableFuture提供了几个回调方法,可以不阻塞主线程,在异步任务完成后自动执行回调方法中的代码
- public CompletableFuture
thenRun(Runnable runnable); //无参数、无返回值 - public CompletableFuture
thenAccept(Consumer super T> action); //接受参数,无返回值 - public CompletableFuture thenApply(Function super T,? extends U> fn); //接受参数T,有返回值U
使用示例:
- CompletableFuture
future = CompletableFuture.supplyAsync(() -> "Hello") - .thenRun(() -> System.out.println("do other things. 比如异步打印日志或发送消息"));
- //如果只想在一个CompletableFuture任务执行完后,进行一些后续的处理,不需要返回值,那么可以用thenRun回调方法来完成。
- //如果主线程不依赖thenRun中的代码执行完成,也不需要使用get()方法阻塞主线程。
- CompletableFuture
future = CompletableFuture.supplyAsync(() -> "Hello") - .thenAccept((s) -> System.out.println(s + " world"));
- //输出:Hello world
- //回调方法希望使用异步任务的结果,并不需要返回值,那么可以使用thenAccept方法
- CompletableFuture
future = CompletableFuture.supplyAsync(() -> { - PoiDTO poi = poiService.loadById(poiId);
- return poi.getMainCategory();
- }).thenApply((s) -> isMainPoi(s)); // boolean isMainPoi(int poiId);
- future.get();
- //希望将异步任务的结果做进一步处理,并需要返回值,则使用thenApply方法。
- //如果主线程要获取回调方法的返回,还是要用get()方法阻塞得到
组合两个异步任务
- //thenCompose方法中的异步任务依赖调用该方法的异步任务
- public CompletableFuture thenCompose(Function super T, ? extends CompletionStage> fn);
- //用于两个独立的异步任务都完成的时候
- public CompletableFuture
thenCombine(CompletionStage extends U> other, - BiFunction super T,? super U,? extends V> fn);
使用示例:
- CompletableFuture
> poiFuture = CompletableFuture.supplyAsync(
- () -> poiService.queryPoiIds(cityId, poiId)
- );
- //第二个任务是返回CompletableFuture的异步方法
- CompletableFuture
> getDeal(List
poiIds){ - return CompletableFuture.supplyAsync(() -> poiService.queryPoiIds(poiIds));
- }
- //thenCompose
- CompletableFuture
> resultFuture = poiFuture.thenCompose(poiIds -> getDeal(poiIds));
- resultFuture.get();
thenCompose和thenApply的功能类似,两者区别在于thenCompose接受一个返回CompletableFuture的Function,当想从回调方法返回的CompletableFuture中直接获取结果U时,就用thenCompose
如果使用thenApply,返回结果resultFuture的类型是CompletableFuture>>,而不是CompletableFuture>
- CompletableFuture
future = CompletableFuture.supplyAsync(() -> "Hello") - .thenCombine(CompletableFuture.supplyAsync(() -> "world"), (s1, s2) -> s1 + s2);
- //future.get()
组合多个CompletableFuture
当需要多个异步任务都完成时,再进行后续处理,可以使用allOf方法
- CompletableFuture
poiIDTOFuture = CompletableFuture - .supplyAsync(() -> poiService.loadPoi(poiId))
- .thenAccept(poi -> {
- model.setModelTitle(poi.getShopName());
- //do more thing
- });
- CompletableFuture
productFuture = CompletableFuture - .supplyAsync(() -> productService.findAllByPoiIdOrderByUpdateTimeDesc(poiId))
- .thenAccept(list -> {
- model.setDefaultCount(list.size());
- model.setMoreDesc("more");
- });
- //future3等更多异步任务,这里就不一一写出来了
- CompletableFuture.allOf(poiIDTOFuture, productFuture, future3, ...).join(); //allOf组合所有异步任务,并使用join获取结果
该方法挺适合C端的业务,比如通过poiId异步的从多个服务拿门店信息,然后组装成自己需要的模型,最后所有门店信息都填充完后返回
这里使用了join方法获取结果,它和get方法一样阻塞的等待任务完成
多个异步任务有任意一个完成时就返回结果,可以使用anyOf方法
- CompletableFuture
future1 = CompletableFuture.supplyAsync(() -> { - try {
- TimeUnit.SECONDS.sleep(2);
- } catch (InterruptedException e) {
- throw new IllegalStateException(e);
- }
- return "Result of Future 1";
- });
- CompletableFuture
future2 = CompletableFuture.supplyAsync(() -> { - try {
- TimeUnit.SECONDS.sleep(1);
- } catch (InterruptedException e) {
- throw new IllegalStateException(e);
- }
- return "Result of Future 2";
- });
- CompletableFuture
future3 = CompletableFuture.supplyAsync(() -> { - try {
- TimeUnit.SECONDS.sleep(3);
- } catch (InterruptedException e) {
- throw new IllegalStateException(e);
- return "Result of Future 3";
- });
- CompletableFuture
- System.out.println(anyOfFuture.get()); // Result of Future 2
- Integer age = -1;
- CompletableFuture
maturityFuture = CompletableFuture.supplyAsync(() -> { - if(age < 0) {
- throw new IllegalArgumentException("Age can not be negative");
- }
- if(age > 18) {
- return "Adult";
- } else {
- return "Child";
- }
- }).exceptionally(ex -> {
- System.out.println("Oops! We have an exception - " + ex.getMessage());
- return "Unknown!";
- }).thenAccept(s -> System.out.print(s));
- //Unkown!
exceptionally方法可以处理异步任务的异常,在出现异常时,给异步任务链一个从错误中恢复的机会,可以在这里记录异常或返回一个默认值
使用handler方法也可以处理异常,并且无论是否发生异常它都会被调用
- Integer age = -1;
- CompletableFuture
maturityFuture = CompletableFuture.supplyAsync(() -> { - if(age < 0) {
- throw new IllegalArgumentException("Age can not be negative");
- }
- if(age > 18) {
- return "Adult";
- } else {
- return "Child";
- }
- }).handle((res, ex) -> {
- if(ex != null) {
- System.out.println("Oops! We have an exception - " + ex.getMessage());
- return "Unknown!";
- }
- return res;
- });
分片和并行处理:分片借助stream实现,然后通过CompletableFuture实现并行执行,最后做数据聚合(其实也是stream的方法)
CompletableFuture并不提供单独的分片api,但可以借助stream的分片聚合功能实现
举个例子:
- //请求商品数量过多时,做分批异步处理
- List
> skuBaseIdsList = ListUtils.partition(skuIdList, 10);//分片
- //并行
- List
>> futureList = Lists.newArrayList(); - for (List
skuId : skuBaseIdsList) { - CompletableFuture
> tmpFuture = getSkuSales(skuId);
- futureList.add(tmpFuture);
- }
- //聚合
- futureList.stream().map(CompletalbleFuture::join).collent(Collectors.toList());
带大家领略下CompletableFuture异步编程的优势
这里我们用CompletableFuture实现水泡茶程序
首先还是需要先完成分工方案,在下面的程序中,我们分了3个任务:
下面是代码实现,你先略过runAsync()、supplyAsync()、thenCombine()这些不太熟悉的方法,从大局上看,你会发现:
- //任务1:洗水壶->烧开水
- CompletableFuture f1 =
- CompletableFuture.runAsync(()->{
- System.out.println("T1:洗水壶...");
- sleep(1, TimeUnit.SECONDS);
- System.out.println("T1:烧开水...");
- sleep(15, TimeUnit.SECONDS);
- });
- //任务2:洗茶壶->洗茶杯->拿茶叶
- CompletableFuture f2 =
- CompletableFuture.supplyAsync(()->{
- System.out.println("T2:洗茶壶...");
- sleep(1, TimeUnit.SECONDS);
- System.out.println("T2:洗茶杯...");
- sleep(2, TimeUnit.SECONDS);
- System.out.println("T2:拿茶叶...");
- sleep(1, TimeUnit.SECONDS);
- return "龙井";
- });
- //任务3:任务1和任务2完成后执行:泡茶
- CompletableFuture f3 =
- f1.thenCombine(f2, (__, tf)->{
- System.out.println("T1:拿到茶叶:" + tf);
- System.out.println("T1:泡茶...");
- return "上茶:" + tf;
- });
- //等待任务3执行结果
- System.out.println(f3.join());
- void sleep(int t, TimeUnit u) {
- try {
- u.sleep(t);
- }catch(InterruptedException e){}
- }
1.CompletableFuture默认线程池是否满足使用
前面提到创建CompletableFuture异步任务的静态方法runAsync和supplyAsync等,可以指定使用的线程池,不指定则用CompletableFuture的默认线程池
- private static final Executor asyncPool = useCommonPool ?
- ForkJoinPool.commonPool() : new ThreadPerTaskExecutor();
可以看到,CompletableFuture默认线程池是调用ForkJoinPool的commonPool()方法创建,这个默认线程池的核心线程数量根据CPU核数而定,公式为Runtime.getRuntime().availableProcessors() - 1,以4核双槽CPU为例,核心线程数量就是4*2-1=7个
这样的设置满足CPU密集型的应用,但对于业务都是IO密集型的应用来说,是有风险的,当qps较高时,线程数量可能就设的太少了,会导致线上故障
所以可以根据业务情况自定义线程池使用
2.get设置超时时间不能串行get,不然会导致接口延时线程数量*超时时间
当前题目:实现异步编程,这个工具类你得掌握!
网页地址:http://www.36103.cn/qtweb/news17/367.html
网站建设、网络推广公司-创新互联,是专注品牌与效果的网站制作,网络营销seo公司;服务项目有等
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联