BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

Spring Batch 2.0支持工作划分和基于注解的配置

| 作者 Srini Penchikala 关注 34 他的粉丝 ,译者 宋玮 关注 0 他的粉丝 发布于 2009年5月9日. 估计阅读时间: 5 分钟 | Google、Facebook、Pinterest、阿里、腾讯 等顶尖技术团队的上百个可供参考的架构实例!

最新版本的Spring Batch框架支持工作划分(job partitioning)、远程分割(remote chunking)及基于注解的配置。Spring Batch开发团队最近发布了batch框架的2.0版。新版本还新增了诸如对Java 5的支持及非顺序执行等特性。

这一版本的新特性可以分为四类:对Java 5的支持、非顺序执行、增强的可伸缩性以及注解。

对Java 5的支持:
Spring Batch 2.0版支持Java 5泛型和参数化类型,以便可以在编译时检查类型安全性。例如,ItemReader接口现在有了一个类型安全的read方法。

非顺序执行:
这其实包括3个新特性——条件、暂停和并行执行。凭借这些特性,各步骤可以按非线性顺序执行。即使工作(Job)中的某个步骤(step)失败,整个工作也依然能够完成。有条件执行(Conditional execution)根据最后一个ExitStatus把工作划分为不同的分支。这也包括FAILED状态下执行分支任务的能力,也就是说一个步骤的失败不再是整个工作的致命错误。暂停执行(Pause execution)可以用来停止或等待外部命令(explicit instruction),这在业务规则需要人工干预以检查业务关键数据是否有效时非常有用。而对于多步骤的并行执行(parallel execution),各步骤间互相独立,用户可以自行指定哪些分支能够并行执行。

可伸缩性:
新版采用两种方法支持多进程的并行执行:远程分割及划分。远程分割是在对数据结构没有任何详尽认知的情况下对一个步骤的特定工作进行划分的一项技术。任何输入源都可以动态分割,只需要通过单一进程读取该输入源,并将其作为一整块发送给远程工作进程即可。远程工作进程实现了listener模式,对请求作出响应,处理数据且异步发回应答。请求和应答的传输必须是持久性的、有保证的,且只有单一的消费者,这些特性在所有JMS实现中都已具备。Spring Batch正是在Spring Integration基础上构建的远程分割特性,因此它根本不必关心消息中间件的实际实现。 

划分是实现可伸缩性的另一种方式,相比之下,它需要知道输入数据的结构,比如主键的范围、或者要处理文件的名字。这种模式的好处是,分区中的每个元素的处理器都可以看作是正常Spring Batch工作中的单个步骤。它们不用实现任何特定模式,因而易于配置和测试。划分比远程分割更具伸缩性,这是因为在同一地方读取所有输入数据时不会产生序列化瓶颈。在Spring Batch 2.0 中,划分由两个接口支持:PartitionHandlerStepExecutionSplitter

基于注解的配置:
Spring Batch组件如reader、writer、processor、listener,都可以使用注解来配置,也都可以插入到任务的某个步骤中去。这是通过针对Spring Batch的XML命名空间来实现的。

新版本在应用程序监测方面也有一些变化,包括对执行或跳过项目的计数、记账;在每个阶段对所有项目读取、处理和写入的分割计数等方面的统计。对于那些没有把执行划分成读取、处理、写入等各个步骤(或tasklet)的应用来说,这些统计更多的是为了综合了解而绝非必需,但多数情况下,这总比只存储项目总数更可取。

SpringSource计划在企业级Batch产品中提供划分和远程分割、还有管理和调度等方面的完整的运行时解决方案。其未来的路线图还包括为Spring Batch 2.1增加Spring 3.0依赖(同时保留2.5.6为可选)。正是出于这样的计划,新版本中涵盖的特性以工作和步骤的配置居多,尤其是在配置过程中使用了Spring Expression Language (EL)的延迟绑定(late binding),该延迟绑定的语法和Spring Batch 2.0中的基本相同,只是所提供的特性更多、灵活性更大。

查看英文原文:Spring Batch 2.0 Supports Job Partitioning and Annotation Based Configuration

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我
社区评论

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT