Spring Batch 处理框架-大量的数据处理系统

    Spring Batch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的数据处理系统。Spring Batch以POJO和大家熟知的Spring框架为基础,使开发者更容易的访问和利用企业级服务。Spring Batch可以提供大量的,可重复的数据处理功能,包括日志记录/跟踪,事务管理,作业处理统计工作重新启动、跳过,和资源管理等重要功能。
 
       业务方案:
 
1、批处理定期提交。
 
2、并行批处理:并行处理工作。
 
3、企业消息驱动处理
 
4、大规模的并行处理
 
5、手动或是有计划的重启
 
6、局部处理:跳过记录(如:回滚)
 
      技术目标:
 
1、利用Spring编程模型:使程序员专注于业务处理,让Spring框架管理流程。
 
2、明确分离批处理的执行环境和应用。
 
3、提供核心的,共通的接口。
 
4、提供开箱即用(out of the box)的简单的默认的核心执行接口。
 
5、提供Spring框架中配置、自定义、和扩展服务。
 
6、所有存在的核心服务可以很容的被替换和扩展,不影响基础层。
 
7、提供一个简单的部署模式,利用Maven构建独立的Jar文件。

,批处理的整个流程可以明显的分为3个阶段: 
         1、读数据 
         2、业务处理 
         3、归档结果数据 
  SpringBatch为我们提供了什么呢? 
       1、统一的读写接口 
       2、丰富的任务处理方式、 
       3、灵活的事务管理及并发处理 
       4、日志、监控、任务重启与跳过等特性 
注意,Spring Batch未提供关于批处理任务调度的功能,因此如何周期性的调用批处理任务需要自己想办法解决,就Java来说,Quartz是一个不错的解决方案,或者写脚本处理之。

看完下面内容大家就对spring batch了解差不多了。
http://ningandjiao.iteye.com/blog/1616584
http://wenku.baidu.com/view/740ee4bac77da26925c5b0ca.html

最后这个是批处理平台产品(Spring Batch管理平台)http://3883270.blog.51cto.com/3873270/1268540

 

Spring Batch:http://wenku.baidu.com/view/086308b7c77da26925c5b0a8.html

SpringBatch:http://wenku.baidu.com/view/a82ceacfaa00b52acfc7cae9.html

收藏  | 打印  | 字体:  -缩小  放大+    
[ x ] 请正确填写下面信息


是否保存此网页快照 是否公开此收藏

查看全部评论(0)我来说两句