InfoQ

InfoQ

新闻

我的书签

登录注册 以永久保存书签。

该内容已经被标记书签!

标记书签错误,请重试!

平衡数据分发器:使用并行机制提升SSIS性能

作者 Jenni Konrad 译者 侯伯薇 发布于 2011年6月8日

领域
运维 & 基础架构,
语言 & 开发
主题
SQL Server Integration Services ,
SQL Server ,
.NET ,
关系型数据库 ,
微软 ,
编程 ,
数据库

平衡数据分发器(Balanced Data Distributor BDD)是针对SQL Server Integration Services (SSIS)的一种新的多线程数据流传输工具。它会把数据分发到多个输出中,从而达到提升多核和多处理器服务器环境下性能的目的。

平衡数据分发器利用并行机制来加快数据传输的速度,因此不会对单处理器的环境产生影响。(事实上,和使用SSIS中的脚本组件(Script Component )直接插入的方式相比,它反而会降低性能。) 微软建议只在特定的环境中才使用这种特定的传输方式。合适的环境需要符合以下标准:

  • 有大量需要移动的数据。
  • 能够快速读取数据(例如,从纯文本文件),但是在传输过程或者目的地存在潜在的瓶颈。
  • 我们不需要维护源数据的顺序(BDD会把它们切分为大致相等的缓存)。
  • 目标需要是统一的,或者类型一致。

在Boyan Penev的博客中,他对BDD和使用脚本组件插入做了介绍性的性能比较。在本地的SQL Server实例中,他发现有35%-45%的性能提升。SQL Server性能团队对于在并行环境中使用平衡数据分发器提供了更多最佳实践信息。

当前在SSIS 2008中已经提供了平衡数据分发器的传输方式。

查看英文原文:Balanced Data Distributor: Improve SSIS Performance with Parallelism

译者 侯伯薇 是InfoQ中文站架构社区编辑,有多年对日和国内项目开发经验,目前关注企业中技术与实际业务之间的融合和协作。