写点什么

平衡数据分发器:使用并行机制提升 SSIS 性能

  • 2011-06-08
  • 本文字数:502 字

    阅读完需:约 2 分钟

平衡数据分发器(Balanced Data Distributor BDD)是针对 SQL Server Integration Services (SSIS)的一种新的多线程数据流传输工具。它会把数据分发到多个输出中,从而达到提升多核和多处理器服务器环境下性能的目的。

平衡数据分发器利用并行机制来加快数据传输的速度,因此不会对单处理器的环境产生影响。(事实上,和使用 SSIS 中的脚本组件(Script Component )直接插入的方式相比,它反而会降低性能。) 微软建议只在特定的环境中才使用这种特定的传输方式。合适的环境需要符合以下标准:

  • 有大量需要移动的数据。
  • 能够快速读取数据(例如,从纯文本文件),但是在传输过程或者目的地存在潜在的瓶颈。
  • 我们不需要维护源数据的顺序(BDD 会把它们切分为大致相等的缓存)。
  • 目标需要是统一的,或者类型一致。

在 Boyan Penev 的博客中,他对 BDD 和使用脚本组件插入做了介绍性的性能比较。在本地的SQL Server 实例中,他发现有35%-45% 的性能提升。SQL Server 性能团队对于在并行环境中使用平衡数据分发器提供了更多最佳实践信息。

当前在SSIS 2008 中已经提供了平衡数据分发器的传输方式。

查看英文原文: Balanced Data Distributor: Improve SSIS Performance with Parallelism

2011-06-08 08:022561
用户头像

发布了 340 篇内容, 共 145.7 次阅读, 收获喜欢 13 次。

关注

评论

发布
暂无评论
发现更多内容

OLAP分析数据库适用场景及主流产品对比

天翼云开发者社区

数据库

Higress MCP 服务管理,助力构建私有 MCP 市场

阿里巴巴云原生

阿里云 云原生 Higress

基于ubuntu系统部署FateLLM1.3.0

天翼云开发者社区

云计算

官宣!MinerU 正式接入和鲸 ModelWhale,加速您的科研进程!

ModelWhale

科研 minerU modelwhale

践行责任,彰显担当!中烟创新荣获“2024年软件和信息服务业企业社会责任治理水平”BBB级评定

中烟创新

ICML 2025|快手提出了基于残差的超低码率图像压缩方法ResULIC

快手技术

图像处理 ICML 快手技术

深度学习核心:从基础到前沿的全面解析

野猪🐗 佩琪

AI 原生云

从0到1打造问答机器人:RAG全流程代码详解与优化基准

聚客AI学院

人工智能 langchain RAG应用 rag实战 RAG 框架

黑龙江等保要求?需要什么安全产品

等保测评

医学+AI!湖北中医药大学信息工程学院与和鲸科技签约101数智领航计划

ModelWhale

AI通识教育 医学+AI 湖北中医药大学 101数智领航计划

如何制定YashanDB数据库的维护与管理计划

数据库砖家

人工智能技术全景:从基础理论到前沿应用的深度解析

野猪🐗 佩琪

行业分享丨Altair SimLab显著提升电子产品跌落仿真效率

Altair RapidMiner

仿真 CAE Simlab 跌落仿真 OpenRadioss

豆蔻妇科大模型实现重大突破!精标数据 SFT 驱动准确率从 77.1% 升至 90.2%

隽阜

如何在YashanDB中有效处理时序数据

数据库砖家

如何最大化YashanDB数据库的存储性能

数据库砖家

🔢 机器学习基础:从理论到实践的完整指南

野猪🐗 佩琪

AI 原生云

MySQL的三大日志

不在线第一只蜗牛

MySQL 数据库

技术研发引领前行,中烟创新荣获 “北京软件核心竞争力企业(技术研发型)” 称号

中烟创新

使用自然语言体验对话式MySQL数据库运维

袋鼠云数栈

数据库 运维 MySQL 数据库 大数据运维 数据库 大数据

USB‑C 式的工具联接:MCP 的模块化及通用标准探讨

申公豹

MCP

模块化控制协议(MCP)在网络中增强智能体执行效率的研究

申公豹

MCP

官宣 | Fluss 正式加入 Apache 孵化器

Apache Flink

大数据 flink Fluss Apache 基金会

如何从ElasticSearch迁移到OpenSearch?

天翼云开发者社区

大数据

黑龙江通信行业如何办理等保

等保测评

如何办理黑龙江等保备案

等保测评

Apache Beam 大数据处理框架

qife122

大数据 分布式计算

订单初版—支付和履约链路中的技术问题说明文档

量贩潮汐·WholesaleTide

架构 软件开发

MatrixOne Intelligence v3.3 正式发布:结构化、自动化、可视化三重进化

MatrixOrigin

如何在企业中有效地实施YashanDB

数据库砖家

飞算Java AI炫技赛:开启副业创收新机遇

飞算JavaAI开发助手

平衡数据分发器:使用并行机制提升SSIS性能_.NET_Jenni Konrad_InfoQ精选文章