azure - 在 Synapse Analytics 上优化 Azure 分析服务处理
问题描述
我有一个庞大的模型,在 Synapse Analytics 中有数十亿条记录,需要加载到 Azure 分析服务中。目前我们有按月分区的表,数据类型和连接都很完美,我们已经将表减少到只有我们需要的列。我们已将 Synapse 扩展到 DWU 5000c,将 Azure Analysis Services 扩展到 S9v2(最大设置)。鉴于上述情况,在 Synapse 中给定并发性的情况下,最多 64 个分区并行运行,第一次加载仍需要数小时和数小时才能完成处理。
我很好奇,是否有一个设置可以启用我此时缺少的“批量导入过程已满”?
例如这里:https ://www.businessintelligenceinfo.com/business-intelligence/self-service-bi/building-an-azure-analysis-services-model-on-top-of-azure-blob-storage-part-在图3中,他的加载方式与存储 blob 不同,并且能够通过将配置更改为:ReadBlobData(Source, “”, 1, 50) 来加载 1 TB。Synapse 到 Analysis Services 是否有任何类似的配置?
解决方案
推荐阅读
- javascript - VM299:1 未捕获的语法错误:JSON.parse 中位置 0 处的 JSON 中的意外标记 u(
) - sql - psql:关系不存在
- mongodb - MongoDB 平衡器未启动
- node.js - 嵌套异步等待与循环结合
- macos - 什么是 NEIKEv2Provider,为什么它阻止我访问互联网?
- azure-cognitive-services - 表单识别器中的不同表单模板
- azure - Azure VM 出现预配失败问题
- excel - 将鼠标悬停在 Excel 应用程序上时出现隐藏的用户窗体
- maven - 如何在 Pom.xml 中为 Firefox 和 Internet Explorer 添加 maven 依赖项?
- html - 如何减少压痕
- UILabel html属性文本中的标签?