我尝试使用 ADF 复制事件将数据从本地加载到 azure。通过给出以下查询。我的表源非常大。
select acid,
mbid,
actid,
actdttm,
crettm,
rslvid,
hsid,
cdcflag,
cdcts
from df_lake.acity
where cdcts>'2022-06-06'
ADF 事件花费大量时间从源加载少量记录。下面是缺少事件详细信息的屏幕。 我可以看到它花费了大部分时间来处理第一个字节。几秒钟后它就会加载数据。 请建议我如何才能使其更快。
最佳答案
根据 offical doc ,
检查源上是否存在任何限制错误，或者您的数据存储是否利用率较高。如果是这样，请减少数据存储上的工作负载或增加限制或可用资源。
请关注此reference用于提高性能并将自托管集成本地数据存储连接到 Azure 数据工厂 Ahmad Yaseen .
如果您已经连接到自托管集成，请尝试按照本文 Troubleshoot copy activity on Self-hosted IR 进行操作
关于Azure 数据工厂复制事件在第一个字节时间等待很长时间，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/72559938/