如何从平面文件读取数百万条记录？

在我的数据流中，我从平面文件读取数据并插入oledb目标。在步骤之间，我使用了其他一些组件，例如（lookp，derived，scrip component）。我在3500个记录从平面文件读取到oledb目的地时执行了我的包裹。所以我的问题是如何提高这个阅读seques 3500至100000这个数字。还有一个问题是可用于在ssis中分配RAM使用情况的任何选项？如何从平面文件读取数百万条记录？

来源

2012-04-26 Dinesh

我不明白你的意思，“所以我的问题是如何提高这个读数seques 3500到100000这个数字”。你能更清楚吗？

关于内存，您可以（也应该）配置缓存在查找组件上的工作方式。您可以将它设置为无，全部或部分。

全面：运行查找查询一次
部分：每个ID运行一次查找查询，并保持价值
无：每一次运行查找查询。它使最后一个值内存中，因此，如果在2个后续行存在两个相等的值，就不会再运行

和全部或部分可配置的内存用于高速缓存量

来源

2012-04-26 14:10:30 Diego

如何从平面文件读取数百万条记录？

回答

相关问题