2017-04-04 30 views
1

我们已经开始迁移到在BigQuery中使用分区表。我们已经注意到,复制分区表需要比非分区表长得多 - 在任何情况下。我确信这是一个很好的理由,例如因为BigQuery &分区表的基础架构。为什么在BigQuery中复制分区表需要比非分区表更长的时间?

例如(复印在同一个项目&到同一数据集):

非分区表:

  • 尺寸:15GB,87M行
  • 复制时间:3秒
  • 作业ID:bquijob_64e11150_15b373c714a

分区表:

  • 尺寸:15GB,87M行(同一表如上,但分区)
  • 复印时间:13分钟
  • 作业ID:bquijob_6bae14c3_15b373e62 3D

有没有窍门/解决方法,以加快BigQuery中复制分区表?

+1

只是想知道:多少个分区并表有(心算,不把它当回事:365 *3秒〜= 16分钟) –

+0

622分区包含 –

+1

@FelipeHoffa我会预计将并行复制,不会以线性时间结束。 – Pentium10

回答

0

我已经通过我们企业的支持渠道告知,它的工作是设计并没有什么可以做,以加快对分区表(意译)的副本。

我已经提出,试图得到这个改变功能要求,但我怀疑这将是重中之重!

不管怎样,在后人的利益,这里的FR如果有人想跟踪它。

https://issuetracker.google.com/issues/37012156

相关问题