2017-09-28 18 views
1

我有AWS胶水管理的数据目录,而我的开发人员确实在我们与新表或者我们使用的是爬虫更新每天保持新的分区S3桶任何更新分区健康。AWS胶履带覆盖定制表的属性

但是,我们还需要自定义的表格属性。在我们的配置单元中,我们将每个表的数据源作为表属性添加到数据目录中的表中,但每次运行爬网程序时,它都会覆盖自定义表的属性,如描述。

我做错了什么?或者这是来自AWS Glue的错误?

+0

嘿,面对同样的问题,你解决了吗? – ronhash

+0

对不起,还没有解决:( –

回答

0

有你在履带定义检查Schema change policy

enter image description here

+0

这不会帮助 - 这将停止模式的更新,而他面临的问题是与爬虫擦拭自定义表属性 – ronhash