2
我们已经在HBase中创建了表，并且这些表使用HBase存储处理程序映射到Hive。如果表中有超过100亿的巨大记录，并且如果我们需要根据某个列来连接这两个表，并且这些列不是行密钥ID列，那么性能如何，有没有什么方法可以提高性能在表中连接映射到HBase的Hive表。连接到Hive表映射到HBase
Regards， GHK。
A
回答
1
您使用Hive JOIN性能的哪个底层存储无关紧要。所以HBase rowkey并不能帮助你与Hive。
你可以使用的一个技巧是mapjoin，如果你加入了一个巨大的小桌子，它的工作效果非常好。
你可以阅读更多关于蜂巢此链接https://www.facebook.com/notes/facebook-engineering/join-optimization-in-apache-hive/470667928919
相关问题
- 1. 如何将Hive表映射到HBase中？
- 2. 连接表没有映射到对象
- 3. JPA映射映射到3列连接表
- 4. Starbase连接到Hbase
- 5. Python连接到Hive
- 6. MongoDB的Hive表映射
- 7. Hibernate映射 - 映射到表
- 8. NHibernate：在连接表上映射连接
- 9. 映射表连接查询
- 10. hbase无法连接到hadoop
- 11. 将HBase连接到Grafana
- 12. 用Ruby连接到Hbase
- 13. trafodion无法连接到hbase
- 14. 将spark-streaming连接到HBase
- 15. 无法连接到Hbase remotly
- 16. 从Hive连接到MySQL
- 17. 如何在Hive中映射没有限定符的HBase列？
- 18. 将表单值映射到链接
- 19. 休眠注释映射到连接表复合键
- 20. 将Grails域类映射到连接表中的问题
- 21. 单个类映射到两个表连接
- 22. 休眠@OneToMany - 映射到多个表连接
- 23. Automapper：映射到接口
- 24. 列表映射到列表
- 25. 在Hive中注册Hbase表
- 26. Hive的桶映射加入
- 27. 将数据连接到HBase并与Hive整合会对性能产生影响
- 28. 休眠映射 - 连接表没有@Id
- 29. 休眠查询未映射连接表
- 30. 流利的NHibernate连接表映射
我得到了它的连接性能，但在蜂巢我们有分区这也帮助我们限制了连接操作的记录数，如果我们有一个蜂巢映射表HBase，那么有没有办法在表连接中实现更快的响应 – GHK
我认为目前HBase存储处理程序不可能实现。看看这个关于这个https://issues.apache.org/jira/browse/HIVE-1223的JIRA –