HBase需要Hadoop安装的基础上,我到目前为止阅读。看起来HBase可以设置为使用现有的Hadoop集群(与其他一些用户共享),或者可以将其设置为使用专用的Hadoop集群?我想后者会是一个更安全的配置,但我想知道是否有人对前者有任何经验(但是我不确定我对HBase设置的理解是否正确)。HBase和Hadoop
1
A
回答
3
我知道Facebook和其他大型组织为了性能原因将他们的HBase集群(实时访问)从他们的Hadoop集群(批量分析)中分离出来。群集上的大型MapReduce作业可以影响实时界面的性能,这可能会造成问题。
在一个较小的机构或一种情况,即你的HBase的响应时间并不一定需要是一致的,你可以使用同一个群集。
除了性能问题之外,共存关系并不多(或任何)。
0
我们设置了1000个核心的现有Hadoop集群。简短的回答:它工作得很好,至少与Cloudera CH2 +149.88。但通过Hadoop版本,您的里程可能会有所不同。
-1
在分布式模式下,Hadoop用于其HDFS存储。 HBase将HFile存储在HDFS上,从而从数据节点带来的复制策略和数据本地原则中受益。
RegionServer即将基本上处理本地数据,但仍可能需要从其他数据节点获取数据。
希望能够帮助您理解为何以及如何将hadoop与HBase结合使用。
相关问题
- 1. Hadoop和HBase集成
- 2. HBase和hadoop一起工作
- 3. 兼容性hbase和hadoop
- 4. Hadoop/Hbase:java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/HBaseConfiguration
- 5. Hbase Hadoop集群.. java.io.IOException:java.lang.NoSuchMethodExceptio
- 6. Hadoop的HBASE查询
- 7. 配置Hadoop,HBase和Hive集群
- 8. 如何运行Hbase和Hadoop mapreduce
- 9. Hive,Hbase和Hadoop 2.5.1兼容性
- 10. 分布式集群Hadoop和Hbase
- 11. Eclipse中的Hadoop和Hbase配置
- 12. 通过推销或删除。 Hbase和Hadoop
- 13. 使用Hadoop和HBase增量MapReduce
- 14. Hadoop中的HBase和ZooKeeper角色?
- 15. Spark SqlContext和Hbase:java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/util/Bytes
- 16. hbase命令与hadoop命令
- 17. elasticsearch VS HBase的/ Hadoop的
- 18. cdh4 hadoop-hbase PriviledgedActionException as:hdfs(auth:SIMPLE)cause:java.io.FileNotFoundException
- 19. Cassandra vs HBase for Hadoop工作
- 20. hbase无法连接到hadoop
- 21. docker-compose issue with hadoop + hbase setup
- 22. HBase配置与Hadoop 1.0.3
- 23. Hadoop 2.2.0上的HBase 0.94.4
- 24. Hbase/Hadoop查询帮助
- 25. 访问hbase表fron hadoop mapreduce
- 26. Hadoop Hbase工作流程
- 27. hbase 0.95.1 hadoop-2.0.5 alpha失败
- 28. 与分别安装HBase和Hadoop一起安装HBase + Hadoop有什么优点和缺点?
- 29. hbase 0.90.5不能工作后替换hadoop * .jar在hbase/lib/
- 30. 使用Pig ERROR 2998的CDH4 Hbase java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/filter/Filter
也许这有帮助吗? http://www.dreamsyssoft.com/blog/blog.php?/archives/5-How-to-use-HBase-Hadoop-Clustered.html – 2013-07-25 20:00:20