2015-04-29 38 views
-1

我最近遇到了Storm实时分析项目。我想知道如何集成Hadoop和Storm来处理数据。另外,我需要为使用两者结合的各种项目提供建议。 谢谢....如何整合hadoop和风暴?

回答

0

所以风暴有Bolt的概念&喷口。

当喷口将数据输入系统时,螺栓进行处理。

Storm提供了一个Storm-Hdfs连接器,通过它可以直接通过螺栓将数据写入磁盘。

+0

那么,使用这个连接器,我们实际上是将实时数据存储到Hdfs中?并且这些数据是否可用于使用映射器和缩减器进行处理。总之,感谢您的帮助,我也会研究它,如果遇到任何问题,我将分享它。 – Mohit

+0

你可以给我一些关于这个连接器的资源,我可以参考吗? – Mohit

+0

http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1.3/bk_user-guide/content/ch_storm-using-hdfs-connector.html – Venkat