0
我从JSON格式的在线源提取数据，并通过Apache Flume将其存储到Hdfs中。现在它会像Hadoop一样创建多个文件。现在我想从这些数据（从所有这些文件中）搜索一些东西，并获得与其相关的完整信息。解决办法是什么？从hadoop hdfs数据搜索
A
回答
0
您可以开发自己的脚本，以便使用MapReduce或Spark在hdfs中进行搜索。你有另一种解决方案，你可以使用配置单元和或猪。 Pigg指南：http://archive.cloudera.com/cdh/3/pig/tutorial.html 蜂巢指南：https://cwiki.apache.org/confluence/display/Hive/LanguageManual
相关问题
- 1. Hadoop - HDFS Namenode元数据 - FSImage
- 2. 写AVRO数据到Hadoop hdfs
- 3. 无法从hadoop检索文件hdfs
- 4. Hadoop大数据文件文本搜索
- 5. Apache Hadoop：将压缩数据插入HDFS
- 6. 关闭hadoop HDFS后数据丢失了？
- 7. 节省JSON数据在HDFS Hadoop中
- 8. 数据版本（Hadoop，HDFS，Hbase后端）
- 9. 如何从HDFS中检索Avro数据？
- 10. 使用Solr索引HDFS数据
- 11. Hadoop hdfs to elastisearch
- 12. Hadoop HDFS备份
- 13. Hadoop HDFS问题
- 14. 使用hadoop将数据从Mysql导入hdfs时出错？
- 15. 将数据从mongoDB复制到hdfs时出现hadoop jar错误
- 16. 无法将数据从HDFS加载到Hadoop中的Hive
- 17. 无法将数据从槽传输到hdfs hadoop日志中
- 18. 如何将数据从mysql导入Apache Hadoop HDFS安装。
- 19. 如何从HDFS/Hadoop中的数据实现仪表板
- 20. 如何从Hadoop中的hdfs文件中删除一些数据
- 21. 从Hadoop 1.0.3中的AWS EMR上的HDFS清除数据
- 22. Eclipse Hadoop HDFS异常
- 23. java.lang.NoClassDefFoundError：org/apache/hadoop/hdfs/BenchmarkThroughput
- 24. Hadoop的HDFS VS EXT3
- 25. hadoop HDFS blcok size sizes
- 26. Hadoop HDFS数据文件：显示数据结点和块
- 27. 搜索从数据集中
- 28. ASP.net从数据库搜索
- 29. HDFS中的示例数据
- 30. 尝试从Hdfs输出读取hadoop