我正在寻找将数据移动到HDFS系统的方法,想知道Apache Sqoop是否可用于从外部REST服务中提取/提取数据?使用Sqoop将数据加载到HDFS
1
A
回答
0
从http://sqoop.apache.org/docs/1.4.5/SqoopUserGuide.html
Sqoop是被设计为Hadoop和关系数据库之间传输数据的一种工具。您可以使用Sqoop将关系数据库管理系统(RDBMS)(如MySQL或Oracle)的数据导入Hadoop分布式文件系统(HDFS),转换Hadoop MapReduce中的数据,然后将数据导出回RDBMS。
因此它不支持从REST服务导入数据。
1
我最喜欢的方式,从REST服务提取数据:
卷曲的http:// | hdfs -put -/my/hdfs/directory
相关问题
- 1. 使用sqoop将多张表加载到hdfs中一次使用
- 2. 将Sqoop数据从HDFS移动到Hive
- 3. 使用sqoop(1.4.5)将mysql数据导入到hdfs(hadoop 2.4.1)
- 4. NoSuchElementException当使用sqoop从hdfs将数据导出到mysql时
- 5. 使用Sqoop将数据从MS-SQL服务器转移到HDFS
- 6. 加载数据到HDFS
- 7. 如何使用sqoop将数据从hadoop加载到solr?
- 8. 使用Sqoop将Oracle数据加载到Hadoop中
- 9. 使用Sqoop/Oozie从Hive将数据加载到Hive表
- 10. 使用unixODBC/isql将数据加载到HDFS
- 11. 使用flume将Oracle 11g数据加载到HDFS
- 12. 使用Sqoop将数据从mysql导入HDFS
- 13. S3到本地hdfs数据传输使用Sqoop
- 14. 使用shell脚本从teradata到hdfs的sqoop数据
- 15. 使用Sqoop获取RDBMS更新到HDFS
- 16. 使用Storm将数据移动到HDFS
- 17. 使用Python将数据推到HDFS
- 18. 使用Sqoop从MongoDB中提取数据以写入HDFS?
- 19. 使用Sqoop将数据添加到配置单元表
- 20. 增量更新使用SQOOP将数据追加到表
- 21. 将数据从HDFS加载到配置单元
- 22. 从HDFS将数据加载到Hive上Azure Hdinsight时出错
- 23. 如何将数据从hdfs加载到hbase?
- 24. 从本地hdfs将数据加载到本地SparkR
- 25. 如何将Cassandra的数据加载到HDFS?
- 26. 如何加载将PostgresSQL中的数据逐步迁移到HDFS?
- 27. 无法将数据从HDFS加载到Hadoop中的Hive
- 28. 如何从HDFS将数据加载到Hive
- 29. 如何sqoop将oracle clob数据导入hdfs上的avro文件
- 30. 如何通过sqoop将数据从sql server导入hdfs