uwenku
标签列表
spark-avro
1
热度
2
回答
如何将数据序列化到Spark中的AVRO模式(使用Java)?
我已经定义了一个AVRO模式,并为这些模式生成了一些使用avro工具的类。现在,我想将数据序列化到磁盘。我发现了一些关于scala的答案,但不适用于Java。 Article类是使用avro-tools生成的,并且是由我定义的模式构建的。 这里是我如何努力去做代码的简化版本: JavaPairRDD<String, String> filesRDD = context.wholeTextFiles
java
apache-spark
hdfs
avro
spark-avro
2016-04-11
15
热度
1
回答
从Apache Spark中的Avro文件读取不受支持的联合类型组合
我试图从读取csv平面文件转换为火花上的avro文件。 下面https://github.com/databricks/spark-avro 我用: import com.databricks.spark.avro._ val sqlContext = new org.apache.spark.sql.SQLContext(sc) val df = sqlContext.read.avro("
scala
apache-spark
apache-spark-sql
spark-avro
2016-04-20
«
1
2
3
4
»
最新问题
1.
如何使用searchview在自定义ArrayAdapter上实现搜索功能?
2.
在输入时检查输入(仅限数字)
3.
Pyqt5如何避免由while循环无限冻结程序?
4.
typescript generic type guard
5.
用户名和密码登录java项目
6.
如何在wordpress中的单一类别中显示随机帖子
7.
如何使用querySelector
8.
与Java
9.
如何在显示列表后删除方括号?
10.
System.TypeLoadException Microsoft.VisualBasic ASP.NET Core 2