hive

0热度

1回答

我想通过Java Swing应用程序为jfreechart可视化使用JDBC从Hive表中提取结构数据结构<>。在执行SQL查询时抛出一个SQLException错误，它在我得到的异常处引发（rs.getString（“user.name”））。请给我一个建议如何使用JDBC应用程序从配置单元表中获取结构数据？ String s1 = jTextField1.getText(); Str

0热度

1回答

将字符串转换为Hive中的时间戳

我有一个值'2017-09-27T19：25：15.927-07：00'，有什么办法将它转换为时间戳吗？我使用Hive 1.1.0。 select unix_timestamp("2017-09-27T19:25:15.927-07:00", "yyyy-MM-ddTHH:mm:ss.SSSX")但它trows Bad date/time conversion format select uni

0热度

1回答

将数据框转换为scala中的字符串

我想下载sbt中的Hive jar，并且出现以下错误。有没有人遇到过这个？请让我知道什么是正确的蜂巢版本我需要创建一个GenericUDF类这是我的SBT文件 name := "Test" version := "0.1" scalaVersion := "2.11.8" libraryDependencies += "org.apache.hive" % "hive-exec"

0热度

3回答

Hive或HBase的报告？

我想了解用于报告目的的最佳大数据解决方案是什么？目前我把它缩小到HBase vs Hive。用例是我们有几百TB的数据，有数百个不同的文件。数据是实时的，并且一直在更新。我们需要提供最有效的报告方式。我们有几十个不同的报告页面，每个报告由不同类型的数字和图形数据组成。例如：显示所有在过去一小时内登录系统的用户，并且其来源是美国。以最多玩过的游戏来展示一个图表，以最少玩过的游戏。系统中

0热度

1回答

EMR Hive输出对象的自定义ACL写入S3

set fs.s3.canned.acl = BucketOwnerFullControl; 上面一行是配置电子病历的蜂巢作业对象写入使用罐装ACL（http://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-s3-acls.html）我在想，如果我能有同样的方式自定义ACL到S3的一个例子。用例： EMR写入S3（regionA），然后

0热度

1回答

可否将Hive反序列化为提供的模式？

我有avro文件被加载到蜂巢，但我的文件是二进制。应该使用什么反序列化器来将二进制代码转换为配置单元？我不想在配置单元中的二进制数据，但解码的二进制数据。这就是我如何创建我的表。 CREATE TABLE kst7 行格式SERDE 'org.apache.hadoop.hive.serde2.avro.AvroSerDe' 存储为INPUTFORMAT 'org.apache.hadoop

0热度

1回答

配置单元和主键约束

以下HQL在HDP 2.6.1上生成错误& Hive 1.2.1000。它是直线问题还是Hive版本？ CREATE EXTERNAL TABLE IF NOT EXISTS `nwdb.strings` (`string_id` INT, `string_data` STRING, PRIMARY KEY(string_id) DISABLE NOVALIDATE) ROW FORMAT DEL

0热度

1回答

JSON解析SERDE阵列结构问题

我的JSON对象： { "_total": 4, "values": [ { "total-follower-count": 63911, "organic-follower-count": 6000, "paid-follower-count": 3911, "time": 1399334400000

0热度

1回答

从Spark数据集获取配置单元分区

我正在研究写入S3后会自动将表和分区注册到配置单元元存储的内容。在我可以注册所有分区之前，我需要知道所有的分区值。现在我正在做ds.select(partitionColumn).distinct().collectAsList();来获取所有的分区值。有没有更好的方法从我的数据集中获取分区值？

0热度

1回答

Hive：numRows tblpropery显示错误的计数

create table temp TBLPROPERTIES('numRows'='-1') as select * from test_table limit 10; show tblproperties temp("numRows"); => 1 insert into table temp select * from test_table limit 10; show tblpr