amazon-athena

1热度

1回答

我指的是连接R到雅典娜的this article。当定义司机，我收到以下错误：错误.jfindClass（as.character（driverClass）[1]）：找不到类我做了一些研究和我抵达this page。接受的答案有一个评论说明了同样的问题。但是，提供的解决方案（即重新启动R）不起作用。我写了下面的代码，直到现在。 library("pacman") pacman::p_lo

1热度

2回答

如何devide一个字符串，每个空格REGEXP_EXTRACT（SQL-雅典娜）

我目前正在对行例如从我们webserverlog拆分消息：我的消息（数据类型的字符串）看起来是这样的： at=info method=GET path="/v1/..." host=web.com request_id=a3d71fa9-9501-4bfe-8462-54301a976d74 fwd="xxx.xx" dyno=web.1 connect=1ms service=167ms s

0热度

1回答

PrestoDB缓存内部开箱即用的中间结果吗？

PrestoDB有多个connectors。虽然连接器确实实现了读取和写入操作，但是从我阅读的所有教程中，似乎它们通常仅用作数据源以便从中读取。例如，netflix在Amazon S3上具有“10千兆字节”数据，并且他们明确指出Presto工作节点上没有使用磁盘（并且没有使用HDFS）。陈述的用例是“特设交互式”查询。此外，亚马逊雅典娜本质上是S3 + Presto，并附带类似的使用案例。我

0热度

1回答

如何过滤进入AWS Hive表的多行JSON数据

我有一个AWS IoT规则将传入的JSON发送到Kinesis Firehose。从我的物联网发布的JSON数据是全部在一行上 - 例如： {"count":4950, "dateTime8601": "2017-03-09T17:15:28.314Z"} 在管理界面的IOT测试“测试”部分允许你发布的消息，默认为以下（注格式化多-line JSON）： { "message":

1热度

3回答

如何查询来自Amazon Athena的地板数据？

Athena使用S3表中的字段创建临时表。我已经使用JSON数据完成了这项工作。你能帮助我如何使用实木复合地板数据创建表格吗？我曾尝试以下：转换的样本JSON数据到镶数据。将镶木地板数据上传到S3。使用JSON数据列创建临时表。通过这样做，我能够执行查询，但结果是空的。这种方法是正确的还是在地板数据上有其他方法需要遵循？样品JSON数据： {"_id":"0899f824e118d3

3热度

2回答

有没有办法使用Athena JDBC驱动程序来获取查询ID和状态？

有没有办法让Athena query ID查询我提交Athena JDBC驱动程序？任何API调用查询状态（使用其查询ID？）任何方式通过API调用获取查询历史记录？

3热度

1回答

AWS Athena：'msck repair table`会产生费用吗？

我在S3 ORC的数据，看起来像这样： s3://bucket/orc/clientId=client-1/year=2017/month=3/day=16/hour=20/ s3://bucket/orc/clientId=client-2/year=2017/month=3/day=16/hour=21/ s3://bucket/orc/clientId=client-3/year=201

2热度

1回答

java.sql.SQLExceptionPyRaisable使用Django连接到Athena的第二次尝试

我正在使用python模块，名为PyAthenaJDBC以便使用提供的JDBC驱动程序查询Athena。这里是链接：https://pypi.python.org/pypi/PyAthenaJDBC/ 我一直面临一些持续性的问题。每当我连续两次使用雅典娜连接时，我总是收到这个java错误。事实上，我能够连接到雅典娜，显示数据库，创建新表格，甚至查询内容。我正在使用Django构建一个应用程序并

0热度

1回答

蜂巢 - 从嵌套的Json

中提取数据，我有一个名为表newdata create external table newdata ( data string ) location 'something' select data from string limit 1 { "user": { "name": "default", "education": { "schoome": "abc", "college":

0热度

2回答

Kinesis Firehose到s3：将数据传送到s3路径中的错误小时

我正在使用Kinesis Firehose缓冲物联网数据，并将其写入s3。流水写入缓存格式s3://bucket.me.com/YYYY/MM/DD/HH 的数据，在10进来到S3：59A可能会被流水缓冲，而不是写出来的，直到11：00A（s3://bucket.me.com/2017/03/09/11）。问题是，当为雅典娜创建分区时，小时10的分区将不包含小时10的所有数据，因为它位于小时11