使用odo将数据迁移到SQL

Question

我有一个很大的3 GB CSV文件，我想用Blaze来调查数据，选择我在分析中感兴趣的数据，最终目标是迁移该数据到合适的后台计算像SQLite这样，PostgreSQL的等等。我可以得到这些数据转化为火焰和它很好地工作，但是这是我遇到的麻烦的部分：

db = odo(bdata, 'sqlite:///report.db::report')` 

我不是确定如何正确地创建一个用sqlite打开的数据库文件。

Answer 1

您可以使用此处列出的说明直接从CSV转到sqlite。 http://odo.pydata.org/en/latest/perf.html?highlight=sqlite#csv-sqlite3-57m-31s 我认为你缺少的列名作为警告这里：http://odo.pydata.org/en/latest/sql.html?highlight=sqlite

dshape = discover(resource('report_2015.csv')) 
t = odo('report_2015.csv', 'sqlite:///report.db::report', dshape=dshape)