在SQLite中插入唯一的行（python）

Question

我正在使用cursor.executemany将CSV文件中的批次行插入到SQLite表中，其中一些预计将基于主键字段进行重复。当我执行命令时，我可预见地得到一个完整性错误，没有任何东西被插入。

我该如何有选择地插入非重复行而不必提前手动过滤它们？我知道在纯Python中，您可以简单地创建一个错误异常并跳过重复行 - 是否有类似的东西可以在此用例中实现？

Answer 1

只需使用INSERT OR IGNORE即可忽略重复项。

http://sqlite.org/lang_insert.html

Answer 2

一种方法是简单地使用错误捕获手动写出循环，而不是使用executemany。

伪代码：

for row in csvfile: 
    try: 
     cursor.execute('INSERT INTO X (Y) VALUES (%s)' % row[rowdatapoint]) 
    except IntegrityError: 
     pass 

大概不到预期的效果executemany，但它会抓住短暂进入，将可能涉及您预生成一个巨大的INSERT SQL字符串更复杂的SQL改变你的错误。