72得票7回答
Django bulk_create如何忽略导致IntegrityError的行?

我正在使用 bulk_create 将数千行数据加载到 PostgreSQL 数据库中。不幸的是,其中一些行会导致 IntegrityError 并停止 bulk_create 进程。我想知道是否有一种方法可以告诉 Django 忽略这些行并尽可能保存该批次的其他数据?

58得票3回答
在PostgreSQL中,如何使用COPY命令插入数据?

我在运行一个使用PostgreSQL数据库的NodeJs项目时遇到了问题。我尝试使用COPY命令在pgAdmin中插入数据时出现了错误。COPY beer (name, tags, alcohol, brewery, id, brewery_id, image) FROM stdin; Bo...

51得票7回答
无法批量加载文件,因为无法打开该文件。操作系统错误代码3。

我试图将存储过程设置为SQL Server Agent作业,但是它给了我以下错误: 无法批量加载文件“P:\file.csv”,因为无法打开它。操作系统错误代码3(无法检索此错误的文本。原因: 15105)。[SQLSTATE 42000] (错误4861) 有趣的是,当我手动执行存储过程...

43得票2回答
将数据批量加载到SQLite中?

有没有关于将存储在分隔文本文件中的数据批量加载到SQLite数据库中的实用程序的提示? 最好是可以从脚本等调用的独立程序。 我所在的一个团队有一个Oracle数据库,它将把一堆数据转储到文件中,然后将该数据加载到SQLite数据库中以在移动设备上使用,并正在寻找实现这种情况的最简单方法。

27得票19回答
Elasticsearch: 在 Elasticsearch 6.1.1 中,批量请求出现错误。

我最近升级到Elasticsearch 6.1.1版本,现在无法从JSON文件批量索引文档。当我使用内联方式索引时,它可以正常工作。以下是文档的内容:{"index" : {}} {"name": "Carlson Barnes", "age": 34} {"index":{}} {"name...

22得票4回答
“Bulk load”是什么意思?

在不同的文章中,我经常看到"bulk loading"这个表达。它在技术上意味着什么? 它有什么含义? 如果有使用案例的解释更好。

16得票1回答
SQLAlchemy 批量更新性能问题

我需要定期使用文件中接收到的数据对某列的值进行增量操作。该表格有超过400000行。到目前为止,我的所有尝试都导致非常差的性能。 我编写了一个符合我的要求的实验:#create table engine = create_engine('sqlite:///bulk_update.db', e...

15得票2回答
如何导入带有缺失值的表格?

我使用篮球数据表来了解Postgres 9.2和phppgadmin。因此,我想将CSV表导入该数据库。但是,我遇到了以下问题:ERROR: missing data for column "year" CONTEXT: COPY coaches, line 1: ""coachid";"...

13得票3回答
如何在不知道日期格式的情况下将日期字符串转换为时间戳

我在尝试编写一个查询语句将值插入到一个没有时区数据的timestamp类型字段中。该值来自CSV文件。 我正在使用的版本是PostgreSQL 8.1.21。 客户端通过上传CSV文件完成,其中包含一个日期列。日期有时以'28-Sep-13'和'28/09/2013'格式出现。 我尝试使...

13得票4回答
在 Oracle 中如何在 10 分钟内插入 1000 万个查询?

我正在开发一个文件加载程序。 该程序的目的是将输入文件进行一些数据转换,然后将数据上传到Oracle数据库中。 我面临的问题是需要优化在Oracle上插入非常大的输入数据。 我正在将数据上传到表ABC中。 我在我的C++程序中使用了Oracle提供的OCI库。 具体来说,我使用OCI...