将JSON文件导入CouchDB

Question

如果我有一个类似于以下结构的JSON文件：

{"name":"bob","hi":"hello"}
{"name":"hello","hi":"bye"}

有没有将这个导入CouchDB的选项？

- bobcom

Answer 1

从@Millhouse的回答开始，但我的文件中有多个文档，我使用了以下方法：

cat myFile.json | lwp-request -m POST -sS "http://localhost/dbname/_bulk_docs" -c "application/json" 

POST是lwp-request的别名，但在debian系统上似乎不能使用POST。如果您使用lwp-request，需要像上面那样使用-m设置方法。

末尾的_bulk_docs允许一次上传多个文档。

http://wiki.apache.org/couchdb/HTTP_Bulk_Document_API

- thelastshadow

---

bulk_doc API应该将所有文档嵌套在{"docs": [documents]}对象内部。 - Loïc Faure-Lacroix

Answer 2

如果您使用Linux系统，可以编写一个快速的Shell脚本来将有效的JSON文件内容POST到Couch。

为了测试Couch，我做了类似下面这样的事情：

cat myFile.json | POST -sS "http://myDB.couchone.com/testDB" -c "application/json"

我想将myFile.json中的json内容导入数据库。

如果您不喜欢命令行或不使用Linux，并且更喜欢图形用户界面，则可以使用像RESTClient这样的工具。

- Millhouse

---

对于所有寻找“POST”的人：它是libwww-perl软件包的一部分。 - ofrommel

Answer 3

可能有点晚回答。但是如果您会使用Python，那么可以使用couchdb模块来实现：

import couchdb
import json
couch = couchdb.Server(<your server url>)
db = couch[<your db name>]
with open(<your file name>) as jsonfile:
    for row in jsonfile:
        db_entry = json.load(row)
        db.save(db_entry)

我创建了Python脚本来完成这个任务（因为我在互联网上找不到相应的脚本）。完整的脚本在这里：http://bitbucket.org/tdatta/tools/src/（名称为jsonDb_to_Couch.py）。如果您下载了整个存储库并执行以下两个步骤：1. 将json文件中所有的“_id”替换为“id”；2. 运行make load_dbs，它将在您的本地couch安装中创建4个数据库。希望这对像我一样的新手有所帮助。

- Tanmay

---

我相信你的代码应该有以下更改：couch = couchdb.server(<你的服务器URL>) 缺少URLwith open(<你的文件名>) 闭合括号而不是方括号db_entry = json.loads(row) 使用loads而不是load - Jared Beach

谢谢Jared。已经在原帖中修复了。 - Tanmay

Answer 4

是的，这不是有效的JSON格式...

我使用curl（http://curl.haxx.se）导入JSON对象：

curl -X PUT -d @my.json http://admin:secret@127.0.0.1:5984/db_name/doc_id

如果你的 JSON 对象在 my.json 文件中，可以将其导入。当然，你也可以直接将 JSON 对象存储到 CouchDB 中，而不需要使用文件。

curl -X PUT -d '{"name":"bob","hi":"hello"}' http://admin:secret@127.0.0.1:5984/db_name/doc_id

如果您没有doc_id，可以向couchdb请求：

curl -X GET http://127.0.0.1:5984/_uuids?count=1

- user470370

---

对于其他人在这里的第一个示例中遇到Content-Type错误的情况，请尝试使用以下命令：curl -X POST -d @data.json http://127.0.0.1:5984/database/_bulk_docs -H 'Content-Type: application/json' - Eric Uldall

因为我认为这个问题是关于多个文档而不仅仅是一个的，所以我给它点了踩。我相信你正在回答如何只导入一个文档。 - Jared Beach

Answer 5

那个JSON对象将不会被CouchDB接受。要使用单个服务器请求存储所有数据，请使用：

{
  "people": 
   [
      {
        "name":"bob",
        "hi":"hello"
      },
      { 
        "name":"hello",
        "hi":"bye"
      }
   ]
}

或者，为每一行提交不同的CouchDB请求。

使用cURL从命令行将文件导入到CouchDB中：

curl -vX POST https://user:pass@127.0.0.1:1234/database \
  -d @- -# -o output -H "Content-Type: application/json" < file.json

- Matthew Flaschen

Answer 6

这不是我的解决方案，但我发现这个可以解决我的问题：

将CouchDB数据库导出到文件的简单方法是在终端窗口中运行以下Curl命令：

curl -X GET http://127.0.0.1:5984/[mydatabase]/_all_docs\?include_docs\=true > /Users/[username]/Desktop/db.json

下一步是修改导出的JSON文件，使其看起来像下面这样（注意_id）：

{
  "docs": [
      {"_id": "0", "integer": 0, "string": "0"},
      {"_id": "1", "integer": 1, "string": "1"},
      {"_id": "2", "integer": 2, "string": "2"}
  ]
}

您需要关注的主要部分是在“docs”代码块中添加文档。完成后，您可以运行以下Curl命令将数据导入CouchDB数据库：

curl -d @db.json -H "Content-type: application/json" -X POST http://127.0.0.1:5984/[mydatabase]/_bulk_docs

复制数据库 如果您想将一个数据库从一个服务器复制到另一个服务器，请运行以下命令：

curl -H 'Content-Type: application/json' -X POST http://localhost:5984/_replicate -d ' {"source": "http://example.com:5984/dbname/", "target": "http://localhost@:5984/dbname/"}'

原始帖子： http://www.greenacorn-websolutions.com/couchdb/export-import-a-database-with-couchdb.php

这篇文章介绍了如何使用CouchDB导出和导入数据库。CouchDB是一个基于文档的NoSQL数据库，它使用JSON格式存储数据。在本文中，我们将学习如何使用CouchDB的命令行工具来导出和导入数据库。

- Dorian Puerta

Answer 7

http://github.com/zaphar/db-couchdb-schema/tree/master

我的DB::CouchDB::Schema模块有一个脚本，可以帮助将一系列文档加载到CouchDB数据库中。couch_schema_tool.pl脚本接受文件作为参数，并将该文件中的所有文档加载到数据库中。只需将每个文档放入数组中，如下所示：

[ {"name":"bob","hi":"hello"}, {"name":"hello","hi":"bye"} ]

它会自动将它们加载到数据库中。但是有一个小问题，我还没有使用最新版本的CouchDB测试过我的代码，所以如果您使用它而出现问题，请告诉我。我可能需要更改一些内容以适应新的API更改。

Jeremy

- Jeremy Wall