web-dev-qa-db-ja.com

jsonファイルのMongoimport

約2000レコードからなるjsonファイルがあります。 mongoデータベースの文書に対応する各レコードは以下のようにフォーマットされています。

{jobID:"2597401",
account:"XXXXX",
user:"YYYYY",
pkgT:{"pgi/7.2-5":{libA:["libpgc.so"],flavor:["default"]}},     
startEpoch:"1338497979",
runTime:"1022",
execType:"user:binary",
exec:"/share/home/01482/XXXXX/appker/ranger/NPB3.3.1/NPB3.3-MPI/bin/ft.D.64",
numNodes:"4",
sha1:"5a79879235aa31b6a46e73b43879428e2a175db5",
execEpoch:1336766742,
execModify: new Date("Fri May 11 15:05:42 2012"),
startTime: new Date("Thu May 31 15:59:39 2012"),
numCores:"64",
sizeT:{bss:"1881400168",text:"239574",data:"22504"}},

各レコードはJSONファイルの単一行にあり、改行は各レコードの最後にあります。したがって、ドキュメントの各行は "{jobID：" ...で始まります。次のコマンドを使用して、これらをmongoデータベースにインポートしようとしています。

mongoimport --db dbName --collection collectionName --file fileName.json

しかし、私は次のエラーが出ます：

Sat Mar  2 01:26:12 Assertion: 10340:Failure parsing JSON string near: ,execModif
0x10059f12b 0x100562d5c 0x100562e9c 0x10025eb98 0x10000e643 0x100010b60 0x10055c4cc 0x1000014b7    
0x100001454 
 0   mongoimport                         0x000000010059f12b _ZN5mongo15printStackTraceERSo + 43
 1   mongoimport                         0x0000000100562d5c _ZN5mongo11msgassertedEiPKc + 204
 2   mongoimport                         0x0000000100562e9c _ZN5mongo11msgassertedEiRKSs + 12
 3   mongoimport                         0x000000010025eb98 _ZN5mongo8fromjsonEPKcPi + 1576
 4   mongoimport                         0x000000010000e643          
                                         _ZN6Import8parseRowEPSiRN5mongo7BSONObjERi + 2739
 5   mongoimport                         0x0000000100010b60 _ZN6Import3runEv + 7376
 6   mongoimport                         0x000000010055c4cc _ZN5mongo4Tool4mainEiPPc + 5436
 7   mongoimport                         0x00000001000014b7 main + 55
 8   mongoimport                         0x0000000100001454 start + 52
Sat Mar  2 01:26:12 exception:BSON representation of supplied JSON is too large: Failure parsing    
    JSON string near: ,execModif
Sat Mar  2 01:26:12 
Sat Mar  2 01:26:12 imported 0 objects
Sat Mar  2 01:26:12 ERROR: encountered 1941 errors

何が問題なのかわかりません。誰かが解決策を推薦できますか？

jsonmongodbimportmongoimport
146
amber4478

次のクエリを使用してエラーを修正することができました。

mongoimport --db dbName --collection collectionName --file fileName.json --jsonArray

うまくいけば、これは誰かに役立ちます。

256
amber4478

これを試して、

mongoimport --db dbName --collection collectionName <fileName.json

例、

mongoimport --db foo --collection myCollections < /Users/file.json
connected to: *.*.*.*
Sat Mar  2 15:01:08 imported 11 objects

問題はあなたのために日付形式です。

私は以下のように変更された日付で同じJSONを使いました、そしてそれは働きました

{jobID:"2597401",
account:"XXXXX",
user:"YYYYY",
pkgT:{"pgi/7.2-5":{libA:["libpgc.so"],flavor:["default"]}},     
startEpoch:"1338497979",
runTime:"1022",
execType:"user:binary",
exec:"/share/home/01482/XXXXX/appker/ranger/NPB3.3.1/NPB3.3-MPI/bin/ft.D.64",
numNodes:"4",
sha1:"5a79879235aa31b6a46e73b43879428e2a175db5",
execEpoch:1336766742,
execModify:{"$date" : 1343779200000},
startTime:{"$date" : 1343779200000},
numCores:"64",
sizeT:{bss:"1881400168",text:"239574",data:"22504"}}

お役に立てれば

49
Srivatsa N

mongoimportを使うと同じことができます

mongoimport --db test --collection user --drop --file ~/downloads/user.json

どこで、

test - Database name
user - collection name
user.json - dataset file

--dropは、既に存在する場合はコレクションを削除します。

18
KARTHIKEYAN.A

コンソール：

mongoimport -d dbName -c collectionName dataFile.js
18
Andrey

あなたの文法は完全に正しいように見えます：

mongoimport --db dbName --collection collectionName --file fileName.json

正しいフォルダにいるか、またはフルパスを入力してください。

5
Robert Grutza

以下のエクスポートDB用のコマンドを使用しました

mongodump --db database_name --collection collection_name

以下のコマンドでDBをインポートできました

mongorestore --db database_name path_to_bson_file
5
Ravi Hirani

別の端末でimportコマンドを実行してください。 （モンゴシェルの内側ではありません。）

mongoimport --db test --collection user --drop --file ~/downloads/user.json
3
Nija I Pillai

WindowsではCommand Prompcmd cmdを使用できますが、Ubuntuでは次のコマンドを入力してterminalを使用できます。

mongoimport  -d  your_database_name  -c  your_collection_name  /path_to_json_file/json_file_name.json

mongoシェルを開くと、このコマンドを実行するときにdatabase_nameを確認します。

show databases
2
Noha Salah

このコマンドは、コレクションが指定されていない場所で機能します。

mongoimport --db zips "\MongoDB 2.6 Standard\mongodb\zips.json"

コマンド実行後のMongo Shell

connected to: 127.0.0.1
no collection specified!
using filename 'zips' as collection.
2014-09-16T13:56:07.147-0400 check 9 29353
2014-09-16T13:56:07.148-0400 imported 29353 objects
2
Abhi

これは、dbがユーザー名とパスワードを使用するときに機能します

mongoimport --db YOUR_DB --collection MyCollection --file /your_path/my_json_file.json -u my_user -p my_pass

ユーザー名パスワードなしのdbは-u my_user -p my_passを削除してください

私のサンプルJSON

{ 
    "_id" : ObjectId("5d11c815eb946a412ecd677d"), 
    "empid" : NumberInt(1), 
    "name" : "Rahul"
}
{ 
    "_id" : ObjectId("5d11c815eb946a412ecd677e"), 
    "empid" : NumberInt(2), 
    "name" : "Rahul"
}
0
Rahul Mahadik

私はこのようなことを試しました、そしてそれは実際にうまくいきます：

mongoimport --db dbName --file D:\KKK\NNN\100YWeatherSmall.data.json
0
tyne

このテストコレクションをエクスポートしようとした場合：

> db.test.find()
{ "_id" : ObjectId("5131c2bbfcb94ddb2549d501"), "field" : "Sat Mar 02 2013 13:13:31 GMT+0400"}
{"_id" : ObjectId("5131c2d8fcb94ddb2549d502"), "field" : ISODate("2012-05-31T11:59:39Z")}

mongoexport（最初の日付はDate(...)で作成され、2番目の日付はnew Date(...)で作成されます（ISODate(...)を使用する場合）は2行目と同じです）。

{ "_id" : { "$oid" : "5131c2bbfcb94ddb2549d501" }, "field" : "Sat Mar 02 2013 13:13:31 GMT+0400" }
{ "_id" : { "$oid" : "5131c2d8fcb94ddb2549d502" }, "field" : { "$date" : 1338465579000 } }

厳密なJSONにはDate( <date> )型がな​​いため、同じ表記法を使用する必要があります。

また、あなたのJSONは有効ではありません：すべてのフィールド名は二重引用符で囲まなければなりません、しかしmongoimportはそれらなしでうまく働きます。

追加情報はmongodb ドキュメント および ここ にあります。

0
Denis Nikanorov

解決策：-

mongoimport --db databaseName --collection tableName --file filepath.json

例：-

ファイルを管理フォルダーに配置します-

C:\Users\admin\tourdb\places.json

あなたのターミナルでこのコマンドを実行してください：-

mongoimport --db tourdb --collection places --file ~/tourdb/places.json

出力：-

admin@admin-PC MINGW64 /
$ mongoimport --db tourdb --collection places --file ~/tourdb/places.json
2019-08-26T14:30:09.350+0530 connected to: localhost
2019-08-26T14:30:09.447+0530 imported 10 documents

詳細 link

0
Mohit Sharma