Mongodbデータエクスポートツールmongoexportとインポートツールmongoimportの紹介
13460 ワード
詳細
一、エクスポートツールmongoexport
Mongodbのmongoexportツールでは、collectionをJSON形式またはCSV形式のファイルにエクスポートできます.パラメータでエクスポートされたデータ項目を指定したり、指定した条件に基づいてデータをエクスポートしたりできます.mongoexportの具体的な使い方は以下の通りです.
パラメータの説明:
-h:データベースホストのIPを示す
-u:データベースのユーザー名を指定
-p:データベースのパスワードを指定
-d:データベースの名前を指定
-c:collectionの名前を示す
-f:カラムをエクスポートすることを示します
-o:エクスポートするファイル名を指定
-q:エクスポートデータのフィルタ条件を示す
例:testライブラリにはstudentsコレクションが存在し、コレクションのデータは次のとおりです.
ドキュメントにはclassid、age、nameの3つのフィールドが存在します.
1.ファイルへのデータの直接エクスポート
コマンドの実行が完了するとllコマンドを使用して表示すると、ディレクトリの下にstudentsが生成されます.datのファイル
次のようなファイル情報を表示します.
パラメータの説明:
-d:使用するライブラリを示します.この例ではtestです.
-c:エクスポートするコレクションを示します.この例ではstudentsです.
-o:エクスポートするファイル名を指定します.この例ではstudentsです.dat
以上の結果から,データをエクスポートする際に指定したエクスポートスタイルが表示されず,JSON形式のデータがデフォルトでエクスポートされていることが分かる.CSV形式のデータをエクスポートする必要がある場合は、次のように、--csvパラメータを使用します.
パラメータの説明:
-csv:csv形式でエクスポートすることを示します
-f:classid、name、ageの3列をエクスポートする必要があるデータを示す
以上の結果からmongoexportはcsvフォーマットに従ってstudents_にデータをエクスポートすることに成功したことがわかります.csv.datファイルにあります.
二、インポートツールmongoimport
Mongodbのmongoimportツールでは、特定のフォーマットファイルの内容を指定したcollectionにインポートできます.このツールはJSON形式のデータをインポートすることも、CSV形式のデータをインポートすることもできます.具体的には以下のように使用します.
パラメータの説明:
-h:データベースホストのIPを示す
-u:データベースのユーザー名を指定
-p:データベースのパスワードを指定
-d:データベースの名前を指定
-c:collectionの名前を示す
-f:インポートする列を示します
例:studentsのデータを削除し、検証します.
次に、上述のstudentsをインポートする.datファイルの内容
パラメータの説明:
-d:データベース名を指定します.この例ではtestです.
-c:collection名を指定します.この例ではstudentsです.
students.dat:インポートしたファイル名
studentsコレクションのデータのクエリー
データのインポートに成功したことを証明
以上、JSON形式のファイルをインポートする内容を示しましたが、CSV形式のファイルの内容をインポートする場合は、--typeパラメータでインポート形式を指定する必要があります.具体的には、次のようになります.
データを先に削除
インポート前にエクスポートしたstudents_csv.datファイル
パラメータの説明:
-type:インポートするファイルのフォーマットを指定します
-headerline:最初の行がカラム名であることを示し、インポートする必要はありません.
-file:インポートするファイルを指定します
studentsコレクションをクエリーし、インポートが成功したかどうかを確認します.
一、エクスポートツールmongoexport
Mongodbのmongoexportツールでは、collectionをJSON形式またはCSV形式のファイルにエクスポートできます.パラメータでエクスポートされたデータ項目を指定したり、指定した条件に基づいてデータをエクスポートしたりできます.mongoexportの具体的な使い方は以下の通りです.
[root@localhost mongodb]# ./bin/mongoexport --help
Export MongoDB data to CSV, TSV or JSON files.
options:
--help produce help message
-v [ --verbose ] be more verbose (include multiple times for more
verbosity e.g. -vvvvv)
--version print the program's version and exit
-h [ --host ] arg mongo host to connect to ( /s1,s2 for
sets)
--port arg server port. Can also use --host hostname:port
--ipv6 enable IPv6 support (disabled by default)
-u [ --username ] arg username
-p [ --password ] arg password
--dbpath arg directly access mongod database files in the given
path, instead of connecting to a mongod server -
needs to lock the data directory, so cannot be used
if a mongod is currently accessing the same path
--directoryperdb if dbpath specified, each db is in a separate
directory
--journal enable journaling
-d [ --db ] arg database to use
-c [ --collection ] arg collection to use (some commands)
-f [ --fields ] arg comma separated list of field names e.g. -f
name,age
--fieldFile arg file with fields names - 1 per line
-q [ --query ] arg query filter, as a JSON string
--csv export to csv instead of json
-o [ --out ] arg output file; if not specified, stdout is used
--jsonArray output to a json array rather than one object per
line
-k [ --slaveOk ] arg (=1) use secondaries for export if available, default
true
パラメータの説明:
-h:データベースホストのIPを示す
-u:データベースのユーザー名を指定
-p:データベースのパスワードを指定
-d:データベースの名前を指定
-c:collectionの名前を示す
-f:カラムをエクスポートすることを示します
-o:エクスポートするファイル名を指定
-q:エクスポートデータのフィルタ条件を示す
例:testライブラリにはstudentsコレクションが存在し、コレクションのデータは次のとおりです.
> db.students.find()
{ "_id" : ObjectId("5031143350f2481577ea81e5"), "classid" : 1, "age" : 20, "name" : "kobe" }
{ "_id" : ObjectId("5031144a50f2481577ea81e6"), "classid" : 1, "age" : 23, "name" : "nash" }
{ "_id" : ObjectId("5031145a50f2481577ea81e7"), "classid" : 2, "age" : 18, "name" : "james" }
{ "_id" : ObjectId("5031146a50f2481577ea81e8"), "classid" : 2, "age" : 19, "name" : "wade" }
{ "_id" : ObjectId("5031147450f2481577ea81e9"), "classid" : 2, "age" : 19, "name" : "bosh" }
{ "_id" : ObjectId("5031148650f2481577ea81ea"), "classid" : 2, "age" : 25, "name" : "allen" }
{ "_id" : ObjectId("5031149b50f2481577ea81eb"), "classid" : 1, "age" : 19, "name" : "howard" }
{ "_id" : ObjectId("503114a750f2481577ea81ec"), "classid" : 1, "age" : 22, "name" : "paul" }
{ "_id" : ObjectId("503114cd50f2481577ea81ed"), "classid" : 2, "age" : 24, "name" : "shane" }
ドキュメントにはclassid、age、nameの3つのフィールドが存在します.
1.ファイルへのデータの直接エクスポート
[root@localhost mongodb]# ./bin/mongoexport -d test -c students -o students.dat
connected to: 127.0.0.1
exported 9 records
コマンドの実行が完了するとllコマンドを使用して表示すると、ディレクトリの下にstudentsが生成されます.datのファイル
-rw-r--r-- 1 root root 869 Aug 21 00:05 students.dat
次のようなファイル情報を表示します.
[root@localhost mongodb]# cat students.dat
{ "_id" : { "$oid" : "5031143350f2481577ea81e5" }, "classid" : 1, "age" : 20, "name" : "kobe" }
{ "_id" : { "$oid" : "5031144a50f2481577ea81e6" }, "classid" : 1, "age" : 23, "name" : "nash" }
{ "_id" : { "$oid" : "5031145a50f2481577ea81e7" }, "classid" : 2, "age" : 18, "name" : "james" }
{ "_id" : { "$oid" : "5031146a50f2481577ea81e8" }, "classid" : 2, "age" : 19, "name" : "wade" }
{ "_id" : { "$oid" : "5031147450f2481577ea81e9" }, "classid" : 2, "age" : 19, "name" : "bosh" }
{ "_id" : { "$oid" : "5031148650f2481577ea81ea" }, "classid" : 2, "age" : 25, "name" : "allen" }
{ "_id" : { "$oid" : "5031149b50f2481577ea81eb" }, "classid" : 1, "age" : 19, "name" : "howard" }
{ "_id" : { "$oid" : "503114a750f2481577ea81ec" }, "classid" : 1, "age" : 22, "name" : "paul" }
{ "_id" : { "$oid" : "503114cd50f2481577ea81ed" }, "classid" : 2, "age" : 24, "name" : "shane" }
パラメータの説明:
-d:使用するライブラリを示します.この例ではtestです.
-c:エクスポートするコレクションを示します.この例ではstudentsです.
-o:エクスポートするファイル名を指定します.この例ではstudentsです.dat
以上の結果から,データをエクスポートする際に指定したエクスポートスタイルが表示されず,JSON形式のデータがデフォルトでエクスポートされていることが分かる.CSV形式のデータをエクスポートする必要がある場合は、次のように、--csvパラメータを使用します.
[root@localhost mongodb]# ./bin/mongoexport -d test -c students --csv -f classid,name,age -o students_csv.dat
connected to: 127.0.0.1
exported 9 records
[root@localhost mongodb]# cat students_csv.dat
classid,name,age
1.0,"kobe",20.0
1.0,"nash",23.0
2.0,"james",18.0
2.0,"wade",19.0
2.0,"bosh",19.0
2.0,"allen",25.0
1.0,"howard",19.0
1.0,"paul",22.0
2.0,"shane",24.0
[root@localhost mongodb]#
パラメータの説明:
-csv:csv形式でエクスポートすることを示します
-f:classid、name、ageの3列をエクスポートする必要があるデータを示す
以上の結果からmongoexportはcsvフォーマットに従ってstudents_にデータをエクスポートすることに成功したことがわかります.csv.datファイルにあります.
二、インポートツールmongoimport
Mongodbのmongoimportツールでは、特定のフォーマットファイルの内容を指定したcollectionにインポートできます.このツールはJSON形式のデータをインポートすることも、CSV形式のデータをインポートすることもできます.具体的には以下のように使用します.
[root@localhost mongodb]# ./bin/mongoimport --help
options:
--help produce help message
-v [ --verbose ] be more verbose (include multiple times for more
verbosity e.g. -vvvvv)
--version print the program's version and exit
-h [ --host ] arg mongo host to connect to ( /s1,s2 for sets)
--port arg server port. Can also use --host hostname:port
--ipv6 enable IPv6 support (disabled by default)
-u [ --username ] arg username
-p [ --password ] arg password
--dbpath arg directly access mongod database files in the given
path, instead of connecting to a mongod server -
needs to lock the data directory, so cannot be used
if a mongod is currently accessing the same path
--directoryperdb if dbpath specified, each db is in a separate
directory
--journal enable journaling
-d [ --db ] arg database to use
-c [ --collection ] arg collection to use (some commands)
-f [ --fields ] arg comma separated list of field names e.g. -f name,age
--fieldFile arg file with fields names - 1 per line
--ignoreBlanks if given, empty fields in csv and tsv will be ignored
--type arg type of file to import. default: json (json,csv,tsv)
--file arg file to import from; if not specified stdin is used
--drop drop collection first
--headerline CSV,TSV only - use first line as headers
--upsert insert or update objects that already exist
--upsertFields arg comma-separated fields for the query part of the
upsert. You should make sure this is indexed
--stopOnError stop importing at first error rather than continuing
--jsonArray load a json array, not one item per line. Currently
limited to 4MB.
パラメータの説明:
-h:データベースホストのIPを示す
-u:データベースのユーザー名を指定
-p:データベースのパスワードを指定
-d:データベースの名前を指定
-c:collectionの名前を示す
-f:インポートする列を示します
例:studentsのデータを削除し、検証します.
> db.students.remove()
> db.students.find()
>
次に、上述のstudentsをインポートする.datファイルの内容
[root@localhost mongodb]# ./bin/mongoimport -d test -c students students.dat
connected to: 127.0.0.1
imported 9 objects
[root@localhost mongodb]#
パラメータの説明:
-d:データベース名を指定します.この例ではtestです.
-c:collection名を指定します.この例ではstudentsです.
students.dat:インポートしたファイル名
studentsコレクションのデータのクエリー
> db.students.find()
{ "_id" : ObjectId("5031143350f2481577ea81e5"), "classid" : 1, "age" : 20, "name" : "kobe" }
{ "_id" : ObjectId("5031144a50f2481577ea81e6"), "classid" : 1, "age" : 23, "name" : "nash" }
{ "_id" : ObjectId("5031145a50f2481577ea81e7"), "classid" : 2, "age" : 18, "name" : "james" }
{ "_id" : ObjectId("5031146a50f2481577ea81e8"), "classid" : 2, "age" : 19, "name" : "wade" }
{ "_id" : ObjectId("5031147450f2481577ea81e9"), "classid" : 2, "age" : 19, "name" : "bosh" }
{ "_id" : ObjectId("5031148650f2481577ea81ea"), "classid" : 2, "age" : 25, "name" : "allen" }
{ "_id" : ObjectId("5031149b50f2481577ea81eb"), "classid" : 1, "age" : 19, "name" : "howard" }
{ "_id" : ObjectId("503114a750f2481577ea81ec"), "classid" : 1, "age" : 22, "name" : "paul" }
{ "_id" : ObjectId("503114cd50f2481577ea81ed"), "classid" : 2, "age" : 24, "name" : "shane" }
>
データのインポートに成功したことを証明
以上、JSON形式のファイルをインポートする内容を示しましたが、CSV形式のファイルの内容をインポートする場合は、--typeパラメータでインポート形式を指定する必要があります.具体的には、次のようになります.
データを先に削除
> db.students.remove()
> db.students.find()
>
インポート前にエクスポートしたstudents_csv.datファイル
[root@localhost mongodb]# ./bin/mongoimport -d test -c students --type csv --headerline --file students_csv.dat
connected to: 127.0.0.1
imported 10 objects
[root@localhost mongodb]#
パラメータの説明:
-type:インポートするファイルのフォーマットを指定します
-headerline:最初の行がカラム名であることを示し、インポートする必要はありません.
-file:インポートするファイルを指定します
studentsコレクションをクエリーし、インポートが成功したかどうかを確認します.
> db.students.find()
{ "_id" : ObjectId("503266029355c632cd118ad8"), "classid" : 1, "name" : "kobe", "age" : 20 }
{ "_id" : ObjectId("503266029355c632cd118ad9"), "classid" : 1, "name" : "nash", "age" : 23 }
{ "_id" : ObjectId("503266029355c632cd118ada"), "classid" : 2, "name" : "james", "age" : 18 }
{ "_id" : ObjectId("503266029355c632cd118adb"), "classid" : 2, "name" : "wade", "age" : 19 }
{ "_id" : ObjectId("503266029355c632cd118adc"), "classid" : 2, "name" : "bosh", "age" : 19 }
{ "_id" : ObjectId("503266029355c632cd118add"), "classid" : 2, "name" : "allen", "age" : 25 }
{ "_id" : ObjectId("503266029355c632cd118ade"), "classid" : 1, "name" : "howard", "age" : 19 }
{ "_id" : ObjectId("503266029355c632cd118adf"), "classid" : 1, "name" : "paul", "age" : 22 }
{ "_id" : ObjectId("503266029355c632cd118ae0"), "classid" : 2, "name" : "shane", "age" : 24 }
>
インポートに成功しました