пакетная вставка c # mongodb

Question

пакетная вставка c # mongodb

1

Я хочу импортировать файл csv в MongoDB. Файл csv имеет 3,00,000 записей и 10 полей. Я не могу найти хороший учебник для метода InsertBatch, описанного в документации MongoDB. Вставка записей один за другим с использованием метода insert() занимает более 15 минут.

anishpsla 12 авг. 2014, в 13:50

Источник

Теги:

c#

mongodb

.net

2 ответа

1

Спасибо elpaulo за вашу помощь. Я изменил код и попробовал тестовый код bulkinsert. Вот полный код

var mongo = new MongoClient("mongodb://10.44.4.59");
MongoServer server = mongo.GetServer();

MongoDatabase test = server.GetDatabase("server_info");
var category = test.GetCollection("test_collection");

List<BsonDocument> batch = new List<BsonDocument>();

for (int i = 0; i < 300000; i++)
{
   batch.Add(
       new BsonDocument {
           { "field1", 1 },
           { "field2", 2 },
           { "field3", 3 },
           { "field4", 4 }
        });
}
category.InsertBatch(batch);

Это займет около 30 секунд, чтобы вставить столько данных. Еще раз спасибо за вашу помощь.

anishpsla 12 авг. 2014, в 11:47

Ещё вопросы

elpaulo · Accepted Answer · 2014-08-12T10-38-00.000Z

Это помогает вам?

MongoCollection<BsonDocument> books;

List<BsonDocument> batch = new List<BsonDocument>();

using (CsvReader reader = new CsvReader("users.csv"))
{
    batch.add(
        new BsonDocument {
            { "field1", reader["field1"] },
            { "field2", reader["field2"] }
        }),
};
books.InsertBatch(batch.ToArray());

Это нормально, но как создать BsonDocument динамически, т. Е. Читать файл CSV?
Существует много библиотек .NET для чтения CSV-файлов, таких как этот .
Я отредактировал свой пост, чтобы дать вам образец с библиотекой CSV, с которой я связан.
Я получаю следующую ошибку при use of unsigned local variable 'books'