博客
关于我
MongoDB快速插入1000w测试数据(Java)
阅读量:795 次
发布时间:2023-02-09

本文共 2655 字,大约阅读时间需要 8 分钟。

MongoDB 数据插入优化指南

1. 添加 Maven 依赖

在项目中添加 MongoDB 驱动依赖,采用以下方式配置:

org.mongodb
mongodb-driver-sync
4.5.0

请根据实际需求选择最新版本。

2. 复制代码

以下是用于插入数据的完整 Java 类代码:

import com.mongodb.client.MongoClients;import com.mongodb.client.MongoClient;import com.mongodb.client.MongoDatabase;import com.mongodb.client.MongoCollection;import com.mongodb.client.model.Indexes;import org.bson.Document;import java.util.ArrayList;import java.util.List;import java.util.Random;public class MongoDBInsertTestData {    private static final String DATABASE_NAME = "test_database";    private static final String COLLECTION_NAME = "test_collection";    private static final int TOTAL_RECORDS = 100_000_000;    private static final int BATCH_SIZE = 10_000;    public static void main(String[] args) {        try (MongoClient mongoClient = MongoClients.create("mongodb://localhost:27017")) {            MongoDatabase database = mongoClient.getDatabase(DATABASE_NAME);            MongoCollection collection = database.getCollection(COLLECTION_NAME);            // 创建唯一索引            collection.createIndex(Indexes.ascending("id"));            insertData(collection);            System.out.println("Data insertion completed.");        }    }    private static void insertData(MongoCollection collection) {        Random random = new Random();        List
batch = new ArrayList<>(); for (int i = 0; i < TOTAL_RECORDS; i++) { Document doc = new Document("id", i) .append("name", generateRandomString(10)) .append("value", random.nextDouble()) .append("timestamp", System.currentTimeMillis()); batch.add(doc); if (batch.size() == BATCH_SIZE) { collection.insertMany(batch); System.out.println("Inserted " + batch.size() + " records."); batch.clear(); } } if (!batch.isEmpty()) { collection.insertMany(batch); System.out.println("Inserted " + batch.size() + " records."); } } private static String generateRandomString(int length) { StringBuilder sb = new StringBuilder(length); String characters = "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz"; Random random = new Random(); for (int i = 0; i < length; i++) { sb.append(characters.charAt(random.nextInt(characters.length()))); } return sb.toString(); }}

3. 修改配置并运行

在项目中添加上述依赖后,将代码复制到合适的位置,并确保以下配置正确:

  • pom.xml 中添加 MongoDB 依赖。
  • 修改 MongoDB 连接地址,确保 mongodb://localhost:27017 与你的本地 MongoDB 实例一致。

运行代码时,命令行执行 mvn clean run,即可开始插入测试数据。

转载地址:http://qnffk.baihongyu.com/

你可能感兴趣的文章
mt_rand
查看>>
mysql -存储过程
查看>>
mysql /*! 50100 ... */ 条件编译
查看>>
mysql 1045解决方法
查看>>
mudbox卸载/完美解决安装失败/如何彻底卸载清除干净mudbox各种残留注册表和文件的方法...
查看>>
mysql 1264_关于mysql 出现 1264 Out of range value for column 错误的解决办法
查看>>
mysql 150,MySQL错误150
查看>>
mysql 1593_Linux高可用(HA)之MySQL主从复制中出现1593错误码的低级错误
查看>>
mysql 5.6 修改端口_mysql5.6.24怎么修改端口号
查看>>
mysql 5.6.20的安装、配置服务、设置编码格式
查看>>
mysql 5.7 64位 解压版安装
查看>>
MUI使用vue示例
查看>>
MySQL 5.7 mysqldump的Bug导致复制异常
查看>>
mysql 5.7 主从配置
查看>>
mysql 5.7中文乱码解决
查看>>
mui折叠面板点击事件跳转
查看>>
MySQL 5.7在线设置复制过滤
查看>>
MYSQL 5.7数据库同步结构#1067报错 invalid default value for解决方法
查看>>
mui框架通讯录检索
查看>>
MySQL 8 公用表表达式(CTE)—— WITH关键字深入用法
查看>>