快速有效的mongo表数据库清理方法 (mongo清理表数据库)

快速有效的MongoDB数据库清理方法

MongoDB作为现今流行的数据库之一，其特有的文档结构和分布式架构使其具有极高的灵活性和可扩展性。但与此同时，也会带来一些问题，特别是在数据存储和维护方面。如果不及时清理无用数据和索引，MongoDB数据库的性能和稳定性可能会受到影响。因此，在日常运维和开发实践中，如何快速有效地清理MongoDB数据库成为了一个必须解决的问题。本文将介绍一些MongoDB数据库清理的基本方法和技巧。

一、清理无用的

MongoDB中的一个类似于关系型数据库中的表，但具有更为灵活的文档结构。在长期运营中，中可能会出现许多无用的或不再使用的文档，这些文档占用磁盘空间并降低了数据库的性能。因此，清理无用的是MongoDB数据库清理的之一步。

可以通过以下几种方法来识别和清理无用的：

1.查询的使用情况：通过查询MongoDB系统数据库中的和文档数量信息，可以判断哪些存在数据冗余和浪费。

2.查询的索引使用情况：索引占用磁盘空间并且需要时间维护，因此，在没有必要的情况下应该避免创建过多的索引。通过查询中不同索引的使用情况，可以评估哪些索引是无用的，从而删除它们。

3.根据业务需求清理：根据具体的业务需求，由管理员决定哪些不再使用。对于这些，可以直接删除或者将它们转移到另一台服务器或数据库中。

二、清理无用的文档

在MongoDB中，文档是指一个具有灵活的结构和组织的数据单元。与传统关系型数据库中的行相比，MongoDB文档可以包含更丰富的数据类型和格式，比如嵌套结构和数组。因此，在实际应用中，MongoDB文档往往更为灵活和高效。但由于MongoDB文档通常存储在大的中，随着时间的推移，可能会出现大量无用的文档。这些文档会占据磁盘空间并降低数据库的性能。下面列举几种常见的清理无用文档的方法：

1.定期清理过期文档：在MongoDB中，可以通过设置TTL索引来自动删除一些过期的文档。这种方法可以实现定期清理，减少手动操作的工作量。

2.基于时间戳或者其他字段清理：在实际应用中，文档通常都包含一个或多个时间戳或其他唯一标识符。通过这些字段，管理员可以找到不再需要的文档，并且进行删除操作。

3.基于查询清理：除了基于时间戳或其他字段清理之外，管理员还可以根据查询条件来删除文档。比如，可以通过匹配关键字或者模糊匹配来删除不再需要的文档。

三、清理无用的索引

与关系型数据库一样，MongoDB也支持创建不同类型的索引，比如单键、组合、全文本和地理位置等。不同类型的索引可以帮助优化查询性能，并且对于某些查询，索引是必须的。但是，如果创建了过多的索引或者索引已经不再需要，那么就可能会浪费磁盘空间并且影响查询性能。下面列举几种清理无用索引的方法：

1.查询索引使用情况：可以在MongoDB控制台或通过程序代码查询每个中索引的使用情况。通过了解每个索引的使用情况，管理员可以判断哪些索引是无用的，然后删除它们。

2.删除自动创建的索引：MongoDB会自动为_id字段创建索引，这样可以快速定位到每个中的文档。但在某些情况下，这种索引可能会浪费磁盘空间并且影响性能。如果不需要这些索引，可以手动删除它们。

四、清理MongoDB系统日志

MongoDB系统日志是跟踪数据库运行过程中各种事件和状态的重要组成部分，管理员可以通过查看日志文件来帮助排除故障和提高性能。但是，如果不及时清理无用的日志文件，那么它们会逐渐占据磁盘空间，并且可能会导致文件系统磁盘空间不足。下面列举几种清理无用日志的方法：

1.定期清理系统日志：MongoDB提供了按照日志文件大小和时间来自动轮换和删除日志文件的功能。管理员可以根据具体情况，配置MongoDB系统日志的轮换周期、更大文件数等参数，以适应不同的工作负载。

2.删除旧的系统日志：如果不需要保留所有的系统日志，可以手动删除旧的日志文件。管理员可以定义一个日期或者大小阈值，将早于这些时间或者大小的日志文件进行清理。

MongoDB数据库清理是一个复杂和重要的工作，涉及到多个方面的工作内容。在实际操作过程中，需要根据具体业务需求和数据库运行情况，选择合适的清理方法和策略，以充分利用MongoDB的灵活性和可扩展性，并且确保数据库的性能和稳定性。

相关问题拓展阅读：

• java对所有mongodb表进行增删改查表名怎么设置

java对所有mongodb表进行增删改查表名怎么设置

一、MongoDB数据库参数配置

1、推荐使用mongodb.cfg.properties配置，则在构造MongoDBService对象的时候只需调用无参构造方法即可自动完成配置。

2、如果没有通过mongodb.cfg.properties，会采用程序指定的默认配置。

// 定义默认配置，1、IP地址 2、端口号 3、用户名 4、密码 5、配置文件位置名 6、数据库名    private static final String MONGODB_ADDRESS = “127.0.0.1”;    private static final int MONGODB_PORT = 27017;    private static final String MONGODB_USERNAME = “root”;    private static final String MONGODB_PASSWORD = “”;    private static final String MONGODB_RESOURCE_FILE = “mongodb.cfg.properties”;    private static final String MONGODB_DBNAME = “test”;    private static final String MONGODB_COLLECTIONNAME = “test”;

3、通过有参构造方法构造MongoDBService对象或通过get/set方法，指定数据库及，优先级更高。

//有参构造方法，指定数据库名与名    public MongoDBServiceImpl(String dbName, String collName) {this.dbName = dbName;this.collName = collName;try {db = getDb();} catch (Throwable e) {e.printStackTrace();}    }    //无参构造方法，返回配置文件配置的数据库对象引用，如果配置文件中没有设置则返回默认数据库对象引用    public MongoDBServiceImpl() {getDb();    }    /*     * 获取数据库对象，3种情况（优先级从高到低）： *1、构造方法指定2、配置文件指定3、默认数据库 *（情况2、3在MongoDButil中设置）     */    public DB getDb() {if (this.db == null) {if (this.dbName == null) {  this.db = MongoDBUtil.getDB();} else {  this.db = MongoDBUtil.getDBByName(this.dbName);}}return this.db;    }/*     * 获取对象，3种情况（优先级从高到低）：颂氏  *1、构造方法指定2、配置文件好友指定3、默认数据库     *（情况2、3在MongoDButil中设置）     */    public DBCollection getCollection() {if(this.collName != null){return db.getCollection(this.collName);}else {return MongoDBUtil.getDBCollection();}    }

二、方法简介（具体实现参看MongoDBServiceImpl接口实现类）

1、获取基本信息或对象:

(1)、获取数据库名： getDbName()

(2)、设置数据库名（指定数据库）： setDbName(String dbName)

(3)、获取名： getCollName()

(4)、设友樱槐置名（指定）： setCollName(String collName)

(5)、获取数据库对象： getDb()

2、数据插入方式：

(1)、插入单条数据： insert(DBObject obj)

(2)、插入多条数据： insertBatch(List list)void

3、数据删除方式：

(1)、删除单条数据： delete(DBObject obj)

(2)、删除多条数据： deleteBatch(List list)

4、数量统计方式：

(1)、获取中数据数量： getCollectionCount()

(2)、获取符合条件的数据数量： getCount(DBObject obj)

5、查找数据：

(1)、查找所有数据： findAll()

(2)、查找符合条件的数据： find(DBObject obj)

(3)、查找符合条件的数据并排序： find(DBObject query, DBObject sort)

(4)、查找符合条件的指定数量的数据并排序：find(DBObject query, DBObject sort, int start, int limit)

(5)、由ID查找数据： getById(String id)

6、更新数据 ：update(DBObject setFields, DBObject whereFields) void

7、打印List： printListDBObj(List list)

测试代码：（@Test）

public class testMongoService {    //使用mongodb.cfg.properties中配置的数据库与，如未指定，使用MongoDBUtil中默认的数据库与    MongoDBService mongoDBService1 = new MongoDBServiceImpl();//测试插入数据    @Test    public void testInsert(){//数据一，包括用户名、密码，地址信息（省份、城市），爱好BasicDBList dbList1 = new BasicDBList();dbList1.add(“basketball”);dbList1.add(“music”);dbList1.add(“web”);DBObject dbObject1 = new BasicDBObject(“username”,”insert1″).append(“age”, 18).append(“address”, new BasicDBObject(“province”,”广东”).append(“city”, “广州”)).append(“favourite”, dbList1);//数据二BasicDBList dbList2 = new BasicDBList();dbList2.add(“football”);dbList2.add(“music”);DBObject dbObject2 = new BasicDBObject(“username”,”insert2″).append(“age”, 18).append(“address”, new BasicDBObject(“province”,”陕西”).append(“city”, “西安”)).append(“favourite”, dbList2);//数据三BasicDBList dbList3 = new BasicDBList();dbList3.add(“Linux”);DBObject dbObject3 = new BasicDBObject(“username”,”insert3″).append(“age”, 18).append(“address”, new BasicDBObject(“province”,”河北”).append(“city”, “保定”)).append(“favourite”, dbList3);//数据四BasicDBList dbList4 = new BasicDBList();dbList4.add(“swim”);dbList4.add(“android”);DBObject dbObject4 = new BasicDBObject(“username”,”insert4″).append(“age”, 18).append(“address”, new BasicDBObject(“province”,”四川”).append(“city”, “成都”)).append(“favourite”, dbList4);//数据五DBObject dbObject5 = new BasicDBObject(“username”, “insert5”).append(“age”, 28).append(“address”, new BasicDBObject(“city”, “杭州”));mongoDBService1.printListDBObj(mongoDBService1.findAll());System.out.println(“——————————————————insert collection——————————————————”);List list = new ArrayList();list.add(dbObject1);list.add(dbObject2);list.add(dbObject3);list.add(dbObject5);mongoDBService1.insertBatch(list);System.out.println(“——————————————————insert one——————————————————”);mongoDBService1.insert(dbObject4);mongoDBService1.printListDBObj(mongoDBService1.findAll());    }//测试查询数据    @Test    public void testFind(){DBObject dbObject = new BasicDBObject(“username”,”insert1″);System.out.println(“数量：” + mongoDBService1.getCollectionCount());System.out.println(“username=java的数据数量：” + mongoDBService1.getCount(dbObject));System.out.println(“——————————————————find all——————————————————”);mongoDBService1.printListDBObj(mongoDBService1.findAll());System.out.println(“——————————————————find obj——————————————————”);mongoDBService1.printListDBObj(mongoDBService1.find(dbObject));System.out.println(“——————————————————find sort——————————————————”);mongoDBService1.printListDBObj(mongoDBService1.find(new BasicDBObject(), new BasicDBObject(“age”, 1)));System.out.println(“——————————————————find sort limit——————————————————”);mongoDBService1.printListDBObj(mongoDBService1.find(new BasicDBObject(), new BasicDBObject(“age”, 1), 1, 2));    }     //测试数据更新    @Test    public void testUpdate(){BasicDBObject newDocument = new BasicDBObject(“$set”,new BasicDBObject(“age”,11));BasicDBObject searchQuery = new BasicDBObject().append(“username”, “insert2”);mongoDBService1.printListDBObj(mongoDBService1.find(searchQuery));System.out.println(“——————————————————update——————————————————”);mongoDBService1.update(newDocument, searchQuery);mongoDBService1.printListDBObj(mongoDBService1.find(searchQuery));    }//测试数据删除    @Test    public void testDelete(){DBObject dbObject1 = new BasicDBObject(“username”, “insert1”);DBObject dbObject2 = new BasicDBObject(“username”, “insert2”);DBObject dbObject3 = new BasicDBObject(“username”, “insert3”);DBObject dbObject4 = new BasicDBObject(“username”, “insert4”);DBObject dbObject5 = new BasicDBObject(“username”, “insert5”);List list = new ArrayList();list.add(dbObject1);list.add(dbObject2);list.add(dbObject3);list.add(dbObject4);mongoDBService1.printListDBObj(mongoDBService1.findAll());System.out.println(“——————————————————delete list——————————————————”);mongoDBService1.deleteBatch(list);System.out.println(“——————————————————delete one——————————————————”);mongoDBService1.delete(dbObject5);//System.out.println(“——————————————————delete all——————————————————”);//mongoDBService1.delete(new BasicDBObject());mongoDBService1.printListDBObj(mongoDBService1.findAll());    }}

测试结果：

源代码：（完整项目文件下载链接：点击打开链接）

MongoDBServiceImpl.java

public class MongoDBServiceImpl implements MongoDBService {    private String dbName;    private String collName;    private DB db;//有参构造方法，指定数据库名与名    public MongoDBServiceImpl(String dbName, String collName) {this.dbName = dbName;this.collName = collName;try {db = getDb();} catch (Throwable e) {e.printStackTrace();}    }    //无参构造方法，返回配置文件配置的数据库对象引用，如果配置文件中没有设置则返回默认数据库对象引用    public MongoDBServiceImpl() {getDb();    }    /*     * 获取数据库对象，3种情况（优先级从高到低）：     *1、构造方法指定2、配置文件指定3、默认数据库     *（情况2、3在MongoDButil中设置）     */    public DB getDb() {if (this.db == null) {if (this.dbName == null) {  this.db = MongoDBUtil.getDB();} else {  this.db = MongoDBUtil.getDBByName(this.dbName);}}return this.db;    }/*     * 获取对象，3种情况（优先级从高到低）：     *1、构造方法指定2、配置文件指定3、默认数据库     *（情况2、3在MongoDButil中设置）     */    public DBCollection getCollection() {if(this.collName != null){return db.getCollection(this.collName);}else {return MongoDBUtil.getDBCollection();}    }     public DBObject map2Obj(Map map) {DBObject obj = new BasicDBObject();if (map.containsKey(“class”) && map.get(“class”) instanceof Class)map.remove(“class”);obj.putAll(map);return obj;    }    //插入数据    public void insert(DBObject obj) {getCollection().insert(obj);    }    //插入多条数据    public void insertBatch(List list) {if (list == null || list.isEmpty()) {return;}List listDB = new ArrayList();for (int i = 0; i list) {if (list == null || list.isEmpty()) {return;}for (int i = 0; i find(DBObject obj) {DBCursor cur = getCollection().find(obj);return DBCursor2list(cur);    }//查找符合条件的数据并排序    @Override    public List find(DBObject query, DBObject sort) {DBCursor cur;if (query != null) {cur = getCollection().find(query);} else {cur = getCollection().find();}if (sort != null) {cur.sort(sort);}return DBCursor2list(cur);    }     //查找符合条件的数据并排序，规定数据个数    @Override    public List find(DBObject query, DBObject sort, int start,int limit) {DBCursor cur;if (query != null) {cur = getCollection().find(query);} else {cur = getCollection().find();}if (sort != null) {cur.sort(sort);}if (start == 0) {cur.batchSize(limit);} else {cur.skip(start).limit(limit);}return DBCursor2list(cur);    }//将DBCursor转化为list    private List DBCursor2list(DBCursor cur) {List list = new ArrayList();if (cur != null) {list = cur.toArray();}return list;    }     //更新数据    public void update(DBObject setFields, DBObject whereFields) {getCollection().updateMulti(whereFields, setFields);    }    //查询中所有数据    public List findAll() {DBCursor cur = getCollection().find();List list = new ArrayList();if (cur != null) {list = cur.toArray();}return list;    }     //由ID获取数据    public DBObject getById(String id) {DBObject obj = new BasicDBObject();obj.put(“_id”, new ObjectId(id));DBObject result = getCollection().findOne(obj);return result;    }     public String getDbName() {return dbName;    }     public void setDbName(String dbName) {this.dbName = dbName;this.db = MongoDBUtil.getDBByName(this.dbName);    }     public String getCollName() {return collName;    }     public void setCollName(String collName) {this.collName = collName;    }    @Override    public void printListDBObj(List list) {// TODO Auto-generated method stubfor(DBObject dbObject: list){System.out.println(dbObject);}    }}

MongoDBUtil.java

关于mongo清理表数据库的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。